Pully
Praktikum: Kleines Modell, grosser Verstand: Harness-Design & offene Alternativen zu Claude Code
- 03 Oktober 2026
- 100%
- Pully
Job-Zusammenfassung
Startdatum: Februar 2027. Praktikum von 6 Monaten bei innovativem Unternehmen.
Aufgaben
- Benchmarking von Open-Source-Coding-Harnesses gegen Claude Code.
- Entwicklung eines strengen Benchmark-Protokolls mit Erfolgs-Kriterien.
- Analyse von Misserfolgen und Verbesserung des Harness-Designs.
Fähigkeiten
- Erfahrung mit Python und Interesse an LLMs oder autonomen Codieragenten.
- Gute schriftliche Kommunikationsfähigkeiten für Berichte.
- Neugierde und rigoroses Design von Experimenten.
Ist das hilfreich?
Über den Job
Beginn: Februar 2027 · Dauer: 6 Monate
Bitte fügen Sie Ihrer Bewerbung Ihre neuesten akademischen Zeugnisse bei. Bewerbungen ohne Zeugnisse werden nicht berücksichtigt.
KI-Coding-Assistenten entwickeln sich von einfachen Autovervollständigungen zu autonomen Agenten, die planen, mehrteilige Codebasen bearbeiten, Tests durchführen und ihre eigenen Ergebnisse iterieren. Neben proprietären Tools wie Claude Code entsteht ein schnell wachsendes Ökosystem von Open-Source-Coding-Agenten und Harnesses (OpenCode, Pi, OMP und andere), die offene LLMs mit verschiedenen Orchestrierungs-, Werkzeugnutzungs- und Kontextverwaltungsstrategien kombinieren.
In diesem 6-monatigen Praktikum, das im Februar 2027 beginnt, untersuchen Sie, wie weit Open-Source-Agenten kommen können: Kann ein kleines Open-Source-Modell, gepaart mit einem sorgfältig abgestimmten, individuellen Harness, mit einem grossen Modell mithalten oder es übertreffen, das hinter einem generischen Harness wie Claude Code läuft?
Ihre Aufgaben
- Einrichten und Benchmarken von Open-Source-Coding-Harnesses (OpenCode, Pi, OMP) im Vergleich zu Claude Code anhand einer gemeinsamen Suite von Coding-Aufgaben
- Entwurf eines rigorosen Benchmark-Protokolls: Aufgabenstufen, Erfolgskriterien und Bewertung (Genauigkeit, Codequalität, Durchläufe, Kosten, Latenz)
- Testen, ob kleine Open-Source-Modelle mit einem abgestimmten, individuellen Harness in bestimmten Situationen mit grossen Modellen hinter einem generischen Harness mithalten oder diese übertreffen können
- Analyse von Fehlerarten und Identifikation der wichtigsten Hebel im Harness-Design (Planung, Werkzeugnutzung, Kontextverwaltung, Fehlerbehebung)
- Erweiterung des Harness-Designs auf andere Aufgaben: Projektmanagement, Visualisierung, Datenanalyse
- Verfassen eines technischen Berichts über Ihre Ergebnisse, interne Präsentation von Resultaten und Demos sowie Erstellung wiederverwendbarer Vorlagen und Richtlinien für Open-Source-Coding-Agenten
Was wir bieten
- Ein dynamischer, kollaborativer Arbeitsplatz mit einem hochmotivierten, multikulturellen Team an internationalen Standorten
- Die Chance, durch innovative Lösungen das Leben der Menschen zu verbessern
- Interne Coding-Events wie Hackathons und Brownbag-Sessions sowie unseren technischen Blog
- Monatliche After-Work-Veranstaltungen an jedem Standort
Zu Ihrem Profil
- Sicherer Umgang mit Python
- Echtes Interesse an LLMs, autonomen Coding-Agenten und Entwickler-Tools
- Rigoros und neugierig, sicher im Entwerfen von Experimenten und Interpretieren von Daten
- Gute schriftliche Kommunikationsfähigkeiten (Benchmark-Berichte, interne Dokumentation)