Çoban – Roboterarm, gesteuert über türkische Befehle
Roboterarm mit geschlossenem Regelkreis, der auf türkische Befehle hin arbeitet und jeden Schritt per Kamera überprüft: Ich habe den Ansatz von Shepherd Robotics (YC F26) auf die türkische Industrie übertragen. 5 Szenarien mit der echten Gemini API, 43 automatisierte Tests.
- Zeitraum
- 2026
- Stack
- Python · Gemini API · Digitaler Zwilling (Simulation)
Die Frage
Kann ein KMU in der Türkei einem Roboter ohne Roboterprogrammierer sagen: „Wirf den gerissenen Steckverbinder in den Schrott“? Ausgangspunkt waren der Aufruf nach „neuen Betriebssystemen für die physische Welt“ in der Request for Startups-Liste von Y Combinator für Fall 2026 und Shepherd Robotics, das im selben Zeitraum bei YC aufgenommen wurde. Çoban ist ein Klon dieses Ansatzes, angepasst an die türkische Industrie.
Komponenten
- Aufgabenausführung im geschlossenen Regelkreis: Gemini betrachtet bei jedem Schritt das neue Kamerabild, wählt die nächste Bewegung und prüft, ob der vorherige Schritt tatsächlich erfolgreich war.
- Fusion von Sehen und Tasten: Verschiebungen von 1–2 cm, die im Bild nicht erkennbar sind, erfasst der Greifersensor; das System plant daraufhin neu.
- Abschlussprüfung: Meldet das Modell „fertig“, zählt ein separater Qualitätskontrollschritt die Objekte im letzten Bild; fehlt etwas, wird die Aufgabe fortgesetzt.
- Digitaler Zwilling: Eine Simulation, in der derselbe Code auch ohne Roboter läuft; Szenarien für Kabelbaum-Kitting und die Qualitätskontrolle gerissener Teile nach dem Vorbild von Automobilzulieferern in Bursa.
- KVKK-konforme Bildverarbeitung: Bevor ein Bild in die Cloud gesendet wird, werden die Gesichter der Beschäftigten direkt auf dem Gerät unkenntlich gemacht.
- Daten-Flywheel: Jede Aufgabe wird als Datensatz gespeichert, um künftig ein Open-Source-Robotermodell zu trainieren.
Ergebnisse mit der echten Gemini API
| Aufgabe | Ergebnis | Zeigt |
|---|---|---|
| Rote Würfel in die gelbe Kiste legen | Abgeschlossen (5 Schritte) | Mehrstufige Planung, bildbasierte Prüfung jedes Schritts |
| Gerissenen Steckverbinder in die Schrottkiste werfen | Abgeschlossen (3 Schritte) | Visuelle Qualitätskontrolle |
| Lila Würfel auf das weiße Tablett legen | Unmöglich | Roboter wird bei einem nicht vorhandenen Objekt gar nicht erst bewegt |
| Dieselbe Aufgabe mit 40 % Greiffehlern | Abgeschlossen (8 Schritte) | Sensor erfasst 2 Verschiebungen; verfrühtes „fertig“ wird abgelehnt |
Das System wurde in 5 Szenarien mit der echten Gemini API getestet und mit 43 automatisierten Tests verifiziert.
Am lehrreichsten: die Fehler
Das Modell bemerkte ein verrutschendes Teil nicht, hielt einen weißen Steckverbinder für schwarz und meldete „fertig“, bevor die Aufgabe erledigt war. Jeden dieser Fehler habe ich mit einer technischen Lösung behoben. Wenn das Modell „fertig“ sagt, heißt das nicht, dass die Arbeit erledigt ist.
Ziel
Ein kostengünstiger, zuverlässiger Automatisierungsansatz, der Türkisch versteht – für die türkische Fertigungsindustrie, deren Roboterdichte unter dem weltweiten Durchschnitt liegt.
Für die Betreuung und die wissenschaftlichen Beiträge danke ich Dr. Nurettin Şenyer.