Bots laten ChatGPT de echte wereld raken dankzij Microsoft – Ars Technica

Vorige week, onderzoekers van Microsoft aankondigen Een experimenteel raamwerk voor het besturen van robots en drones met behulp van de taalmogelijkheden van ChatGPT, een populair AI-taalmodel gemaakt door OpenAI. Met behulp van natuurlijke taalopdrachten kan ChatGPT speciale code schrijven die de bewegingen van de bot bestuurt. De mens geeft vervolgens de resultaten weer en past zich zo nodig aan om de taak met succes te voltooien.

Het onderzoek kwam in een paper getiteld “ChatGPT voor bots: Ontwerpprincipes en mogelijkheden van het modelGeschreven door Sai Vemprala, Rogerio Bonatti, Arthur Bucker en Ashish Kapoor van Microsoft Autonomous Systems and Robotics Group.

in Verklarende videolaat Microsoft bots zien – blijkbaar bestuurd door code geschreven door ChatGPT terwijl ze menselijke instructies volgen – die een botarm gebruiken om blokken in het Microsoft-logo te rangschikken, een drone laten vliegen om de inhoud van een plank te controleren of objecten vinden met behulp van een bot met visuele mogelijkheden.

Om ChatGPT te laten communiceren met bots, leerden de onderzoekers ChatGPT een aangepaste botnet-API. Wanneer er instructies worden gegeven zoals “catch the ball”, kan ChatGPT code genereren om de bot te besturen, net zoals het een gedicht zou schrijven of een artikel zou voltooien. Nadat een mens de code heeft gecontroleerd en bewerkt op juistheid en veiligheid, kan de menselijke operator de taak uitvoeren en de prestaties evalueren.

Op deze manier versnelt ChatGPT de automatische besturingsprogrammering, maar het is geen onafhankelijk systeem. “We benadrukken dat het gebruik van ChatGPT voor bots geen volledig geautomatiseerd proces is”, stelt de krant, “maar eerder dient als een hulpmiddel om de menselijke capaciteiten te vergroten.”

Hoewel de meeste feedback aan ChatGPT (in termen van het succes of falen van zijn acties) van mensen lijkt te komen in de vorm van tekst, beweren de onderzoekers ook enig succes te hebben gehad met het invoeren van visuele gegevens in ChatGPT zelf. In een voorbeeld gaven de onderzoekers ChatGPT de opdracht om een ​​bot een basketbal te laten vangen met feedback van een camera: “ChatGPT kan het uiterlijk van de bal en de lucht in het camerabeeld schatten met behulp van SVG-code. Dit gedrag wijst op de mogelijkheid dat LLM een impliciet wereldmodel volgt dat op tekst gebaseerde mogelijkheden overstijgt. “

Hoewel de resultaten op dit moment grof lijken, vertegenwoordigen ze vroege pogingen om de nieuwste technologie van het tijdperk – grote taalparadigma’s – toe te passen op automatische besturing. Volgens Microsoft zou de ChatGPT-interface in de toekomst bots voor een veel breder publiek kunnen openen.

“Ons doel met dit onderzoek is om te zien of ChatGPT verder kan denken dan tekst, reden in de fysieke wereld om te helpen bij bottaken”, zegt onderzoek van Microsoft. blogpost. “We willen mensen helpen om gemakkelijker met robots om te gaan, zonder ingewikkelde programmeertalen of details over robotsystemen te hoeven leren.”