Hoe Sony AI een nieuwe superrace-agent creëerde die kan 'zien' met Gran Turismo 7

Hoe Sony AI een nieuwe superrace-agent creëerde die kan 'zien' met Gran Turismo 7

Kunstmatige intelligentie is tegenwoordig een populaire term, waarbij apparaten als Gemini van Google op internet zoeken naar antwoorden of spraakgenererende apparaten die de stem van Morgan Freeman imiteren. Als je op zoek bent naar een enigszins bizar beeld van een clown op een eenwieler in het jaar 2056, dan is er waarschijnlijk een door AI aangedreven tool die je bij die taak kan helpen.

Maar het voelt allemaal een beetje beperkend, alsof je professor Mary Beard, een deskundige uit het oude Rome, in een aflevering van Selling Sunset plaatst.

AI kan voor veel meer worden gebruikt dan het maken van gewone huwelijkstoespraken – en misschien hebben we er nog niet het beste van gezien.

In ons race- en racespel zijn spelers al lang gewend aan het concept van ‘kunstmatige intelligentie’ – en voor ons is het basisconcept niet nieuw. We racen al tientallen jaren ‘tegen de computer’, waarbij het spel en de hardware erachter ervoor zorgen dat concurrenten met hun auto op hetzelfde circuit rijden als jij.

De roze highlights zijn gebieden die de AI-agent in dit geval interpreteert als padgrenzen

Natuurlijk doen sommigen het beter dan anderen. Relatief directe kritiek op het spel of de simulatie is onder meer “de AI is slecht”, met zijn gebrek aan bewustzijn, het opeenhopen in de eerste ronde of herhaaldelijk crashen op hetzelfde punt.

Dit komt omdat ze dat op een fundamenteel niveau nooit echt hebben gedaan Hij leertZe kunnen het niet begrijpen EnWanneer ze een fout maken Ze proberen hun gedrag te veranderen op basis van wat er om hen heen gebeurt.

Toen Gran Turismo Sophy eind 2023 in Gran Turismo 7 voor het publiek werd uitgebracht, was de AI-aangedreven agent een verrassende openbaring. Je tegenstanders kunnen op een meer natuurlijke manier aanvallen, verdedigen en mogelijke ongelukken vermijden.

Het belangrijkste verschil tussen de voorgeprogrammeerde ‘AI’ waar velen aan gewend zijn, en een agent als GT Sophy, is het vermogen om zich aan te passen aan de context.

Dit is het resultaat van bijna vijf jaar werk tot nu toe, waarbij de update van Gran Turismo 7 van juli 2024 de lijst met circuits waarop kan racen, uitbreidt.

Kaushik Subramanian - Gran Turismo-game geproduceerd door Sony AI
Kaushik Subramanian, Sony AI

Sony's nieuwe AI-raceagent heeft ogen

Maar voor het wereldwijde team van Sony AI was dit niet genoeg. Het team heeft hard gewerkt aan de ontwikkeling van een verkennende AI-agent, parallel met GT Sophy.

READ  Hier is je eerste blik op NieR: Auto Physical Switch Edition, pre-order nu

Door Gran Turismo opnieuw als testplatform te gebruiken, en nog steeds in de prototypefase, is de manier waarop het informatie ontvangt en interpreteert anders: het kan “zien”.

“Als jij of ik speel, kijken we natuurlijk naar de gebruikersinterface en analyseren we die informatie op een manier die voor ons logisch is, en gebruiken we die input om te rijden”, legt Kaushik Subramanian, hoofd wetenschappelijk onderzoek bij Sony AI, uit.

Hij werkt samen met Takuma Seno, een wetenschappelijk onderzoeker en een van de hoofdauteurs van een onlangs gepubliceerd onderzoek Een onderzoekspaper over de nieuwste ontwikkelingen.

Sony's AI-aangedreven supercar-raceagent

“Als we GT Sophy trainen, geven we haar echter heel nauwkeurige informatie over waar ze zich op de baan bevindt: de vorm van de baan, haar exacte snelheid en acceleratie, en de locatie van andere auto’s.

“Er is dus een verschil in wat Sophie neemt en wat de menselijke spelers nemen.

“Wat we wilden onderzoeken was of we een agent konden trainen die met beeldinvoer zou werken.”

“Als je een foto zou maken van hoe het spel eruit ziet – een auto die op een baan rijdt met baanlijnen, barrières, bomen en wolken – en zou proberen een race-agent te trainen met dat als input, zou dat dan mogelijk zijn?”

Dit is precies waar een exploratieagent voor wordt gebruikt. Stel je een camera voor in een auto of een paar ogen (dat is een op zichzelf gericht camerabeeld in het AI-jargon van Sony). De nieuwe AI kijkt buiten de auto en interpreteert wat hij kan ‘zien’, waarbij de snelheid wordt getest met gegevens in de vorm van de exacte snelheid.

Het doel is dus om te matchen waartoe mensen toegang hebben tijdens het spelen van het spel, waarbij de afbeelding helpt uit te leggen hoe het pad eruit ziet. In tegenstelling tot de GT Sophy is hij niet voorzien van informatie zoals de exacte vorm van de baan, de sliphoek van de band (en slipverhouding) of de wielbelasting.

Gran Turismo 7 - AI-geleide afbeelding van Sony

“Een van onze interne motivaties was om te proberen te zien in hoeverre we een deel van de data-invoer die naar de agent gaat, konden beperken”, vervolgt de PhD-afgestudeerde van Georgia Tech, die sinds 2019 bij Sony AI werkt en aan projecten heeft gewerkt. vanaf het begin gerelateerd aan Gran Turismo.

READ  Wanneer keert Rebirth Island terug naar Warzone?

“Het interessante hieraan is dat we niet hoeven te bepalen waar het beeld op focust. Wij presenteren het beeld en de AI-aanpak leert waarop we ons moeten concentreren om het resultaat te krijgen waarin we geïnteresseerd zijn.”

“We vertellen de AI dat het zijn doel is om zo snel mogelijk te rijden, op koers te blijven en te voorkomen dat je tegen barrières botst.

“Na enige trainingstijd leert het algoritme zich te concentreren op de relevante delen van het beeld om dit doel te bereiken. In een recht stuk concentreert de AI zich op wat in de verte verschijnt.

'Terwijl hij naar de hoek kijkt, de opvallende roze stippen [used to determine its focus] U kunt de randen van de baan omlijnen, zodat deze binnen de grenzen van de baan blijft.

's Werelds eerste educatieve dealer van autoracesimulators

Voorlopig werkt het nieuwe model alleen in tijdritten, hoewel “dit een logische volgende stap lijkt om dat werk over te nemen en andere situaties te verbeteren, inclusief races met auto’s van de tegenstander”, zegt Subramanian.

Een AI snel op een circuit laten rondlopen is één prestatie, maar hem helpen de race-etiquette te begrijpen is een heel andere prestatie.

Zoals het er nu uitziet, is dit één auto, één circuit, en in dit geval heeft het geleerd aanzienlijk sneller te zijn dan de meeste menselijke spelers. Elke keer kan er een perfecte lijn worden gemaakt, met millimeterprecisie.

Sony AI Gran Turismo 7-prototype
Tot nu toe concentreert de andere agent zich alleen op de resultaten van de tijdritten

Dit komt na een training van 10-14 dagen op een reeks PlayStation-consoles met toegang tot Gran Turismo 7. Het is geenszins gegarandeerd dat dit nieuwe model in de winkel zal verschijnen en bevindt zich nog steeds in een verkennende fase.

Gedurende deze periode gebruikt de AI versterkend leren om de gewenste snelheid te bereiken. Dit is in wezen een vorm van vallen en opstaan, waarbij je willekeurig begint maar uiteindelijk een expert wordt.

“Uiteindelijk is het resultaat wat wij politiek noemen, namelijk politiek die optreedt als bestuursorgaan”, legt Subramanian uit. Hij woont in Duitsland en is co-auteur van twee artikelen over racen en één over autonoom rijden.

READ  GameStop zal waarschijnlijk Thanksgiving-voorraad van de resterende Xbox Series X op Black Friday verkopen

“Na twee weken oefenen is de controller klaar en leer ik hoe ik de beste ronde kan rijden. Ik druk op de startknop. Het levert me gewoon een rondetijd op bij de eerste poging.”

Het eindresultaat tot nu toe is een Proxy die in staat is om tijden te behalen die bijna identiek zijn aan die van de huidige GT Sophy, maar zonder de noodzaak van externe hardware. Dit is de creatie van de eerste supercar-raceagent met lokale sensorinvoer.

Je kunt echter niet anders dan het gevoel hebben dat het Sony AI-team de grenzen nog verder wil verleggen.

Sony kunstmatige intelligentie

“Van onze kant zijn er veel doelen, waaronder veel interne onderzoeksvragen, waarvan we de grenzen proberen te verleggen”, legt de ervaren expert op het gebied van versterkend leren uit.

“Het uitbreiden van de visie naar andere situaties is zeker iets dat ons interesseert. We zullen ons best doen op dit gebied.

“Natuurlijk wordt GT Sophy ook in de game ingezet, wat een spannend idee is dat we in gedachten hebben om ervoor te zorgen dat spelers blij zijn met de in-game versie.

“Toen we met het project begonnen, waren we er niet helemaal zeker van dat we het daadwerkelijk konden leren, omdat we weten dat mensen het doen, maar de vraag was: zou AI het ook kunnen doen? dat zijn we nu, en de resultaten zijn zo geweest. Nu is het veelbelovend.”

Een overzicht van Sony AI's nieuwste autonome raceagent

  • Het Sony AI-team gebruikte PlayStation- en Gran Turismo 7-hardware om de verkennende agent te evalueren, maar de vrijgave ervan voor het publiek is nog niet bevestigd
  • Een andere AI-agent van Gran Turismo Sophy, die zich momenteel in de onderzoeksfase bevindt
  • De eerste op visie gebaseerde bovennatuurlijke autoracesimulator
  • Het kan in één ronde de beste Gran Turismo-coureurs ter wereld verslaan
  • In tegenstelling tot de GT Sophy – die afhankelijk is van externe meetapparatuur zoals nauwkeurige informatie over onder meer de vorm van het spoor, de sliphoek, de slipverhouding en de wielbelasting – kan de nieuwe agent de pixels (het beeld) “zien” via een ” camerabeeld gecentreerd rond Self” en ontvangt snelheids- en acceleratie-informatie.

Een reactie achterlaten

Je e-mailadres zal niet getoond worden. Vereiste velden zijn gemarkeerd met *