Velmi jednoduchý úkol a je zajímavé vidět, co z toho vzešlo. Když se podíváte, můžete vidět mnoho různých strojů takto vzniklých. Všichni se pohybují kolem, všichni se plazí různými způsoby, a jak můžete vidět vpravo, vyrobili jsme pár takových věcí a ty opravdu fungují ve skutečnosti. Nejsou to příliš fantastičtí roboti, ale vyvinuli se pro dělání přesně toho, za co je odměňujeme: pro pohyb vpřed. Tedy toto všechno bylo uděláno v simulaci, ale zároveň to lze dělat i se skutečným strojem. Zde je fyzický robot, kterého skutečně máme, má několik mozků, které soutěží a vyvíjejí se. Je to jako rodeo: střídají se na stroji a jsou odměňováni za to, jak rychle či jak daleko dokáží se strojem pohnout vpřed. A můžete vidět, že tito roboti nejsou připraveni ovládnout svět, ale postupně se učí, jak se pohybovat dopředu, a dělají to samostatně. Takže v těchto dvou příkladech jsme měli v základě stroje, které se učily chodit v simulaci, a také stroje, které se učily chodit ve skutečnosti.
Eine sehr einfache Aufgabe. Es ist interessant zu sehen, was dabei herauskam. Sie können viele verschiedene Maschinen sehen, die so entstanden sind. Sie bewegen sich alle, sie krabbeln auf verschiedene Arten, und Sie können hier rechts sehen, dass wir einige dieser Dinge hergestellt haben. Und sie funktionieren tatsächlich. Keine besonders aufregenden Roboter, aber sie entwickelten sich, um genau das zu tun, wofür wir sie belohnten: sich vorwärts zu bewegen. Das ist nur eine Simulation, aber es funktioniert auch mit einer echten Maschine. Hier ist ein echter Roboter, in dem eine Population von Gehirnen wetteifert und sich entwickelt. Wie beim Rodeo: Alle bekommen einen Ritt auf der Maschine und werden dafür belohnt, wie schnell oder weit sie die Maschine vorwärts bewegen können. Diese Roboter sind noch nicht bereit, die Weltherrschaft zu übernehmen. Aber sie lernen allmählich, sich vorwärts zu bewegen. Und sie tun das autonom. In diesen zwei Beispielen haben wir Maschinen gesehen, die in der Simulation gelernt haben, zu gehen, und andere, die es in der Wirklichkeit gelernt haben.