Cześć i witam w trzecim module dyskursu morze H-3 jako synchroniczni aktywni krytycy.
I tak teraz mogę naprawdę przywitać się ze stanem techniki uczenia maszynowego.
W tym czasie mówię, ponieważ niektórzy z was mogą wziąć udział w kursie od roku do
dwóch lat, ale w tym czasie mówię to w 2017 roku.
Cóż, masz zamiar pracować nad jednym z najpotężniejszych modeli sztucznej inteligencji, ale nie
jest to jedyna wyjątkowa cecha tego modułu.
Nie tylko będziemy pracować z najpotężniejszym modelem, ale zamierzamy wdrożyć najpotężniejszą wersję
tego algorytmu, która jest najbardziej zoptymalizowaną wersją zaimplementowanej wersji modelu A-380, ponieważ można
sobie wyobrazić, że istnieje serce algorytm.
Ale istnieje wiele narzędzi, które możemy wykorzystać do optymalizacji całego modelu.
W ten sposób nie tylko będziesz musiał przejść przez algorytm,
ale także wdrożysz wszystkie te narzędzia, aby model był niesamowicie wydajny.
I dlaczego chciałem to zrobić.
Cóż, to z dwóch powodów.
Pierwszym powodem jest to, że zbliżamy się do końca dyskursu.
Ten kurs jest kursem na najwyższym poziomie pomiędzy trzema kursami i będzie zajmował się sztuczną inteligencją.
Chodzi o to, że teraz myślę, że jesteś gotowy, aby zabrać go na wyższy poziom.
Drugi powód jest taki, że rozwiązanie breakoutu jest naprawdę bardzo trudne.
Zapamiętaj w wideo promocyjnym, które chcieliśmy umieścić jako pierwszy moduł, ponieważ uważaliśmy, że
będzie to najłatwiejsze wyzwanie, ale w rzeczywistości nie było to najtrudniejsze wyzwanie i prostszym
sposobem wyjaśnienia tego jest to, że w potworności potwory są duże i dlatego łatwiejsze do wykrycia, a zatem łatwiejsze
do zabicia lub uniknięcia.
Ale w Breakout mamy tę małą kulkę, którą oko również musi wykryć, ponieważ oko nadal będzie miało
oczy.
Nadal będziemy uczyć się głębokiego wzmacniania.
Jest to w rzeczywistości bardzo trudne i dlatego tak naprawdę nie mamy wyboru do wdrożenia.
Najpotężniejsza wersja A-3 zobacz teraz dlaczego mówię, że jest to najmocniejsza wersja.
To z konkretnego powodu.
Nie mówię, że zamierzam wprowadzić najmocniejszą wersję A-380.
Nie, to nie to.
Powodem, dla którego to mówię, jest to, że wersja, którą zamierzaliśmy zaimplementować,
jest czymś bardzo wyjątkowym, co zamierzamy zrobić, to faktycznie wersja 3 C, która została zaimplementowana przez kogoś,
ale poprawiona przez jedną z najbardziej wpływowych osób w dzisiejszym uczeniu maszynowym, który jest twórcą
latarki Pi.
Nazywa się Dan Pashka.
Teraz, co zamierzamy zrobić.
Będziemy kontynuować na głównej stronie, a jeśli przewiniesz w dół do końca,
zobaczysz zespół, który walczy z twórcami i współtwórcami.
I widać tutaj, że moją pochodnię obecnie prowadzi Adam Pascal.
To jest osoba, za którą powinniśmy być wdzięczni, ponieważ jest bardzo mało wersji tych
trzech rzeczy, które działają dobrze na breakout i poprawił jeden z kodów dla A-380, aby
breakout działał doskonale.
Tak więc Pascal nie tylko podtrzymuje To w kierunku Ale także jest jednym z twórców przez pochodnie i jak
powiedziałem dzisiaj jest w pierwszej dziesiątce najbardziej wpływowych osób w uczeniu maszynowym.
Możemy więc być pewni, że wersja, którą zamierzamy zaimplementować, jest prawdopodobnie
najpotężniejszą wersją A-3.
A więc jaka jest ta implementacja.
Oryginalnie pochodzi od programisty zwanego historią.
Jak widać, zrobił to przez implementację A3 C, który początkowo nie działał dobrze na
breakout, ale wtedy ktoś wykonał żądanie pull.
Jeśli przejdziemy do wniosku o pulę, zobaczymy w zbliżeniu, że idziemy, mamy to czystsze
rozwiązanie problemu Gretchen.
I zgadnij, z kogo pochodzi ta prośba o pociągnięcie.
Został wykonany od Adama Pashki stworzonego przez latarkę i rozwiązał problem, który sprawia, że A-380 działa bardzo dobrze
na wybuchu bez czekania na dni i dni.
I dlatego jeśli wrócimy do tej implementacji, zobaczymy czterech współpracowników tej najpotężniejszej
implementacji.
A oto współtwórcy.
Bardzo dziękuję wszystkim i możemy powiedzieć ogromne i specjalne podziękowanie Adamowi za
naprawienie problemu z dzieleniem wątku.
Zaczął od zrobienia widelca, który jest podgałęsem kodu.
Następnie poprosił dewelopera o polecenie usunięcia problemu.
Nie było kodu, który byłby świetnym i dzielącym się problemem, i dlatego stał się głównym
uczestnikiem tej implementacji, dzięki czemu wszystko działa doskonale i uwierzcie mi, że przeprowadziłem wiele eksperymentów na
modelu AC DC, który faktycznie zaimplementował pięć modeli.
Byłem nawet zdesperowany, że to nie działa dobrze, więc zrobiłem własny breakout i cavy, aby mieć
większą piłkę i dlatego łatwiejsze wstępne przetwarzanie obrazów.
Potem wróciłem do oka i wykonałem własną implementację 3C.
Ale to trwało całe wieki, aby biegać i trenować na całkiem potężnym komputerze.
Więc chciałem znaleźć lepszy sposób.
I tak to właśnie jest.
Bardzo potężna implementacja Silmaril, której jednym z głównych współpracowników jest Stwórca przy pomocy
latarki.
To, co zamierzamy zrobić w tym Mudgalu Myślę, że jesteście gotowi na to, to implementuj ten
najwyższy poziom kodu dla implementacji A3.
Zasadniczo zamierzamy ponownie wdrożyć wszystkie te pliki, a my będziemy głównie nalegać na pliki, które są bezpośrednio
związane z trzema C wszystkimi częściami, które są bezpośrednio związane z naszym widzeniem.
Wdrażamy kod linii po linii dla pozostałych.
Po prostu rozbuduję kod, abyśmy mogli rozwiązać ten problem, nie uznając go za zbyt przytłaczający,
abyśmy przeszli całkiem specjalny moduł.
Nie tylko pracujemy w najnowocześniejszym modelu sztucznej inteligencji, ale także w czasie, gdy mówię i
jestem bardzo pewny, że wdrażamy najpotężniejszą wersję A-380.
Więc zróbmy to.
Wróćmy do Pythona i zacznijmy to wszystko, zanim zaczniemy.
Zrobimy najprostszą rzecz, którą zrobimy w tym module.
Ustawianie folderu roboczego.
Przejdźmy do naszej sztucznej inteligencji, to moduły folderów szablonów wybieramy najbardziej wymagające.
I oto idziemy.
To wszystkie nasze pliki.
Zobaczmy, które z nich są bezpośrednio związane z A-3 C.
Zobaczmy więc, które z nich zamierzamy zaimplementować.
Linia po linii i skup się na naszej energii.
Tak naprawdę istnieją dwa pliki.
Ten pierwszy nie jest taki, jak ten, więc będziemy ponownie wdrażać linię po linii, ponieważ
to jest najważniejsze, gdzie robimy A-3 widzieć mózgi.
Najważniejszą rzeczą do zrozumienia jest to, że będziemy mieć wspólny model, który będzie
miał te same dane wag dla aktora i krytyka.
To część tej specjalnej wersji A-3, zobacz wspólny model z udostępnionymi danymi
wagi, a następnie innego najważniejszego założyciela do wdrożenia.
Linia po linii to wytresowany dziki ptak zaraz po tym, jak zrobiliśmy mózg widzów.
Musimy ich wyszkolić, a my szkolimy ich w tym pociągu, który z żoną.
Jest to więc dość długi kod, ale zawiera on sedno modelu A3 C, który będzie musiał
odnieść się do Lassa, aby obniżyć wartość w USA, która jest ostatnia związana z
przewidywaniami krytyka i ostatnią polityką, która jest ostatnia. związane z przewidywaniami atomu.
Jest to całkiem nowe, ale wiesz, że to dlatego, że A-380 pracowały zasadniczo z kilkoma agentami, z
których każdy miał własną kopię środowiska.
Mamy również tę w pełni połączoną warstwę, która generuje wartość funkcji i zasadniczo jest to wspólna
wizja tego, co dzieje się w grze.
To będzie dość trudne.
Więc upewnij się, że jesteś w dobrej formie i dla reszty kolegów Dobrze, wyjaśnię je szczegółowo, ale nie poświęcając
im zbyt dużo czasu, uwierz mi, że chcesz zachować na to swoją energię.
To będzie już dużo.
Tak więc ci koledzy to mrówki ducky Y, które są ulepszeniem środowiska siłowni dzięki wszechświatowi.
Zasadniczo po prostu poprawia się otoczenie sali gimnastycznej wszechświatem, co pozwala
nam uzyskać optymalną obróbkę wstępną obrazów, a także znormalizować wszystkie wartości otoczenia, takie
jak intensywność kolorów lub intensywność nagród.
Cóż, wszystkie wartości środowiska tego pliku normalizują wszystkie te wartości, a także upewniają się, że mamy wystarczająco
dużo, aby nie kontynuować przetwarzania obrazów.
A jak widzicie, to jest zaczerpnięte z tego otwarcia, a ja dostaję jej stronę, na której znajduje się agent historii wszechświata.
Więc nie będziemy spędzać zbyt wiele czasu na tym, że rzeczywiście zatrzymamy się tutaj.
Musisz tylko zrozumieć, że udoskonaliliśmy środowisko siłowni ze wszechświatem, aby uzyskać wystarczającą ilość,
aby nie przetwarzać obrazów.
Reszta nie jest tak ważna, szczególnie na PC.
W takim razie mamy główne P, które jest kodem, który wykona całą rzecz.
Więc znasz kod, który będzie zarządzał całą sprawą, a mózg wytrenuje mózg i wypuszcza wideo.
A to dlatego, że uruchomi wszystkie te kody tutaj.
Więc więcej widzieliśmy, gdzie to było, może się pojawiło.
Dlaczego jest specjalny optymalizator.
To w zasadzie optymalizator atomu, ale dostosowany do tego wspólnego modelu, który wdrażamy.
Więc wyjaśnimy cały ten kod w jednym samouczku.
Potem mamy test W-dlaczego.
To naprawdę ostatni test.
P Dlaczego właściwie jest to plik, który zaimplementuje agenta testowego.
Jest więc agent, który będzie grał bez aktualizacji modelu.
Jest to całkowicie niezależne od treningu.
I będziemy również rozszerzać ten kod w szczegółach.
Poza tym dobrą wiadomością jest to, że będziesz miał dwa kody jeden kod, który będzie kod
implementujemy w samouczkach, ale bez komentarza.
I jeden z kodów, który jest jednym z folderów kodu z wszystkimi kodami, komendy to.
A więc wszystkie te sześć fauli są dobrze połączone.
Tak więc, jeśli czegoś nie dostrzeżesz i samouczek. Będziesz mógł przejrzeć zawartość kodu, aby zrozumieć,
co się dzieje.
Więc idziemy.
Mam nadzieję, że jesteście podekscytowani, aby to wdrożyć.
Jesteś naprawdę na szczycie góry teraz lub tuż pod szczytem, ponieważ najpierw musisz to
zrozumieć, ale dotrzesz do celu.
Więc weź dobry oddech.
I oto idziemy z bardzo ekscytującą podróżą.
Do tego czasu ciesz się.