Hallo und herzlich willkommen zum Kurs über künstliche Intelligenz.
Heute reden wir über den ersten Teil von A-3, den Schauspieler-Kritiker-Teil.
Hier haben wir also einen synchronen Vorteil.
Schauspieler-Kritikalgorithmus.
Und wir werden darüber sprechen, betonte Akrotiri.
Dort fangen wir an.
Man könnte technisch überall anfangen, aber es ist viel sinnvoller, von
einem Kritiker auszugehen, denn auf diese Weise haben wir eine sehr konsekutive Erklärung des intuitiven Verstehens der Vorgänge, was uns
erleichtern wird.
Beginnen wir aber erst am Ende dieser Abweichung mit Überraschungen.
In Ordnung, so weit in diesem Kurs haben wir uns ein tiefes bedingtes Kule-Lernen ausgedacht, das hier Illustrator ist. Wir haben also
den Computer dazu gebracht, die Pixel zu sehen, also das tatsächliche Bild und die Pixel nicht nur einen Vektor.
Es ist also kein Schummeln, es sieht tatsächlich genau das, was ein Mensch sieht, wie er die
Monster sieht. Er sieht die Gesundheit. Er sieht die Parameter an der Unterseite. Er sieht die Karte oder er sieht die Waffe. Es ist genau
das, was ein Mensch beim Spielen sieht Spiel.
Dann wird dieses Bild durch ein Faltungslager geleitet und dann durch ein ziehendes Lariat flacher und geht
in ein neuronales Netzwerk. An der Ausgabe haben wir Aktionen, da wir uns daran erinnern, dass wir diese
Würfelwerte haben, und dann eine Aktionsauswahlrichtlinie anwenden zu ihnen.
So wenden wir zum Beispiel ein weiches Max an und finden heraus, welche Aktion wir durchführen wollen.
Es gibt also einige Explorations- und Ausbeutungsaktivitäten.
Es gibt eine Kombination der beiden.
So funktioniert tiefgreifendes cooles Lernen.
Aber jetzt wollen wir mal sehen, was wir damit machen.
Der Einfachheit halber ist es einfacher für uns, damit zu arbeiten, weil wir
dieses Bild anpassen und verschieben.
Wir werden Kreise durch Quadrate durch diese oder diese rechteckigen Kästchen ersetzen.
Und wir werden auch diese Linien loswerden und zwischendurch einfach sie in Pfeile ändern, damit sich das
Wesentliche nicht ändert.
Dies ist nur die Darstellung in diesem Diagramm.
Auch wenn diese Darstellung immer noch tief greifend ist. Das Lernen mit Kule wird für uns
einfacher, es zu ändern und genau zu zeigen, was es ist.
So werden wir also die Dinge von hier aus darstellen.
Und was macht dieser bestimmte Teil schon?
Denken Sie daran, wir beginnen wie Schritt für Schritt mit dem aktiven Kritiker-Teil.
Wir werden also sehen, wie wir von tiefgreifendem Kule-Lernen zu A-3 gelangen. Schritt für Schritt und als ersten Schritt werden
wir diesen Schauspieler-Kritiker PARTOVI hier vorstellen, also werden wir darüber sprechen.
Das erste, was passiert, ist also das letzte Stück.
Die Ausgabe ist eigentlich so, dass wir es einfach so neu zeichnen, also ist es genau
die gleiche Ausgabe, genau die gleichen q-Werte und genau die gleiche Aktion.
Wenn er also acht mögliche Aktionen hatte, gibt es noch acht mögliche Aktionen, die sie an die Spitze
stellen, damit sie weniger Platz beanspruchen, und daher hat sich bisher nichts geändert.
Dies und das ist genau das Gleiche.
Aber jetzt kommt der aktive Kritiker Teil.
Wir werden eine zweite Ausgabe haben.
Wir haben die erste Ausgabe als eine Reihe von Ausgaben und hier haben wir eine separate individuelle
Ausgabe, also werden wir technisch unser neuronales Netzwerk verwenden.
Also einmal in der Stunde.
Oder das Image und alles wie die Werte gehen hier von links nach rechts durch das Netzwerk.
Sie spucken nicht nur einen Satz von Werten aus, sondern tatsächlich zwei Sätze.
Und so sagte die Spitze, wir wissen wirklich, was es ist, es sind mögliche Aktionen, aber hier haben wir tatsächlich
einen zusätzlichen Mehrwert, also schauen wir uns das an.
Was ist das für ein Wert?
Also los, das ist die Spitze.
Wir verkleinern also die Größe dieser Abbildung.
Die oberste Ausgabe sind die Cube-Werte, die wir zuvor für die Aktionen besprochen haben.
Also sind sie dasselbe.
Alles ist gleich.
Aber jetzt heißt dieser untere Teil und der obere Teil eigentlich das X oder wir geben
ihm einen Namen, der der Schauspieler ist, denn in diesem Teil wählt der Agent aus, was er will, so dass es
so ist, als würde er handeln Es tritt auf der Bühne auf und es wird sinnvoller, wenn wir auch den zweiten
Namen auf dem Bildschirm haben.
Und dann ist die zweite Ausgabe genau wie ein Wert und das ist V von S, also der Wert des Zustands.
Wenn also q von S ist, ist Q von A der q-Wert einer bestimmten Aktion, und wie Sie sehen können, gibt es daher Aktion Eins Aktion Zwei Aktion
Drei ist bis Aktion Sechs oder höher, dh, es gibt möglicherweise Aktionen in diesem
Zustand.
Also in einem bestimmten Zustand s Was ist der Wert von q, wenn eine Aktion ausgeführt wird, um eine Aktion bis und so weiter auszuführen.
Dann prognostizieren wir auch, dass wir auch ein neuronales Netzwerk verwenden, um vorherzusagen, welchen Wert die
Stufe hat, in der wir uns gerade befinden. Dieser Teil wird Kritiker genannt.
Und das ist das Intuitive für die Art von nicht einmal vollständig Intuitiv, wie der Beginn der Intuition hinter
dem Schauspieler voraussagt, dass es jetzt zwei Ausgänge aus dem neuronalen Netzwerk gibt, nicht nur einen.
P, bevor wir gerade den einen hatten, den wir jetzt die Aktion nennen.
Aber jetzt haben wir zwei Ausgaben Akshara und Kritiker.
Und es wird eine Dynamik zwischen ihnen geben, die wir weiter erforschen werden.
Für den Moment ist es jedoch wichtig zu verstehen, dass wir nicht nur die Werte der Aktionen vorhersagen, die der
Agent aus dem aktuellen Status ausführen kann, sondern auch den Wert dieses Zustands in
einem solchen Netzwerk vorhersagen.
Das ist also der Kern des ersten Schrittes in die aktive Kritik.
Und jetzt müssen wir über ein Synchrones sprechen, das wir
als nächstes ausführen werden, um genau zu verstehen, was zwischen der Pflicht und dem Endergebnis
für heute geschieht .
In einigen Blogs und einigen Diskussionen, die Sie möglicherweise in der aktiven Kritik finden, finden Sie, dass der Autor
auf der Seite des Schauspielers über Cue-Werte spricht, in anderen Literaturstellen und Blogbeiträgen und Diskussionen finden Sie den Autor des Autors
Wenn man über die Richtlinie spricht, ist es üblich, den Benutzer wie einen griechischen Buchstaben P zu
verwenden, um die Richtlinie zu repräsentieren oder einfach nur die Politik des Staates zu sagen.
Alles in allem ist dies also die Politik des Staates, denn wenn wir uns erinnern, ist
die Politik, dass, wenn Sie alle Aktionen zusammenstellen, die möglichen Aktionen und dann entscheiden, welche Maßnahmen Sie ergreifen.
Das sind also die Wahrscheinlichkeiten für jede Maßnahme, also ist dies die Politik.
Lass dich also nicht abschrecken, wenn du das eine oder das andere siehst.
Sie bedeuten im Grunde dasselbe.
Auf der einen Seite haben Sie also die Richtlinie oder die q-Werte, auf der anderen Seite haben
Sie den tatsächlichen Wert des Staates und werden ab diesem Jahr vorhergesagt.
Das ist also der Beginn der aktiven Kritiker, die im nächsten Tutorial weitergeführt wird, wenn
wir über einen Synchronus sprechen und dort suchen.
Bis dahin genießen Sie die.