Hallo en welkom terug bij de cursus over kunstmatige intelligentie.
Dus we hebben gesproken over de portiersvergelijking en we hebben ons kleine doolhof geanalyseerd.
Laten we eens kijken naar het plan.
Wat is het plan?
Nou, hier is onze doolhofanalyse.
En we weten dat we de staten kunnen zien, de waarden van elke staat.
We kunnen zien wat de waarde is om in elke afzonderlijke staat te zijn en daarom kan de EC of de agent door dit doolhof
navigeren.
Dus wat is het plan?
Welnu, het plan is gewoon een schatkaart voor kunstmatige intelligentie.
In plaats van naar deze waarden te kijken die ze gewoon vervangen door pijlen, die aangeven in welke richting de
agent daardoor moet gaan, omdat hij die waarde kent.
Dus een ideaal scenario, nadat het deze omgeving heeft verkend, kent het de waarden van het zijn in elke staat.
En daarom kun je deze kaart bedenken.
Dus laten we nog eens kijken.
We weten dat uw waarden een keer of als u hier bent van de twee, hoe beter.
Een daarvan is dit.
Als je vanaf hier naar rechts gaat, van de twee, is deze een betere.
Deze is een betere.
Of eigenlijk vanaf hier heb je twee opties.
Rechts?
Dus hier is een soort stropdas.
Dus je kiest er gewoon willekeurig een uit.
Het maakt niet uit welke, omdat de waarde in beide gevallen hetzelfde is en meer.
Zelfs als we er doorheen kijken, kost het hetzelfde aantal stappen, hetzelfde aantal stappen om het einde te bereiken.
Vanaf hier heb je drie opties, maar deze is de betere waarde vanaf hier.
Deze is een betere waarde vanaf hier.
Het is duidelijk dat deze een betere waarde heeft, want hier, weet je, krijg
je meteen een min één beloning.
Je hebt er eigenlijk drie.
Dus deze is de beste of de beste waarde van de staat.
En dus, als we ze vervangen door pijlen, is het logisch dat de agent zo zou gaan als hij hier begint of als
hij om de een of andere reden op dit plein terechtkomt, hij weet hoe hij hier weg moet komen.
Het begint op dit plein en weet hier weg te komen enzovoort.
Dus dat is wat een plan is.
En verwar plan niet met beleid, want we gaan het hebben over beleid, want het eigen beleid lijkt erg
op plannen, maar ze hebben een klein trucje omdat de omgeving er een beetje anders uit
gaat zien.
Het wordt stochastisch en daar gaan we het in de volgende tutorial over hebben.
Dus ik kan niet wachten om je bij de volgende te zien.
En tot die tijd, geniet van I.