Olá e seja bem vindo ao tutorial divertido deste primeiro automóvel de auto-condução do módulo, será épico.
Nós vamos testar nosso olho no meio ambiente e nós vamos testá-lo em quatro níveis diferentes.
Isso é que vamos jogar um jogo, o jogo terá quatro níveis de dificuldade e o objetivo terá
que passar por esses quatro níveis.
Então, vamos ser esses quatro níveis.
Primeiro nível um, o primeiro nível será chegar ao aeroporto e fazer algumas viagens de ida e volta entre o aeroporto
e o centro da cidade.
essas viagens redondas. Bem, nós passamos nível 1, e Nível 2 Nível 2 será ainda fazer essas viagens de ida e volta.
Então, assim que vemos o carro fazer
Mas na estrada específica que nos desenhamos, mas será uma estrada fácil porque é nível
2.
E é claro que o carro terá que se auto-dirigir ao permanecer naquela estrada.
Então, será uma estrada que vai do aeroporto para o centro da cidade e depois do outro lado.
E assim o carro terá que fazer essas viagens de ida e volta ao lado dessa estrada.
Se o fizer, passaremos pelo nível 2 e nível 3.
criar alguns obstáculos no mapa para ver se o carro consegue evitar os obstáculos e ainda alcançar seu objetivo.
O nível 3 será
Portanto, nenhuma preocupação desencadeará alguns obstáculos difíceis que o carro terá que evitar.
E veremos se conseguiu chegar ao aeroporto e ao centro da cidade e, finalmente, para o nível mais desafiador
do carro, será desenhar uma estrada muito difícil para chegar ao centro da cidade.
Então eu não sei que você sabe que será uma estrada como um ziguezague.
Eu não sou um arquiteto brilhante, mas vou tentar fazer uma estrada desafiadora.
Então, esperemos que possamos passar pelo menos o primeiro nível que seria ótimo, então esperemos que possamos passar pelo
nível dois e três.
E se nós passamos nível 4 que seria maravilhoso.
Então, vamos fazer isso, vamos fazer o desafio.
Bem, na verdade, o carro auto-dirigido vai levar o desafio, mas nós somos os cérebros por trás disso.
Então, diga como isso funciona.
Tudo bem, então a primeira coisa que vou fazer é apenas dar uma lembrete rápido sobre o mapa.
Então esse é o mapa.
E, primeiro, vamos olhar para o mapa, vamos olhar para o carro auto-dirigido sem o
AI para que seja apenas um carro que tenha essas ações aleatórias que você viu no início deste modelo.
Então, como podemos observar isso.
Bem, temos que desativar a IA e a atividade.
Nós simplesmente precisamos colocar uma temperatura igual a zero.
Lembre-se que o parâmetro aqui é a temperatura.
E agora é igual a sete.
Isso é uma temperatura baixa.
Vamos aumentar isso depois.
seja se não quisermos ativar a AI, simplesmente precisamos ajustar a temperatura para zero igual a zero.
Mas se não quisermos que o carro tenha um cérebro que
E o mesmo aqui, claro, essa é a temperatura real no frio também.
Aqui vamos nós.
E então não devemos nos esquecer de dizer porque, de outra forma, isso não incluirá a mudança.
Acho que agora não temos nenhum.
Eu vejo que eu costumava ativá-lo.
Então, vamos dar uma olhada no mapa apenas para nos dar uma rápida atualização.
Uma rápida lembrança sobre o que parece.
Então vou selecionar tudo e pressione enter.
Tudo bem.
E o nosso mapa e o nosso carro.
Então, como você pode ver o carro está tendo ações totalmente aleatórias, você sabe ir para a esquerda
para ir direto para a direita e, portanto, não está chegando ao aeroporto, que eu lembro no canto superior esquerdo do mapa e
não alcançá-lo.
Bem, ele simplesmente fez.
Isso é totalmente aleatório.
Você vê isso agora é no aeroporto e não está alcançando o outro objetivo que está no centro, no
canto inferior direito do mapa.
Então, éramos exatamente aqui, mas podemos ver claramente agora que as ações são totalmente aleatórias.
Não está indo a lugar nenhum e definitivamente não há inteligência artificial, mas não tem preocupações.
Vamos ativá-lo agora.
Eu vou fechar o mapa e então vou reiniciar o kernel, reinicie o DeCarlo.
Você clicou neste botão da ferramenta aqui e sim sim.
agora, hora do show, finalmente vamos colocar este trem que fizemos no carro e ativa o AI.
E
Estou super animado para ver o que vai acontecer.
Vamos ativar o ar agora e, para fazer isso, precisamos elevar a temperatura para mudar
a temperatura que é substituída em zero por bem, vamos começar com sete como antes.
Então, especifique sete aqui.
Tudo bem, não nos esqueçamos de dizer.
E agora vamos voltar ao nosso mapa e agora podemos apenas re-executar isso novamente porque
reiniciamos o kernel.
Então digamos isso.
E aí nós vamos, temos o carro.
E o que está fazendo?
Bem, está tentando encontrar o seu caminho, é explorar o seu entendimento do que tem que fazer e está prestes a chegar
ao aeroporto e lá vamos primeiro, chegamos maravilhosamente e agora o próximo objetivo é chegar ao centro da cidade e
lá morto, apenas chegar ao centro da cidade.
E agora está tentando encontrar o aeroporto de volta para o aeroporto e lá lá novamente Wonderfalls
que funciona.
Não demorou muito para explorar aprender com os erros que você conhece, o erro aqui é se
afastar da vida.
É aí que punimos o carro dando uma recompensa ligeiramente negativa.
Você sabe que é menos 0. 2.
Então, ele aprende com esse erro e, aprendendo com esse erro, conseguiu obter as
recompensas positivas aproximando-se do objetivo.
E agora, finalmente, entendeu o que tem a fazer.
É definitivamente chegar ao aeroporto e, em seguida, chegar ao centro da cidade e depois fazer essas viagens de ida e volta.
Perfeito.
Nós temos um carro auto-dirigido, mas não posso deixar de notar que parece um inseto.
O carro realmente não parece seguro.
Não, não tem um movimento muito confiante.
É como a sua esquerda e direita que não está se movendo como um movimento de carro.
Parece mais um bug.
Então, vamos consertar isso.
temperatura é o parâmetro na função Mac suave que podemos aumentar para que a ação seja retornada com mais certeza.
E como você pode ter adivinhado a maneira de corrigir isso é aumentar a temperatura porque
lembre-se que a
Então, isso faz sentido que, se aumentarmos a temperatura, poderemos acabar comprando um carro com
certeza, porque a AI ficará mais segura de qual ação deveria desempenhar.
E isso lembra é porque a ação será jogada com maior probabilidade.
O único problema com isso aumentando a temperatura é que lembre-se que a AI é
menos explorar as outras ações, porque ao aumentar a temperatura das outras ações, teremos baixas probabilidades.
isso não parece ser um problema porque o carro parece não ter problemas para alcançar seus objetivos.
Mas agora,
O aeroporto para o centro, para que possamos aumentar totalmente a temperatura se quisermos que isso
pareça um inseto como um carro.
Então vamos fazer isso.
Eu vou fechar isso agora.
Aqui vamos nós.
Reinicie o kernel novamente.
E pressione sim.
E agora vamos aumentar a temperatura.
Então vamos fazer isso.
Volto para o meu arquivo e substitui sete por 100. Lá vamos.
Então, economizamos.
E agora temos um carro auto-dirigido seguro de si mesmo.
Então, podemos obter melhores resultados e podemos obter algo que parece mais um carro.
Vamos pegar um mapa e depois vamos fazer isso novamente.
Tudo bem, o que aconteceu.
ESTÁ BEM.
Fez algum tipo de burnout.
Não tenho certeza por quê.
Mas de qualquer maneira, agora temos algo que parece mais um carro.
Você pode ver que está indo mais direto.
Não está a fazer estes rápidos movimentos à esquerda e à direita.
Isso é porque agora o carro está mais seguro de qual direção tomar e cada vez que você sabe que
quer tomar a melhor direção indo para o aeroporto e depois para o centro da cidade.
Então, claramente podemos dizer que passamos no primeiro nível.
O carro está fazendo essas viagens de ida e volta entre o aeroporto e o centro da cidade.
Então, vamos salvar isso, e vou mostrar-lhe como salvar o cérebro.
Nós só precisamos clicar neste botão de salvamento e se olharmos o que acontece aqui.
Bem, nós temos a curva do que estávamos no começo, podemos observar alguns erros que cometeu.
Então é aí que a recompensa é negativa.
Mas então ele aprendeu com seus erros e a recompensa aumentou pouco a pouco até chegar a uma recompensa positiva
constante igual a abrir uma, mas essa é a máxima recompensa que estabelecemos.
E isso porque acabou explorando.
Essa é a fase de expiração.
E então só sabia o que tinha que fazer.
Foi aí que estava fazendo essa rodada Rountree entre o aeroporto e o centro da cidade sem nenhum erro.
Então vamos lá.
Passamos nível um.
Parabéns.
Agora vamos fazer as coisas mais desafiadoras.
Vamos levar as coisas no próximo nível.
Vamos tentar passar ao nível do qual eu lembro que nós fazemos essas viagens de ida e volta em uma estrada específica.
Nós vamos nos desenhar.
Então vamos verificar isso no próximo trabalho.
E até então eu.