Hola y bienvenidos al divertido tutorial de este primer módulo de auto sin conductor, va a ser épico.
Vamos a poner a prueba nuestro ojo en el medio ambiente y vamos a probarlo en cuatro niveles diferentes.
Es decir, vamos a jugar un juego, el juego tendrá cuatro niveles de dificultad y el objetivo
tendrá que superar estos cuatro niveles.
Así que vamos a ser estos cuatro niveles.
Primer Nivel Uno, el primer nivel será llegar al aeropuerto y luego hacer algunos viajes de ida y vuelta entre el aeropuerto
y el centro de la ciudad.
estos viajes redondos Bueno, pasamos al nivel 1, luego el Nivel 2, Nivel 2, será para realizar estos viajes de ida y vuelta.
Entonces, tan pronto como veamos el auto hacer
Pero en el camino específico que dibujamos nosotros mismos, pero va a ser un camino fácil porque es el
nivel 2.
Y, por supuesto, el automóvil tendrá que conducir solo al permanecer en esa carretera.
Entonces será un camino que va del aeropuerto al centro de la ciudad y luego a la inversa.
Y entonces el automóvil tendrá que hacer estos viajes de ida y vuelta sentados en ese camino.
Si lo hace, pasaremos el nivel 2 y el nivel 3.
dibujar algunos obstáculos en el mapa para ver si el automóvil logra evitar los obstáculos y aún así alcanzar su objetivo.
El nivel 3 consistirá en
Entonces, no hay preocupaciones que tracen algunos obstáculos difíciles que el automóvil tendrá que evitar.
Y veremos si logró llegar al aeropuerto y al centro de la ciudad y, finalmente, al nivel más desafiante para
el automóvil será dibujar un camino muy difícil para llegar al centro de la ciudad.
Así que no sé si sabes que será un camino como un zigzag.
No soy un arquitecto brillante, pero intentaré hacer un camino desafiante.
Así que esperemos que pasemos al menos el primer nivel que sería genial, entonces esperemos que también podamos pasar el
nivel dos y tres.
Y si pasamos el nivel 4 eso sería maravilloso.
Entonces, hagamos esto, aceptemos el desafío.
Bueno, en realidad, el auto sin conductor aceptará el desafío, pero nosotros somos los cerebros detrás de esto.
Entonces, veamos cómo funciona eso.
Muy bien, así que lo primero que voy a hacer es solo darle un recordatorio rápido sobre el mapa.
Entonces ese es el mapa.
Y primero vamos a ver el mapa que vamos a ver en el auto que conduce
sin la inteligencia artificial. Será un auto que tenga esas acciones aleatorias que viste al principio de este modelo.
Entonces, ¿cómo podemos ver eso?
Bueno, tenemos que desactivar la IA y la actividad.
Simplemente necesitamos poner una temperatura igual a cero.
Recuerde que el parámetro aquí es la temperatura.
Y en este momento es igual a siete.
Esa es una temperatura baja.
Vamos a aumentar eso luego.
no queremos activar la inteligencia artificial, simplemente debemos establecer la temperatura a cero igual a cero.
Pero si no queremos que el auto tenga un cerebro, si
Y lo mismo aquí, por supuesto, esa es la temperatura real en el frío también.
Aquí vamos.
Y luego no debemos olvidar decir porque de lo contrario eso no incluirá el cambio.
Supongo que ahora no tenemos ninguno.
Veo que solía activarlo.
Echemos un vistazo al mapa solo para darnos un repaso rápido.
Un recordatorio rápido de cómo se ve.
Así que voy a seleccionar todo y presionar enter.
Todo bien.
Y ahí está nuestro mapa y allí está nuestro automóvil.
Entonces, como puedes ver que el auto está teniendo acciones totalmente aleatorias, sabes que debes ir a la izquierda para ir
hacia la derecha y por lo tanto no está llegando al aeropuerto, que es lo que recuerdo en la esquina superior izquierda del mapa y no
lo alcanzo.
Bueno, simplemente lo hizo.
Eso es totalmente aleatorio.
Lo ves ahora mismo, está en el aeropuerto y no está llegando a la otra meta que está en el centro, en la
parte inferior derecha del mapa.
Así que estábamos como aquí pero ahora podemos ver claramente que las acciones son totalmente aleatorias.
No va a ninguna parte y definitivamente no hay inteligencia artificial, pero no preocupaciones.
Lo activaremos ahora mismo.
Voy a cerrar el mapa y luego voy a reiniciar el kernel para reiniciar DeCarlo.
Haga clic en este botón de herramienta aquí y luego sí.
es el momento para el espectáculo en el que finalmente pondremos el tren que fabricamos en el automóvil y activaremos la IA.
Y ahora
Estoy muy emocionado de ver lo que va a pasar.
Vamos a activar el aire en este momento y para hacerlo necesitamos elevar la temperatura para
cambiar la temperatura, que es reemplazada por cero, así que comencemos con siete como lo hicimos antes.
Así que especifiquemos siete aquí.
Está bien, no olvidemos decirlo.
Y ahora volvamos a nuestro mapa y ahora podemos volver a ejecutar esto porque
reiniciamos el kernel.
Entonces digámoslo.
Y ahí vamos tenemos el auto.
Y qué está haciendo?
Bueno, está tratando de encontrar su camino, está explorando su comprensión de lo que tiene que hacer y está a punto de llegar
al aeropuerto, y allí vamos primero, llegamos a lo maravilloso y ahora el próximo objetivo es llegar al centro de la
ciudad y llegar al centro de la ciudad.
Y ahora está tratando de encontrar el aeropuerto de regreso yendo al aeropuerto y allí, de nuevo,
Wonderfalls funciona.
En realidad, no tomó tiempo explorarlo para aprender de los errores que sabe que el error aquí es
alejarse de la marcha.
Ahí es donde castigamos al automóvil dándole una recompensa ligeramente negativa.
Sabes que es menos 0. 2.
Así que aprende de ese error y, al aprender de ese error, logró obtener las recompensas
positivas acercándose a la meta.
Y ahora finalmente entendió lo que tiene que hacer.
Definitivamente llegar al aeropuerto y luego llegar al centro de la ciudad y luego hacer estos viajes redondos.
Eso es perfecto.
Tenemos un auto sin conductor, pero no puedo evitar darme cuenta de que parece un insecto.
El auto realmente no parece estar seguro de sí mismo.
No, no tiene un movimiento muy seguro.
Es como su izquierda y derecha que no se mueve como un movimiento de automóvil.
Se parece más a un error.
Así que vamos a arreglar eso.
es el parámetro en la función de Mac que podemos aumentar para que la acción se devuelva con más certeza.
Y como habrás adivinado, la manera de arreglar eso es aumentar la temperatura porque recuerda
que la temperatura
Entonces, tiene sentido que si aumentamos la temperatura bien podríamos terminar teniendo un automóvil más seguro
de sí mismo porque la IA estará más segura de qué acción debería jugar.
Y eso es recordar porque la acción se jugará con una mayor probabilidad.
El único problema con este aumento de la temperatura es que recuerde que la IA explora
menos las otras acciones porque al aumentar la temperatura de las otras acciones tendremos bajas probabilidades.
este momento eso no parece ser un problema porque el automóvil parece no tener problemas para alcanzar sus objetivos.
Pero en
El aeropuerto está en el centro de la ciudad para que podamos aumentar la temperatura por completo si queremos esto que hasta ahora parece
un insecto que se parece a un automóvil.
Entonces, hagamos esto.
Voy a cerrar esto ahora.
Aquí vamos.
Reinicia el kernel nuevamente.
Y presione sí
Y ahora vamos a aumentar la temperatura.
Entonces, hagamos esto.
Regresaré a mi archivo y luego reemplazaré siete por 100. Aquí vamos.
Entonces ahorramos
Y ahora tenemos un auto sin conductor seguro de sí mismo.
Entonces podríamos obtener mejores resultados y podríamos obtener algo que se parezca más a un automóvil.
Tomemos un mapa y luego volvamos a eso.
Está bien lo que pasó.
DE ACUERDO.
Hizo algún tipo de agotamiento.
No estoy seguro por qué.
Pero de todos modos ahora tenemos algo que se parece más a un automóvil.
Puedes ver que va más derecho.
No está haciendo estos movimientos rápidos de izquierda y derecha.
Esto se debe a que ahora el automóvil está más seguro de qué dirección tomar y cada vez que
lo sabe quiere tomar la mejor dirección para ir al aeropuerto y luego al centro.
Así que claramente ahora podemos decir que pasamos el nivel uno.
El automóvil está haciendo estos viajes de ida y vuelta entre el aeropuerto y el centro de la ciudad.
Así que vamos a guardar eso, es que voy a mostrarte cómo salvar el cerebro.
Solo tenemos que hacer clic en este botón de guardar y si miramos lo que sucede aquí.
Bueno, tenemos la curva de la que estábamos al principio, podemos observar algunos errores que cometió.
Entonces, ahí es donde la recompensa es negativa.
Pero luego aprendió de sus errores y la recompensa aumentó poco a poco hasta que alcanzar una recompensa positiva
constante equivale a abrir uno, pero esa es la recompensa máxima que establecemos.
Y eso es porque terminó explorando.
Esa es la fase de expiración.
Y luego solo sabía lo que tenía que hacer.
Ahí es donde estaba haciendo estos redondos Rountree entre el aeropuerto y el centro de la ciudad sin ningún error.
Entonces ahí vamos
Pasamos el nivel uno.
Felicitaciones.
Ahora vamos a poner las cosas más difíciles.
Llevemos las cosas al siguiente nivel.
Probemos pasar el nivel al que te recuerdo que hacemos estos viajes de ida y vuelta en un camino específico.
Vamos a dibujar nosotros mismos.
Así que vamos a ver eso en el siguiente trabajo.
Y hasta entonces yo