A IA aprende sozinha
Um robozinho num mapa com um objetivo e alguns buracos. Ele começa andando ao acaso, ganha pontos quando chega e perde quando cai. Aos poucos ele aprende o melhor caminho, e você vê no mapa o que ele aprendeu.
Como usar
- 01Aperte treinar e acompanhe os episódios.
- 02Veja as setas e as cores: é o que o robô acha de cada casa.
- 03Clique nas casas para pôr ou tirar paredes e buracos no meio do treino.
Mouse ou dedoToque
experimento ao vivo
Carregando o experimento…
Como isso funciona?
01Ninguém ensina o caminho. O robô só recebe uma nota: +1 ao chegar, −1 ao cair e um pequeno custo por passo. Isso se chama aprendizado por reforço.
02Ele guarda uma tabela com o valor de cada ação em cada casa e atualiza esses valores a cada passo, com o algoritmo Q-learning. As cores do mapa mostram esses valores.
03No começo ele explora ao acaso; depois passa a aproveitar o que já sabe. Equilibrar explorar e aproveitar é um dos grandes desafios desse tipo de IA, usada até para treinar IAs que jogam.