Este resultado me sale con "env = gym.make('FrozenLake-v1', is_slippery=False)"
Cuando le pongo true y cambio el gamma, alpha y el ritmo el resultado es el siguiente:

Este es el link de mi proyecto:
https://colab.research.google.com/drive/1qJkNUohSSKYD4Zds07KefZT33kJJe4Pq?usp=sharing