Gym-Retro - это библиотека, созданная чтобы работать вместе с Gym. Еще одной библиотекой для RL (reinforcement-learning). Gym-Retro поддерживает более 1000 классических тайтлов. Среди которых игры с платформ Atari, NEC, Nintendo, Sega и т.д. Ставится командой pip install gym-retro Документация и примеры кода здесь.