Google DeepMind представил Dreamer 4 — первый ИИ-агент, добывший алмазы в Minecraft оффлайн, без взаимодействия со средой во время обучения. Ранее, Google представил Dreamer 3.
Dreamer 4 - это масштабируемая модель мира, которая позволяет учиться без взаимодействия со средой, что критично для робототехники.
Модель решает более сложную задачу (реальные действия vs абстрактные) в более сложных условиях (офлайн vs онлайн), используя в 100× меньше данных, чем предыдущие офлайн-методы.
Модель обучалась на 2,541 часах видео, используя всего 100 часов с разметкой действий, и работает на 1 GPU в реальном времени.
Задача требует последовательности из ~24,000 действий мыши и клавиатуры.
Хотя успешность составляет 0.7%, это первое решение такой сложной задачи офлайн-методом.
Подход важен для робототехники, где реальные эксперименты небезопасны.