DreamDojo
DreamDojo — интерактивная модель мира, которая обучается на крупномасштабных видеозаписях действий человека. Проект предназначен для исследователей и разработчиков, работающих над робототехникой и обучением моделей мира.
Проект включает в себя большой набор видеоданных для предварительного обучения моделей мира, а также готовую базовую модель мира для роботов. Также доступен пайплайн дистилляции, позволяющий модели достигать долгосрочной авторегрессионной генерации с интерактивным взаимодействием.
Исходный код DreamDojo распространяется под лицензией Apache-2.0. Для начала работы доступны инструкции по настройке, обучению Latent Action Model, предварительному обучению и постобучению DreamDojo, а также дистилляции и оценке модели.
https://github.com/NVIDIA/DreamDojo | 1117 звёзд
#сервисы