До появления GPT-3 компании обычно создавали отдельные модели обработки естественного языка под каждую задачу и обучали их на больших наборах профильных данных. Сейчас многие организации начинают с универсальных моделей вроде GPT, Claude или Llama, а затем дообучают их или настраивают под свои задачи.
Гендиректор General Intuition Пим де Витте считает, что по такому же пути пойдет и физический ИИ. По его словам, вместо сбора огромных массивов данных из реальной среды для узких робототехнических моделей рынок должен сосредоточиться на более качественных датасетах, которые позволят создавать базовые модели с переносом знаний о движении и взаимодействии между разными средами.
«Сейчас многие компании делают много специализированной работы, сосредоточенной на отдельных типах воплощения, отдельных средах и отдельных роботах», — сказал де Витте в недавнем выпуске подкаста Equity изданию TechCrunch.
По его мнению, значительная часть этой работы скоро станет лишней по мере появления универсальных моделей вроде той, которую разрабатывает и внедряет General Intuition. «Обобщающая способность самой модели и есть продукт», — сказал он.
Де Витте добавил, что базовый уровень рассуждений о пространстве и времени должен снизить потребность в сборе сотен тысяч или миллионов часов данных из реальной среды. По его словам, «вам нужно всего несколько минут».
General Intuition создала собственную базовую модель, обучив ее на миллионах часов данных из видеоигр. В набор входила и информация о действиях игрока, например какие кнопки на контроллере человек нажимал и в какой момент. Де Витте и ведущий инвестор компании Винод Хосла считают, что именно данные о действиях важны для формирования человеческой интуиции в пространственно-временном рассуждении.
В прошлом месяце стартап привлек 320 млн долларов при оценке 2,3 млрд долларов. Компания утверждает, что ее текущая модель способна как часами играть в видеоигру, так и управлять четвероногим роботом после дообучения всего на восьми минутах реальных робототехнических данных.
«То, что робот смог сработать в zero-shot-режиме только по фронтальной камере, без других сенсоров, в офисе с движущимися объектами и проходящими мимо людьми, стало для нас большим сюрпризом», — сказал де Витте. По его словам, это «признак того, что будет дальше».
Конечная цель General Intuition — не выпуск собственных роботов, а создание базовой модели для физического ИИ, на которой другие робототехнические компании смогут строить свои системы. Как сказал де Витте: «Мы не собираемся строить компанию по выпуску беспилотных автомобилей. Мы собираемся сделать так, чтобы следующему участнику рынка было в 10 раз проще построить такую компанию».
Источник: TechCrunch.
