Разработчики Odyssey показали необычный эксперимент с цифровой моделью мозга плодовой мушки: по заявлению компании, виртуальное насекомое самостоятельно летает внутри Odyssey-3, а искусственный интеллект придумывает окружающий мир прямо по мере движения. Демонстрация особенно интересна тем, что два разных типа моделирования работают вместе: нейронная система выбирает действия, а генеративная модель постоянно достраивает среду вокруг неё.
В коротком ролике камера летит над виртуальной гаванью, проходит мимо лодок, зданий и набережной. Odyssey утверждает, что направление движения определяет мозг мушки, помещённый внутрь модели мира. Однако компания пока не объяснила, какую именно нейронную модель использовала и каким способом её сигналы превращаются в управление полётом.
Odyssey-3 генерирует не отдельную готовую картинку, а продолжение меняющейся сцены. Модель получает текущее состояние виртуального пространства и рассчитывает, что должно произойти дальше: куда переместятся объекты, как изменится камера и какой станет следующая часть окружения. Поэтому мир не нужно заранее строить целиком, система может создавать его постепенно, пока виртуальный агент движется вперёд.
Идея цифровой мушки появилась благодаря подробным картам её нервной системы. Учёные уже восстановили коннектом мозга взрослой дрозофилы с 139 255 нейронами и более чем 50 млн синапсов. Коннектом показывает, какие нервные клетки контактируют друг с другом, но не хранит полноценное состояние живого мозга, поэтому одной карты недостаточно, чтобы получить точную цифровую копию насекомого.
Разработчики уже превращают нейроны из таких карт в математические модели, подают на них искусственные зрительные сигналы и считывают активность клеток на выходе. За последние месяцы цифровую нервную систему дрозофилы успели подключить к Doom, торговле биткоином и даже небольшому дрону. Во всех случаях человеку приходится задавать интерфейс между виртуальным мозгом и внешним миром: решить, какие сигналы получат сенсорные нейроны и какие клетки будут отвечать за движение.
Именно этой информации пока не хватает в демонстрации Odyssey. Компания не раскрыла, поступают ли созданные Odyssey-3 изображения непосредственно в зрительную систему цифровой мушки, какие нейроны определяют направление полёта и насколько поведение зависит от самой модели мозга. Методика, код и отдельное техническое описание эксперимента пока не опубликованы. Поэтому ролик показывает интересную возможность объединить цифровую нервную систему с генерируемым на лету миром, но ещё не доказывает, что полноценный мозг дрозофилы самостоятельно ориентируется в виртуальном пространстве.
