Google открыла модель мира Genie 4 через Gemini API

Google объявила в журнале обновлений Gemini API 19 11, что модель Genie 4 (models/genie-4) официально доступна для использования. Вызов осуществляется через Interactions API (v1beta): можно генерировать непрерывные интерактивные миры с помощью текста, 16:9 референсных изображений или их комбинации. Видеопоток передается со скоростью 24 кадров в секунду и синхронным стереозвуком частотой 48 кГц через WebRTC или WebSocket. Пользователи могут перемещаться с помощью клавиш WASD / стрелок, а также изменять сцену текстом прямо во время сеанса. Доступно только на платных тарифах; официальная цена составляет 1.5 долларов за миллион входных токенов, 9 долларов за текстовый вывод и 17.5 долларов за видеовывод, что эквивалентно примерно 0.1 доллара в секунду. По данным TestingCatalog, разрешение изображения составляет 720p, максимальная длительность одного сеанса — 120 секунд, а география обслуживания охватывает США, Западную Европу и Японию; накануне Genie 4 стала доступна подписчикам Google AI Ultra.

Оригинальное название: Обновление Project Genie от Google Deepmind представляет Genie 4, цепочки миров и галерею сообщества для ремиксов

Google объявила в журнале обновлений Gemini API 19 11, что модель Genie 4 (models/genie-4) официально доступна для использования. Вызов осуществляется через Interactions API (v1beta): можно генерировать непрерывные интерактивные миры с помощью текста, 16:9 референсных изображений или их комбинации. Видеопоток передается со скоростью 24 кадров в секунду и синхронным стереозвуком частотой 48 кГц через WebRTC или WebSocket. Пользователи могут перемещаться с помощью клавиш WASD / стрелок, а также изменять сцену текстом прямо во время сеанса. Доступно только на платных тарифах; официальная цена составляет 1.5 долларов за миллион входных токенов, 9 долларов за текстовый вывод и 17.5 долларов за видеовывод, что эквивалентно примерно 0.1 доллара в секунду. По данным TestingCatalog, разрешение изображения составляет 720p, максимальная длительность одного сеанса — 120 секунд, а география обслуживания охватывает США, Западную Европу и Японию; накануне Genie 4 стала доступна подписчикам Google AI Ultra.

Почему это важно Модели мира превращаются из продукта для подписчиков в программируемый интерфейс, к которому можно напрямую подключать прототипы игр, пространственный дизайн и среды обучения роботов.

Достоверность: Высокая · Источник: журнал обновлений Gemini API и еще 2 источников (включая официальные) · Время события: 11-19 (пекинское время)

Причины

  • В официальном журнале обновлений Gemini API указано, что Genie 4 официально доступна, а также приведены цены
  • TestingCatalog сообщил об этом в тот же день, собрав информацию об ограничениях на длительность сеансов и географию обслуживания

Использование

  • Вызывайте models/genie-4 через Google AI Studio или Interactions API в Gemini API (требуется ключ платного тарифа)

Риски

  • Оплата взимается за токены видеовывода, поэтому стоимость длительных потоковых трансляций может быть высокой; существует ограничение на длительность одного сеанса
  • Качество изображения и согласованность мира основаны на заявлениях самой Google

Открыть · Журнал обновлений Gemini API · TestingCatalog

The Decoder

Открыть последние новости ИИ