Умная студия на подходе: автоматический режиссер, клипы, живая транскрипция и перевод

Что превращает трансляцию одного человека в полноценную студию - живые субтитры, которые уже работают, и две функции в разработке: режиссер, который сам выбирает кадр, клипы и видеозапись события, которые нарезаются автоматически, и живые субтитры на иврите и языках зарубежных сообществ.

Прежде всего, честность: что работает сегодня и что на подходе

Что Bima делает сегодня и что работает: вход по личному коду, водяной знак для каждого зрителя, кто смотрит сейчас и отключение в течение нескольких секунд, трансляция из браузера и с профессионального оборудования, автоматическая запись и журнал аудита. Это продукт, который вы получите завтра утром.

Две функции на этой странице уже работают: автоматический режиссёр управляется из консоли в трёх режимах (выключен, подсказка, автоматический), а живая расшифровка и перевод включаются в панели политики трансляции. Третья, клипы и фильм события, находится в разработке и помечена как "скоро", пока она действительно не заработает у вас.

Автоматический режиссер: кадр следует за говорящим

В зале с несколькими камерами или с одной широкоугольной камерой автоматический режиссер определяет, кто и откуда говорит, и выбирает кадр: крупный план раввина на уроке, ведущего и гостя в беседе, и общий план, когда поет аудитория. Он перемещает кадр, как опытный оператор, плавным движением, без скачков, и соблюдает простые правила: не обрезать слишком быстро, не повторять один и тот же зум, оставаться на широком плане, когда неясно, кто говорит.

Оператор остается главным: можно в любой момент взять управление на себя, зафиксировать кадр или включить режиссера только на часть трансляции. Каждое его решение записывается, чтобы можно было учиться и настраивать его для следующего события.

На странице "Участники" в консоли вы вводите, кто ожидается к появлению, с именем, должностью и порядком приоритета. Сегодня оператор выводит титр с именем и должностью из этого списка одним нажатием; титр, который появляется сам, следуя за говорящим источником, находится в разработке.

Работает с одним или несколькими источниками, без специального оборудования в зале
Титр с именем и должностью одним нажатием из списка участников; автоматический титр, следующий за говорящим источником, в разработке
Полный ручной контроль в любой момент; по умолчанию всегда консервативно

Клипы и видеозапись события, которые нарезаются сами

Тот же режиссер, который знает, кто и когда говорил, также знает, какие моменты были важными. В конце мероприятия он предлагает короткие клипы (поздравление, песня, объявление) и сокращенную видеозапись события, которая нарезается из записи в соответствии с его решениями и метками глав, которые оператор установил в реальном времени.

Организатор одобряет, упорядочивает и скачивает, или отправляет авторизованной аудитории через тот же механизм кодов, с тем же личным водяным знаком. Ничто не публикуется самостоятельно.

Клипы от 30 до 90 секунд готовы к распространению в сообществе
Видеозапись события на несколько минут вместо двух часов записи
Та же защита, что и у трансляции: личный код, водяной знак, журнал

Живая транскрипция и перевод: субтитры на иврите и языке сообщества

Урок на иврите для аудитории в Нью-Йорке, Париже и Антверпене. Живая транскрипция превращает речь в субтитры на экране за считанные секунды, а перевод отображает их на языке, выбранном зрителем: английском, французском, португальском, русском, немецком или голландском, как и сам интерфейс. В конце трансляции остается полная стенограмма, которую можно искать и скачивать.

Конфиденциальность превыше всего: транскрипция по умолчанию отключена и включается намеренно для каждой трансляции отдельно. Только тогда аудио этой трансляции передаётся, окнами примерно по десять секунд, модели Gemini от Google в Google Cloud (Vertex AI, США), только для этой цели и без использования контента для обучения моделей. Видео не передаётся. Полное описание - в разделе 9 политики конфиденциальности.

Живые субтитры на иврите и шести других языках, по выбору зрителя
Субтитры остаются с трансляцией; полная стенограмма для скачивания и поиска в разработке
Отключено по умолчанию; включается для каждой трансляции организатором

Текущее состояние

Режиссёр и субтитры работают в продакшене на наших собственных серверах трансляции в Израиле и включаются для каждой трансляции из консоли. Наш совет для первого мероприятия: запустить режиссёра в режиме подсказки, где человек-оператор одобряет каждое решение, и переходить на автоматический только после того, как вы убедились, что подсказки хороши. Клипы и фильм события в разработке.

Хотите быть в числе первых? Напишите нам. Мы будем рады совместной пилотной трансляции.

Часто задаваемые вопросы

Это работает сегодня?

Автоматический режиссёр и живые субтитры работают сегодня и включаются из консоли. Клипы и фильм события пока нет: они помечены как "скоро" и появятся в консоли только тогда, когда заработают у вас.

Передается ли наш контент искусственному интеллекту?

Только если организатор включил живые субтитры для конкретной трансляции: тогда аудио этой трансляции передаётся, окнами примерно по десять секунд, модели Gemini от Google в Google Cloud (Vertex AI, США), только для субтитров и стенограммы, без обучения моделей на контенте и без передачи видео. Автоматический режиссёр ничего не отправляет наружу - он работает на нашем собственном сервере. Вне трансляций ИИ также даёт мгновенный ответ в форме обратной связи на сайте и обслуживает два инструмента консоли, которые менеджер запускает сам (извлечение списка приглашённых из файла и создание изображения бренда). Полное описание, включая кто и где, - в разделе 9 политики конфиденциальности.

Заменит ли режиссер оператора?

Он заменит необходимость в режиссере, который сидит за микшером весь вечер. Хорошая камера и хороший микрофон по-прежнему нужны; решение "какая камера сейчас" он принимает на себя, и вы можете отменить его в любой момент.

На каком языке субтитры?

Оригинал на иврите (или на языке трансляции), и перевод на один из пяти дополнительных языков. Зритель выбирает сам; организатор выбирает, какие языки разрешить.