Дэвид Росс (David Ross), генеральный директор Ross Video, в эксклюзивном интервью ведущему и сопродюсеру Visionaries TKT1957 Филипу Гроссману (Philip Grossman) на выставке IBC 2023.
– Каковы, по Вашему мнению, основные тенденции IBC 2023?
Наш стенд на IBC 2023 был чрезвычайно загружен. Это весьма показательно, поскольку мы впервые с 2019 года выставляем оборудование в Amsterdam RAI. Мы пропустили два мероприятия и теперь возвращаемся к обычному присутствию.
С точки зрения тенденций, особенно по сравнению с 2019 годом, когда мы посетили последний IBC, мир изменился.
Заметно больше дискуссий об облаке и несколько меньше о 2110, но SDI также остаётся востребованным. Это захватывающий сдвиг.
Мы также обсуждаем NDI. Способы подключения видеооборудования постоянно меняются. Речь идёт не столько о конкретной тенденции, сколько о мире, фрагментированном различными идеями, например, следует ли сосредоточиться на текущих тенденциях, программном или аппаратном обеспечении. По сути, преобладающей тенденцией является отсутствие единой тенденции.
Преобладающей тенденцией является отсутствие единой тенденции
– Какие основные направления развития характерны для вашего отраслевого сегмента?
Я бы сказал, что наш отраслевой сегмент в первую очередь вращается вокруг создания и производства контента. Мы являемся свидетелями роста производства REMI для спорта. Это предполагает наличие камер на месте и использование интернета для передачи видео обратно в диспетчерскую для производства.
Мы также представляем «Distro» – концепцию, выходящую за рамки простого возвращения в централизованную диспетчерскую; Distro охватывает людей, работающих дома. Интригующим аспектом дистанционного производства является логистика. Даже если вы перевозите персонал на производство, а затем согласуете с удалённой диспетчерской, вы всё равно несёте расходы на их проезд, проживание, питание и так далее. Несмотря на то, что такая установка может позволить производить больше продукции за один день, необходимость в поездках сохраняется. Однако, текущая тенденция склоняется к тому, чтобы профессионалы работали дома, устраняя такие расходы, как питание, поскольку они могут обслуживать себя сами. По сути, единственные затраты — это их время.
– Долгое время латентность была проклятием существования каждого человека. Решили ли мы проблему задержки при удалённом производстве?
Это хороший вопрос. Когда вы упоминаете облачный продукт, который включает в себя видеомикшер и аудиомикшер, работающие в облаке, задержка между переключением и отображением его на экране составляет всего 200 миллисекунд.
Я бы не рекомендовал заниматься созданием музыки удалённо в облаке. Если вы выберете этот путь, вам в конечном итоге придется платить больше за передачу, особенно если вы используете HD64.
При задержке в одну-две с половиной секунды необходима корректировка метода производства. Оператору камеры приходится фокусироваться на объекте еще две-три секунды, прежде чем сделать шаг, потому что действие будет транслироваться позже. Вы также должны дать своим героям обратный отсчет, чтобы они знали, когда действительно начнется трансляция. Задержка регулируется путем корректировки самого производства. Лично я скучаю по старым добрым временам, когда при аналоговом сигнале всё было почти идеально синхронизировано.
– Да, это интересно. В прошлом время должно было быть невероятно точным. По мере развития технологий время становилось менее точным. Теперь, с появлением PTP, понятие времени стало ещё более расплывчатым, но люди по-прежнему обеспокоены задержкой.
Однажды у меня был разговор с разработчиком программного обеспечения, имя которого я не буду называть, о ценности асинхронного видео и о том, что в точной синхронизации больше нет необходимости. Я нашел это интригующим, потому что при проектировании телевизионного оборудования первым шагом обычно является синхронизация всего, что поступает в маршрутизатор. Это гарантирует, что при переключении всё будет работать без сбоев. Обходной путь для асинхронного видео включает использование синхронизации кадров и задержек видео. Мне кажется забавным, что в облачных технологиях аудио и видео не всегда совпадают.
Чем больше вы кодируете, синхронизируете кадры и пропускаете кадры, тем больше рассинхронизируются аудио и видео. Я ожидаю, что через пару лет те, кто когда-то хвалил ценность асинхронного видео, будут обсуждать проблемы синхронизации губ, задержек производства и сбоев видео. Кажется, мы ходим по кругу в решении этого вопроса.
– Можете ли Вы сказать, что мы подошли к моменту, когда мы можем принять задержку?
Если бы кто-то смог разработать решение для удалённой передачи H264 и облачного производства с минимальной задержкой, это изменило бы правила игры. Однако мы ещё не достигли этой точки.
– Какие новые продукты Ваша компания представляет на IBC 2023?
Мы представляем решения для производства расширенной реальности. Расширенная реальность сродни виртуальному производству, где элементы размещаются либо перед героями, либо позади них. Раньше мы добивались этого с помощью зеленых экранов. Теперь мы внедряем светодиодный экран Ross. Это устраняет такие проблемы, как края и тени, и даже позволяет человеку носить зеленое перед экраном.
Используя Unreal Engine, когда камера снимает сцену на заднем плане, мы можем заглянуть в трёхмерный мир. По мере движения камеры изображение на экране соответствующим образом корректируется, обеспечивая реалистичную перспективу из этого положения камеры.
– Используете ли вы собственную систему слежения за камерой или это стороннее решение?
Сейчас на выставке мы демонстрируем два типа камер.
Первый — Furio: камера на тележке, которая движется по рельсам и знает своё точное местоположение в трехмерном пространстве, что устраняет необходимость в дополнительном отслеживании.
Второй — Jib, известный своими проблемами с провисанием и раскачиванием. Даже если вы считаете, что знаете положение стрелы, точное местоположение камеры остается неопределённым. В таких случаях мы прибегаем к сторонним решениям для отслеживания, которые совместимы со всеми основными системами. Мы интегрируем обе системы камер в наш движок и управляем ими с помощью контроллера Lucid.
При работе в среде, в которой в качестве ядра используется движок Epic Games, как это происходит в нашей системе Voyager, важно помнить, что она не предназначена для вещания. Epic Games не учитывает Moss, требования реального времени или непредсказуемость прямых трансляций, включая интеграцию данных. Вот тут-то и вступает в игру наша система Lucid: она служит панелью управления трёхмерным миром.
– После первой постпандемической NAB на каждом стенде была стена с ЖК-дисплеем. Я ожидал увидеть искусственный интеллект на каждом стенде в следующем году, но этого не произошло. Считаете ли Вы, что расширенная реальность получит распространение в производстве новостей?
Использование XR со светодиодом имеет явное преимущество перед зеленым экраном. Основное преимущество заключается в том, что герой может напрямую взаимодействовать с тем, что отображается на экране. В таких сегментах, как прогнозы погоды или презентации, докладчику часто приходится смотреть на монитор, который может быть не совмещен с положением камеры.
– Действительно. Предполагаете ли Вы, что производственные наборы будут часто меняться, включая минимальные практические элементы для повышения ценности?
Это интригующее наблюдение. Мы заметили тенденцию, что компании инвестируют в светодиодные стены, адаптируя их к практическим требованиям. Однако это не бюджетный вариант. Светодиодная стена может стоить от 200 000 до 500 000 долларов, в зависимости от её размера. Некоторые продюсеры по-прежнему отдают предпочтение зеленым экранам как мере экономии, несмотря на проблемы, которые они создают, такие как мерцающие тени, несоответствия по краям и необходимость актёра оценивать размещение эффектов постобработки.
Благодаря светодиодной технологии изображение с самого начала становится стабильным и качественным. Хотя хроматическая манипуляция может быть более доступной заранее, есть и другие затраты, которые следует учитывать с точки зрения качества продукции.
– Есть ли какие-либо успехи в использовании искусственного интеллекта в ваших предложениях?
Конечно. На выставке мы впервые представляем наш продукт MAM Streamline Pro. Это сочетание продукта, приобретенного у Primestream, существующего MAM Streamline и множества новых технологий, а также обновлённого пользовательского интерфейса. Этот продукт легко интегрируется с нашей новостной системой и графическим пакетом Inception, обеспечивая комплексное решение. В этой системе мы используем ИИ для таких задач, как генерация метаданных, маркировка данных и даже редактирование видео.
– Является ли ИИ собственностью или получен извне?
На данный момент мы используем внешний ИИ. В конечном счете, мы часто полагаемся на внешние решения искусственного интеллекта, опираясь на наработки, заложенные другими. Однако наша уникальная реализация — это то, что отличает нас.
Это не единственное наше предприятие в области искусственного интеллекта. В рамках наших систем движения камеры мы разработали Vision[Ai]ry, которая использует наш запатентованный искусственный интеллект для отслеживания лица, головы и тела, позволяя камерам фокусироваться на конкретных персонажах.
Уже второй год своего существования Vision[Ai]ry получил широкое признание. Отзывы показывают, что в настоящее время это лучшее в отрасли решение для слежения за камерой на базе искусственного интеллекта — свидетельство значительных инвестиций, которые мы вложили в его разработку.
Одна из проблем, с которой мы столкнулись, — это периодическая неспособность системы распознавать персону после внезапных движений. Кроме того, когда на съёмочной площадке присутствует несколько человек, камере может быть сложно сфокусироваться на основном объекте, особенно если впереди идут другие люди.
Дальнейшие сложности возникают при программировании ИИ для управления робототехникой камеры, определения скорости масштабирования, времени вращения и моделей движения. С этим типом ИИ связано множество сложностей. На этом шоу мы расширяем границы возможного, изучая, как эффективно управлять несколькими камерами в режиме реального времени, особенно когда все они активны одновременно!
За закрытыми дверями: дальновидные переговоры гигантов индустрии с TKT1957
