Гетти
Если кажется, что в наши дни разговоры об искусственном интеллекте и облачных вычислениях ведутся повсюду, а не только в разрозненных технических кругах и кругах инвесторов, это правда. И нигде это так не верно, как в индустрии развлечений, где творческие и бизнес-классы обеспокоены возможными последствиями для ремесла, которое они оттачивали годами, и воодушевлены демократизирующей силой технологий.
На недавнем кинофестивале «Сандэнс» я поговорил с многочисленными режиссерами, редакторами и другими людьми, использующими новые возможности искусственного интеллекта и «облако-камера», преобразующими процесс производства фильмов и телепередач, а также с руководителями Adobe, которая делает широко используемое программное обеспечение для монтажа Premiere Pro и другие инструменты для творчества.
Это замечательное время, быстро развивающееся, с захватывающими дух предсказаниями, как положительными, так и отрицательными, но также и с некоторыми прекрасными возможностями переделать то, как кино и телевидение (давайте просто назовем их основанными на видео) делались более века.
Освоение отрасли только началось. Комкаст
Звезды и их представители тоже замечают, как технологии ИИ появляются даже в специализированных уголках индустрии.
Например, агентство талантов. CAA подписала стратегическое партнерство с Metaphysic, который предоставляет инструменты «омоложения» в Здесь, функция Miramax, основанная на графическом романе. Звезды Том Хэнкс и Робин Райт будут играть персонажей в одной комнате, поскольку они стареют на протяжении многих лет, начиная с их давней юности и далее.
Для агентства привлекательность такой технологии очевидна: их крупнейшие звезды/клиенты внезапно становятся жизнеспособными в большем количестве ролей на десятилетия дольше.
Бодрящие возможности новой технологии
Но изо дня в день возможности редакторов, режиссеров и других лиц, вовлеченных в сложную задачу по созданию видеопроекта, расширяются. Из разговоров с подающими надежды авторами, чьи независимые и документальные проекты заполняют график Сандэнса, становится ясно, что они рассматривают Premiere Pro как высокоскоростную платформу для совместной работы, обеспечивающую все более широкий спектр возможных творческих применений все более широким кругом возможных создателей.
компании Adobe
Под этим она имеет в виду, как ИИ может увеличить творческий потенциал человека, а не заменить его, как некоторые опасаются. Инструменты на основе искусственного интеллекта могут дать создателям со скромными техническими навыками, ресурсами или связями или без них возможность создавать привлекательные модные проекты в видео и других медиа. Даже сейчас для профессиональных создателей искусственный интеллект упрощает выполнение повторяющихся задач, таких как просмотр отснятого материала для определенной сцены, позволяя редакторам и другим создателям сосредоточиться на (буквально) более широкой картине.
Но дело не только в этом, говорит Майкл Сиони, старший директор Adobe по глобальным инновациям и давний чемпион технологий «камера-облако» с принадлежащей Adobe компанией Frame.io.
Каждый цифровой актив также является облачным активом
Он формулирует это просто: «К 2031 году каждый электронный актив, созданный в медиа и развлечениях, будет создаваться в облаке, в облаке. Это правда. Я называю это технологической уверенностью, что каждый электронный актив, созданный устройством, будет создан в облаке, а не, скажем, на локальном жестком диске, пленке, видеокассете или карте памяти.
В знакомом цикле трансформации медиа текстовые документы первыми попали в облако (и в ИИ). Теперь они регулярно создаются, передаются и редактируются в облачных сервисах, таких как Google Docs, Apple Pages, Microsoft Word и Adobe Acrobat. Сотни миллионов людей слушают (а также создают, сотрудничают и продают) музыку в облаке благодаря Spotify, Apple Music, Amazon Music, Tidal и другим. Теперь он меняет самые сложные медиа, которые мы создаем.
«Допустим, вы снимаете сцену в кино, — сказал Сиони. «Вы сможете печатать на языке после съемки сцены: «Сделай дождь». И в кадре появится вода, пойдет дождь. «Сделай снег», и он начнет появляться в кадре. И для этого не нужно быть инженером. Это действительно похоже на научную фантастику, но это станет вполне выполнимым. Мы видим, как это происходит на самых ранних этапах фотосъемки (фото), и мы знаем, что это перерастет в видео. И это действительно важный атрибут того, где мы должны думать о том, как это влияет на творческих людей».
Это имеет массу последствий для будущего создания движущихся изображений. Как давным-давно выразился Леонард Коэн, когда в свои 30 он превратился из поэта в романиста и певца/автора песен, «границы между многими начинаниями стерлись».
Многие молодые кинематографисты регулярно пересекают эти границы, делая свои проекты всего понемногу и регулярно сотрудничая на цифровых платформах. Благодаря доставке из облака в камеру и интеллектуальному искусственному интеллекту они могут снимать сцену, быстро создавать грубую «сборку» в качестве отправной точки для редактирования, определяя при этом, достаточно ли сцены для «работы» или требуется больше съемок. .
Они также могут набросать основные визуальные эффекты, цветокоррекцию и даже звуковой дизайн, прежде чем передать его специалистам для тонкой настройки. Таким образом, Premiere стала для многих создателей Sundance больше, чем традиционная программа нелинейного редактирования видео.
Построение новых отношений между людьми и изображениями
«Это одна из наших самых больших страстей: отношения между людьми и камерами и то, как они влияют на общество», — сказал Максимилиан Ван Эртрик, сорежиссер (и соредактор) провокационного документального фильма. Фантастическая машина, который получил специальную награду жюри Sundance за творческое видение. «Мы как антропологи, которым нравится веселиться».
Их документальный фильм мягко призывает к взвешенному подходу к миру, который мы создаем с помощью этих новых инструментов. Как гласил старый политический анекдот, «кому ты поверишь: мне или своим лживым глазам?» Нам все чаще нужно понимать, когда наши глаза Он следует верить лжи и движущимся изображениям, сказал содиректор/редактор Эртрика Аксель Дэниелсон.
«У фильма не так много ответов, — сказал Дэниелсон. «Есть вопросы. Единственный ответ, который мы знаем, заключается в том, что мы, как общество, должны очень серьезно относиться к медиаграмотности».
Проект объединяет более чем столетие движущихся изображений, восходящих к первопроходцам, таким как Жорж Мельес (чей королевский персонаж воскликнул бы то, что стало названием фильма). По пути он останавливается на пугающе энергичной Лени Рифеншталь, разыгрывающей свои любимые кадры с нацистского митинга в Нюрнберге, и на боевике ИГИЛ, неоднократно искажающем реплики в ролике с ляпами из видео о вербовке террористов. В нем также есть гораздо более мягкие элементы, но суть в том, что великие и ужасные создатели будут использовать новые инструменты разными способами.
On Фантастическая машина, Ван Аэртрик и Дэниэлсон потратили годы на сбор уникальных видеороликов о сложных отношениях между людьми и камерами и изображениями, которые они создают. Когда пришло время монтировать фильм, они работали удаленно с редактором Микелем Си Карлссоном и исполнительным продюсером Рубеном Остлундом, дважды номинированным на «Оскар» сценаристом и режиссером (Треугольник печали), чья Plattform Produktion продюсировала фильм.
«Мы не обученные редакторы; мы делаем это, потому что должны это делать», — сказал Ван Эртрик. «Adobe становится для нас идеальным инструментом, потому что мы можем добавлять туда все и делиться ими между собой».
Ван Аэртрик сказал, что четверо использовали облачные инструменты Premiere для обмена клипами и эпизодами, как если бы они сидели за столом, хотя они были разбросаны по Западной Европе от Балтики (Гетеборг, Швеция) до Балеарских островов (Мальорка). Это особенно обширный пример свободы, которую он дает создателям, чтобы они могли приходить откуда угодно и работать где угодно, если они в этом нуждаются или хотят.
«Возможность делиться в Интернете делает гораздо больше возможным», — сказал Кристал Кайиза, сценарист и режиссер Привал, который получил приз жюри Sundance за короткометражный фильм в США. «Если я хочу вернуться в Оклахому, я могу сделать это, если буду (создавать) короткометражку».
В прошлом году Adobe объявила о новых возможностях прямой передачи в облако в некоторых популярных камерах и других производственных устройствах, которые одновременно передают видео по мере его захвата. Это позволяет монтажерам, продюсерам, руководителям и другим специалистам по постпродакшну начинать работу над отснятым материалом уже через несколько минут после того, как он был снят.
Даже небольшие производства используют эти технологии. Облачные подключения были необходимы, особенно на раннем этапе, для создания Поступление в университет в Мариачи, — сказала Даниэла Т. Кирос, получившая награду Sundance за монтаж.
Режиссеры Алехандра Васкес и Сэм Осборн все еще снимали документальный фильм о школьных танцевальных соревнованиях в долине Рио-Гранде в Техасе, когда Кирос из Бруклина начал собирать проект по кусочкам. Ее ранний и свежий взгляд на уже отснятый материал помог определить последующие съемки и направления работы.
«Как редакторы, мы имеем уникальную возможность впервые увидеть этих людей на камеру», — сказал Кирос. «Вы действительно можете увидеть, в кого вы влюбляетесь и в какую музыку вы влюбляетесь».
Отказаться от этих немедленно доступных цифровых ежедневных газет, как в «старые времена» всего несколько лет назад, было необходимостью при съемке. Иногда я думаю о смерти на месте в отдаленной части побережья Орегона. Вместо этого отснятый материал каждый день загружался на жесткие диски, а затем ночью отправлялся в Новый Орлеан для передачи цифровым посредникам. Это было напоминанием об улучшениях, которые принесли технологии, — сказал редактор Райан Кендрик.
Новый вид сотрудничества
Это позволило Кендрику из Нэшвилла начать редактирование, сотрудничая с режиссером Рэйчел Ламберт и другими людьми из разных штатов.
«Как здорово, что я могу работать с теми, с кем хочу работать, и мы не привязаны к одному и тому же месту», — сказал Кендрик. Это также меняет динамику между режиссерами, операторами, монтажерами и остальными участниками производства.
«Раньше вы всегда чувствовали себя изолированными от съемочной площадки», — сказал Кендрик. «Теперь ты чувствуешь себя более связанным с этим. Вы не чувствуете себя настолько отделенным от тона, который они делают. Монтажная — отличное место, где вы можете совершать массу ошибок и делать абсолютно противоположное тому, что хотите. Я всегда говорю: «Я не знаю. Давай разберемся».
On Иногда мне хочется умереть, Кендрик, Ламберт и главный оператор Дастин Лейн начали общаться еженедельно задолго до начала съемок, чтобы заранее предотвратить возможные проблемы.
«Мы говорили о проблемах редактирования, которые могут возникнуть», — сказал Кендрик. «Когда вы получаете сценарии, сложнее всего думать о том, как фильм будет переходить к следующей части. В частности, в фильме (главные герои) ходят в кино. Мы много говорили о том, как мы собираемся получить изображения, необходимые для сохранения эмоционального веса».
Кендрик сказал, что быстрый переход от камеры к облаку особенно полезен для коротких проектов, таких как рекламные ролики и музыкальные клипы.
«Некоторые повороты в рекламе дикие, — сказал Кендрик. Возможность передавать проекты туда и обратно в Premiere Pro, Frame.io и After Effects действительно была возможна только с облачной архитектурой.
«Это самая большая (задержка в производственных рабочих процессах), которая была устранена за последние пять лет», — сказал Кендрик.
Руководящие принципы создания лучших технологий
По словам Кина, подход Adobe к своим технологиям основан на пяти «руководящих принципах»: рабочий процесс, мультимедиа, совместная работа, производительность и безопасность.
«Мы действительно вкладываем ИИ в «производительность», — сказал Кин. «Речь идет не о замене креативщиков. Речь идет о замене обыденности».
Профсоюзы Голливуда внимательно следят за быстро меняющейся сферой ИИ. Пак сообщил, что правление крупнейшего голливудского профсоюза SAG-AFTRA планирует включить вопрос о правах на сходство — использование ИИ для воссоздания внешности, голоса или других аспектов его членов — в предстоящих переговорах по контракту.
На данный момент адвокатам по талантам сообщили, что «любая формулировка в контракте, которая имеет целью контролировать право на имитацию выступления актера, (является) «недействительной и не имеющей исковой силы до тех пор, пока условия не будут согласованы с профсоюзом», — сообщил Пак. .
Сложный новый вопрос может привести к серьезным переговорам по контракту этой весной. Исполнители младшего и среднего возраста, желающие расширить свои карьерные возможности, могут использовать некоторые виды использования технологии, но без надежной защиты контрактов некоторые торговые точки могут использовать эту технологию как способ избежать оплаты цифровых выступлений, которые технически не являются актерами.
Один грубый пример того, что в конечном итоге может произойти, можно было найти в течение нескольких недель на Twitch, где «watchmeforever» создал бесконечный, сгенерированный ИИ «эпизод» Сайнфельд. В «шоу» использовались плохо интонированные, сгенерированные компьютером голоса, простая графика и шутки, которые не были особенно смешными. Шоу также предлагает то, что в конечном итоге может стать возможным на гораздо более высоком уровне качества. Стоит отметить, что бесконечный цикл был прерван уведомлением об отключении, когда рутина персонажа «Джерри» превратилась в то, что считалось анти-транс-рутиной.
Открывая мир для творческих занятий
Что касается гораздо более положительного момента, Кин из Adobe указывает на гораздо более широкий доступ к творческим инструментам, которые будут обеспечивать ИИ и облако. Это устраняет необходимость в больших фермах рендеринга для создания изображений и звука, создания эффектов и всего остального, при этом обеспечивая вычислительную мощность и безопасность, которые необходимы любому умеренно амбициозному видеопроекту.
«Если вы сможете централизовать облако, вы откроете возможность получать истории со всего мира», — сказал Кин. «Взаимодействие должно быть на каждом этапе. Общая точка зрения либо подкрепляет ваши идеи, либо бросает вам вызов».
В качестве примера важности безопасности для кинематографистов Кин привел План С, документальный фильм Sundance об абортах. Его создателям нужно было сделать несколько размытий лиц и голосов некоторых интервью на камеру, а также железную защиту для неразмытых оригинальных медиа.
По словам Кина, бурный рост генеративного ИИ, дипфейков и связанных с этим проблем также означает, что аутентичность важнее, чем когда-либо. Adobe является участником инициативы Content Authenticity Initiative вместе с другими медиа- и технологическими компаниями, такими как New York Times.
Киану Ривз, звезда культовой научно-фантастической франшизы Матрица, менее оптимистичен. Недавно он рассказал Wired, что одно злонамеренное использование видео с искусственным интеллектом, создающее дипфейки — это «страшно». Контракты Ривза обычно включают пункт, запрещающий студиям манипулировать его выступлением в цифровом виде, положение, появившееся несколько десятилетий назад, когда на его лице была виртуальная слеза.
«Что расстраивает, так это то, что вы теряете свободу действий», — сказал Ривз об инвазивных методах. «Когда вы выступаете в фильме, вы знаете, что вас будут монтировать, но вы в этом участвуете. Если вы войдете в страну дипфейков, там не будет ни одной из ваших точек зрения. Это страшно. Будет интересно посмотреть, как люди справятся с этими технологиями».
Новая революционная технология
Следующая передовая технология, уже доступная в бета-версии в Premiere Pro, — это так называемое редактирование на основе текста, которое позволяет человеку редактировать видео, редактируя текст диалога, извлеченный и расшифрованный из видео с помощью ИИ. ИИ также выделяет важные звуковые фрагменты, может создавать начальную сборку окончательного проекта и генерировать поиск на основе ключевых слов, чтобы быстро находить определенные клипы или разговоры. Данные, созданные для проекта, становятся новым мощным способом эффективного управления всем этим материалом.
«Вы насыщаете СМИ всеми этими богатыми данными, — сказал Кин.
Некоторые небольшие компании уже начали использовать аналогичные технологии. Опишите и Подкастл может создать цифровую версию вашего голоса, а затем читать текстовые сценарии без необходимости дополнительного редактирования. Descript также недавно добавил текстовое редактирование видео, будь то подкасты или другой контент.
Редактор Кендрик сказал, что уже использовал текстовые инструменты Adobe для редактирования, чтобы помочь другу быстро отредактировать мини-документальный фильм, снятый на Аляске. По словам Кендрик, редактирование на основе текста также, вероятно, будет чрезвычайно полезным для так называемых «предварительных редакторов», продюсеров/редакторов, которым обычно приходится продираться через несколько дней отснятого материала, чтобы быстро собрать шоу без сценария в сжатые сроки.
Аудиокниги, сценарии, социальные сети тоже получают ИИ
ИИ проникает и во многие другие сферы развлечений. Яблоко
Конечно, есть причины ценить лучшие работы этих рассказчиков-людей, и может пройти много времени, прежде чем инструмент ИИ сможет приблизиться к неотразимым голосам и выступлениям лучших людей, читающих лучшие книги.
Но стоимость использования этого таланта намного превышает финансы десятков тысяч книг, выпускаемых каждый год. Вот где набор инструментов Apple может предоставить доступ к другому рынку для тех небольших книг, авторов и издателей, которые пытаются выйти на ранее удаленный рынок, который уже оценивается в 1.5 миллиарда долларов по всему миру.
Стартап Киносцена использует ИИ для разбивки компонентов сценария, включая такие элементы, как актерский состав, реквизит, костюмы, используемые транспортные средства, звуки, локации и многое другое.
А что касается короткометражных видео, то TikTok, Meta’s Reels и Alphabet’s YouTube Shorts зависят от машинного обучения и инструментов искусственного интеллекта для предоставления следующего «рекомендованного» видео, которое, по их мнению, вы захотите посмотреть, и подключение рекламы к этому опыту более плавным и привлекательным способом.
Позвонил аналитик Рич Гринберг из LightShed Partners. переход Facebook на улучшенные рекомендации контента, основанные на искусственном интеллекте, чрезвычайно дорог, но «в конечном итоге это может доказать (генеральный директор Meta Марк) второй по значимости поворот Цукерберга (после мобильных устройств) на платформе, которая постоянно развивалась с момента ее создания».
Источник: https://www.forbes.com/sites/dbloom/2023/02/24/how-ai-and-the-cloud-are-erasing-the-borders-in-making-movies-and-tv- шоу/