Как работает Descript: генерация, а также редактирование видео при помощи текста

Как работает Descript: генерация, а также редактирование видео при помощи текста

Без нейронных сетей не обойтись, когда нужно отредактировать часовой подкаст, убрать все “э-э-э” и “ммм…”, добавить пару предложений и при этом не потратить целый день на возню с таймлайнами. Именно для такого рода случаев и создавалась платформа под названием Descript AI, посредством которой вы можете отредактировать аудио и видео. Причем внести все нужные преобразования в видеофайл здесь можно подобно тому, как это обычно происходит с текстовым документом.

Нечто среднее между текстовым редактором и программой для видеомонтажа

Разработчики пошли по нестандартному пути, предложив редактировать медиафайлы посредством текста. Суть проста: сначала нужно загрузить видео или аудио, после этого система автоматически создаст текстовую расшифровку. Затем можно работать с контентом так, как будто бы это текстовый документ. Пользователь удаляет ненужные слова из текста — они исчезают из исходного файла. Перемещает абзацы — аудиодорожка перестраивается соответственно.

За последний год платформа претерпела серьезную модернизацию. К традиционным возможностям работы с подкастами добавились полноценные инструменты видеомонтажа, средства для создания раскадровки и производственные функции. Теперь это не просто аудиоредактор с необычным интерфейсом, а комплексное решение для создания контента.

Использование на практике

Процесс работы с нейронной сетью начинается с загрузки файла и автоматической генерации транскрипции. Искусственный интеллект распознает речь и создает текстовую версию содержимого, разделяя при этом видеодорожки на отдельные сцены. Точность распознавания достаточно высокая, хотя иногда система спотыкается на именах собственных и сложных акцентах.

Главная особенность инструмента Descript заключается в синхронизации текста и медиафайла. При выделении в тексте излишней фразы на таймлайне автоматически подсвечивается соответствующий участок аудио.

При копировании предложения и вставке в другое место звук перемещается вслед за текстом. Многих пользователей в особенности впечатляет функция автоматического удаления слов-паразитов. Система находит сотни «эм», «а» и прочих речевых мусорных элементов, выделяет их цветом и предлагает убрать все одним кликом. Правда, иногда алгоритм излишне рьяно подходит к делу и пытается удалить вполне осмысленные междометия.

На сайте Descript AI также можно и сгенерировать готовое видео по промпту. После указания запроса пользователь выбирает интересующий его аватар из предоставленных в коллекции и указывает стиль оформления. Затем остается только ждать, пока нейронная сеть создаст готовое видео. Мы попросили ИИ создать видео на случайную тему — «Как поддерживать порядок в доме, если рядом нет супруги». Процесс генерации оказался довольно-таки длительным. Ждать пришлось более пяти минут.

Но на выходе мы все же получили свой видеоролик. Несмотря на то, что указанный нами промпт был на русском языке, нейросеть все равно создала видео на английском. Однако при этом сам ролик получился неплохим. Текст связный и понятный, движения аватара выглядят естественно, а картинки в конце видео соответствуют указанной теме:

Прочие возможности

Среди продвинутых функций выделяется Overdub — технология клонирования голоса. Можно обучить систему воспроизводить собственный голос или использовать готовые синтетические варианты для добавления новых слов в запись. Звучит фантастически, но на практике результат не всегда идеален, особенно для русской речи.

Studio Sound решает проблемы с качеством аудио; данная опция убирает фоновый шум и эхо, придавая записи профессиональное звучание. Функция работает неплохо, хотя чудес от нее ждать не стоит — сильно испорченную запись она не спасет. Мультитрековое редактирование позволяет работать с несколькими аудиодорожками одновременно, что полезно при монтаже интервью или подкастов с несколькими участниками. Интерфейс остается понятным даже при работе со сложными проектами.

К минусам можно отнести отсутствие мобильных приложений — работать с Descript можно только на компьютере с Windows или Mac. Это серьезное ограничение в эпоху мобильного контента. А также у платформы Descript довольно высокий порог входа (даже несмотря на кажущуюся простоту).

Стоит ли использовать

Descript AI занимает интересную нишу между простыми онлайн-редакторами и профессиональными комплексами наподобие Adobe Premiere Pro. Для создателей подкастов, блогеров и маркетологов, которые устали от постоянной работы над большим объемом контента, данная платформа способна стать настоящим спасением. Особую пользу система принесет тем, кто работает с разного рода вебинарами и интервью. Гибкие возможности редактирования видео ускоряют процесс — особенно когда приходится убирать повторы или же, например, вырезать отдельные фрагменты.

Однако рассчитывать на идеальный результат без ручной доработки не стоит. Автоматическая транскрипция требует проверки, а некоторые функции пока работают лучше с английским языком, чем с русским. Нейросеть Descript можно назвать интересным экспериментом в сфере редактирования контента. Профессиональные инструменты для создания сложных видеопроектов она не заменит, но во многих других случаях все же значительно упростит жизнь. Особенно тем юзерам, которые ценят скорость и удобство работы больше, чем множество настроек и опций.

Интересно? Поделиться:

Один комментарий к “Как работает Descript: генерация, а также редактирование видео при помощи текста

  1. Descript шикарный инструмент для редактирования видео и аудио. Он экономит часы на задачах редактирования, но при этом обладает возможностями, которые позволяют вам углубиться в работу, когда вы хотите или должны это сделать. Вы можете создавать высококачественные клипы для публикации в социальных сетях без дополнительного программного обеспечения.

Добавить комментарий

Оставляя комментарий вы соглашаетесь на обработку персональных данных в соответствии с политикой конфиденциальности, соглашаетесь с пользовательским соглашением. Ваш адрес email не будет опубликован. Обязательные поля помечены *

Продолжая использовать наш сайт, вы соглашаетесь с использованием файлов cookie. Они помогают нам обеспечивать корректную работу сайта и делать его более удобным.
Принять