Google DeepMind представила ШІ для озвучування і саундтреків згенерованих відео

DeepMind, дослідницька лабораторія штучного інтелекту Google, оголосила про розробку технології штучного інтелекту, яка допомагає створювати саундтреки для відео. Про це повідомляє TechCrunch.

За допомогою технології V2A (video to audio) DeepMind намагається розв'язати проблему створення звукових ефектів для відео створених штучним інтелектом. Технологія V2A використовує текстовий опис, пов'язуючи його з відео, для створення музики, звукових ефектів та навіть діалогів, які відповідають персонажам і тону відео.

DeepMind також використовує технологію SynthID для захисту створеного вмісту від підробки. ШІ-модель V2A навчена на поєднанні звуків, транскриптів діалогів та відеокліпів. DeepMind уточнює, що їхні системи ШІ для створення відео можуть створювати лише беззвучний вихідний сигнал, тому технологія V2A є наступним кроком для створення повноцінних фільмів та анімацій.