ElevenLabs випустила ШІ, здатний додавати звуки до відео від створеної OpenAI системи Sora
Після виходу нової моделі ШІ Sora від OpenAI, яка здатна генерувати німі відео на основі текстових підказок, ElevenLabs створила ШІ, що додає фонові звуки до цих кадрів.
Про це повідомляє New Atlas.
Наразі компанія працює над новою розробкою, яка, як повідомляється, може генерувати звуки для супроводу німих відеоматеріалів на основі опису сцени, наданого користувачем.
We were blown away by the Sora announcement but felt it needed something...
What if you could describe a sound and generate it with AI? pic.twitter.com/HcUxQ7Wndg
— ElevenLabs (@elevenlabsio) February 18, 2024
«Ми використовували текстові підказки, такі як «плескіт хвиль», «брязкіт металу», «цвірінькання птахів» і «двигун гоночного автомобіля», щоб згенерувати звук, який ми наклали на деякі з наших улюблених кліпів з анонсу OpenAI Sora», - пояснює компанія у своєму блозі.
Що саме буде у звукових ефектах від ElevenLabs, поки що не розкривається, але в демонстраційному ролику показано кілька відеокліпів, згенерованих Sora, які супроводжуються досить реалістичними фоновими звуками - від кроків на жвавій вулиці до кіношної розповіді, озвученої голлівудським рекламним голосом.
У виданні зазначили, що як і у випадку з Sora, безсумнівно, будуть певні недоліки, які потрібно буде доопрацювати, а також захист від шахрайства та протоколи безпеки.
Читайте також:
Компанія з розробки штучного інтелекту OpenAI 15 лютого анонсувала Sora, нову модель, яка генерує відео високої чіткості тривалістю до однієї хвилини з текстових підказок.
Нещодавно Федеральна комісія зі зв’язку (FCC) заявила, що буде контролювати роботизовані дзвінки з використанням голосів, згенерованих штучним інтелектом. Причиною став інцидент, що стався у січні, коли штучний голос президента США Джо Байдена телефоном закликав демократів Нью-Гемпширу пропустити праймеріз.
А компанія Google змінила назву чатбота зі штучним інтелектом – тепер Bard буде відомий під назвою Gemini.
⚡️⚡️⚡️ Увесь інсайд та актуальна інформація на нашому Телеграм-каналі, а також бонуси та швидкі новини.