ElevenLabs oferuje już generowane przez sztuczną inteligencję wersje ludzkich głosów i muzyki. Teraz pozwolisz Ludzie tworzą efekty dźwiękowe Również do podcastów, filmów i gier. Nowa Narzędzie do efektów dźwiękowych Może generować do 22 sekund dźwięków na podstawie podpowiedzi użytkownika, które można zintegrować z firmową platformą audio i muzyczną, a także zapewnia użytkownikom co najmniej cztery opcje pobierania klipów audio.
Firma twierdzi, że współpracowała z platformą mediów finansowych Shutterstock przy tworzeniu biblioteki i szkoleniu swojego modelu na podstawie klipów audio. Shutterstock udzielił licencji na swoje biblioteki treści kilku firmom zajmującym się sztuczną inteligencją, w tym OpenAI, Meta i Google.
Korzystanie z Sound Effects jest bezpłatne, ale płatne poziomy mogą wykorzystywać klipy audio utworzone na podstawie licencji komercyjnych, podczas gdy bezpłatni użytkownicy muszą „przypisać ElevenLabs, umieszczając w tytule „elevenlabs.io”. Użytkownicy ElevenLabs mają limit znaków podczas pisania podpowiedzi, przy czym bezpłatni użytkownicy otrzymują 10 000 znaków miesięcznie. Jeśli chodzi o efekty dźwiękowe, ElevenLabs na swojej stronie FAQ podaje, że jeśli użytkownicy sami ustawią czas trwania klipu audio, zajmie to 40 znaków na sekundę. Jeśli użyjesz domyślnego czasu trwania dźwięku, zostanie naliczona opłata w wysokości 200 znaków za każde szybkie wybieranie.
Biblioteki klipów z efektami dźwiękowymi są już dostępne na rynku dla twórców, filmowców i twórców gier wideo. Ale czasami mogą być one drogie lub powodować problemy z wyświetlaniem odpowiedniego rodzaju dźwięku. ElevenLabs twierdzi w swoim poście na blogu, że zaprojektowało efekty dźwiękowe, aby „tworzyć bogate, wciągające klipy audio szybko, niedrogo i na dużą skalę”.
Inni twórcy sztucznej inteligencji również opracowują własne generatory zamiany tekstu na mowę. W zeszłym roku Stability AI wypuściło Stable Audio, które tworzy klipy audio z muzyki i efektów dźwiękowych, a modele Meta AudioCraft generują naturalny dźwięk (przypuśćmy, że szum tła przypomina wiatr lub ruch uliczny).