Luma rozszerza wideo Dream Machine AI na platformę, aplikację mobilną

Rywalizacja między start-upami a dużymi firmami, takimi jak Google i Meta, o wprowadzenie atrakcyjnych narzędzi do tworzenia filmów opartych na sztucznej inteligencji, weszła w nową fazę.

Napastnik AIStartup założony przez byłych pracowników Google i innych pracowników radykalnie rozszerza swój model wideo Dream Machine AI o nowy interfejs, aplikację mobilną i nowy podstawowy model generowania obrazów. Modelka Luma Photon łączy w sobie personalizację, wydajność i moc twórczą, aby przesuwać granice tworzenia obrazów i filmów.

Nowy Dream Machine, dostępny teraz w Internecie i na iOS, ma na celu połączenie prostoty i wyrafinowania na różnych urządzeniach wejściowych poprzez ujednolicony, intuicyjny interaktywny interfejs.

Dzięki ponad 25 milionom zarejestrowanych użytkowników od chwili premiery w czerwcu 2024 r. Dream Machine rozwija się jako usługa oparta na subskrypcji zarówno dla zwykłych twórców, jak i profesjonalistów z branż takich jak moda, marketing i produkcja filmowa.

„Stworzyliśmy Dream Machine jako partnera zajmującego się wizją wizualną, opartego na zupełnie nowym modelu obrazu o nazwie Luma Photon” – powiedział Amit Jain, dyrektor generalny i współzałożyciel Luma AI, podczas wywiadu wideo z VentureBeat. „Jest kreatywny, inteligentny i przeznaczony dla ludzi, którzy tworzą nasz świat – projektantów, twórców mody, mediów i rozrywki”.

Nowe podejście do kreacji wizualnej

Dream Machine ma na celu usunięcie złożoności tradycyjnie kojarzonej z narzędziami kreatywnymi. Użytkownicy mogą po prostu opisać swoje pomysły w języku naturalnym lub udostępnić obrazy referencyjne, które pomogą w pracy platformy. W przeciwieństwie do tradycyjnej, szybkiej inżynierii, która wymaga precyzyjnego i technicznego wkładu, Dream Machine jest zbudowany z myślą o intuicyjnych rozmowach.

„W przeciwieństwie do szybkiej inżynierii, gdzie trzeba dokładnie opracować określone polecenia, Dream Machine pozwala na interakcję z nią tak, jakbyś rozmawiał z osobą. Ten interaktywny interfejs sprawia, że ​​edycja i tworzenie są intuicyjne” – wyjaśnił Jain.

Nowe funkcje personalizacji platformy, w tym podpowiedzi wieloobrazowe i odniesienia do pojedynczych obrazów, umożliwiają użytkownikom urzeczywistnianie swoich wizji z większą dokładnością i szczegółowością. Na przykład projektanci mogą przesyłać tekstury, kolory i inne wskazówki wizualne, które będą wyznaczać kierunek działania systemu.

„Dzięki Dream Machine możesz nadać mu obrazy referencyjne – kolory, struktury lub tekstury – a on będzie inteligentnie łączyć i powtarzać, aż uzyskasz dokładnie to, czego chcesz. Jain powiedział, że jest to zmiana zasad gry dla projektantów i twórców.

Nowe tryby obejmują tryb burzy mózgów, który umożliwia użytkownikom stosowanie różnych efektów stylistycznych do zdjęć i filmów, a także tablice zawierające wiele zdjęć i filmów, które można udostępniać członkom zespołu i innym twórcom, oraz „Pigułki koncepcyjne”, które oferują wstępnie ustawione ujednolicony wygląd stylistyczny, który użytkownicy mogą zastosować do swoich wyników wideo i obrazów.

kolejne znaki z tego samego obrazu

Luma AI przewiduje przyszłość, w której tworzenie wizualizacji będzie tak intuicyjne i dostępne, jak pisanie tekstu. Dream Machine wypełnia tę lukę i sprawia, że ​​zaawansowane narzędzia generatora mogą być używane przez każdego, od hobbystów po profesjonalistów z branży.

„Dlaczego tworzenie obrazów i filmów miałoby być tak trudne, jak korzystanie z narzędzi Adobe? Wyobraź sobie, że gdyby tworzenie tekstu było tak trudne, nie byłoby rewolucji cyfrowej. Pomysł wizualny powinien być równie przystępny” – przekonywał Jain.

Poza dostępnością platforma oferuje niespotykane wcześniej możliwości tworzenia wideo. Użytkownicy mogą animować historię za pomocą kolejnych postaci pochodzących z tego samego obrazu, otwierając nowe drzwi do opowiadania historii.

„Teraz możesz stworzyć nieskończoną liczbę odmian danej osoby na podstawie jednego obrazu. Ta spójność pozwala na opowiedzenie całej historii w filmie za pomocą jednej postaci – coś, czego do tej pory nie było w produkcji wideo, powiedział Jain.

Nowy model tworzenia obrazu Photon

U podstaw tych udoskonaleń znajduje się najnowszy model firmy Image Foundation, Luma Photon, który generuje wysokiej jakości nieruchome obrazy na podstawie podpowiedzi tekstowych i zawiera „najnowocześniejszy” osadzony tekst, z czym wciąż borykają się inne modele tworzenia obrazów Aby zakończyć poprawnie.

Photon jest zbudowany w oparciu o architekturę Universal Transformer firmy Luma, która według Lumy jest do ośmiu razy szybsza i tańsza niż porównywalne modele.

Ta wydajność umożliwia szybkie iteracje bez utraty jakości, dzięki czemu idealnie nadaje się do zastosowań o wysokich wymaganiach.

„Nasz nowy model Photon to najbardziej kreatywny i spersonalizowany model dostępny obecnie. Optymalizuje w czasie rzeczywistym bez szkolenia, korzystając z zaawansowanej uniwersalnej architektury transformacji” – wyjaśnił Jain.

Programiści mogą także wykorzystać moc Photona poprzez interfejs API Luma AI, który obsługuje transformacje tekstu na obraz, tekstu na wideo i obrazu na wideo. API zapewnia prywatność danych użytkownika i zapewnia skalowalność produktów zbudowanych na jego platformie.

Nowy cennik członkostwa

Zaktualizowany Dream Machine jest oferowany w czterech poziomach cenowych:

• Hobbysta: 9,99 USD miesięcznie
• Odkrywcy: 29,99 USD miesięcznie
• Profesjonalny: 99,99 USD miesięcznie
• Przedsiębiorstwo: niestandardowe ceny dla większych zespołów

Warstwy te zapewniają elastyczność użytkownikom o różnych potrzebach, niezależnie od tego, czy tworzą projekty na potrzeby projektów osobistych, czy przedsiębiorstw komercyjnych.

Nowa era możliwości

Od założenia w 2021 r. Luma AI zebrała 80 milionów dolarów w postaci finansowania od inwestorów strategicznych, w tym Andreessen Horowitz, Amplify Partners, Matrix Partners, General Catalyst i South Park Commons.

Anjani Midha, komplementariusz w firmie Andreessen Horowitz, podkreśliła potencjał platformy dla branż energetycznych, począwszy od fotorealistycznego generowania wideo po interaktywne budowanie świata 3D.

W miarę ewolucji Dream Machine Luma AI wypełnia swoją misję polegającą na demokratyzacji kreatywności. „Maszyna snów to miejsce, w którym wyobrażasz sobie, co dzieje się w twoim umyśle. Jain doszedł do wniosku, że wykorzystuje zdolność sztucznej inteligencji do przetwarzania i upraszczania ogromnych ilości informacji, aby pomóc zrozumieć coraz bardziej złożony świat.

Dzięki połączeniu dostępności, personalizacji i najnowocześniejszej technologii Dream Machine na nowo zdefiniuje sposób, w jaki ludzie tworzą i dzielą się swoimi pomysłami w epoce cyfrowej.

Korekta: w tym artykule pierwotnie błędnie podano kwotę zebraną przez Luma AI i błędnie wymieniono Amazon jako inwestora. Od tego czasu artykuł został zaktualizowany, aby zawierał prawidłowe liczby i listę inwestorów.