Luma Labs, perusahaan AI yang dikenal karena menciptakan model 3D generatif Genie, kini telah merambah teknologi video bertenaga AI dengan penawaran barunya, Dream Machine — dan pengguna media sosial sangat memuji hal tersebut. Di antara beberapa pembuat video AI baru yang ada, ia bersaing langsung dengan alat Sora OpenAI yang akan datang.

Apa itu Luma AI?

Luma AI adalah platform tempat pengguna dapat membuat model 3D menggunakan input teks, gambar, atau video. Alat ini membantu para profesional seperti di bidang arsitektur, desain produk, pembuatan konten, serta penelitian dan pengembangan, memimpikan konsep-konsep abstrak. Perusahaan menyederhanakan proses mengekspor pekerjaan di berbagai platform.

Model 3D juga memajukan aktivitas meta seperti game, realitas virtual, dan e-commerce dengan menyederhanakan pembuatan ruang online 3D.

Dikembangkan oleh LumaLabs di San Francisco, California, Luma AI menggunakan pengetahuan pembelajaran mesin, augmented reality, dan fotografi 3D untuk menggabungkan AI dengan bidang pemodelan 3D.

Menggunakan teknologi Neural Radiance Fields (NeRF) untuk mengubah gambar dan video yang diambil oleh ponsel cerdas menjadi model 3D yang sangat realistis, NeRF mengubah pemandangan dan objek biasa dengan menambahkan elemen realisme ke dalamnya.

Salah satu pendiri dan CEO Amit Jain, yang sebelumnya merupakan bagian dari Apple Vision Pro dan tim visi komputer Apple, saat ini memimpin tugas tersebut.

Di antara berbagai gadget, Mesin Impian adalah kontribusi baru perusahaan, model AI yang dirancang untuk menghasilkan video realistis dan berkualitas tinggi dari teks dan gambar. Sejauh ini menghasilkan visual yang akurat, konsisten, dan dinamis. Alat ini bergerak menuju penciptaan mesin imajinasi universal dan kini dapat diakses oleh semua orang.

Dalam pernyataan mereka halaman blogLuma Labs berkata: “Kami telah membangun Dream Machine pada arsitektur transformator multimodal yang skalabel, efisien, dan multimodal serta melatihnya langsung melalui video.”

Mereka mendeskripsikan alat tersebut sebagai “mesin imajinasi”, yaitu “kita menemukan kegembiraan dan tujuan dalam menciptakan sesuatu. Di Luma kami membangun sistem AI umum yang akan membantu orang membuat hal-hal indah, kuat, dan kreatif yang tidak dapat diakses atau tidak mungkin dilakukan.”

Bagaimana reaksi orang-orang terhadap Dream Machine?

Peluncuran Dream Machine mengalami lonjakan permintaan sehingga Luma Labs harus menerapkan sistem antrian setelah server mereka kewalahan.

Video-video awal dari pengguna yang sebelumnya memiliki akses ke Dream Machine yang diposting di media sosial sangat halus, sehingga tampak terlalu bagus untuk menjadi kenyataan seolah-olah hanya hasil terbaik yang dipilih.

Bidang pembuatan teks-ke-video sangat kompetitif, dengan pemain kunci seperti Sora dari OpenAI dan LTX Studio dari Lightricks, keduanya menyediakan video yang layak.

Startup lain yang melakukan hal serupa termasuk Pika Labs Inc. dan Runway Inc., keduanya fokus menghasilkan konten video dari teks.

Cara menggunakan Mesin Impian Luma AI

Untuk memanfaatkan alat ini sebaik-baiknya, pengguna harus mengetikkan perintah yang sangat detail, lebih dari saat menggunakan alat seperti ChatGPT. Misalnya, menulis “sapi yang sedang merumput bergerak perlahan melintasi padang rumput yang indah, kamera melacak di samping mereka dalam gerakan sudut samping yang halus” dapat membuat klip video berdurasi lima detik yang sangat realistis yang menunjukkan skenario tersebut dengan tepat, menurut perusahaan.

Dream Machine seharusnya dapat membuat video seperti itu hanya dalam waktu dua menit, katanya.

ReadWrite mengujinya, dan memberikan beberapa hasil menarik. Kami menggunakan perintah: “Urutan mimpi seorang wanita berjalan mendaki gunung berubah menjadi elang dan terbang menjauh”

Meskipun awalnya cukup akurat, ia melakukan sesuatu yang aneh dengan membuat tiruan dirinya yang menunjukkan dua wanita berbeda – satu berdiri dan yang lainnya terbang menjauh.

Perintah kedua kurang berhasil: “Urutan Sepeda Motor Sport yang Dikendarai di Route 66 di AS, Berubah Menjadi Elang”

Alih-alih pengendara sepeda motor berubah menjadi elang, ia justru malah melaju ke samping, mengalami kecelakaan kecil sementara seekor burung terbang sembarangan. Apa yang kami temukan adalah teks petunjuknya harus agak spesifik untuk hasil terbaik.

Pada pengujian terakhir, kami menggunakan perintah yang disarankan oleh Dream Machine itu sendiri: “Seorang wanita tua tertawa di bawah air, mengenakan pakaian selam, ekspresinya menunjukkan ketenangan dan kebahagiaan”

Rekomendasinya sendiri cukup berhasil. Meskipun kami tidak dapat memperbesar untuk melihat mata miring seperti yang terlihat pada banyak gambar AI, tampilannya terlihat sangat realistis.

Apakah Mesin Impian Luma AI gratis?

Seperti disebutkan, siapa pun yang tertarik dapat menggunakannya, tetapi Anda harus mendaftar akun menggunakan email Anda. Setelah terdaftar, Anda berhak mendapatkan 30 generasi per bulan dengan paket gratis. Paket yang lebih mahal menawarkan hingga 2.000 generasi per bulan seharga $499.

Saat ini, permintaan layanan ini tinggi, yang mungkin membatasi aksesibilitas. Situs web Dream Machine menampilkan peringatan yang menyatakan, “Generasi memerlukan waktu 120 detik. Namun, karena permintaan yang sangat tinggi, permintaan Anda akan diantri.” Mampu membuat 30 video gratis memang berguna, terutama karena kebanyakan orang mungkin tidak memerlukan lebih dari itu untuk keperluan pribadi.

Salah satu manfaat terbesar Dream Machine adalah kerangka kerja sumber terbukanya, berkat Luma AI. Sebaliknya, Sora OpenAI, meskipun mengesankan, hanya tersedia untuk audiens uji tertentu, dengan petunjuk dari perusahaan bahwa fitur unggulannya akan eksklusif untuk pelanggan berbayar, mirip dengan model ChatGPT-nya.

Dream Machine, di sisi lain, saat ini dapat diakses oleh siapa saja yang tertarik untuk mengeksplorasi kemampuannya. Ke depan, Luma AI berencana merilis berbagai API dan plugin yang memungkinkan integrasi dengan perangkat lunak kreatif, termasuk Adobe.

Gambar unggulan: Luma Labs / Canva



Fuente

RELATED ARTICLESMORE FROM AUTHOR