Mesin pengedit video AI yang membuat video pendek, Reels, dan video YouTube dari informasi buku
Saya sedang membangun studio buku sederhana yang menggunakan LLM untuk mengambil informasi buku dan menghasilkan video pendek, Reels, dan video YouTube. Cara kerjanya adalah dengan membuat kartu berita dan menghasilkan video. Keunggulannya adalah buku dapat diputar 3D sehingga Anda dapat membuatnya meskipun tidak ada bahan video.
Selain itu, saya telah merancang agar templat desain gerak yang dibuat oleh orang A dapat digunakan oleh orang B. Karena gaya yang sama dihasilkan, ini menghemat waktu. LLM yang saya gunakan adalah Gemma4 E4B. Hasilnya akan jauh lebih baik jika menggunakan API lain, tetapi saya memanfaatkan salah satu dari tiga komputer yang sedang tidak digunakan untuk membuat gerbang llm saat komputer dinyalakan.
Proyek ini memungkinkan video yang dibuat secara otomatis di situs web untuk langsung diekspor ke program pengeditan profesional seperti Aftereffect, Premiere · FCP7 XML, After Effects · JSX, buku 3D · OBJ + MTL, dan CapCut
Anda juga dapat menyimpan dan menggunakan kembali templat desain gerak, atau bahkan menjualnya kepada orang lain. (Meskipun saat ini belum ada cara pembayaran).
Proyek CapCut · draft ZIP (manual) memungkinkan Anda untuk menyimpan proyek dan mengeditnya di program profesional. Supertonic 3 juga terintegrasi untuk sintesis suara dan berjalan di docker. Saya awalnya membuat versi instalasi untuk Mac dan Windows, tetapi saya memutuskan untuk fokus pada pengembangan online.
Tautan di bawah memungkinkan Anda untuk mencobanya. Klik "Load" untuk melihat contoh yang saya buat. Anda juga dapat mencoba membuat dengan fitur "Load Book". (LLM bekerja dengan baik saat dalam kondisi optimal, tetapi terkadang mungkin membutuhkan waktu lebih lama jika menggunakan qwen 2.5)
Proyek ini awalnya dibuat untuk acara penerbit sehingga masih dalam tahap pengembangan. Saya sedang mempertimbangkan apakah AI hanya akan menjadi hobi belaka.
Setelah membuat JSON dan YAML dan meminta Claudecowork untuk mengonversinya ke Canva, saya menyadari bahwa prosesnya memakan waktu lama dan menghasilkan hasil yang buruk. Oleh karena itu, saya berencana untuk mencari solusi lain dengan memasukkannya langsung ke Canva.
Mungkin masalahnya berasal dari model 3D buatan saya ^^
