Skip to content
Tech

Video as Code: AI Agent Bikin Video Lewat Kode, Bukan Undian Prompt

Coding agent kini bikin video lewat kode lewat Remotion dan HyperFrames. Kenapa lebih bisa dikontrol, stack yang cocok, plus soal lisensi dan keamanan.
7 minutes to read
2 minggu lalu
Zainul Fanani
Video as Code: AI Agent Bikin Video Lewat Kode, Bukan Undian Prompt
📅 2 Nov 2026🤍0 👁 0 🔗 0

Ada pergeseran kecil yang menurut saya penting di dunia AI video.

Selama ini kalau orang bilang "AI bikin video", bayangannya model video: tulis prompt, tunggu, dapat klip. Kalau hasilnya jelek, prompt ulang. Kadang bagus, kadang aneh. Mirip undian.

Sekarang ada jalur lain yang makin ramai: coding agent menulis video sebagai kode. Bukan generate piksel, tapi menulis scene dalam HTML atau React, lalu engine me-render-nya frame demi frame jadi MP4.

Satu kalimat yang merangkum ini dengan pas datang dari post Francesco di X: "every frame is code, so every fix is one line. no re-rolling, no lottery."

Saya setuju. Dan buat yang suka automation, ini jalur yang jauh lebih masuk akal.

Video sebagai kode itu apa sih?

Konsepnya sederhana. Video = fungsi dari waktu.

Kamu tulis komponen visual (judul, chart, caption, transisi). Engine bertanya ke kode kamu: "di frame ke-120, layar harus kelihatan seperti apa?" Kode menjawab. Engine motret frame itu, lanjut ke frame berikutnya, lalu FFmpeg menyatukannya jadi video.

Karena setiap frame dihitung dari kode, hasilnya deterministik. Render dua kali, hasilnya sama. Ini beda total dengan model video yang tiap generate bisa beda.

Dua engine yang paling sering muncul:

  • Remotion: bikin video pakai React. Animasi dihitung dari nomor frame saat ini (useCurrentFrame()), jadi semua gerakan bisa dikontrol presisi.
  • HyperFrames dari HeyGen: tulis HTML, CSS, dan animasi yang bisa di-seek, lalu render jadi MP4. README-nya terang-terangan bilang "Built for agents".

Di sekitar dua engine itu ada motion layer seperti GSAP, Motion, dan Lottie, plus FFmpeg dan Whisper buat urusan audio, potong, dan caption.

Alur video as code: brief, agent menulis scene, engine render frame, review, revisi satu baris
Alur video as code: brief, agent menulis scene, engine render frame, review, revisi satu baris

Kenapa ini cocok banget untuk AI agent

Coding agent itu jago di satu hal: menulis dan mengedit teks terstruktur. Video sebagai kode mengubah pekerjaan editing jadi pekerjaan teks.

Ada tiga keuntungan yang buat saya paling terasa:

1. Revisi jadi murah. "Judulnya muncul 0,5 detik lebih cepat" itu cukup ganti satu angka. Di model video, revisi sekecil itu bisa berarti generate ulang seluruh klip.

2. Bisa di-review seperti kode. Ada diff, ada git history, ada rollback. Prinsip yang sama yang saya tulis di code review di era AI agent berlaku di sini: perubahan kecil, jelas, bisa dicek.

3. Bisa jadi template. Sekali scene "chart naik + caption + logo" jadi, ganti datanya saja untuk video berikutnya. Ini yang bikin video masuk ke wilayah automation, bukan cuma kreativitas.

Lesson: kalau output-nya bisa ditulis sebagai kode, agent bisa merawatnya. Kalau cuma bisa di-generate ulang, kamu yang jadi tukang undi.

Angka adopsinya nggak main-main

Saya cek langsung jumlah star GitHub repo-repo utama di stack ini lewat GitHub API hari ini (2 November 2026). Star bukan ukuran kualitas, tapi cukup buat lihat ke mana perhatian developer bergerak.

Jumlah star GitHub repo stack video as code per 2 November 2026
Jumlah star GitHub repo stack video as code per 2 November 2026

Yang menarik buat saya: HyperFrames baru dibuat Maret 2026, tapi star-nya (sekitar 77 ribu) sudah melewati Remotion (sekitar 70 ribu) yang repo-nya ada sejak 2020. Itu sinyal kuat bahwa "video yang dibuat oleh agent" sedang jadi kategori sendiri.

Dua-duanya juga sudah menyediakan skill khusus agent:

  • Remotion punya Remotion Agent Skills, dipasang dengan npx skills add remotion-dev/skills. Isinya skill seperti /remotion-create, /remotion-render, /remotion-captions, dan /remotion-maps.
  • HyperFrames punya core skill set (/hyperframes, /hyperframes-cli, /hyperframes-registry, /media-use). Menurut README-nya, skill ini mengajari agent loop produksi: plan, tulis HTML valid, pasang animasi, tambah media, lint, preview, render.

Artinya agent nggak lagi menebak-nebak API. Dia dikasih "manual kerja" yang ditulis pembuat engine-nya sendiri. Ini nyambung dengan yang saya bahas di harness engineering: model yang sama bisa jauh lebih bagus kalau harness dan instruksinya rapi.

Pilih stack sesuai pekerjaan

Ada rangkuman stack yang cukup praktis dari akun Salim di X. Saya rapikan jadi tabel dengan catatan saya sendiri:

Kalau saya mulai dari nol hari ini, saya pilih berdasarkan bahasa yang sudah dikuasai tim, bukan berdasarkan hype. Tim yang terbiasa React lebih enak di Remotion. Yang lebih nyaman HTML lebih enak di HyperFrames.

Sebenarnya visual di blog ini juga dibikin dengan prinsip yang mirip: HTML + JavaScript, di-render headless Chrome, lalu dicek ulang sebelum di-upload. Bedanya cuma gambar diam, bukan video.

Hal yang sering dilupakan: lisensi dan keamanan

Bagian ini jarang dibahas di thread viral, padahal penting kalau mau dipakai untuk bisnis.

Lisensi Remotion bukan MIT. Menurut LICENSE Remotion, penggunaan gratis (termasuk komersial) berlaku untuk individu, perusahaan for-profit sampai 3 karyawan, organisasi non-profit, dan tahap evaluasi. Di luar itu wajib company license. Kalau kantor kamu lebih dari 3 orang dan mau pakai untuk produksi, cek dulu.

HyperFrames memakai lisensi Apache-2.0 (sesuai repo-nya), jadi lebih longgar.

Skill itu kode pihak ketiga. Install skill = memasukkan instruksi orang lain ke agent kamu. Dari sisi security, ini sama seperti memasang MCP server. Saya sudah bahas risikonya di MCP tool poisoning. Prinsipnya: pakai sumber resmi, baca isinya, dan jangan kasih agent akses ke secret yang nggak dia butuhkan untuk render video.

Aset dan suara. Kode bisa deterministik, tapi aset yang kamu masukkan (musik, logo, voice clone) tetap punya hak cipta dan izin. Agent nggak tahu mana yang boleh dipakai kalau kamu nggak kasih tahu.

Workflow yang saya sarankan

Kalau mau coba, jangan langsung bikin "pabrik video otomatis 24/7". Mulai kecil:

  1. Satu format dulu. Misal video update mingguan 30 detik: judul, 3 poin, satu chart.
  2. Bikin manual sekali, bareng agent. Biarkan agent menulis scene, kamu yang review tiap revisi.
  3. Kunci jadi template. Pisahkan data (teks, angka) dari tampilan (scene).
  4. Baru otomatisasi input-nya. Data dari spreadsheet atau API masuk ke template, agent render, manusia approve sebelum publish.

Ini sejalan dengan prinsip yang saya pegang: automation yang belum terbukti manual cuma mempercepat noise. Video juga begitu.

Dulu saya pernah menulis soal pipeline AI video generation yang berbasis model generatif. Sekarang saya lebih condong ke pendekatan kode untuk konten yang butuh konsisten: data, edukasi, update produk. Model video tetap berguna untuk footage atau visual yang memang susah ditulis sebagai kode.

Penutup

Video as code bukan pengganti semua editor dan animator. Tapi untuk video yang strukturnya berulang, pendekatan ini mengubah AI dari mesin undian jadi rekan kerja yang bisa diarahkan, di-review, dan diulang.

Agent yang bagus bukan yang hasilnya kadang wow.

Agent yang bagus adalah yang hasilnya bisa kamu perbaiki dengan satu baris.

FAQ

Apa beda video as code dengan AI video generator?

AI video generator menghasilkan piksel langsung dari prompt, jadi hasilnya bisa berubah tiap generate. Video as code menulis scene sebagai HTML atau React, lalu engine me-render tiap frame secara deterministik, sehingga revisi bisa presisi.

Remotion atau HyperFrames, mana yang lebih bagus?

Tergantung tim. Remotion berbasis React dan sudah matang sejak 2020. HyperFrames berbasis HTML/CSS, lisensinya Apache-2.0, dan sejak awal dirancang untuk dipakai coding agent. Pilih yang paling dekat dengan skill tim kamu.

Apakah Remotion gratis untuk bisnis?

Gratis untuk individu, perusahaan for-profit sampai 3 karyawan, non-profit, dan evaluasi. Perusahaan for-profit yang lebih besar wajib membeli company license. Cek file LICENSE resminya sebelum dipakai produksi.

Perlu jago coding untuk mulai?

Nggak harus jago, tapi perlu bisa membaca hasil kerja agent dan menjalankan perintah dasar seperti npx. Node.js dan FFmpeg biasanya perlu terpasang (HyperFrames mensyaratkan Node.js 22+).

Apakah aman memasang skill pihak ketiga ke agent?

Perlakukan seperti memasang dependency atau MCP server. Pakai repo resmi, baca isi skill-nya, dan batasi akses agent ke secret serta sistem yang tidak terkait dengan render video.

Ada Pertanyaan? Yuk Ngobrol!

Butuh bantuan setup OpenClaw, konsultasi IT, atau mau diskusi project engineering? Book a call langsung — gratis.

Book a Call — Gratis

via Cal.com • WITA (UTC+8)

Newsletter

Subscribe to Newsletter

Artikel baru, automation notes, dan engineering insight. Clean inbox, no spam.

Dengan subscribe, kamu setuju menerima update seperlunya.

F
Zainul Fanani

Founder, Radian Group. Engineering & tech enthusiast.

Lihat profil lengkap →