FFmpeg를 쥔 코딩 에이전트, 엿새 만에 별 781개

영상 편집은 오랫동안 사람 손이 붙어 있어야 하는 일이었습니다. 자르고, 붙이고, 소리 크기를 맞추고, 자막을 얹는 일은 판단보다 반복에 가까운데도 그랬습니다. 도구가 사람의 눈과 손을 전제로 만들어져 있었기 때문입니다.

그 전제를 걷어내려는 시도가 지금 세 갈래로 나오고 있습니다. 하나는 이미 있는 영상을 에이전트가 만지게 하는 쪽, 하나는 영상을 코드로 짜서 굽는 쪽, 나머지 하나는 가진 소재를 골라 조립해 주는 쪽입니다.

엿새 만에 별 781개

kajisho5/ffmpeg-skill 은 2026년 9월 3일에 만들어진 저장소입니다. 9월 9일 기준으로 별 781개, 포크 49개를 받았습니다. 저장소가 스스로를 설명하는 한 줄은 이렇습니다. 공식

"Give your coding agent a video editor." (코딩 에이전트에게 영상 편집기를 쥐여 주세요.)

Claude Code, Cursor, Codex 에서 쓰는 Agent Skill 이고, 라이선스는 MIT 입니다. 공식

무엇을 쥐여 주는가

FFmpeg 는 영상 처리의 사실상 표준이지만, 옵션이 많고 실수하면 조용히 망가진 파일을 뱉습니다. ffmpeg-skill 이 하는 일은 그 명령줄을 타입이 붙은 파이썬 도구 39개로 감싸는 것입니다. 공식

설계에서 눈에 띄는 대목은 SPEC 패턴입니다. 도구의 스키마를 따로 관리하지 않고 각 스크립트의 argparse 에서 자동으로 뽑아냅니다. 문서와 코드가 따로 놀다가 어긋나는 일을 구조로 막은 것입니다. MCP 서버 인터페이스와 doctor 진단 도구도 함께 들어 있습니다. 공식

못 하는 것을 적어 둔 점

이 저장소에서 더 눈여겨볼 것은 하지 못하는 일을 문서에 적어 두었다는 점입니다. 공식

• GPU 가속이 없습니다. 하드웨어 검증을 마치지 못해 일부러 미뤄 두었다고 밝히고 있습니다.
• 립싱크와 피사체 추적이 없습니다. 시각적 판단은 이 스킬이 아니라 부르는 에이전트의 몫으로 남겨 두었습니다.

9월 8일에 나온 v0.12.5 의 릴리스 노트도 같은 태도로 쓰여 있습니다. 윈도우의 특정 FFmpeg 빌드에서 drawtext 가 글꼴을 이름으로 찾을 때 죽는 문제를 다루면서, doctor 는 "빠진 필수 항목 없음"이라고 통과시켰는데 실행에서 터졌다고 적었습니다. 사전 점검이 존재하는 이유가 바로 그 상황인데 그것을 놓쳤다는 뜻입니다. 네 개 도구가 이제 글꼴을 이름이 아니라 실제 파일 경로로 찾도록 고쳤습니다. 공식

코드로 영상을 짜는 쪽 — Remotion

ffmpeg-skill 이 있는 영상을 만진다면, Remotion 은 없는 영상을 만듭니다. React 컴포넌트를 화면이 아니라 영상 프레임으로 그려 내는 프레임워크입니다. 컴포넌트에 값을 넣어 같은 형식의 영상을 수백 개 찍어 내거나, 앱 안에서 영상을 즉석에서 만드는 식으로 씁니다. 공식

규모는 이 분야에서 가장 큽니다. 월 500만 회 npm 설치, GitHub 별 5만 8천 개, 기업 고객 300곳 이상이라고 밝히고 있습니다. 공식

여기도 에이전트 쪽으로 발을 뻗었습니다. 공식 문구가 "코딩 에이전트로 아이디어를 영상으로 바꾸세요"이고, Agent Skill 과 플러그인을 함께 내놓았습니다. 공식

라이선스는 반드시 확인하고 쓰셔야 합니다. 이름과 달리 오픈소스 라이선스가 아니라 자체 라이선스입니다. 공식

만들지 않고 고르는 쪽 — Hyperframe

세 번째는 방향이 아예 다릅니다. Hyperframe 은 새 화면을 만들지 않습니다. 회사가 이미 촬영해 두고 승인까지 끝낸 영상 더미에서, 대본에 맞는 장면을 골라 이어 붙입니다. 공식

스스로를 소개하는 한 줄은 이렇습니다. 공식

"Business video that's less of a production." (제작에 덜 시달리는 업무용 영상.)

합성 영상을 만들어 내지 않는다는 것이 이 서비스의 핵심 주장입니다. 대본과 보이스오버는 사람이 검수한 뒤에 나갑니다. 영업 제안, 고객 발표, 사내 공지처럼 매번 새로 찍을 수는 없는데 자주 필요한 영상이 대상입니다. 공식

가격은 좌석당이 아니라 건별 계약이고 공개된 요금표가 없습니다. 파일럿은 비용 없이 자기 영상으로 시험해 볼 수 있다고 안내합니다. 공식

셋을 가르는 축

세 도구를 한자리에 놓으면 공통점이 하나 보입니다. 어느 쪽도 생성 모델로 픽셀을 만들어 내지 않습니다. 요즘 "AI 영상"이라고 하면 프롬프트로 없던 장면을 뽑아내는 쪽을 먼저 떠올리게 되는데, 실무에서 실제로 돈과 시간을 아끼고 있는 자리는 그 반대편입니다. 결과가 정해져 있고 사람 손이 반복해서 들어가던 작업, 그러니까 편집과 합성입니다.

고를 때 볼 것

• 이미 찍어 둔 영상이 있는가. 있으면 편집 자동화(ffmpeg-skill)나 조립(Hyperframe) 쪽입니다. 없으면 Remotion 처럼 만들어 내는 쪽을 봐야 합니다.
• 같은 형식을 여러 개 찍어 내야 하는가. 값만 바꿔 수백 개를 뽑는 일은 코드 기반이 압도적으로 유리합니다.
• 조직 규모. Remotion 은 4인이 되는 순간 유료로 넘어갑니다. 팀이 커질 예정이라면 비용을 미리 셈해 두어야 합니다.
• 누가 쓸 것인가. 셋 중 둘은 개발자를 전제합니다. 업무 담당자가 직접 쓸 도구를 찾는다면 남는 선택지는 하나뿐입니다.