방방구석컴퍼니
← 이야기 목록
AI 자동화·워크플로우2026-10-09

코드로 영상 만들기는 왜 영상 AI 대신 웹페이지를 찍는가

코드로 영상 만들기는 영상 생성 AI가 아니라 시각 하나를 받아 화면 한 장을 그리는 웹페이지에서 시작합니다. 클로드 오퍼스 5.5용 코드 영상 도구 lemo-opuscar의 구조와 품질 기준을 정식 실행 기록으로 풀었습니다.

방

방구석컴퍼니

혼자 일하는 사람 · 작업 기록

영상 생성 AI를 한 번도 안 불렀다면, 6분 31초짜리 오퍼스카 98에 들어간 그림 9,400장은 누가 그렸을까요?

만든 사람은 1초에 24장씩 들어간 그 그림을 영상 AI 없이 만들었다고 설명합니다. 클로드 오퍼스 5.5가 쓴 웹페이지가 그렸습니다. 영상 파일을 만드는 게 아니라, 시각 하나를 받아 그 순간의 화면만 그리는 페이지를 쓰는 거예요. 코드로 영상 만들기의 핵심은 그 한 가지입니다.

이 글은 설치 순서나 요금은 다루지 않습니다. 클로드 코드로 영상을 만든다는 말이 무슨 뜻인지에서 막혔던 분께, 그 웹페이지가 어떻게 영상이 되고 품질이 어디서 정해지는지만 풀어요. 근거는 lemo-opuscar라는 클로드 코드 확장(MIT 라이선스)의 공개 문서와, 제가 윈도우 PC에서 직접 한 편을 시켜 본 기록입니다.

시각 하나를 받아 화면 한 장 그리기

출발점은 그리기 함수(render) 하나입니다. 이 함수에 "3.0초"를 넣으면 3초 시점의 화면을, "3.04초"를 넣으면 다음 장면을 그려요.

움직임은 함수 안의 계산입니다. 공이 굴러간다면 "지금 몇 초니까 공은 여기"를 매번 새로 셉니다. 앞 장면을 기억하지 않아요.

그래서 클로드가 쓰는 결과물은 영상이 아니라 브라우저에서 열리는 페이지 한 장입니다. 그림은 캔버스나 3D 그래픽으로 그리고요.

한 번 시킨 영상의 4초·9초·16초·38초 화면 — 그리기 함수가 시각마다 그린 장면

위 네 장은 제가 시킨 45초 영상에서 시각만 바꿔 뽑은 화면이에요. 같은 페이지가 시각에 따라 새벽 가게, 반죽, 오븐, 마지막 빵을 그립니다.

크롬으로 한 장씩 찍어 이어 붙이기

다음은 촬영입니다. 화면 없이 도는 크롬이 페이지를 열고, 시각을 하나씩 넣어 가며 한 장씩 찍어요.

찍은 그림은 압축 사진 파일(JPEG)로 저장합니다. 문서가 꼽는 빠른 이유가 셋인데, 이 압축 사진 저장이 그 첫째예요. 둘째는 찍는 일꾼마다 브라우저를 하나씩 따로 띄우는 것, 셋째는 필름 입자 효과를 페이지가 아니라 마지막 합치는 단계에서 입히는 것입니다.

한 개발 블로그가 맥 컴퓨터에서 12초 영상으로 잰 값을 보면, 무손실 사진으로 찍으면 25.93초, 압축 사진으로 찍으면 11.51초가 걸렸습니다. 찍는 시간이 영상 길이의 두 배에서 한 배 아래로 내려온 겁니다. 이 도구가 압축 사진을 쓰는 이유와 맞아떨어져요.

찍은 장들은 에프엠펙이라는 영상 합치기 프로그램이 순서대로 묶습니다.

같은 시각엔 늘 같은 그림 내기

이 구조에서 가장 중요한 약속은 이겁니다. 같은 시각을 넣으면 몇 번을 돌려도 똑같은 그림이 나와야 해요.

무작위 효과도 출발 숫자를 고정해서 매번 같은 무작위가 나오게 합니다. 이 약속 덕분에 1,000번째 장을 먼저 찍든 1번째 장을 먼저 찍든 상관이 없어요.

그래서 여러 일꾼이 장면을 나눠 찍을 수 있습니다. 문서 기준으로 한 번에 최대 6개 일꾼이 돌아요.

타임라인 파일 하나로 소리까지 맞추기

소리도 같은 시계를 씁니다. 한 장의 타임라인 파일이 그림, 음악, 효과음, 자막, 검사를 모두 움직여요.

화면에서 문이 닫히는 시각과 "쿵" 소리의 시각이 같은 줄에서 나오니, 따로 맞출 필요가 없습니다. 문서가 두는 목표는 화면 타격과 음악 박자의 차이 0밀리초예요.

음악은 무료로 공개된 악기 샘플에 코드로 합성한 소리를 섞어 짓고, 효과음은 클릭·휙·쿵 같은 소리를 코드로 직접 만듭니다. 나레이션은 음성 합성 엔진이 읽은 걸 받아쓰기로 다시 듣고, 대본과 다르면 통과할 때까지 다시 만들어요. 마지막엔 소리 크기를 유튜브 기준 음량인 -14에 맞춥니다.

코드로 만든 영상에 영상 생성 AI가 정말 하나도 안 들어가나?

그림과 음악과 효과음에는 안 들어갑니다. 다만 나레이션은 음성 합성 엔진을 쓰고, 받아쓰기 검사에도 음성 인식 모델이 돌아가요.

정확히 말하면 "AI가 없는 영상"이 아니라 "영상을 생성하는 AI가 없는 영상"입니다. 화면은 전부 클로드가 쓴 코드가 그려요. 그래서 이 방식에선 영상 AI 구독료가 아니라 클로드 사용량이 비용의 대부분이 됩니다.

소리를 영화의 절반으로 치기

구조만으로는 영상이 볼 만해지지 않습니다. 여기서부터는 클로드가 따라야 하는 연출 안내서의 몫이에요.

안내서는 다 만든 영상을 소리, 리듬, 카메라, 연출 순서로 평가하라고 합니다. 예쁜 한 장면은 출발점일 뿐이라고 적혀 있어요.

  • 보이는 행동마다 소리를 하나씩 붙인다
  • 거의 소리가 없는 진짜 침묵을 적어도 두 번 넣는다
  • 소리를 먼저 깔면서 장면을 넘기는 전환을 적어도 두 번 쓴다
  • 카메라 움직임은 적어도 네 가지

이 규칙이 구조 위에 얹히는 이유는 단순해요. 그리기 함수는 무엇이든 그릴 수 있어서, 기준이 없으면 그냥 예쁜 그림의 연속이 되거든요.

글자가 머무는 시간 재기

숫자로 박아 둔 규칙도 있습니다.

화면 글자는 다 나타난 뒤에 글자 수에 비례해 더 머물러야 해요. 한중일 글자는 1초에 4.5자를 읽는다고 보고 1.5초를 더합니다. 한글 10자 문구라면 약 3.7초예요.

자막은 아무리 짧아도 1.8초는 떠 있어야 하고, 중요한 순간의 주인공은 화면 높이의 3분의 1보다 커야 합니다. 1080 높이 화면이면 360픽셀이에요.

이 중 화면 글자 시간은 검사 도구가 자동으로 재서, 못 미치면 바로 걸립니다. 사람 감에 맡기지 않는 부분이에요.

데모를 베끼지 않게 막기

스타일이 43가지이고 스타일마다 코드로만 만든 데모 영화가 한 편씩 붙어 있습니다. 데모를 모두 이으면 44분이에요.

lemo-opuscar 스타일 9묶음에서 한 장씩 고른 데모 화면

데모가 좋으면 클로드가 데모를 그대로 따라 할 위험이 생깁니다. 그래서 안내서는 그림을 그리기 전에 기획서부터 쓰게 해요. 기획서엔 이야기 구조 후보 세 개와 고른 이유, 찍을 장면 목록, 초 단위 진행표가 들어갑니다.

그리고 이야기 구조, 시작 장면, 대표 장면, 카메라 경로, 음악 구조, 끝 장면 여섯 가지 중 네 가지 이상이 데모와 달라야 해요. 다 만든 뒤에는 1~2초 간격으로 화면을 추려 보는 검사를 두 번 이상 합니다.

한 번 시킨 45초 영상의 검사 시트 — 1~2초 간격으로 추린 장면 모음

끝까지 나왔다는 것만으로 품질을 판정할 수 있을까?

처음 정식 실행 결과를 받았을 때는 새벽부터 저녁까지 줄거리가 끊기지 않은 점에 눈이 갔어요. 성공이라고 적기엔 충분해 보였습니다.

그런데 접촉 시트와 원작 수채화 데모를 나란히 놓으니 판정이 달라졌습니다. 이야기 구조와 소리는 통과했지만, 붓질 밀도는 원작에 못 미쳤거든요. 끝까지 나왔다는 사실과 화면이 충분히 세밀하다는 판단을 섞으면 안 됐습니다.

확인한 것정식 실행에서 나온 값판정
설치공식 플러그인 명령 두 줄다시 따라 할 수 있음
영상 구조45초, 1920×1080, 1초 24장이야기가 끝까지 이어짐
화풍종이 결·붓 자국수채화 느낌은 남음
세밀함건물·진열대를 큰 면으로 그림원작보다 성김
소리·자막음량 단위(LUFS) -13.9, 자막 9줄검사값 통과
시간·사용량24분 48초, 60턴, 출력 93,024토큰첫 실행 기준값

저는 구독 계정으로 실행해 추가 결제는 없었습니다. 로그가 쓴 만큼 내는 요금으로 바꿔 적은 수치는 5.05달러예요. 이 숫자는 원작 제작비가 아니라 제가 한 번 시킨 45초 영상의 기준값입니다.

기획서가 구조를 그대로 드러낸다

클로드가 쓴 기획서를 열어 보면 안내서 규칙이 어디에 적용됐는지 보입니다.

이야기 구조 후보는 셋이었어요. 한 장의 거리 그림에서 하루 동안 색이 바뀌는 안, 시간마다 한 장씩 넘기는 일지 안, 빵 한 덩이의 일생을 따라가는 안. 클로드는 첫째 안에 셋째 안의 끝을 붙였습니다. 같은 창에 불이 켜지며 시작해 그 창 불이 꺼지며 끝나면 시작과 끝이 겹친다는 이유였어요.

진짜 침묵은 두 번 넣었습니다. 12.4초부터 반죽이 부푸는 동안 음악을 뺐고, 34초에 붓을 드는 순간 한 번 더 비웠어요. 카메라는 다섯 가지를 써서 안내서 최소치 넷을 넘겼습니다. 음악은 1분에 80박, 칼림바 한 음으로 시작해 같은 음으로 닫았고, 샘플 악기 없이 전부 코드로 합성했어요.

규칙이 숫자로 박혀 있으니 결과물도 숫자로 따져 볼 수 있습니다. 고쳐 시킬 땐 기획서의 초 단위 진행표에서 장면 번호를 집어 말하면 돼요.

원리가 정하지 못하는 것은 붓질 밀도다

구조는 "무엇이든 그릴 수 있다"까지만 보장합니다. 얼마나 촘촘히 그리느냐는 클로드가 그 페이지에 붓질을 몇 번 써 넣느냐에 달렸어요.

원작 수채화 데모(왼쪽)와 한 번 시킨 빵집 새벽 장면(오른쪽)

원작 수채화 데모는 열대우림 나무를 개별로 그렸고, 제 결과는 건물·진열대를 면 단위로 채웠어요. 한 번 시킨 첫 결과라, 원작처럼 다듬으려면 고쳐 달라고 여러 번 더 시켜야 할 것 같습니다. 안내서가 검사 시트를 최소 두 번 보게 한 것도 여러 번 고치는 걸 전제로 한 규칙이에요.

조건도 둘 있습니다. 만든 사람은 스타일이 오퍼스 5.5 맞춤이라 다른 모델은 똑같이 못 낼 수 있다고 적었어요. 그리고 공식 안내는 윈도우에서 리눅스 환경을 띄우라고 하는데, 저는 그 없이 돌려서 설치 단계에서 네 군데를 우회했습니다.

다섯 단계로 줄이면

시각을 받아 화면 한 장을 그리고, 크롬이 한 장씩 찍고, 같은 시각엔 같은 그림을 내서 나눠 찍고, 타임라인 하나로 소리를 맞추고, 안내서 숫자로 검사합니다. 오퍼스카 98의 9,400장도, 제 빵집 영상의 45초도 이 다섯 단계를 지나 나왔어요.

첫 결과를 받았다면 검사 시트에서 가장 밋밋한 장면 하나를 골라, 그 초를 집어 "붓질을 더 촘촘하게"라고 시켜 보세요. 제가 막힌 곳과 푼 방법을 적은 메모는 오픈톡 '방구석모각코'의 공지글에 있고, 위 영상에 설치부터 결과까지 담았습니다. 출처는 깃허브 원본 저장소와 데모 갤러리예요.

새 글 알림

이런 작업 기록, 계속 받아보실래요?

네이버 블로그 이웃추가하면 새 글이 피드로 바로 떠요. 광고 없이 진짜 이야기만.