rea-video: 영상 한 편이 어떻게 만들어지는지 컷 단위로 분석

Claude Code, Codex 등 에이전트를 위한 영상 분석 도구: 영상을 컷으로 분할하고 보컬, 음악, 효과음을 분리한 후, 프레임 리듬, 센서 노이즈, 메타데이터의 AIGC 태그 및 화면 디테일을 바탕으로 각 컷이 실사 촬영인지, AI 생성인지, 디지털 휴먼인지, 3D인지, 아니면 코드 애니메이션인지 판별합니다. 자막 스타일과 타임라인, 편집 리듬, 배경 음악 BPM, 효과음 위치, 그리고 '무엇을 촬영할지, 무엇을 생성할지, 어떤 코드를 작성할지'에 대한 재현 방안 및 report.html을 출력합니다. Gemini, Doubao 등 비전 모델 연동 시 각 컷에 대한 프롬프트를 역추적하여 생성합니다.

원제: JuneYaooo/rea-video

Claude Code, Codex 등 에이전트를 위한 영상 분석 도구: 영상을 컷으로 분할하고 보컬, 음악, 효과음을 분리한 후, 프레임 리듬, 센서 노이즈, 메타데이터의 AIGC 태그 및 화면 디테일을 바탕으로 각 컷이 실사 촬영인지, AI 생성인지, 디지털 휴먼인지, 3D인지, 아니면 코드 애니메이션인지 판별합니다. 자막 스타일과 타임라인, 편집 리듬, 배경 음악 BPM, 효과음 위치, 그리고 '무엇을 촬영할지, 무엇을 생성할지, 어떤 코드를 작성할지'에 대한 재현 방안 및 report.html을 출력합니다. Gemini, Doubao 등 비전 모델 연동 시 각 컷에 대한 프롬프트를 역추적하여 생성합니다.

왜 중요한가 광고 재현이나 숏폼 콘텐츠 주제 선정 시, 무엇을 촬영해야 하고 무엇을 생성할 수 있으며 무엇을 코드로 구현할 수 있는지 먼저 파악하여 불필요한 시행착오를 줄일 수 있습니다.

스타 수 2091 (+1184 / 24시간)

이유

  • 24시간 동안 스타 1184개 증가, 총 스타 수 2091개(관심도만 반영).
  • 신규 저장소가 짧은 시간 내에 스타 수가 급증하여 '관찰 필요'로 분류.

사용법

  • ffmpeg 및 Python 3.10 이상 필요; 에이전트에게 '이 저장소를 설치하고 특정 영상을 분석해줘'라고 지시하면 됨
  • 선택 사항: 에이전트에 영상 입력을 지원하는 모델 인터페이스를 제공하면 판별 정확도 향상

리스크

  • README의 정확도는 저자가 자체 구축한 테스트셋 기준; 플랫폼에서 다운로드한 영상은 2차 압축을 거치므로 로컬 도구만으로 판단할 경우 정확도가 저하됨
  • 상세 문서는 현재 주로 중국어로 작성됨; 신규 저장소로, 스타 수 증가는 관심도만 반영

열기

GitHub

최신 AI 소식 보기