CADMAGEDDON: 로컬에서 실행되는 메시를 편집 가능한 CAD로 변환하는 에이전트

모스크바 국립대학교 등 팀의 오픈소스 에이전트: 메시(STL, OBJ, PLY, OFF)를 입력받아 편집 가능한 CAD 프로그램을 출력합니다. 이 에이전트는 재구성을 일련의 단순한 시각적 결정(어떤 평면을 자를지, 어떤 피처를 만들지, 다음에 어디를 수정할지)으로 분해하며, 시각 언어 모델(논문에서는 Qwen3.8-27B 사용)이 렌더링된 이미지와 지오메트리 도구의 출력을 보고 결정을 내립니다. 측정 및 피팅은 도구에 맡기고, 모델은 사용할 지오메트리 엔티티만 지정하며 메시 파일이나 정답은 볼 수 없습니다. 저자들은 모든 주요 벤치마크에서 재구성 품질이 기존 방법들, 특히 최첨단 모델 기반 시스템을 포함하여 모두 능가한다고 주장합니다. CadQuery(기본값)와 FreeCAD 두 가지 백엔드를 지원하며, FreeCAD 버전은 PartDesign 피처 트리를 직접 생성합니다.

원제: CADMAGEDDON: High-Fidelity CAD Reconstruction with Local Inference

모스크바 국립대학교 등 팀의 오픈소스 에이전트: 메시(STL, OBJ, PLY, OFF)를 입력받아 편집 가능한 CAD 프로그램을 출력합니다. 이 에이전트는 재구성을 일련의 단순한 시각적 결정(어떤 평면을 자를지, 어떤 피처를 만들지, 다음에 어디를 수정할지)으로 분해하며, 시각 언어 모델(논문에서는 Qwen3.8-27B 사용)이 렌더링된 이미지와 지오메트리 도구의 출력을 보고 결정을 내립니다. 측정 및 피팅은 도구에 맡기고, 모델은 사용할 지오메트리 엔티티만 지정하며 메시 파일이나 정답은 볼 수 없습니다. 저자들은 모든 주요 벤치마크에서 재구성 품질이 기존 방법들, 특히 최첨단 모델 기반 시스템을 포함하여 모두 능가한다고 주장합니다. CadQuery(기본값)와 FreeCAD 두 가지 백엔드를 지원하며, FreeCAD 버전은 PartDesign 피처 트리를 직접 생성합니다.

왜 중요한가 부품을 외부 서비스로 전송할 필요 없이 단일 GPU에서 로컬로 실행할 수 있습니다. 저자들은 중간 규모의 오픈소스 모델을 사용했을 때, 최첨단 모델 기반의 기존 방법보다 재구성 품질이 우수하다고 주장합니다.

좋아요 8 · 코드 스타 수 4

이유

  • 초록에 따르면 단일 GPU 머신 및 현재 세대 노트북에서 실행 가능하다고 명시되어 있습니다. README에 따르면 Qwen3.8-27B의 FP8 가중치는 약 30 GB로, 48 GB 그래픽 카드에 적합하며, OpenAI 호환 인터페이스로 교체할 수도 있습니다.
  • 종료 조건이 명확합니다: 입력 메시와의 잔차(누락 및 초과 부피)가 0이 되거나, 잔차가 더 이상 감소하지 않을 때 모델이 스스로 멈춥니다. 각 부품에 대해 전체 대화 로그, 렌더링된 이미지, 프로그램 및 내보낸 STL 파일이 남습니다.
  • 평가 스크립트가 포함되어 있어 IoU, GMS, Chamfer 거리 및 비효율성을 계산할 수 있으며, 다른 방법의 STL 결과에도 점수를 매길 수 있습니다.

사용법

  • 코드: https://github.com/kulibinai/cadmageddon(MIT);conda env create -f environment.yml를 사용하여 CadQuery 환경을 설치하고, FreeCAD 백엔드는 별도로 freecad/environment.yml(FreeCAD 1.1.3)를 사용합니다.
  • 먼저 serving/serve_vllm.sh를 실행하여 vLLM 서비스로 Qwen/Qwen3.8-27B-FP8을 서빙한 후, python agent_run.py --mesh part.stl --out runs/ --base-url http://127.0.0.1:8000/v1 --model Qwen3.8-27B를 실행합니다. --backend freecad를 추가하면 .FCStd 파일이 출력되며, --mesh를 디렉토리로 지정하고 --jobs 8을 추가하면 배치 처리가 가능합니다.
  • 기본값은 논문 설정을 따릅니다: 온도 0.2, 각 응답당 15k 토큰, 컨텍스트 예산 250k, 최대 30회 도구 호출(--max-calls로 조정 가능), --attempts를 사용하여 완료되지 않은 부품을 재시도할 수 있습니다.

리스크

  • 초록에는 구체적인 점수가 제공되지 않았으며, '최첨단 모델 기반 솔루션을 능가한다'는 것은 저자의 보고 사항입니다. 본 항목은 실행되지 않았습니다.
  • Linux 또는 macOS, Python 3.11이 필요합니다. 헤드리스 Linux 환경에서는 PYVISTA_OFF_SCREEN=true를 설정해야 하며, 필요 시 xvfb-run을 사용하십시오.
  • 온라인 모델 인터페이스로 전환할 경우 호출 비용은 사용자가 부담하며, 부품 데이터가 해당 서비스로 전송됩니다.

열기 · 코드 · 논문 페이지

Hugging Face Daily Papers

최신 AI 소식 보기