Semantic Scholar에이전트기법중요도 8Annual Meeting of the Association for Computational Linguistics4개월 전

강화학습으로 CAD 도구 사용 에이전트를 학습하는 텍스트-to-CAD 프레임워크

TOOLCAD: Exploring Tool-Using Large Language Models in Text-to-CAD Generation with Reinforcement Learning

Yifei Gong, Xing Wu, Wenda Liu, Kang Tu

인용 2인기 4.8

AI 분석

텍스트 설명을 받아 전문적인 3D CAD 모델을 자동으로 생성하는, 도구를 사용하는 LLM 에이전트를 강화학습으로 훈련하는 프레임워크입니다.

CAD 모델링은 장기적 추론과 일련의 모델링 액션을 필요로 하는 전문 작업입니다. 현재까지 LLM이 CAD 엔진과 최적으로 상호작용하는 방법에 대한 연구가 부족하여, LLM 기반의 텍스트-to-CAD 모델링 시스템 개발이 지연되고 있습니다.

ToolCAD 프레임워크: LLM을 CAD 엔진과 상호작용하는 도구 사용 에이전트로 배치하는 새로운 에이전틱 프레임워크를 제안합니다.

인터랙티브 CAD 모델링 환경: CAD 엔진과의 추론 및 도구 강화 상호작용 트래젝션을 생성할 수 있는 시뮬레이션 환경을 구축하고, 하이브리드 피드백과 인간 감독을 통합합니다.

강화학습 기반 학습 전략: 온라인 커리큘럼 강화학습을 통해 LLM 에이전트가 정제된 CAD 모델링 사고 체인(CAD-CoT)을 유도하고 숙련된 CAD 도구 사용 에이전트로 발전하도록 하는 종단간 사후 학습 전략을 제시합니다.

오픈소스 LLM을 CAD 도구 사용 에이전트로 채택하고 훈련하는 데存在的한 격차를 메웁니다.

제안된 방법을 통해 오픈소스 LLM이 상용 모델에 필적하는 성능을 달성할 수 있음을 입증합니다.

보다 접근 가능하고 강건한 자율 텍스트-to-CAD 모델링 시스템의 발전을 위한 기반을 마련합니다.