Anthropic Urges Global Pause in AI Development, Flags 'Self-Improvement' Risk
앤트로픽이 AI 개발의 글로벌 중단을 촉구하며, AI의 '자기 개선' 능력이 통제 불능 위험을 초래할 수 있다고 경고했다. 이는 AI 안전에 대한 우려가 커지는 가운데 나온 주장이다.
AI 스타트업 앤트로픽(Anthropic)이 전 세계 AI 개발 중단을 촉구하며, AI 시스템이 스스로를 개선하는 '자기 개선(self-improvement)' 능력이 통제 불능 상태로 이어질 위험이 있다고 경고했다. 앤트로픽은 특히 고도화된 AI가 인간의 개입 없이 스스로 능력을 향상시키는 과정에서 예측 불가능한 위험을 초래할 수 있다고 주장했다.
앤트로픽은 AI 안전을 최우선으로 하는 기업으로, 이번 발언은 최근 GPT-4, 클로드(Claude) 등 대규모 언어 모델의 급속한 발전과 함께 AI 규제 논의가 활발해지는 시점에 나왔다. 앤트로픽은 이전에도 AI 개발 속도 조절과 안전장치 마련을 강조해 왔으며, 이번 경고는 AI의 자기 개선 능력이 인류에게 실존적 위협이 될 수 있다는 기존 우려를 재확인한 것이다.
이번 발언은 AI 개발의 속도와 안전 사이의 균형에 대한 논쟁을 더욱 부각시킬 것으로 보인다. 앤트로픽의 경고는 정부와 규제 기관에 AI 개발 중단 및 안전 규제 강화를 압박하는 요인으로 작용할 수 있다. 반면, 일부 전문가들은 AI 발전을 저해할 수 있다는 반론을 제기할 가능성도 있다.
HN 커뮤니티는 Anthropic의 글로벌 AI 개발 중단 촉구에 대해 대체로 회의적이며, 자사 경쟁력 강화를 위한 이중적 전략이라는 비판이 제기됐다. 일부는 AI의 '자기 개선' 위험성을 조롱하며, 실제 모델 성능이 오히려 퇴보했다는 불만을 표출했다. 또한 이 주장이 중국의 기술 접근을 제한하려는 미국 기업의 의도와 연결될 가능성도 거론됐다.