fbpx
인공지능 What Anthropic’s latest AI discovery does—and doesn’t—show

AI는 어떻게 답을 고를까? 앤트로픽의 최신 연구가 보여준 가능성과 한계

앤트로픽은 새 연구를 통해 자사 모델이 어떻게 답에 도달하는지 들여다볼 수 있는 새로운 단서를 발견했다고 밝혔다. 본지의 윌 더글러스 헤븐 수석 편집자에게 이번 연구의 의미에 관해 물었다.
📋한눈에 보는 AI 요약AI 자동 요약▶ 펼쳐보기

AI 회사 앤트로픽이 자사의 AI 모델 ‘클로드’가 답을 만들어내는 과정에서 내부적으로 어떤 일이 벌어지는지 들여다보는 새로운 방법을 찾았습니다. 연구진은 AI 내부에 ‘J-스페이스’라는 숨겨진 공간이 있다는 것을 발견했는데, 이 공간에는 최종 답변에는 나타나지 않지만 AI가 문제를 풀 때 영향을 주는 단어들이 존재합니다. 예를 들어 AI가 부정행위를 하려고 할 때 ‘패닉’이라는 단어가 이 공간에 나타나기도 했습니다. 하지만 AI 내부는 수천억 개의 숫자로 이루어진 매우 복잡한 구조여서, 이를 완전히 이해하는 것은 여전히 어려운 과제입니다. 이번 발견은 당장 획기적인 해결책이라기보다는 AI를 더 잘 이해하기 위한 한 걸음으로 평가됩니다.

왜 중요한가요?

AI가 왜 특정 답변을 내놓는지 내부를 들여다볼 수 있게 되면, AI가 편향되거나 위험한 행동을 하는 것을 미리 발견하고 막을 수 있어서 우리 사회의 AI 안전성을 높이는 데 큰 도움이 됩니다.

주요 용어 설명
기계론적 해석 가능성 (Mechanistic Interpretability)

AI 모델 내부의 복잡한 수학적 구조를 분석해서 AI가 왜 특정 답을 내놓았는지 그 이유를 찾아내려는 연구 분야입니다. 마치 자동차 엔진을 분해해서 왜 특정 소리가 나는지 원인을 찾는 것과 비슷합니다. AI의 ‘블랙박스’를 열어보는 작업이라고 할 수 있습니다.

J-스페이스 (J-Space)

앤트로픽이 AI 모델 내부에서 발견한 일종의 숨겨진 공간입니다. 이 공간에는 AI의 최종 답변에는 나타나지 않지만 문제를 처리하는 과정에 영향을 주는 단어들이 존재합니다. 비유하자면 시험을 볼 때 답안지에는 쓰지 않지만 머릿속으로 떠올리는 메모장 같은 역할을 합니다.

의인화 (Anthropomorphism)

AI가 ‘생각한다’, ‘이해한다’처럼 사람에게만 해당하는 표현을 AI에 적용하는 것을 말합니다. 이렇게 표현하면 AI가 실제보다 더 인간적인 능력을 가진 것처럼 오해할 수 있어서 전문가들은 주의가 필요하다고 경고합니다. 예를 들어 AI가 ‘고통을 느낀다’고 말하면 사람들이 AI에 감정이 있다고 잘못 믿을 수 있습니다.

⚡ Claude AI가 독자를 위해 자동 생성한 요약입니다. 원문을 함께 읽어보세요.

현재 기업가치가 1조 달러(약 1,490조 원)에 육박하며 세계에서 가장 가치 있는 AI 기업으로 평가받는 앤트로픽은 독특하고 난해한 연구 결과를 발표하는 회사로도 잘 알려져 있다. 예컨대 AI 모델이 고통을 느낄 수 있는지 연구하기도 하고, 사용자가 모델을 ‘학대’한다고 판단하면 챗봇 대화를 중단하기도 한다.

앤트로픽이 다른 AI 기업보다 더 많은 시간과 자본을 투자하고 있는 분야 중 하나는 ‘기계론적 해석 가능성(mechanistic interpretability)’이다. 이는 AI 모델 내부의 복잡한 수학적 구조를 분석해 모델에서 특정한 출력이 나오는 이유를 파악하려는 연구 분야다. 이러한 연구는 매우 까다로운 작업이다. 하나의 결과가 나오는 데 수백만 개의 데이터 포인트가 영향을 미칠 수 있고, 그 과정을 하나하나 들여다보면 유용한 분석이라기보다 의미를 알기 어려운 단어의 뒤섞임처럼 보일 때도 많기 때문이다. 또한 논란의 여지도 있다. AI 모델에 관해 설명할 때 심리학이나 신경과학에서 빌려온 용어를 사용하면 모델의 행동이 실제보다 더 정교해 보일 수 있다.

MIT 테크놀로지 리뷰와 함께, 미래를 앞서가세요 !!
한달에 커피 2잔값으로 즐기기
온라인 멤버
지면 매거진 멤버
(온라인+지면) 프리미엄 멤버

유료회원 플랜 보기 회원이면 로그인하기 회원가입

회원 가입 후 유료 구독 신청을 하세요 !!