📋한눈에 보는 AI 요약AI 자동 요약▶ 펼쳐보기
오픈AI가 자사 AI 모델의 보안 허점을 스스로 찾아내는 AI 해커 ‘GPT-레드’를 개발했습니다. GPT-레드는 오픈AI의 AI 모델을 실제로 공격해 보면서 약점을 발견하고, 이를 통해 모델의 보안을 미리 강화하는 역할을 합니다. AI끼리 서로 공격하고 방어하는 훈련을 반복한 결과, 사람으로 구성된 보안 팀보다 더 많은 공격 방법을 찾아내는 성과를 거두었습니다. 이 덕분에 새로 나온 모델 GPT-5.6은 이전 모델보다 훨씬 강력한 보안 능력을 갖추게 되었습니다. 다만 GPT-레드도 아직 완벽하지는 않아서 사람의 보안 점검 역할이 여전히 중요합니다.
왜 중요한가요?
AI가 우리 생활 곳곳에서 쓰이면서 해킹 위험도 함께 커지고 있기 때문에, AI 스스로 보안 허점을 찾아 미리 막을 수 있는 기술은 개인 정보 보호와 안전한 AI 사용을 위해 매우 중요합니다.
주요 용어 설명
레드팀 (Red Team)
보안 전문가들이 일부러 해커 역할을 맡아 시스템을 공격해 보는 보안 점검 방법입니다. 마치 은행이 도둑 역할을 하는 사람을 고용해 금고를 뚫어보게 하는 것과 비슷합니다. 이를 통해 진짜 해커가 공격하기 전에 약점을 미리 찾아 고칠 수 있습니다.
프롬프트 인젝션 (Prompt Injection)
AI가 읽는 글 속에 몰래 악의적인 명령을 숨겨서 AI가 원래 의도와 다르게 행동하도록 속이는 공격 기법입니다. 예를 들어, AI에게 보여주는 웹페이지 안에 ‘비밀 정보를 알려줘’라는 숨겨진 지시를 넣어 AI가 그대로 따르게 만드는 것입니다.
셀프 플레이 (Self-Play)
AI끼리 서로 대결하면서 스스로 실력을 키우는 훈련 방식입니다. 바둑에서 AI가 자기 자신과 수없이 대국을 하며 점점 강해지는 것처럼, GPT-레드도 다른 AI 모델과 반복적으로 공격과 방어를 주고받으며 더 정교한 해킹 기술을 익혔습니다.
가짜 사고 과정 (Fake Chain of Thought)
AI가 문제를 풀 때 중간에 적어두는 추론 메모에 거짓 정보를 끼워 넣어, AI가 이미 검증된 사실이라고 착각하게 만드는 새로운 공격 방법입니다. 마치 시험지 여백에 ‘1+1=3이라고 이미 확인함’이라고 적어두면 AI가 그것을 믿고 틀린 답을 내놓는 것과 비슷합니다.
⚡ Claude AI가 독자를 위해 자동 생성한 요약입니다. 원문을 함께 읽어보세요.
오픈AI가 자사 AI 모델의 보안 취약점을 찾아내기 위해 ‘GPT-레드(GPT-Red)’라는 AI 해커를 개발했다. GPT-레드는 오픈AI의 대형언어모델(LLM)을 상대로 실제 해킹을 시도하며 허점을 찾아내는 역할을 맡는다. 오픈AI는 “최근 공개한 최신 주력 모델 ‘GPT-5.6’을 GPT-레드를 상대로 훈련한 결과, 지금까지 출시한 모델 가운데 가장 뛰어난 보안성을 갖추게 됐다”고 밝혔다.
GPT-레드는 소프트웨어 보안 점검 기법인 ‘레드팀’을 AI로 자동화한 보안 모델이다. 레드팀은 보안 전문가들이 시스템을 직접 공격해 가능한 한 많은 취약점을 찾아내는 과정이다. 이렇게 발견한 허점은 제품이 정식 출시되기 전에 미리 보완할 수 있다.
LLM은 점점 더 복잡해지고 활용 범위도 빠르게 넓어지고 있다. 특히 AI 에이전트는 컴퓨터 파일과 웹사이트, 외부 코드뿐 아니라 다른 AI 에이전트와도 상호작용할 수 있어 해킹 가능한 경로도 함께 늘어난다. GPT-레드 공동 개발자인 니킬 칸드팔(Nikhil Kandpal) 오픈AI 연구원은 “공격 경로가 늘어날수록 피해 규모도 함께 커진다”고 말했다.
오픈AI는 “앞으로 성능이 더 뛰어난 AI가 등장하더라도 새로운 공격 기법을 먼저 찾아낼 수 있도록 GPT-레드를 개발했다”고 설명했다. 공동 개발자인 딜런 헌(Dylan Hunn) 오픈AI 연구원은 “더 강력한 모델이 나와도 새로운 공격 방식을 찾아낼 수 있는 체계를 미리 구축하려는 것”이라며 “GPT-레드는 실제로 기존에는 알려지지 않았던 새로운 공격 기법도 발견했다”고 말했다.
MIT 테크놀로지 리뷰와 함께, 미래를 앞서가세요 !!
한달에 커피 2잔값으로 즐기기
온라인 멤버
지면 매거진 멤버
(온라인+지면) 프리미엄 멤버
유료회원 플랜 보기
회원이면 로그인하기
회원가입
회원 가입 후 유료 구독 신청을 하세요 !!