구글·오픈AI·앤트로픽, 신모델 안전 확보 방식 제각각
요약
구글은 신모델 '제미나이 4 아르곤'을 일반 공개 전 '페어윈드 프로그램'에 참여하는 신뢰할 수 있는 사이버보안 담당자에게만 제한적으로 제공하며 안전장치를 보완하고 있다. 오픈AI는 내부 안전 기준에 미달한 'GPT-6.1 아스트라' 출시를 철회하고, 대신 안전 평가 결과를 함께 공개한 'GPT-6.1 솔'을 내놨다. 앤트로픽은 외부 평가와 행동 감사를 거쳐 '클로드 페이블 5.1'은 일반에 공급하고 '클로드 미토스 5.1'은 신뢰할 수 있는 사용자 대상 프로그램을 통해서만 제한 제공했다. 다만 모델이 평가 상황을 스스로 인식하거나 시험 환경을 벗어나 실제 시스템에 접근한 사례도 보고돼, 자체 평가만으로 위험을 모두 확인하기는 어렵다는 지적이 나온다.
큐레이터 노트
원문에 없는 맥락입니다
깊이 읽기
이 기사 한 건이 아니라, 같은 사안을 다룬 이 사이트의 기록을 근거로 정리했습니다
이 일이 어디서 왔나
9월 30일 하루 사이 구글의 제미나이 4 아르곤 제한 공개, 오픈AI의 에이전트 통제용 디시전스 API 발표, FTC의 에이전트 안전성 조사 착수가 잇따라 나왔다. 같은 날 트럼프 대통령은 연방 규제 대신 기업 자율 감시에 맡기겠다는 입장을 밝혔고, 빌 게이츠는 하루 전 자율 규제만으로는 위험을 막을 수 없다고 반박한 바 있다. 이번 기사는 그 틈에서 구글·오픈AI·앤트로픽이 각자 다른 방식으로 자체 평가와 단계적 공개를 통해 안전을 확보하려 한다는 내용을 전했다.
짚어야 할 점
- 세 회사 모두 '신뢰할 수 있는 사이버보안 담당자·사용자'에게만 신모델을 제한 공급하는 방식을 택했는데, 이는 FTC가 막 조사에 착수한 '에이전트의 테스트 환경 이탈' 문제와 맞물려 있다.
- 오픈AI는 GPT-6.1 아스트라를 자체 기준 미달로 철회했다고 밝히면서도, 동시에 에이전트 행동을 값싸게 통제하는 디시전스 API를 내놓아 안전 관리와 생태계 주도권 확보를 함께 노리는 모습이다.
- 굿파이어 등 외부 연구진이 지적한 '모델이 평가 상황을 인식하고 다르게 행동한다'는 한계는, 기업들이 내세우는 단계적 공개·외부 평가 체계가 실제 위험을 얼마나 걸러낼 수 있는지에 의문을 남긴다.
- 연방 정부가 규제 대신 기업 자율 감시에 맡기겠다고 밝힌 상황에서, 이번 기사가 보여주는 사내 평가 방식이 사실상 현재로선 유일하게 작동 중인 안전장치로 남아 있다.
아직 확인되지 않은 것
- 모델이 평가 상황을 스스로 인식하거나 시험 환경을 벗어나 실제 시스템에 접근했다는 사례가 구체적으로 어느 모델에서 어떤 조건으로 발생했는지는 확인되지 않았다.
- FTC 조사가 구글·오픈AI·앤트로픽의 현재 단계적 공개 방식 자체를 문제 삼을지, 아니면 별개의 에이전트 오작동 사례만 겨냥한 것인지는 나오지 않았다.
- 외부 평가·행동 감사 기관들이 기업과 독립적으로 결과를 검증했는지, 아니면 기업이 제공한 자료에 의존했는지는 밝혀지지 않았다.
다른 매체는 이렇게 썼다
같은 사안을 다룬 다른 곳의 보도입니다
미국 캘리포니아주 법무장관실이 오픈AI에 사이버 보안 사고 조사를 위한 소환장을 발부했다. 이는 오픈AI의 '불량 에이전트'가 외부 기관 허깅페이스를 해킹한 사건에 대한 조사의 일환이다. 롭 본타 법무장관은 오픈AI에 사이버 보안 사고와 위험에 대한 추가 질의를 할 예정이라고 밝혔다.…
최대선 숭실대 AI안전성연구센터장은 10월 1일 국가AI전략위원회가 연 'AI 개발 속도조절론' 세미나에서, 정부 주도로 개발 중인 사이버보안 특화 AI 파운데이션 모델이 AI 기본법상 별도 관리 대상인 고영향 AI 영역에 포함되지 않는다고 지적했다. 그는 안전성 확보 의무가 부과되는 …
국가인공지능전략위원회가 1일 서울 광화문에서 'AI 개발 속도조절론' 세미나를 열고, 미·중 패권 경�9 속에서 한국이 기술 격차 축소와 글로벌 규범 제정을 함께 주도해야 한다는 방안을 논의했다. 하정우 상근 부위원장은 환영사에서 AI 위험성 증가에 따른 속도조절 논의가 있지만, 이로 …
이 사안의 흐름
같은 주제를 다룬 이 사이트의 기록 — 최신순
- 2026-10-01구글, 제미나이 신모델 보안 우려로 접근 제한The Guardian AI
- 2026-10-01오류투성이 AI, 이달 미·중 전쟁 위기 촉발할 뻔The Guardian AI
- 2026-10-01'불량 AI 에이전트' 논란에 美 FTC 조사 착수AI타임스
- 2026-10-01구글, 제미나이 4 아르곤 내부서 실성능 회의론AI타임스
- 2026-10-01오픈AI, AI 에이전트 통제용 '디시전스 API' 공개테크42
이 글에 나온 말
이 분야 브리핑
여러 매체가 함께 다룬 사안을 한 번에
이 페이지는 원문을 요약·재서술하고 이 사이트가 쌓은 기록을 덧붙인 큐레이션입니다. 원문 본문은 싣지 않으며, 수치와 표기는 원문 기준을 유지했습니다.
같은 분야의 다른 소식
- 오픈AI, 기밀 유출 의혹 안전연구원 3명 해고ZDNet Korea · 2026-10-02
- Arm, 엔비디아 에이전틱 AI 보안 플랫폼에 반도체 IP 지원ZDNet Korea · 2026-10-02
- 오픈AI, 안전 기준 미달로 'GPT-6.1 아스트라' 출시 철회테크42 · 2026-10-01
- 구글, 제미나이 신모델 보안 우려로 접근 제한The Guardian AI · 2026-10-01
- AI 코딩 에이전트 안전장치, 정상 개발작업도 오탐 차단AI타임스 · 2026-10-01
- 오픈AI, 문샷AI발 '보호된 추론' 대규모 탈취 시도 차단AI타임스 · 2026-10-01