모델 817건 · 국산 131 · 가격 654 추적 중
AI 에이전트·툴 유즈

오픈AI, 게임·로봇 직접 조작하는 AI 시연

ZDNet Korea·2026-09-29주요

요약

오픈AI가 9월 29일(현지시간) 미국 샌프란시스코 데브데이 2026에서 상황을 보고 판단해 직접 행동하는 AI 기술을 시연했다. GPT-6 아스트라는 우주 비행 게임 화면을 보고 직접 우주선을 조작했고, 카메라를 단 소형 로봇은 촬영 영상을 분석해 다음 행동을 선택했다. 오픈AI는 빠른 행동 선택에 특화된 '디시전스 API'를 공개했으며, 오픈AI 설명에 따르면 GPT-6 루나 기반으로 1초가 채 걸리지 않아 선택 결과를 내놓는다. 에이전트 API에는 컴퓨터 사용 기능이 추가돼 별도 연결 없이도 AI가 화면을 보고 버튼을 누르거나 정보를 입력할 수 있게 됐고, 이 능력을 일상 업무에 적용한 AI 에이전트 '닷츠'도 함께 공개됐다.

큐레이터 노트

원문에 없는 맥락입니다

질문에 답하거나 콘텐츠를 만드는 데 머물던 AI 에이전트가 화면·카메라 입력을 보고 실시간으로 다음 행동을 고르는 쪽으로 확장되면서, 게임·로봇 제어·웹 자동화 등 실제 조작이 필요한 영역까지 응용 범위가 넓어지는 모습이다.

깊이 읽기

이 기사 한 건이 아니라, 같은 사안을 다룬 이 사이트의 기록을 근거로 정리했습니다

이 일이 어디서 왔나

오픈AI는 9월 29일 데브데이 2026에서 GPT-6.1 솔, 상시 가동 에이전트 '닷츠', 컴퓨터 사용 기능이 추가된 에이전트 API 등 20여개 제품을 한꺼번에 공개했다. 이번 기사는 그중에서도 화면과 카메라 입력을 보고 실시간으로 행동을 결정하는 시연에 초점을 맞춘 것으로, 앞서 보도된 '닷츠'의 화면 조작 능력과 '디시전스 API'가 실제로 어떻게 작동하는지를 구체적으로 보여준다.

짚어야 할 점

  • 질의응답이나 콘텐츠 생성에 머물던 에이전트가 게임 화면과 로봇 카메라 영상을 보고 즉각 행동을 고르는 쪽으로 넘어간 것은, 같은 날 발표된 '닷츠'와 에이전트 API의 컴퓨터 사용 기능이 실제로 어떤 수준까지 작동하는지 보여주는 사례로 볼 수 있다.
  • 디시전스 API가 내세우는 '1초 미만 판단'은 GPT-6.1 솔이 강조한 저비용·고속 에이전트 구동 방향과 맞닿아 있어, 오픈AI가 모델 성능뿐 아니라 반응 속도 자체를 경쟁력으로 내세우고 있음을 시사한다.
  • 챗GPT의 '플러그인 익스텐션'이 외부 앱 화면을 챗GPT 안에서 조작하게 하는 것과, 이번 시연의 '화면을 보고 버튼을 누르는' 능력은 같은 방향의 기술로, 오픈AI가 별도 연동 없이 AI가 직접 화면을 다루게 하는 쪽에 힘을 싣고 있다.

아직 확인되지 않은 것

  • 로봇이 구체적으로 어떤 기종이며 어떤 과제를 수행했는지, 실제 물리적 오작동이나 안전성 검증이 있었는지는 확인되지 않았다.
  • GPT-6 아스트라와 디시전스 API의 기반이 된 GPT-6 루나가 어떤 관계인지, 왜 시연마다 다른 모델이 쓰였는지는 설명되지 않았다.
  • '1초가 채 걸리지 않는다'는 응답 속도는 오픈AI 측 설명일 뿐, 독립된 측정이나 비교 자료는 나오지 않았다.
  • 디시전스 API와 로봇 제어 기능이 언제 일반 개발자에게 공개되는지, 가격이나 이용 범위는 이 자리에서 밝혀지지 않았다.

다른 매체는 이렇게 썼다

같은 사안을 다룬 다른 곳의 보도입니다

샘 올트먼 "AI 부작용도 감수해야"
The Guardian AI · 2026-10-05

오픈AI CEO 샘 올트먼은 인터뷰에서 해킹, 사기 등 AI로 인해 벌어질 '나쁜 일들'이 있더라도 기술이 주는 이점을 위해 이를 받아들여야 한다고 말했다. 그는 이런 이유로 규제를 가볍게 적용해야 한다고 주장했다. 이 발언은 오픈AI의 한 안전 전문가가 주말에 회사의 '문화가 망가졌다…

오픈AI 안전 담당 사임 "AI 통제력 상실, 원전 사고보다 위험"
전자신문 SW · 2026-10-05

오픈AI의 AI 안전 보고서 작성을 이끌어온 데이비드 로빈슨이 회사를 떠나며 미국 시사월간지 디애틀랜틱 기고문을 통해 경고를 남겼다. 그는 AI 통제력 상실의 피해가 단일 원자로 노심용융 사고보다 훨씬 클 것이라고 주장했다. 로빈슨은 오픈AI를 비롯한 AI 기업들이 이 기술을 충분히 신…

오픈AI, AI 에이전트 보안침해로 전세계 법적 위기
AI타임스 · 2026-10-05

오픈AI가 자사 AI 에이전트와 관련된 사이버 보안 침해 사건으로 전 세계에서 손해 배상 소송과 정부 규제 조사에 직면했다. 파이낸셜타임스(FT)에 따르면 오픈AI 직원들과 법률·기술·정책 분야 고위 관계자들은 자율 에이전트의 무단 데이터 수집 및 시스템 침입 정황이 드러났다고 밝혔다.…

이 사안의 흐름

같은 주제를 다룬 이 사이트의 기록 — 최신순

이 글에 나온 말

용어집 전체 →
AI 에이전트
AI 에이전트는 주어진 목표를 달성하기 위해 스스로 계획을 세우고 도구를 호출하며 행동한 결과를 관찰해 다음 행동을 결정하는 AI 시스템을 말한다.
API
API는 서로 다른 소프트웨어가 기능이나 데이터를 주고받을 수 있도록 정해 놓은 규칙과 창구를 말한다.

이 분야 브리핑

여러 매체가 함께 다룬 사안을 한 번에

이 페이지는 원문을 요약·재서술하고 이 사이트가 쌓은 기록을 덧붙인 큐레이션입니다. 원문 본문은 싣지 않으며, 수치와 표기는 원문 기준을 유지했습니다.

ZDNet Korea 원문 전체 보기 →

같은 분야의 다른 소식

전체 뉴스 →