모델 803건 · 국산 131 · 가격 645 추적 중
AI 에이전트·툴 유즈

오픈AI, 게임·로봇 직접 조작하는 AI 시연

ZDNet Korea·2026-09-29주요

요약

오픈AI가 9월 29일(현지시간) 미국 샌프란시스코 데브데이 2026에서 상황을 보고 판단해 직접 행동하는 AI 기술을 시연했다. GPT-6 아스트라는 우주 비행 게임 화면을 보고 직접 우주선을 조작했고, 카메라를 단 소형 로봇은 촬영 영상을 분석해 다음 행동을 선택했다. 오픈AI는 빠른 행동 선택에 특화된 '디시전스 API'를 공개했으며, 오픈AI 설명에 따르면 GPT-6 루나 기반으로 1초가 채 걸리지 않아 선택 결과를 내놓는다. 에이전트 API에는 컴퓨터 사용 기능이 추가돼 별도 연결 없이도 AI가 화면을 보고 버튼을 누르거나 정보를 입력할 수 있게 됐고, 이 능력을 일상 업무에 적용한 AI 에이전트 '닷츠'도 함께 공개됐다.

큐레이터 노트

원문에 없는 맥락입니다

질문에 답하거나 콘텐츠를 만드는 데 머물던 AI 에이전트가 화면·카메라 입력을 보고 실시간으로 다음 행동을 고르는 쪽으로 확장되면서, 게임·로봇 제어·웹 자동화 등 실제 조작이 필요한 영역까지 응용 범위가 넓어지는 모습이다.

깊이 읽기

이 기사 한 건이 아니라, 같은 사안을 다룬 이 사이트의 기록을 근거로 정리했습니다

이 일이 어디서 왔나

오픈AI는 9월 29일 데브데이 2026에서 GPT-6.1 솔, 상시 가동 에이전트 '닷츠', 컴퓨터 사용 기능이 추가된 에이전트 API 등 20여개 제품을 한꺼번에 공개했다. 이번 기사는 그중에서도 화면과 카메라 입력을 보고 실시간으로 행동을 결정하는 시연에 초점을 맞춘 것으로, 앞서 보도된 '닷츠'의 화면 조작 능력과 '디시전스 API'가 실제로 어떻게 작동하는지를 구체적으로 보여준다.

짚어야 할 점

  • 질의응답이나 콘텐츠 생성에 머물던 에이전트가 게임 화면과 로봇 카메라 영상을 보고 즉각 행동을 고르는 쪽으로 넘어간 것은, 같은 날 발표된 '닷츠'와 에이전트 API의 컴퓨터 사용 기능이 실제로 어떤 수준까지 작동하는지 보여주는 사례로 볼 수 있다.
  • 디시전스 API가 내세우는 '1초 미만 판단'은 GPT-6.1 솔이 강조한 저비용·고속 에이전트 구동 방향과 맞닿아 있어, 오픈AI가 모델 성능뿐 아니라 반응 속도 자체를 경쟁력으로 내세우고 있음을 시사한다.
  • 챗GPT의 '플러그인 익스텐션'이 외부 앱 화면을 챗GPT 안에서 조작하게 하는 것과, 이번 시연의 '화면을 보고 버튼을 누르는' 능력은 같은 방향의 기술로, 오픈AI가 별도 연동 없이 AI가 직접 화면을 다루게 하는 쪽에 힘을 싣고 있다.

아직 확인되지 않은 것

  • 로봇이 구체적으로 어떤 기종이며 어떤 과제를 수행했는지, 실제 물리적 오작동이나 안전성 검증이 있었는지는 확인되지 않았다.
  • GPT-6 아스트라와 디시전스 API의 기반이 된 GPT-6 루나가 어떤 관계인지, 왜 시연마다 다른 모델이 쓰였는지는 설명되지 않았다.
  • '1초가 채 걸리지 않는다'는 응답 속도는 오픈AI 측 설명일 뿐, 독립된 측정이나 비교 자료는 나오지 않았다.
  • 디시전스 API와 로봇 제어 기능이 언제 일반 개발자에게 공개되는지, 가격이나 이용 범위는 이 자리에서 밝혀지지 않았다.

다른 매체는 이렇게 썼다

같은 사안을 다룬 다른 곳의 보도입니다

'불량 AI 에이전트' 논란에 美 FTC 조사 착수
AI타임스 · 2026-10-01

미국 연방거래위원회(FTC)가 앤트로픽, 오픈AI, AI 안전 평가기관 METR 등을 대상으로 AI 에이전트의 안전성과 소비자 피해 가능성에 대한 조사에 착수했다. 로이터와 월스트리트저널에 따르면 FTC 고위 관계자는 9월 30일(현지시간) 해당 기업들에 공식 정보 제출을 요구하고 경영…

오픈AI, 에이전트용 '디시전스 API' 공개
AI타임스 · 2026-10-01

오픈AI가 데브데이 2026에서 반복적인 판단 작업을 처리하는 '디시전스 API'를 공개했다. 이 API는 대화형 AI처럼 긴 답변을 생성하는 대신 개발자가 미리 정해놓은 선택지 중 하나를 골라주는 방식으로 동작하며, 'GPT-6 루나' 모델을 기반으로 한다. 오픈AI는 이 API를 자…

오픈AI "에이전트가 업무 수행, 엔지니어는 지휘·검증으로"
바이라인네트워크 · 2026-10-01

오픈AI의 리처드 호 하드웨어 총괄 부사장이 삼성 AI 포럼 2026에서 AI 에이전트의 업무 활용 성과를 발표했다. 에이전트는 수학 난제 해결, 소프트웨어 개발, 반도체 설계 등 업무를 수행하고 있으며, 그 결과 인간 엔지니어의 역할은 목표 설정과 결과 검증, 에이전트 관리로 옮겨가고…

이 사안의 흐름

같은 주제를 다룬 이 사이트의 기록 — 최신순

이 글에 나온 말

용어집 전체 →
AI 에이전트
AI 에이전트는 주어진 목표를 달성하기 위해 스스로 계획을 세우고 도구를 호출하며 행동한 결과를 관찰해 다음 행동을 결정하는 AI 시스템을 말한다.
API
API는 서로 다른 소프트웨어가 기능이나 데이터를 주고받을 수 있도록 정해 놓은 규칙과 창구를 말한다.

이 분야 브리핑

여러 매체가 함께 다룬 사안을 한 번에

이 페이지는 원문을 요약·재서술하고 이 사이트가 쌓은 기록을 덧붙인 큐레이션입니다. 원문 본문은 싣지 않으며, 수치와 표기는 원문 기준을 유지했습니다.

ZDNet Korea 원문 전체 보기 →

같은 분야의 다른 소식

전체 뉴스 →