참고팁X
OpenAI Codex 기반 모바일 제어 오픈소스 'Mobile Harness' 공개
실제 기기(iOS/Android)를 AI 에이전트로 제어 가능한 오픈소스 라이브러리. 에이전트 자동화 시나리오 테스트에 활용 가능.
요약
오픈소스 프로젝트 'Mobile Harness'를 통해 OpenAI Codex가 실제 iPhone과 Android 기기를 직접 제어할 수 있게 되었다. 시뮬레이터가 아닌 실제 모바일 기기에서 작동하며, AI 에이전트가 화면을 인식하고 버튼 클릭, 스크롤, 텍스트 입력, 앱 실행 및 설정 변경 등 사용자와 동일한 동작을 수행한다. 이 기술은 단일 API를 통해 구현되며 로컬 기기뿐만 아니라 클라우드 환경에서도 대규모로 운영이 가능하다. AI 에이전트가 코드를 작성하는 단계를 넘어, 사용자가 평소 사용하는 앱을 직접 조작하는 단계로 진화하고 있다.
AI가 원문을 요약한 내용으로, 부정확할 수 있습니다.
원문 제목 @VaibhavSisinty: OpenAI Codex can now control real phones. Actual iPhones. Actual Androids. Not simulators. Real devices. 🤯 An open source project
원문 보기 ↗