기술 매체인 The Decoder(9월 18일)는 Nvidia 수석 과학자 Jim Fan이 향후 몇 년 내에 로봇 공학 분야가 "GPT{1}} 순간"을 맞이할 것이라고 예측한다는 블로그 게시물을 게시했습니다.
짐 팬 소개
Jim Fan이 박사 학위를 받았습니다. 그는 스탠포드 대학교 비전 연구소에서 Feifei Li 교수의 지도 하에 공부했습니다. 그의 연구 관심 분야에는 다중 모드 기본 모델, 강화 학습, 컴퓨터 비전이 포함되며 Google Cloud AI, OpenAI, Baidu Silicon Valley AI Lab 등 유명 조직에서 인턴으로 일했습니다.
Jim Fan은 현재 NVIDIA에서 AI 관련 연구를 이끌고 있으며, 그의 팀은 휴머노이드 로봇의 기본 모델을 만들기 위한 회사의 노력인 "Project Groot"에 참여하고 있습니다.
향후 2~3년 내 획기적인 연구 성과
Jim Fan은 향후 2-3년 내에 로봇의 기본 모델 연구에 큰 진전이 있을 것이라고 예측하지만, 로봇이 일상 생활에 진입하는 데는 더 오랜 시간이 걸릴 것임을 인정합니다.
Sequoia Capital과의 인터뷰에서 Fan은 언어 처리에 있어 GPT-3의 영향에 필적하는 기본 로봇 공학 모델의 획기적인 발전인 로봇 공학 분야에서 'GPT-3 순간'을 기대한다고 말했습니다.
IT Home은 그 견해를 다음과 같이 번역합니다.
로봇을 사람들의 일상생활에 가져오는 것은 단순히 기술의 문제가 아닙니다. 로봇은 저렴하고 대량 생산되어야 하며 하드웨어 보안은 물론 개인 정보 보호 및 규제 보호 장치도 필요합니다.
세상은 인간의 형태를 중심으로 만들어졌죠? 우리의 레스토랑, 공장, 병원, 모든 장비와 도구는 모두 인간의 형태와 손에 맞게 설계되었습니다.
그는 이론적으로 유능한 휴머노이드 로봇은 인간이 할 수 있는 모든 작업을 수행할 수 있다고 주장하며, 휴머노이드 로봇 하드웨어 생태계가 2~3년 내에 준비될 것이라고 예측합니다.
NVIDIA의 로봇 관련 연구
Nvidia는 로봇 AI를 개발할 때 인터넷 데이터, 시뮬레이션 데이터, 실제 로봇 데이터라는 세 가지 데이터 유형의 조합을 사용합니다. Fan 박사는 각 접근 방식의 강점과 약점을 강조하고 이들의 조합이 성공의 열쇠라고 믿습니다.
Nvidia는 언어 모델을 사용하여 봇 훈련 로봇이 프로세스를 자동화할 수 있는 보상 기능을 생성하는 "Eureka"와 같은 기술을 개발하고 있습니다.
현실 세계 외에도 팬 팀은 비디오 게임과 같은 가상 환경에서 사용할 수 있는 AI 에이전트를 연구하고 있습니다. 그는 이러한 영역 간의 유사점을 확인하고 장기적으로 가상 및 물리적 에이전트를 모두 제어할 통합 모델을 개발하기 위해 노력했습니다.