출처
로봇 데이터 공장 내부: 센서화된 인간을 통해 로봇을 훈련시키는 Mecka의 조시 고 - 훈련 데이터
관련 정보
조시 고: https://x.com/joshavataMecka AI: https://www.mecka.ai/, https://x.com/meckaai
목차
- 출처
- 관련 정보
- 클라우드 키친에서 '탄소 생명체의 디지털화'로
- 「인간을 센서로 활용하다」: 끈질긴 하드웨어 전술
- 100Gbps 전용선과 맥도날드 사기: 데이터 공장 뒤의 진실
- 산업이 수렴해 가는 '학습 레시피의 국물'
- 「단일한 돌파구」가 아닌「단계적 실용화」로
- 10 년 후, 지구상의 로봇은 인류의 수를 압도할 것입니다.
텍스트와 이미지의 AI 가 폭발적으로 진화한 가장 큰 요인은 인간이 수십 년에 걸쳐 인터넷에 방출해 온 방대한 데이터 자산이었습니다. 웹을 크롤링하면 수조에서 수십 조 개의 토큰으로 된 텍스트를 무료로 얻을 수 있었습니다.
그러나 로봇공학이나 물리 AI(물리적 세계에서 움직이는 인공지능) 분야에는 그러한 '무료 선물'은 존재하지 않습니다.
현실 세계에서 물건을 잡거나 문을 열거나 요리하는 데 필요한 데이터는 인터넷 공간 어디를 찾아도 찾아볼 수 없습니다.
웹 텍스트와 같은 초기 시작의 혜택을 누릴 수 없는 한, 누군가가 물리적 세계의 데이터를 공장에서처럼 생산해야 합니다.
이 내용을 밝힌 것은 로봇용 데이터 farm 의 대장주이자 CEO 인 조슈 가오 (Josh Gao) 씨입니다. 세코야 캐피탈 (Sequoia Capital) 의 소니아 후안 (Sonya Huang) 씨와의 대담에서 드러난 것은 SF 같은 미래를 지탱하는 매우 지저분하면서도 정교한 '데이터 제조 공장'의 현실이었습니다.
AI 가 물리적인 신체 를 획득하는 과정에서 지금 정확히 어떤 일이 일어나고 있는지, 그 최전선의 출처 정보를 바탕으로 해명합니다.
클라우드 키친에서 '탄소 생명체의 디지털화'로
조슈 가오의 경력은 전형적인 로봇 공학 연구자와는 거리가 멀다. 대학 시절 그는 강의를 빠져나와 레스토랑용 키오스크 단말기를 설치하는 클라우드 키친 사업을 주도했으며, 공동 창업자는 암호화폐 스테이블 코인을 구축한 후 미주 코인베이스에 매도한 이력을 가지고 있다.
그 두 사람이 다음으로 선택한 것은 SF 세계에 그려져 온 가장 극적인 프론티어, 즉 '유기체와 기계의 융합'을 현실화하는 로봇 데이터 기반이었습니다.
메카의 웹사이트에는 "로봇에게 탄소 기반 생명체 (생물) 을 가르치다"는 인상적인 문구가 게시되어 있습니다. 인간의 뇌는 약 20 와트의 저전력으로 작동하며, 상처를 입어도 스스로 치유되면서 복잡한 세계에 적응합니다. 이 탄소 기반 생명체의 신체 동작과 판단 로직을 추출하여 로봇에게 전달하는 것이 바로该公司的 미션입니다.
문외한인 외부의 연구자라야만 기존 로봇 연구의 통념에 갇히지 않았습니다. 2024 년 당시 주류였던 원격 조작을 통한 데이터 수집이 확장성에 한계를 지니고 있음을 깨닫고, 인간의 주관적 시점 (에고센트릭) 데이터를 대량으로 수집하는 베팅에 나섰습니다.
「인간을 센서화하다」: 끈질긴 하드웨어 전술
물리적 세계의 데이터를 수집한다고 해도, 거리 감시 카메라나 스마트폰 자화 영상만 모으는 것은 부족합니다. 로봇에게 필요한 것은 '시각 (픽셀)', '동작 궤적 (액션)', 그리고 '상황 판단의 인과 관계 (로직)'라는 세 가지 요소이기 때문입니다.
Mecka 의 데이터 수집은 초기에 앱을 배포하여 일반인들, 특히 중국권 어르신들을 대상으로 요리나 청소 등 일상 동작을 촬영하도록 요청한草根적인 접근에서 시작되었습니다. 그러나 모델의 정확도를 높이기 위해서는 이 정보만으로는 결정적인 정보가 부족하다는 것을 깨닫게 되었습니다.
그것은「힘 조절 (포스 데이터)」입니다.
자율주행차의 경우 가속도와 조향각이라는 '2 자유도' 제어가 중심이었지만, 인간의 손이나 로봇 손은 끝손가락 하나만으로도 수십 개의 자유도를 가집니다. 알을 깨지 않고 들어 올리거나, 단단한 병 뚜껑을 돌려 열 때, 인간이 얼마나 많은 힘 (뉴턴) 을 가하고 있는지 단순한 영상으로는 추측할 수 없습니다.
상용 제품으로 일상 작업의 접촉력을 정밀하게 측정할 수 있는 웨어러블 장치가 존재하지 않았기 때문에, 그들은 자체 전용 하드웨어를 개발했습니다.
- 카메라와 센서를 탑재한 맞춤 베이스볼 모자
- 정밀한 접촉력과 마찰력을 기록하는 타쿠타일 (촉각) 글러브
- 다양한 센서 데이터를 통합하여 전송하는 중앙 허브
인간 그 자체를 웨이모의 자율주행 테스트 차량처럼 센서로 감싸 덮고, 빵집, 인쇄회로기판 제조 라인, 청소 현장 등 모든 직장의 작업을 데이터화하는 B2B 생태계를 구축했습니다.
100Gbps 전용선과 맥도날드 사기: 데이터 공장 뒤의 진실
로봇 데이터 공장 운영은 화려한 AI 알고리즘 논의와는 거리가 먼, 고도의 작업이 이어지는 과정입니다.
전 세계 각 지점에서 전송되는 데이터는 수백 페타바이트 (PB) 에 달하며, 메카는 수집 거점에 100 기가비트 (100Gbps) 의 전용 업로드 회선을 구축하여 운영하고 있습니다.
더욱이 문제가 되는 것은 '품질 관리와 부정'이라는 주제입니다.
웹 크롤링과 달리 참여자에게 보상을 지급하여 데이터를 '제조'하도록 하는 구조상 지나치게 창의적인 부정 사례가 빈번하게 발생합니다. 예를 들어, 유튜브에 떠도는 맥도날드 점원 POV(점점관) 영상을 재녹화하여 '자신의 작업 데이터'로 제출하는 경우도 있었습니다.
현실 세계는 에지 케이스의 집합입니다. 조명 차이, 손떨림, 예상치 못한 장애물 등으로 인해 어제까지 유효했던 기준이 오늘에는 통용되지 않습니다. 메카는 엄격한 품질 게이트웨이와 컴퓨터 비전을 활용한 검증 파이프라인을 구축하여 다양성과 신뢰성을 보장하고 있습니다.
수렴하는 산업의 '학습 레시피 국물'
로봇의 기본 모델을 훈련하기 위해 산업계가 도달하고 있는 데이터 조합은 무엇인지에 대해 가오氏は 현재 산업계가 수렴하고 있는 '데이터 레시피 (수프의 냄비)' 비율을 밝히고 있습니다.
- 인간 1 인칭 관점 데이터 (에고 센트릭 데이터): 약 100 만 시간
- 로봇 자체의 동작 데이터: 수만 시간
- 특정 작업 및 환경에 특화된 원격 조작 (인 도메인): 단 몇 시간
이러한 피라미드 구조가 현재 물리 기반 인공지능의 표준이 되고 있습니다.
테슬라가 10 년 이상 걸려 실세계 주행 데이터를 수집해 왔다면, 로봇 공학의 100 만 시간이라는 숫자는 여전히 몇 자리 차이가 나는 규모에 불과합니다. 하지만 2 년 전 학계 연구의 기준으로 여겨졌던 'Ego4D'가 불과 4000 시간 정도였음을 생각하면, 이미 지수급의 규모 확장이 이루어진 것을 알 수 있습니다.
또한 앞으로는 시뮬레이션 공간 내의 자기 대결 데이터, 앞서 언급한 촉각 데이터, 그리고 '세계 모델 (World Model)'을 통한 물리 현상 예측이 이 수프에 투입될 것입니다.
가오氏は 알파고가 인간의 체계를 학습하고 자진 대결을 통해 인간을 초월한 '제 37 수'를 만들어낸 것처럼, 로봇도 인간의 모방에서 물리 세계 시뮬레이터에서의 자진 대결을 거치며 로저 페데라 같은 초인적인 신체 동작을 획득할 날을 목전에 두고 있습니다.
「단일한 돌파구」가 아닌「단계적 실용화」로
많은 사람들은 로봇 버전의 '챗 GPT 모멘트'――어느 날 갑자기 모든家务를 처리하는 인형 로봇이 등장하는 순간을 기대하는 경향이 있습니다.
그러나 가오 씨의 전망은 매우 현실적입니다. 로봇의 진화는 0 에서 1 의 특이점이 아니라, 제약이 많은 산업 작업을 순차적으로 해결하며 상용 가치를 점진적으로 확보해 나가는 '그라데이션적 확산'이 될 것입니다.
가정 환경은 영아가 바닥을 오가거나 반려동물이 뛰어다니는 등 안전성 장벽이 가장 높고 불확실성이 가득한 혹독한 환경입니다. 따라서 보급은 먼저 다음과 같은 영역에서 가속화됩니다.
- SOP 가 명확한 공장의 피킹 및 박스 포장 라인
- 사람이 출입하지 않는 야간 상업 시설 및 데이터센터의 순찰 및 청소
- 호텔 프런트에서 객실로アメニ티를 배송하거나 간단한 식탁배치를 제공하는 것
제한된 작업 범위를 가진 수직형 (버티컬) 로봇부터 순차적으로 현장에 투입되어, 현장에서 얻은 실패 사례와 수정 데이터가 다시 모델로 피드백되는 '플라이휠'이 작동하기 시작합니다.
과거에는 사무실로 방문하여 장비를 설정하는 IT 분야의 '시스템 통합자'처럼, 현대의 로봇 통합자는 로봇을 현장에 설치한 후 데이터를 통해 매일 더 똑똑해지도록 업데이트해 나가는 역할을 수행할 것입니다.
10 년 후, 지구상의 로봇은 인류의 수를 압도하게 될 것입니다.
오피스 회의실에는 카자마重工이 발표하며 화제를 모은 사지 보행 로봇 '코레오(CORLEO)'의 포스터가 걸려 있고, "어느 날은 소행성을 채굴할 로봇을 보내고 싶다"며 웃는 조슈 가오 씨가 있다.
그는 10 년 후 세계에 존재하는 로봇의 수에 대해 망설이지 않고「인구보다 훨씬 많은 수의 1000 억 대 이상의 로봇이 존재하는 세상으로 변할 것」이라고 답했습니다.
소프트웨어 세계에 일어난 지능의 폭발은 이제 손과 발, 피부 감각을 갖추어 현실의 물리 법칙과 맞서 싸우며 물질 세계로 스며들기 시작했습니다.
화면 속 대화형 AI 에 놀라워하는 사이, 우리 뒤에서는 흙탕기 묻은 캡과 장갑을 쓴 사람들이 '신체 지의 산업화'를 진행 중입니다. 그 데이터 공장이 전속력으로 가동될 때, 물리적 공간에서의 노동과 삶의 방식은 되돌릴 수 없는 변혁을 맞이하게 될 것입니다.
직장 업무 중 '1 인칭 시점 카메라와 촉각 장갑'을 착용한다면, 몇 일 만에 로봇이 이를 재현할 수 있을지 생각해보셨나요?
#세쿼이아 #로봇 #미국주식투자 - 관련 기사 검색
※투자 관련 안내※ 이 글은 최신 시장 동향에 대한 학습과 통찰을 공유하기 위한 것이며, 특정 주식이나 투자 상품의 구매를 권장하는 바는 아닙니다. 투자는 필연적으로 리스크가 수반됩니다. 실제 투자를 진행하실 때는 본인의 능력 범위 내에서 충분히 조사 (DYOR) 를 하시고, 본인의 책임 하에 판단하시기 바랍니다!
출처: note 원문
번역: Qwen 3.5(.48) 초벌 + 교정 31청크
원문 보기 | 출처: note.com