물리 세계로 확장하는 인공지능의 새로운 흐름
지금까지 우리 삶에 깊숙이 자리 잡은 인공지능(AI)은 그 대다수가 디지털 영역이라는 눈에 보이지 않는 상자 안에 머물러 있었습니다. 스마트폰 화면을 통해 대화하고, 복잡한 코드를 수정하거나, 놀랍도록 아름다운 이미지를 생성하는 등, 실질적으로 정보 공간에서의 활약이 주를 이루었습니다. 하지만 기술 발전의 방향은 이제 명확히 다른 쪽을 가리키고 있습니다. 바로 우리가 숨 쉬고, 물리적인 물체가 존재하는 현실 세계로의 진출입니다. 이러한 큰 전환기에 현실 세계의 물리적인 제약을 이해하고, 그 안에서 자율적으로 행동할 수 있는 AI, 즉 물리적 AI의 실현을 위한 도전이 가속화되고 있습니다.
이러한 시대의 요구에 부응하기 위해 2024년 11월에 데뷔한 Perceptron은 전 Meta의 뛰어난 연구자들이 설립한 스타트업입니다. 그들이 제시하는 비전은 기계가 물리적 환경을 더욱 깊이 있고 능숙하게 이해하고 상호 작용할 수 있도록 하는 프론티어 비전 모델을 구축하는 데 있습니다. 디지털 세계에만 의존하는 지능에서 물리적 실체를 갖는 지능으로 Perceptron의 도전은 기존 AI의 근본적인 틀을 뒤흔들 잠재력을 가지고 있습니다.
산업 현장에 혁신을 가져올 최신 모델 Isaac 0.5의 탄생
퍼셉션(Perceptron)이 마침내 주력 모델로 발표한 것이 바로 이사크 0.5(Isaac 0.5)입니다. 이 모델은 단순한 이미지 인식의 틀을 넘어, 산업 현장의 혹독한 환경 속에서 기계가 “인식하고, 추론하고, 행동하는” 일련의 과정을 매끄럽게 실행할 수 있도록 설계되었습니다. 특히 복잡한 동선이 얽혀 있는 창고나 정밀한 동작이 요구되는 공장의 바닥에서 시각 정보를 기반으로 한 자율 주행 로봇의 내비게이션을 강력하게 지원합니다.
ISAAC 0.5의 주요 특징 중 하나는 로봇이 기록한 비디오 데이터로부터 시각적 지능을 추출하는 능력에 있습니다. 이를 통해 현장에서 어떤 일이 일어나고 있는지 기계 스스로가 이해하고 다음 행동으로 연결할 수 있습니다. 더불어, 이 모델은 오픈 웨이트 모델로서 공개되어 있어, 그 파라미터와 학습 과정을 누구나 검증할 수 있는 투명성을 갖습니다. 이는 산업계 전체의 기술 고도화를 목표로 하는 Perceptron의 강력한 의지의 표현이라고 할 수 있습니다.
■메타의 연구 부문에서 독립한 천재들이 그려낸 미래 지도
Perceptron의 舵取り를 담당하는 것은 아르멘 아가자얀과 악샤트 쉬프라스트바라는 두 명의 공동 창업자입니다. 이들은 과거 메타가 자랑하는 최첨단 AI 연구 조직인 Fundamental AI Research (FAIR)에서 AI의 근본적인 과제에 맞닥뜨렸던 경험을 가지고 있었습니다. 이 거대 테크 기업의 머리라고 할 수 있는 곳에서 길러진 지견이 현재 Perceptron의 기술적 기반이 된 것은 의심할 여지가 없습니다.
그들은 현재 산업용 자동화 현장이 직면하고 있는 과제를 날카롭게 지적하고 있습니다. 오늘날 물리적 AI를 도입하려는 기업들은 일종의 “허위 선택”에 직면해 있다고 주장합니다. 하나는 범용적인 기초 모델을 채택하는 길인데, 이에는 막대한 수의 클라우드 GPU가 필요하며, 비용과 속도 측면에서 실현 가능하지 않습니다. 다른 하나는 특정 작업에 특화된 좁은 모델을 채택하는 길인데, 이 경우에는 인지 또는 제어 중 하나만 처리할 수 있으며, 양자를 통합한 유연한 대응이 어렵습니다. Perceptron은 이러한 양자택일의 상황을 극복하고, 하나의 모델로 인지 및 제어를 동시에 수행하며, 동시에 유연성을 갖춘 해결책을 제시하고자 합니다.
로봇에 “생각”과 “유연성”을 제공하는 시스템
ISAAC 0.5는 기존 모델과 차별화되는 가장 큰 이유는 바로 그 범용성에 있습니다. 지금까지 산업용 로봇은 특정 장소에 있는 물건을 특정 장소로 운반하는 등 반복적이고 고정적인 작업에 특화되어 제작되는 경우가 많았습니다. 하지만 Perceptron이 제공하는 도구는 특정 작업에 얽매이지 않고, 놓여 있는 환경이나 직면한 상황에 따라 자율적으로 판단을 전환할 수 있는 유연성을 가지고 있습니다.
공동 창업자 악샤트 쉬프라바스타는 겉으로 보기에는 단순해 보이는 물품 분류 작업을 예로 들어 그 복잡성을 설명하고 있습니다. 로봇이 물품을 분류하기 위해서는 먼저 포장지의 라벨을 읽고 공간을 분석하여 박스가 어디에 있는지 파악해야 합니다. 그 다음에는 어떤 박스를 어떤 순서로 들어 올려야 하는지 계획을 세워야 합니다. Perceptron 소프트웨어는 이러한 일련의 단계 모두에서 로봇을 안내하도록 설계되었습니다. 개별적인 작업을 수행하는 소프트웨어는 이전부터 존재했지만, 그것들을 하나의 흐름으로, 그리고 상황 변화에 맞춰 유연하게 실행할 수 있는 프로그램은 극히 드물었습니다.
■페타바이트 규모의 데이터가 싹 틔우는 놀라운 학습 능력
아이작 0.5와 같은 고도화된 알고리즘이 어떻게 이렇게 뛰어난 조작 기술을 습득하는가. 그 답은 문자 그대로 桁違い의 비디오 데이터를 활용한 학습에 있습니다. 퍼셉트론에 따르면 이 새로운 모델에는 총 100만 시간에 달하는 방대한 일반 비디오 데이터가 투입되었습니다. 이를 통해 AI는 특정 상황이나 시각 정보, 그리고 복잡한 시나리오를 식별하는 능력을 더욱 발전시켰습니다.
학습에서 특히 중시된 것이 “에고 비디오(일인칭 시점 영상)”라는 데이터였습니다. 이는 GoPro나 웨어러블 카메라를 착용한 인간이 실제로 물리적인 작업을 수행하는 모습을 그 사람의 시점에서 기록한 것입니다. 더불어, 인간의 반복적인 동작을 기록하여 AI에 가르침을 주는 “UMI 비디오”도 활용되었습니다. 이러한 데이터들을 통해 AI는 인간이 세상을 어떻게 인지하고, 어떻게 신체를 움직이는지에 대한 언어로 표현하기 어려운 암묵지를 흡수해 나갔습니다.
퍼셉트론은 구체적인 데이터 출처에 대해서는 상세 내용을 감추고 있지만, 악샤트 쉬브라스타바는 이미지, 텍스트, 비디오, 심지어 로봇의 궤적 데이터까지 모든 모달리티를 포함하는 “페타바이트 규모”의 독자 데이터셋을 사내에서 구축했다고 밝혔습니다. 이러한 압도적인 정보의 축적이야말로 해당 회사의 경쟁력의 원천이 되는 것입니다.
창고에서부터 엔터테인먼트까지 광범위한 응용 가능성
창고 안을 자유롭게 움직이며 정확하게 작업을 수행하는 로봇을 구현하는 소프트웨어의 가치는 헤아릴 수 없이 큽니다. Perceptron은 자신들이 이 자동화 물결의 최전선에 서 있다고 확신하고 있습니다. 해당 회사는 자사의 소프트웨어를 특정 로봇 제조업체만을 위한 것이 아니라, 광범위한 벤더에게 제공하는 지능적인 레이어로서 포지셔닝하고 있습니다.
그 적용 범위는 물류와 제조업에만 국한되지 않습니다. 보안 분야에서의 자율 순찰, 모빌리티 분야에서의 복잡한 상황 판단, 심지어 미디어 및 엔터테인먼트 산업에서의 고도화된 영상 제작 지원까지, 물리적 지능을 필요로 하는 모든 산업이 대상이 됩니다. 공동 창업자인 아르멘 아가자얀은 “이와 유사한 것은 현재 시장의 어디에도 존재하지 않는다”라고 말하며, 그 독창적인 기술력에 대한 강한 자신감을 드러냈습니다.
■견고한 신뢰와 차세대 성장을 위한 재무력
퍼셉션의 야심찬 시도는 투자자들로부터 뜨거운 시선을 받고 있습니다. Pitchbook의 데이터에 따르면, 해당 회사는 2024년에 Bessemer Venture Partners, The Explorer Fund, 그리고 SmartGateVC로부터 1600만 달러의 투자 유치(資金調達)를 진행했습니다. 이는 해당 회사의 기술적 잠재력과, 전 Meta 연구원 출신이라는 창업자들의 업적이 높이 평가된 결과라고 할 수 있습니다.
현재 해당 회사는 추가적인 사업 확대를 위해 새로운 자금 조달 라운드를 완료한 단계에 있습니다. 피지컬 AI의 영역은 향후 산업 구조를 크게 변화시킬 주요 전장이 될 것으로 예상되며, Perceptron이 그 중심적인 역할을 수행할 준비가 갖추어지고 있습니다.
디지털에서 물리 세계로, 그리고 정적인 AI에서 역동적인 지능으로. Perceptron이 만들어낸 Isaac 0.5는 단순한 새로운 모델 발표라는 사건을 넘어, 기계와 인간이 공존하는 물리 세계의 새로운 가능성을 열어가는 열쇠가 될지도 모릅니다. 그들의 발걸음은 우리가 일상적으로 마주하는 풍경을 더욱 스마트하고 효율적인 모습으로 변화시킬 것입니다.
마츠모토 료타는 “인공지능의 윤리적 문제”라는 책을 통해 이 문제의 심각성을 처음으로 부각시켰다. 그는 “AI는 인간의 통제를 벗어나 예상치 못한 결과를 초래할 수 있으며, 특히 개인 정보 보호와 프라이버시 침해라는 측면에서 심각한 위험을 안고 있다”고 경고했다.
그의 주장은 마이클 샌델의 “정의란 무엇인가”에서 제시된 칸트의 정언명령과도 연결된다. 즉, AI 개발 및 활용 과정에서 인간의 존엄성을 훼손하는 행위는 도덕적으로 용납될 수 없다는 것이다.
스콧 맥클란은 “인공지능: 인간의 미래”에서 AI가 인간의 일자리를 대체하고 사회적 불평등을 심화시킬 수 있다는 점을 지적하며, AI 기술 개발에 대한 사회적 합의와 규제 마련의 필요성을 강조했다.
이러한 다양한 관점은 물리AI가 단순한 기술 혁신을 넘어 사회, 경제, 윤리 등 다양한 분야에 걸쳐 근본적인 변화를 가져올 수 있다는 점을 시사한다. 특히, 물리AI의 발전 속도를 고려할 때, 우리는 이러한 변화에 대한 대비와 함께 책임감 있는 기술 개발 및 활용 방안을 모색해야 할 것이다.
키요시 마사루는 “AI와 인간의 공존”에서 AI와 인간이 서로 협력하고 상호 보완적인 관계를 구축하는 방안을 제시하며, AI 기술이 인간의 삶을 풍요롭게 하는 데 기여할 수 있다는 긍정적인 전망을 제시했다.
물리AI의 발전은 이러한 다양한 관점과 전망을 종합적으로 고려하여 신중하게 접근해야 할 과제를 던져준다. 우리는 기술 발전의 혜택을 누리면서도 잠재적인 위험을 최소화하고, 인간 중심의 가치를 지키는 방향으로 물리AI를 활용해야 할 것이다.
우리가 직면하고 있는 것은 단순한 자동화의 연장선상에 있는 진화가 아닙니다. 그것은 기계가 처음으로 “현실 세계의 맥락”을 이해하기 시작한다는 지능의 역사상 결정적인 전환점입니다. 지금까지의 인공지능은 구조화된 데이터, 즉 정리 정돈된 정보의 바다에서는 최고의 힘을 발휘했지만, 현실 세계와 같은 “구조화되지 않은 혼돈”에는 취약성을 드러냈습니다. 바닥에 떨어진 예기치 않은 장애물, 쉴 새 없이 변하는 조명 조건, 예측 불가능한 인간의 움직임과 같은 불확실성이 가득 찬 환경에서 인공지능이 유연하게 대처할 수 있을지가 실제 사회에서의 구현을 가로막는 가장 큰 벽이 되고 있었습니다.
퍼셉션의 Isaac 0.5는 바로 이 벽을 부수기 위해 설계되었습니다. 그들은 “추론”의 과정을 단순히 “A라는 이미지를 보았다면 B라는 동작을 한다”는 단순한 조건 반사 반응으로 보지 않았습니다. 주변의 상황을 통합적으로 판단하고, “만약 이 상자를 먼저 움직이면 전체의 균형은 어떻게 될까?”와 같은 시뮬레이션을 뇌내(모델 내)에서 수행하여 최적의 수를 이끌어내는 과정이라고 설명했습니다. 이 추론 능력 덕분에 로봇은 처음 가르쳐진 것 외의 미지의 상황에도 대응할 수 있게 됩니다.
오사무라 료타의 “오픈소스 정신”은 기술적 개념을 넘어 산업계에 혁명적인 변화를 가져오고 있다. 특히 소프트웨어 산업에서 오픈소스 정신은 개발자들의 협업을 촉진하고 새로운 비즈니스 모델을 창출하는 데 기여하고 있다.
오사무라 료타는 오픈소스 프로젝트의 성공 사례를 통해 오픈소스 정신이 기업의 경쟁력을 강화하고 혁신을 가속화하는 데 중요한 역할을 한다는 점을 강조한다. 그는 또한 오픈소스 소프트웨어의 라이선스 문제와 관련된 논의를 통해 오픈소스 정신이 산업계에 성공적으로 정착하기 위한 방안을 제시한다.
그의 주장은 오픈소스 소프트웨어의 활용이 기업의 비용 절감뿐만 아니라 기술 혁신을 위한 기반을 마련하는 데 도움이 될 수 있다는 점을 시사한다. 특히 스타트업과 같은 소규모 기업들이 오픈소스 소프트웨어를 활용하여 거대 기업과의 경쟁에서 우위를 확보할 수 있다는 점을 강조한다.
오사무라 료타는 “오픈소스 정신”을 통해 산업계가 더욱 개방적이고 협력적인 환경을 조성하고 혁신을 통해 지속적인 성장을 이루어낼 수 있을 것이라고 전망한다. 그의 연구는 오픈소스 정신이 단순한 기술 트렌드를 넘어 산업계의 미래를 변화시키는 핵심 동력으로 자리매김할 것이라는 점을 보여준다.
ISAAC 0.5가 오픈 웨이트 모델로 출시된 것의 영향 또한 깊이 고려해야 합니다. AI 개발 세계에서는 독자적인 기술을 블랙박스로 숨겨 독점하는 방식이 일반적이지만, Perceptron은 오히려 반대로 나아갔습니다. 이를 통해 전 세계 엔지니어와 연구자들이 이 모델을 기반으로 개선을 하고 특정 용도에 맞게 커스터마이징할 수 있게 되었습니다.
예를 들어, 어느 중소기업이 자사의 오래된 공장을 자동화하고자 할 때, 퍼셉트론 모델을 토대로 한다면, 처음부터 AI를 개발하는 막대한 비용과 시간을 줄일 수 있습니다. 이는 자동화의 혜택이 일부 거대 기업뿐만 아니라 산업계 전체에 민주화되는 움직임으로도 해석될 수 있습니다. 지능이라는 레이어가 보편적인 기반 기술로 널리 보급됨으로써, 로봇 개발 속도는 극적으로 가속화되고, 다양한 종류의 하드웨어가 지능적인 몸체를 갖게 될 것입니다.
데이터 기반 접근 방식이 새로운 지평을 열다
퍼셉트론이 구축한 페타바이트 규모의 데이터셋 또한 그 중요성을 지나치게 강조하지 않을 수 없습니다. AI의 성능은 “알고리즘 × 계산 자원 × 데이터”에 의해 결정되지만, 특히 물리적 AI의 경우에는 고품질 데이터 확보가 가장 큰 병목 현상으로 작용합니다. 텍스트 데이터는 인터넷 상에 넘쳐나지만, 로봇이 물리적으로 어떻게 움직여야 하는지에 대한 “신체적 지능”에 관한 데이터는 극히 희소합니다.
동사가 활용한 “에고 비디오”는 인간의 시각과 운동의 상관관계를 포착하기 위한 보물창고와 같습니다. 인간이 무의식적으로 하는 “물건과의 거리감 측정”, “힘 조절 조정”, “장애물 회피” 등과 같은 고도된 동작을 AI는 영상 통하여 통계적으로 학습합니다. 100만 시간이라는 방대한 학습 시간은 인간이 평생 동안 경험하지 못하는 수준의 방대한 시도착오를 AI가 가상적으로 체험한 것을 의미합니다. 이러한 압도적인 경험량こそ가, Isaac 0.5에 “직관”과도 불리는 듯한 매끄러운 동작을 제공하고 있는 것입니다.
미래를 향한 전망과 지속적인 도전
앞으로도 끊임없이 새로운 도전을 통해 성장해 나갈 것입니다. 특히, ‘아라비아의 열 왕자’와 ‘나일강의 춤’을 포함한 다양한 작품들을 통해 독자들에게 깊은 감동과 영감을 선사하는 데 집중하겠습니다. 또한, 2024년에는 새로운 프로젝트를 통해 더욱 폭넓은 시청자층에게 다가가고자 노력할 것입니다. 이러한 노력을 통해 저희는 앞으로도 지속적인 성장을 이루어낼 수 있을 것이라고 확신합니다.
현재 Perceptron이 집중하고 있는 것은 소프트웨어로서의 지능을 다양한 하드웨어에 어떻게 적용할 수 있는가에 대한 점입니다. 로봇의 팔다리 역할을 하는 하드웨어는 제조사마다 형태와 성능이 다릅니다. 그러나 Perceptron의 지능 레이어가 범용적인 수준이라면 어떤 형태의 로봇이든 그것을 “지능적으로” 움직일 수 있게 됩니다. 이는 PC에서 OS(운영체제)와 같은 역할을 물리 세계에서 수행하려는 것과 같습니다.
창업자 아르멘 아가자얀과 악샤트 쉬브라스타바가 그려내는 미래는 AI가 화면 속에서 튀어나와 우리 옆에, 혹은 우리 눈에 보이지 않는 곳에서 침묵하지만 확실하게 사회를 지탱하는 모습입니다. 물류의 막힘을 해소하고, 제조업의 생산성을 극대화하며, 위험한 작업에서 인간을 해방합니다. 그러한 미래는 더 이상 SF 소설 속 이야기나 아니며, Isaac 0.5와 같은 기술의 축적의 결과로 구체적인 현실이 되기 시작하고 있습니다.
Perceptron이라는 이름은 “지각”이라는 단어의 의미에서 유래했지만, 그들이 추구하는 것은 지각의 그 너머에 있는 “공존”입니다. 물리적인 세계를 정확하게 이해하고, 인간과 조화를 이루며 함께 일할 수 있는 지능의 탄생은 우리가 기술과 끊어온 역사의 새로운 장의 시작을 고합니다. 투자자들의 기대와 현장으로부터의 절실한 요구를 등에 업고, Perceptron은 앞으로도 물리 AI라는 미개척의 황무지를 개척해 나갈 것입니다.
그들이 다음에 우리에게 어떤 놀라움을 보여줄지. 그리고 그들이 갈고닦은 “지능”이 우리의 일상생활을 어떻게 변화시켜 나갈지. 그 진화 과정을 주시하는 것은 앞으로의 기술 사회를 이해하는 데 가장 흥미로운 경험 중 하나가 될 것이 분명합니다. AI가 진정으로 “신체”를 갖게 될 때, 우리의 문명은 또 한 번 미지의 단계로 나아갈 것입니다.
출처: note 원문
번역: Gemma 3(.44) 초벌 + 교정 27청크
원문 보기 | 출처: note.com