AI 스타트업이 시장에서 ‘가장 빠른 데이터 처리 엔진’을 출시합니다.

AI 스타트업이 가장 빠른 데이터 처리 엔진을 출시합니다.

파리를 기반으로 한 여성 창업인 AI 스타트업 Pathway가 데이터 처리 엔진의 일반 출시를 발표했습니다. 보고에 따르면 기존의 스트리밍 솔루션보다 최대 90배 빠르며 “시장에서 가장 빠른 데이터 처리 엔진”이라고 약속합니다.

비밀은 동일한 워크플로우에서 배치(batch)와 스트리밍 로직을 혼합할 수 있는 독특한 능력에 있으며, 시스템이 더 이상 유용하지 않은 것을 잊게 합니다. 기본적으로 이는 인간과 마찬가지로 실시간으로 변화에 대응하고 학습할 수 있다는 것을 의미합니다.

Pathway의 CEO이자 공동 창업자 인 Zuzanna Stamirowska는 기존의 배치 및 스트리밍 아키텍처 구축의 복잡성으로 인해 두 가지 접근법 사이에 분리가 발생했다고 말합니다.

또한 그녀는 이로 인해 AI 시스템의 데이터 스트리밍 채택이 늦춰지고, 지능이 시간에 고정되었다고 언급했습니다. 그리고 제너레이티브 AI라는 세 번째 워크플로우의 복잡성이 추가되는 것을 빼놓을 수 없습니다.

Stamirowska에 따르면, 신속한 데이터 처리와 더 유연한 AI에 대한 “필수적인 요구”가 지금은 존재합니다. 그녀는 “그래서 우리의 임무는 배치, 스트리밍 또는 LLM 시스템과 관계없이 개발자에게 간단한 경험을 제공하는 것입니다”라고 말합니다.

Stamirowska는 Pathway의 목표는 개발자에게 배치, 스트리밍 또는 LLM 시스템과 관계없이 간단한 경험을 제공하는 것입니다. 출처: Pathway

AI 재교육 없이 데이터 포인트 수정

과거에는 정적 데이터 업로드로 모델을 훈련시킨 결과, 기계가 실시간으로 부정확하거나 오래된 정보를 “잊는” 것은 거의 불가능했습니다. 기존에는 재교육이 모델에 필요했습니다.

실제로 우리가 재미로 ChatGPT에게 질문을 하면, 부정확한 정보를 잊을 수 있습니까라고 물어봤을 때, 다음과 같은 응답을 받았습니다:

“AI 언어 모델로서, 나는 인간과 같은 방식으로 정보를 ‘잊을’ 수 있는 능력이 없습니다.

하지만 OpenAI의 개발자와 연구원은 새로운 데이터와 개선을 바탕으로 모델을 업데이트하고 재교육할 수 있습니다.”

그러나 Pathway는 엑셀 문서 내에서 한 셀의 값을 업데이트하는 것과 유사하게, 일부 데이터 포인트를 수정할 수 있다고 주장합니다. 업데이트된 셀은 전체 문서를 다시 처리하는 것이 아니라, 이에 종속된 셀만 처리합니다.

스타트업의 기존 클라이언트인 독일 물류 전문 업체 DB Schenker는 이상 감지 분석 프로젝트의 시장 진입 시간을 3개월에서 1시간으로 줄였습니다. 한편, 프랑스 우편 서비스 회사 La Poste는 자동차 투자 비용을 16% 줄였습니다.

개발자들을 위한 ‘공용어’

Pathway는 폴란드-프랑스 듀오 인 Stamirowska와 Claire Nouet이 2020년에 설립한 딥테크 스타트업입니다. 지금까지, 이 스타트업은 작년 12월 프리시드 라운드에서 450만 달러 (약 400만 유로)를 모금하였으며, 유럽과 북미 전역에 20명 이상의 직원을 보유하고 있습니다.

이 여성 주도의 딥테크 스타트업은 시스템이 모든 데이터 파이프라인 (스트림, 배치 및 생성적 AI)의 “공용어”가 되기를 희망하고 있습니다. 클라이언트의 비용을 절감하는 것 이상으로, 전문 기술 세트가 필요한 스트리밍 워크플로우 설계 능력을 개발자들에게 민주화하고자 한다고 말합니다.