AI21 Labs Jurassic, 엔터프라이즈 AI를 정조준한 이스라엘의 강력한 한 방

생성형 AI라고 하면 OpenAI, 구글, 앤스로픽, 그리고 메타 정도를 떠올리시는 분들이 많을 텐데요. 하지만 이 거대한 AI 경쟁 속에서, 엔터프라이즈 AI라는 특정 시장을 정조준하며 무섭게 성장한 이스라엘의 강자가 있습니다. 바로 AI21 Labs Jurassic(쥬라기) 모델 패밀리입니다.

 

AI21 Labs Jurassic는 대규모 언어 모델 시장의 '다크호스'로 불리며, 특히 최근 발표한 Jamba 모델로 기술의 최전선에 섰는데요. 이들이 어떻게 엔터프라이즈 AI 시장의 판도를 바꾸고 있는지, 그 강력한 기술력의 비밀을 자세히 파헤쳐 보겠습니다.

 

 

1. AI21 Labs Jurassic, 강력한 대규모 언어 모델의 등장

AI21 Labs Jurassic는 이스라엘의 AI 스타트업 AI21 Labs가 개발한 대규모 언어 모델(LLM) 제품군입니다. 이들은 GPT-3에 대응하는 초기 모델부터 시작해, 성능을 대폭 개선한 Jurassic-2 시리즈(J2-Ultra, J2-Mid)를 선보이며 시장에 강력한 인상을 남겼는데요. Jurassic-2 Ultra 모델은 8,192 토큰의 컨텍스트 창을 제공하며, 복잡한 언어 이해 및 생성 작업에 탁월한 성능을 보여주며 엔터프라이즈 AI 시장의 강력한 선택지로 자리 잡았습니다.

 

2. AI21 Labs, 이스라엘 AI 혁신의 중심

AI21 Labs는 모빌아이(Mobileye)의 창업자 암논 샤슈아(Amnon Shashua) 교수를 비롯한 스탠퍼드 출신의 저명한 연구자들이 2017년에 설립한 이스라엘 AI 기업입니다. 이들은 "AI가 인간의 글쓰기 방식을 근본적으로 바꿀 것"이라는 비전 아래, AI21 Labs Jurassic 모델 개발에 매진해왔는데요. AI21 Labs는 OpenAI나 구글과 달리, 처음부터 엔터프라이즈 AI 시장, 즉 금융, 법률, 헬스케어 등 오류에 민감하고 규제가 심한 산업을 핵심 타깃으로 삼았습니다.

 

 

3. 엔터프라이즈 AI, B2B 시장을 정조준하다

엔터프라이즈 AI는 AI21 Labs의 정체성입니다. 이들은 일반 사용자를 위한 화려한 챗봇 경쟁보다는, 기업이 실제 업무에서 겪는 문제를 해결하는 데 집중했는데요. 엔터프라이즈 AI 환경에서는 AI의 작은 오류가 막대한 재정적, 법적 문제로 이어질 수 있습니다. AI21 Labs는 이러한 시장의 요구에 맞춰, AI21 Labs Jurassic 모델들이 긴 문서(Long-context)를 정확하게 요약하고, RAG(검색 증강 생성) 성능을 극대화하여 신뢰할 수 있는 답변을 제공하도록 설계했습니다.

 

4. AI21 Studio, 아이디어를 현실로 만드는 플랫폼

AI21 Studio는 개발자와 기업들이 AI21 Labs Jurassic 및 Jamba 모델을 손쉽게 활용해 자신만의 AI 애플리케이션을 구축할 수 있도록 지원하는 개발 플랫폼입니다. AI21 Studio는 단순한 API 제공을 넘어, RAG, 도구 사용(Tool calling) 등 엔터프라이즈 AI에 필수적인 기능들을 통합 제공하는데요. 개발자들은 AI21 Studio를 통해 AI21 Labs의 강력한 대규모 언어 모델을 기반으로 워크플로우를 자동화하고 고품질 콘텐츠를 생성할 수 있습니다.

 

 

5. Jamba, 세계 최초의 하이브리드 AI 모델

Jamba는 AI21 Labs가 2024년 3월에 발표하며 전 세계를 놀라게 한 차세대 대규모 언어 모델입니다. Jamba가 주목받는 이유는, 기존의 트랜스포머(Transformer) 아키텍처와 SSM(State Space Model, Mamba)이라는 새로운 아키텍처를 결합한 세계 최초의 '하이브리드' 상용 모델이기 때문입니다. AI21 Labs Jurassic이 트랜스포머 기반이었다면, Jamba는 두 아키텍처의 장점만을 결합해 AI 경쟁의 룰을 바꾸고 있습니다.

 

6. SSM과 Mixture of Experts(MoE), Jamba의 비밀 병기

SSM(Mamba)과 Mixture of Experts(MoE)는 Jamba의 핵심 기술입니다. 트랜스포머는 문맥이 길어질수록 연산량이 기하급수적으로 늘어나는 단점이 있었는데, SSM(Mamba)은 긴 시퀀스를 훨씬 효율적으로 처리할 수 있습니다. Jamba는 이 SSM과 트랜스포머를 교차 배치했습니다. 또한 Mixture of Experts(MoE) 기술을 적용, 총 520억 개의 파라미터 중 실제 연산에는 120억 개만 선택적으로 활성화하여 메모리 사용량은 줄이면서도 처리 속도와 성능은 극대화했습니다.

 

 

7. 대규모 언어 모델의 새로운 지평, 256K 컨텍스트 창

대규모 언어 모델의 성능을 가늠하는 중요한 척도 중 하나가 '컨텍스트 창'(Context Window)입니다. Jamba는 무려 256,000 토큰에 달하는 압도적인 컨텍스트 창을 제공하는데요. 이는 400페이지 분량의 소설책이나 기업의 연간 10-K 보고서 전체를 한 번에 입력하고 분석할 수 있는 규모입니다. AI21 Labs Jurassic의 8K 컨텍스트 창 대비 32배나 확장된 Jamba의 이 능력은, RAG 및 긴 문서 요약이 필수적인 엔터프라이즈 AI 환경에서 압도적인 경쟁력을 보여줍니다.

 

8. 아마존 베드락, 엔터프라이즈 AI로 가는 관문

아마존 베드락은 AI21 Labs의 모델들이 엔터프라이즈 AI 고객들을 만나는 핵심 통로입니다. AWS는 아마존 베드락을 통해 AI21 Labs Jurassic-2 모델(Ultra, Mid) 뿐만 아니라, 최신 Jamba 1.5 모델(Large, Mini)까지 정식으로 제공하고 있습니다. 아마존 베드락을 사용하는 기업들은 별도의 인프라 구축 없이도 AI21 Labs의 강력한 대규모 언어 모델을 즉시 활용하여 금융 보고서 요약, 고객 지원 챗봇, 마케팅 콘텐츠 생성 등 핵심 업무를 자동화할 수 있습니다.

 

 

 

AI21 Labs Jurassic는 엔터프라이즈 AI 시장에 최적화된 강력한 대규모 언어 모델의 등장을 알렸습니다. 그리고 이제 AI21 Labs는 Jamba라는 혁신적인 하이브리드 모델을 통해 SSM과 Mixture of Experts 기술을 선도하며 AI 경쟁의 최전선에 섰습니다.

AI21 Studio와 아마존 베드락을 통해 강력한 접근성까지 확보한 AI21 Labs. OpenAI, 구글, 앤스로픽의 3강 구도에 도전하는 이스라엘의 강력한 AI 기업, AI21 Labs의 행보를 주목해야 할 이유입니다.

 

 

Cohere, 엔터프라이즈 AI 시장을 정조준한 RAG 특화 모델