Ultramarine 1 Flash - 금융, 법률, 컨설팅, 운영 실무용 오픈 모델

Paper Instruments의 Ultramarine 소개 페이지 전체를 읽고 옮겼어요. 수치는 모두 회사가 밝힌 값이고, 일부는 내부 벤치마크예요.

한 줄 소개

Ultramarine 1 Flash는 전문 실무용 오픈 모델이에요. 금융·법률·컨설팅·운영에 걸친 지식 노동에서 "Fable급"이고 Fable보다 60배 싸다고 해요. API는 지금 쓸 수 있고, 모델 가중치는 곧 공개한다고 해요.

벤치마크 (회사 발표)

| 벤치마크 | Ultramarine 1 Flash | 1위 | |---|---|---| | JobBench | 62.9 | Ultramarine (Gemini 3.8 Flash 60.6, DeepSeek V4.1 Flash 60.4) | | PI Knowledge Work(내부) | 59.3 | Ultramarine (Claude Fable 5 57.8) | | FrontierFinance | 53.3 | Ultramarine (GLM-5.3 Flash 50.7) | | AutomationBench | 50.2 | DeepSeek V4.1 Flash 51.3 | | DiligenceBench | 50.6 | Gemini 3.8 Flash 53.1 | | APEX-Agents 1.1 | 57.0 | Gemini 3.8 Flash 64.3 |

여섯 개 중 세 개에서 1위이고, 나머지는 Gemini 3.8 Flash나 DeepSeek에 밀려요.

토큰 효율과 비용

• 베이스 모델 GLM-5.3 Flash보다 출력 토큰을 6.5% 적게 써요(여섯 벤치마크 합계 32.7M → 30.5M, 추론 포함).
• 내부 PI Knowledge Work 기준 작업당 0.13달러로, Claude Fable 5(max, 8.19달러)와 GPT-5.6 Sol(max, 2.09달러)보다 높은 점수를 냈고, Claude Opus 5.5(max, 6.96달러)·GPT-6 Sol(max, 1.26달러)과는 3점 이내라고 해요.
• API 가격은 100만 토큰당 입력 0.15달러, 캐시 입력 0.03달러, 출력 0.50달러로 GLM-5.3 Flash와 같아요.

PI Knowledge Work란

금융·법률·컨설팅·운영 실무 과제로 완성된 Excel 통합문서, PowerPoint, Word 문서를 내게 하고, ERP·MES 같은 실제 업무 시스템 안에서 일하게 하는 내부 벤치마크예요. 과제마다 루브릭으로 내용·정확성·표현을 채점하고, Artificial Analysis Intelligence Index와 상관계수 0.81이라고 해요.

문서 품질

깔끔하고 단순한 문장, 시각·정보 위계를 강조하며 전문 서비스 분석가에게 요구되는 규칙을 따르도록 만들었다고 해요. 예시로 Nucor의 다섯 기간 부문별 매출·이익 표(소계·합계가 모두 맞음, 제강 부문 이익 2022년 72억 달러 → 2025년 24억 달러)를 보여 줘요.