독립 개발자 Yetone의 Alma 통과율과 비용이 Claude Code보다 우수하다

독립 개발자 Yetone이 주도하여 개발한 로컬 AI 에이전트 Alma는 AI 에이전트 인프라 회사 Runta가 시작한 최신 라운드의 비교에서 작업 통과율과 성공 비용 모두에서 세 번째로 높은 순위를 기록하였으며, Claude Code, OpenCode 등의 도구보다 우수합니다. 현재 목록 스냅샷에 따르면, Alma의 작업 통과율은 72.7%로 Codex CLI의 77.9%와 Pi의 72.8%에 이어 두 번째이며, Claude Code는 70.0%입니다.

Alma는 성공적으로 문제를 해결하는 데 평균 약 0.80 달러의 비용이 소요되며, Claude Code는 0.94 달러로 약 16% 저렴합니다. 이번 FrontierHarness v1.1 비교는 동일한 대모델이 서로 다른 에이전트 실행 프레임워크에서의 성능을 평가하며, 21개의 Harness 구성, 5개의 대모델 및 62개의 작업을 포함하고, 각 항목을 4회 반복하여 총 26,040회를 실행할 계획이며, 규모는 이전 버전의 72배입니다. 모든 도구는 통일된 클라우드 환경에서 실행되며, 작업 성공률, 토큰 비용 및 실행 속도를 비교합니다.

Alma는 로컬 실행 및 장기 기억을 주력으로 하며, 코드를 읽고 수정하고, 터미널 명령을 실행하고, 웹 페이지를 검색할 수 있으며, Skills와 MCP를 지원하고, 기본 모델을 전환할 수 있습니다. Alma는 최근 Herdr와 통합되었으며, Claude Code, Codex, Pi 등의 프로그래밍 에이전트는 계속해서 Herdr에서 실행될 수 있으며, Alma를 통해 동일한 채팅 인터페이스에서 실행 과정, 질문에 대한 답변 및 작업 승인을 확인할 수 있습니다. 사용자는 또한 iPhone을 통해 컴퓨터의 여러 에이전트를 원격으로 관리할 수 있습니다. 현재 평가가 아직 끝나지 않았으며, 순위는 계속 변동할 것이며, 참조 모델은 GLM, DeepSeek, Kimi, Muse 등의 오픈 소스 모델로 제한되며, GPT 및 Claude 시리즈의 폐쇄 소스 모델은 포함되지 않습니다.