음성 에이전트 벤치마크 환경: 기록 및 인용

음성 에이전트 벤치마크 환경은 저희가 게시하는 데이터 세트입니다. 이는 음성 에이전트, 음성 기반 어시스턴트, 음성 지원 도구 사용, 컴퓨터 작업, 음성 인식, 회의 이해를 위한 공개 벤치마크의 구조화된 지도입니다. 이 페이지는 해당 데이터 세트의 게시 기록입니다.

제품 소개

• 13개의 벤치마크가 각각 한 행으로, 문서화된 필드 계약(data/schema.json)이 있는 기계 판독 가능 파일(data/benchmarks.jsonl)에 포함되어 있습니다.
• 각 행에는 벤치마크의 주요 초점, 음성 입력·음성 출력·다중 턴 상호작용·도구 사용·목표 완료·컴퓨터 또는 브라우저 작업·회의 또는 장문 자료·실시간 작동 여부, 데이터 공개 여부, 별도로 기록된 코드 및 데이터 라이선스, 리포지토리·데이터 세트 카드·논문 주소, 마지막 검증 날짜, 증거 메모가 기록됩니다.
• 값은 예, 아니요, 부분적 또는 불분명입니다. 부분적은 해당 기능이 제품군의 일부에 나타나거나 간접적으로 평가됨을 의미하며, 품질을 설명하지는 않습니다.
• 모든 행에는 출처 감사에 명시된 최소 하나의 1차 출처가 있습니다. 현재 릴리스의 사실들은 2026년 9월 1일에 유지 관리자의 공개 리포지토리, 데이터 세트 카드, 논문을 통해 검증되었습니다.

해당하지 않는 사항

• 리더보드가 아닙니다. 점수를 포함하지 않으며 순위를 매기지 않습니다. 포함이 보증을 의미하지는 않습니다. 그렇게 만들어진 이유는 음성 에이전트 벤치마크 환경은 어떻게 만들어졌나에 설명되어 있습니다.
• 평가 프레임워크가 아닙니다. 모델에 대해 실행할 것이 없습니다. 리포지토리는 데이터, 스키마, 검사기, 쿼리 도구를 제공합니다.
• Cue의 벤치마크가 아닙니다. Google DeepMind의 사례 연구에 기술된 비공개 227-샘플 프로덕션 벤치마크는 여기에 포함되지 않습니다.

게시 위치

버전

v1.0.2의 Zenodo 레코드에는 데이터 세트의 SHA-256(1d36c7b3f73565147fb7afff076c611c5fddc331e3ec47dc867625b75b70bbf4)이 포함되어 있어 다운로드한 사본을 보관된 사본과 대조하여 확인할 수 있습니다.

인용 방법

리포지토리의 CITATION.cff 파일은 저자를 Sophon LLC로 명시합니다. 정확한 재현성이 중요할 때는 버전 DOI를, 발전하는 프로젝트에 대해서는 개념 DOI를 인용하십시오.

Sophon LLC. Voice Agent Benchmark Landscape, version 1.0.2. 1 September 2026. https://doi.org/10.5281/zenodo.22227266

정정

수정 시에는 리포지토리의 CONTRIBUTING.md에 따라 행, 필드, 제안 값, 그리고 1차 출처를 명시합니다. 변경 사항은 새로운 DOI와 함께 새 버전으로 배포됩니다.