Voice Agent Benchmark Landscape ni mkusanyiko wa data tunaouchapisha: ramani iliyopangwa ya benchmark za umma za wakala wa sauti, wasaidizi wa sauti, matumizi ya zana kwa sauti, utendaji wa kompyuta, utambuzi wa usemi na uelewa wa mikutano. Ukurasa huu ni rekodi yake ya uchapishaji.
Ni nini
- Benchmark 13, kila moja ikiwa na safu yake, katika faili inayoweza kusomwa na mashine (data/benchmarks.jsonl) yenye mkataba wa sehemu ulioandikwa (data/schema.json).
- Kila safu inaandika lengo kuu la benchmark; kama inahusu ingizo la sauti, tokeo la sauti, mwingiliano wa zamu nyingi, matumizi ya zana, ukamilishaji wa lengo, utendaji wa kompyuta au kivinjari, nyenzo za mkutano au za fomu ndefu, na utendaji wa wakati halisi; kama data ni ya umma; leseni za msimbo na data, zikiandikwa kando; anwani za hazina, kadi ya mkusanyiko wa data na karatasi; tarehe ya mwisho ya uthibitisho; na maelezo ya ushahidi.
- Thamani ni ndiyo, hapana, kiasi au haijulikani. Kiasi inamaanisha uwezo unaonekana katika sehemu ya seti au unatathminiwa kwa njia isiyo ya moja kwa moja; haielezei ubora.
- Kila safu ina angalau chanzo kimoja cha wahusika wa kwanza, kilichoorodheshwa katika ukaguzi wa chanzo. Ukweli katika toleo la sasa ulithibitishwa tarehe 1 Septemba 2026 kutoka kwa hazina za umma za watunzaji, kadi za mkusanyiko wa data na karatasi.
Kile ambacho siyo
- Siyo ubao wa wanaoongoza. Haina alama zozote na haipangi chochote. Kujumuishwa hakumaanishi kuidhinishwa. Kwa nini ilijengwa hivyo kimo katika Jinsi voice-agent benchmark landscape ilivyojengwa.
- Siyo mfumo wa tathmini. Hakuna kitu cha kuendesha dhidi ya modeli; hazina inatoa data, schema yake, kidhibitishi na zana ya kuuliza.
- Siyo benchmark ya Cue. Benchmark ya faragha ya uzalishaji yenye sampuli 227 iliyoelezwa katika utafiti-kifani wa Google DeepMind si sehemu yake.
Wapi imechapishwa
| Wapi | Anwani | Wajibu |
|---|---|---|
| GitHub | Sophon-LLC/voice-agent-benchmark-landscape | Chanzo cha rekodi: data, schema, ukaguzi wa chanzo, sheria za mchango, majaribio |
| Zenodo | doi.org/10.5281/zenodo.22227265 | Matoleo yaliyohifadhiwa yenye DOI; DOI ya dhana daima huelekeza kwenye toleo jipya zaidi. |
| Hugging Face | chatjesus/voice-agent-benchmark-landscape | Nakala ya hifadhidata. |
Matoleo
| Toleo | Tarehe | Rekodi | Leseni | DOI ya Toleo |
|---|---|---|---|---|
| v1.0.2 | 1 Septemba 2026 | 13 | MIT | 10.5281/zenodo.22227266 |
Rekodi ya Zenodo ya toleo la v1.0.2 ina SHA-256 ya hifadhidata (1d36c7b3f73565147fb7afff076c611c5fddc331e3ec47dc867625b75b70bbf4) ili nakala iliyopakuliwa iweze kulinganishwa na ile iliyohifadhiwa.
Jinsi ya kutaja
Faili ya CITATION.cff ya hazina inamtaja mwandishi kama Sophon LLC. Taja DOI ya toleo wakati uzalishaji upya kamili ni muhimu na taja DOI ya dhana kwa mradi unaoendelea:
Sophon LLC. Voice Agent Benchmark Landscape, version 1.0.2. 1 September 2026. https://doi.org/10.5281/zenodo.22227266
Marekebisho
Sahihisho linataja safu, sehemu, thamani inayopendekezwa na chanzo cha moja kwa moja, kufuatia faili ya CONTRIBUTING.md ya hazina. Mabadiliko husafirishwa kama toleo jipya lenye DOI mpya.