Voice Agent Benchmark Landscape er gagnasafn sem við gefum út: skipulagt yfirlit yfir opinber benchmark fyrir raddfulltrúa, raddstýrða aðstoðarmenn, raddstýrða notkun verkfæra, tölvuaðgerðir, talkenningu og skilning á fundum. Þessi síða er útgáfuskrá þess.
Hvað það er
- 13 benchmark, ein röð fyrir hvert, í véllæsilegri skrá (data/benchmarks.jsonl) með skjalfestu sniði fyrir reiti (data/schema.json).
- Hver röð skráir aðaláherslu viðkomandi benchmark; hvort það nær yfir raddinntak, raddúttak, samskipti í mörgum umferðum, notkun verkfæra, verklok, aðgerðir í tölvu eða vafra, fundi eða langt efni og rauntímavinnslu; hvort gögnin séu opinber; notkunarleyfi fyrir kóða og gögn, skráð sérstaklega; vefföng geymslu, gagnasafnskorts og fræðigreinar; dagsetningu síðustu yfirferðar; og athugasemdir um sannanir.
- Gildi eru já, nei, að hluta eða óljóst. Að hluta þýðir að eiginleikinn kemur fyrir í hluta af safninu eða er metinn óbeint; það lýsir ekki gæðum.
- Hver röð hefur að minnsta kosti eina heimild frá fyrsta aðila, sem er skráð í heimildaúttektinni. Staðreyndir í núverandi útgáfu voru sannreyndar 1. september 2026 út frá opinberum geymslum, gagnasafnskortum og fræðigreinum viðhaldsaðila.
Hvað það er ekki
- Ekki stigatafla. Það inniheldur engin skor og raðar engu. Að vera með þýðir ekki meðmæli. Af hverju það var byggt þannig er í Hvernig benchmark-landslag raddfulltrúa var byggt.
- Ekki matskerfi. Það er ekkert til að keyra á móti líkani; geymslan inniheldur gögnin, snið þeirra, villuleitartæki og fyrirspurnartæki.
- Ekki benchmark Cue. Einka-benchmark með 227 sýnum sem lýst er í tilviksrannsókn Google DeepMind er ekki hluti af því.
Hvar það er gefið út
| Hvar | Veffang | Hlutverk |
|---|---|---|
| GitHub | Sophon-LLC/voice-agent-benchmark-landscape | Aðalheimild: gögn, snið, heimildaúttekt, reglur um framlög, prófanir |
| Zenodo | doi.org/10.5281/zenodo.22227265 | Geymdar útgáfur með DOI-auðkennum; hugtaks-DOI-auðkennið vísar alltaf á nýjustu útgáfuna |
| Hugging Face | chatjesus/voice-agent-benchmark-landscape | Spegill gagnasettsins |
Útgáfur
| Útgáfa | Dagsetning | Færslur | Notkunarleyfi | DOI-auðkenni útgáfu |
|---|---|---|---|---|
| v1.0.2 | 1. september 2026 | 13 | MIT | 10.5281/zenodo.22227266 |
Zenodo-skráningin fyrir v1.0.2 inniheldur SHA-256-próftölu gagnasettsins (1d36c7b3f73565147fb7afff076c611c5fddc331e3ec47dc867625b75b70bbf4) svo hægt sé að bera niðurhalað eintak saman við það sem vistað er í geymslu.
Hvernig á að vitna í
Skráin CITATION.cff í safninu tilgreinir Sophon LLC sem höfund. Vitnaðu í DOI-auðkenni útgáfunnar þegar nákvæm endurgerð er mikilvæg og í hugtaks-DOI-auðkennið fyrir verkefnið í þróun:
Sophon LLC. Voice Agent Benchmark Landscape, version 1.0.2. 1 September 2026. https://doi.org/10.5281/zenodo.22227266
Leiðréttingar
Leiðrétting tilgreinir röðina, reitinn, fyrirhugað gildi og heimild frá fyrsta aðila, samkvæmt CONTRIBUTING.md í safninu. Breytingar eru gefnar út sem ný útgáfa með nýju DOI-auðkenni.