Səsli Agent Benchmark Mənzərəsi bizim dərc etdiyimiz bir məlumat toplusudur: səsli agentlər, danışıq köməkçiləri, nitqlə aktivləşdirilən alət istifadəsi, kompüter hərəkəti, nitqin tanınması və iclasların anlaşılması üçün ictimai benchmarkların strukturlaşdırılmış xəritəsi. Bu səhifə onun nəşr qeydidir.
Nədir
- Hər biri bir sətir olmaqla 13 benchmark, sənədləşdirilmiş sahə müqaviləsi (data/schema.json) olan maşın tərəfindən oxuna bilən faylda (data/benchmarks.jsonl) yer alır.
- Hər sətirdə benchmarkın əsas fokusu; onun səsli daxiletmə, səsli çıxış, çoxdövriyyəli qarşılıqlı əlaqə, alət istifadəsi, məqsədə çatma, kompüter və ya brauzer hərəkəti, iclas və ya uzun formalı material və real vaxt rejimində işləməni əhatə edib-etməməsi; məlumatların ictimai olub-olmaması; ayrı-ayrılıqda qeyd olunan kod və məlumat lisenziyaları; repozitoriya, məlumat toplusu kartı və məqalə ünvanları; son yoxlanılma tarixi; və sübut qeydləri yer alır.
- Dəyərlər “bəli”, “xeyr”, “qismən” və ya “aydın deyil” şəklindədir. “Qismən” o deməkdir ki, qabiliyyət dəstin bir hissəsində mövcuddur və ya dolayı yolla qiymətləndirilir; bu, keyfiyyəti təsvir etmir.
- Hər sətirdə mənbə auditində sadalanan ən azı bir birinci tərəf mənbəyi var. Cari buraxılışdakı faktlar 1 sentyabr 2026-cı il tarixində tərtibatçıların ictimai repozitoriyalarından, məlumat toplusu kartlarından və məqalələrindən yoxlanılıb.
Nə deyil
- Liderlər cədvəli deyil. Heç bir bal ehtiva etmir və heç nəyi sıralamır. Daxil edilməsi təsdiq mənasını vermir. Niyə bu şəkildə qurulduğu Səsli agent benchmark mənzərəsi necə quruldu məqaləsində izah olunur.
- Qiymətləndirmə çərçivəsi deyil. Modelə qarşı işə salmaq üçün heç nə yoxdur; repozitoriya məlumatları, onun sxemini, validatoru və sorğu alətini təqdim edir.
- Cue-nun benchmarkı deyil. Google DeepMind-ın keys-stadisində təsvir edilən özəl 227 nümunəlik istehsal benchmarkı onun bir hissəsi deyil.
Harada dərc olunur
| Harada | Ünvan | Rol |
|---|---|---|
| GitHub | Sophon-LLC/voice-agent-benchmark-landscape | Qeyd mənbəyi: məlumatlar, sxem, mənbə auditi, töhfə qaydaları, testlər |
| Zenodo | doi.org/10.5281/zenodo.22227265 | DOI-ləri olan arxivləşdirilmiş buraxılışlar; konsept DOI həmişə ən son versiyaya yönləndirir |
| Hugging Face | chatjesus/voice-agent-benchmark-landscape | Məlumat toplusunun güzgüsü |
Versiyalar
| Versiya | Tarix | Qeydlər | Lisenziya | Versiya DOI |
|---|---|---|---|---|
| v1.0.2 | 1 sentyabr 2026 | 13 | MIT | 10.5281/zenodo.22227266 |
v1.0.2 üçün Zenodo qeydində məlumat toplusunun SHA-256-sı (1d36c7b3f73565147fb7afff076c611c5fddc331e3ec47dc867625b75b70bbf4) var. Bu, endirilmiş nüsxəni arxivdəki ilə yoxlamağa imkan verir.
Necə istinad etməli
Anbarın CITATION.cff faylında müəllif kimi Sophon LLC göstərilir. Dəqiq təkrarediləbilərlik vacib olduqda versiya DOI-sinə, inkişaf edən layihə üçün isə konsept DOI-sinə istinad edin:
Sophon LLC. Voice Agent Benchmark Landscape, version 1.0.2. 1 September 2026. https://doi.org/10.5281/zenodo.22227266
Düzəlişlər
Düzəliş anbarın CONTRIBUTING.md faylına uyğun olaraq sətri, sahəni, təklif olunan dəyəri və birinci tərəf mənbəyini göstərir. Dəyişikliklər yeni DOI ilə yeni versiya kimi yayımlanır.