FLEURS karşılaştırması nedir? Konuşma tanıma sistemlerini aynı malzeme üzerinde karşılaştırmak için kullanılan, 102 dilde okunmuş konuşmadan oluşan herkese açık bir sınama kümesidir. Her sistemin çıktısı başvuru metnine karşı puanlanır; bu da dil başına karşılaştırılabilir tek bir hata oranı verir.
Bir kaydı metne çevirin
Sesli mesajınızı, ses veya video dosyanızı Telegram'da @potok_now_bot hesabına gönderin, metin sohbete geri gelsin.
@potok_now_bot hesabını Telegram'da aç
2 GB'a kadar dosyalar · TXT, MD, DOCX, PDF, SRT ve VTT olarak dışa aktarma · konuşmacı etiketleri ve zaman damgaları · yaklaşık 30 dil
Temel bilgiler
- Konuşmacılar cümleleri yüksek sesle okur; bu yüzden veri gerçek toplantılardan, görüşmelerden veya sokak kayıtlarından daha temizdir.
- Puanlar genellikle kelime hata oranı olarak, boşluksuz yazılan diller için karakter hata oranı olarak bildirilir.
- Arkasında çok sayıda sınama saati olan bir dil, model o dil için az eğitim verisine sahipse yine de düşük puan alabilir.
- Yayımlanmış puanlar, onları alıntılayan üründen değil, model yapımcılarından veya üçüncü taraflardan gelir.
- Her sistem aynı cümleleri okuduğu için, tek bir dilde iki sistem arasındaki puan farkını yorumlamak daha kolaydır.
Nasıl görünür
from datasets import load_dataset
// one language of the test split, English (US)
fleurs = load_dataset("google/fleurs", "en_us", split="test")
print(fleurs[0]["transcription"]) # reference text for scoring
print(fleurs[0]["audio"]["sampling_rate"])
Daha fazlası
Dillerin tam listesine, araçlara ve sözlüğe bakın.
Sık sorulan sorular
FLEURS verisini kim yayımlıyor?
Veri kümesi Google tarafından yayımlanır ve Hugging Face üzerinden dağıtılır. Herkes yükleyebilir; bu yüzden araştırmacılar yayımlanmış bir puanı yeniden üretebilir.
İyi bir FLEURS puanı benim sonucumu öngörür mü?
Yalnızca kabaca. Sessiz ortamda okunmuş konuşma, gürültülü bir röportajdan daha kolaydır; bu yüzden kendi kaydınız genellikle karşılaştırmadan daha kötü puan alır.
Karşılaştırmalar neden önemli?
Sistemleri aynı sınama malzemesinde ve aynı puanlama yöntemiyle karşılaştırmanıza olanak tanırlar; bu, kalite hakkındaki herhangi bir pazarlama iddiasından daha bilgilendiricidir.
FLEURS sayıları bizim kendi ölçümlerimiz mi?
Potok sayfaları bunları alıntıladığında bunlar başkalarının yayımlanmış sonuçlarıdır, bizim kendi sınamalarımız değil. Onları bir kılavuz olarak kullanın ve kendi kısa dosyanızı deneyin.
Karşılaştırma neyi kapsamıyor?
Gürültülü odalar, üst üste konuşan sesler, kendiliğinden konuşma ve özel sözcük dağarcığı okunmuş konuşma verisinde azdır; bu yüzden bu durumları kendi sesinizde kontrol edin.
Kaynaklar
Her kaynak, belirtilen tarihte elle açılarak kontrol edildi. Sayfalar değişir; bir ayrıntı sizin için önemliyse kaynağı açın.
- FLEURS speech dataset (Google, Hugging Face), Hugging Face · kontrol edildi
- Word error rate (Wikipedia), Wikipedia · kontrol edildi
Kendi kaydınızda deneyin
Sesli mesajınızı, ses veya video dosyanızı Telegram'da @potok_now_bot hesabına gönderin, metin sohbete geri gelsin.
@potok_now_bot hesabını Telegram'da aç