SCIENTIFIC HUB

Araştırmanın izini sürün.

SCIENTIFIC LITERATURE · PPR

Parkinson Hastalığı Tespiti için Wav2Vec-2 Konuşma Gömmelerinin İstatistiksel, Çok Ölçekli ve Dikkate Dayalı Katman Havuzlaması

Statistical, Multi-scale and Attention-based Layer Pooling of Wav2Vec-2 Speech Embeddings for Parkinson’s Disease Detection

Makine çevirisi · Editoryal inceleme bekliyor

· 2025-09-15

DOI: 10.1101/2025.09.13.25335694

Erişim kaynaktan kontrol edilmeliPreprintKaynağa git ↗

Araştırma özeti

Kaynak özetin Türkçe makine çevirisi. Klinik kullanım öncesinde özgün yayınla karşılaştırılmalı; hekim incelemesi değildir. cc by

Wav2vec 2.0 gibi kendi kendini denetleyen önceden eğitilmiş konuşma modelleri, Parkinson hastalığı (PD) dahil olmak üzere klinik ses taraması için giderek daha fazla kullanılan zengin çerçeve düzeyinde gömmeler sağlar. Çerçeve düzeyindeki gömmeleri en iyi şekilde toplamak, çerçeve düzeyindeki gömmelerin, ikili sınıflandırmanın (sağlıklı kontroller (HC) vs. PD). Bunu ele almak için, çalışmamız üç wav2vec 2.0 varyantı, baz modeli ve iki ince ayarlı varyantı (bir tanesi disartrik korpora için uyarlandı), birden fazla katman derinliğinde, on istatistiksel agregasyon fonksiyonu (örneğin, ortalama, medyan, quantile) ve iki ileri şemayı (dikkat bazlı ve çok ölçekli ortalama havuzlama) karşılaştırdı. MDVR-KCL'yi okuma-konuşma corpus (16 PD, 21 HC) olarak kullandık. Sofistike havuzlaşmanın yardımcı olacağı beklentisinin aksine, ortalama havuzlama gibi istatistiksel agregasyonlar tutarlı bir şekilde daha iyi performans ve sağlamlık sağladı. Erken temsiller (Transformer öncesi ve 1 st Transformer bloğu) genellikle en bilgilendirici ve ortalama agregasyon modeller ve derinlikler arasında nispeten yüksek, düşük değişkenlik puanları üretti. Dikkat ve çok ölçekli havuzlama tutarlı kazançlar vermedi. Dahası, wav2vec tabanlı gömmeler geleneksel akustik temellerden daha iyi performans gösterdi. Denetimli özellik seçiminin (ANOVA F-değeri) uygulanması daha da geliştirilmiş performans, yani muhafazakar seçim (12 özellik) 0,87 ortalama dengeli doğruluk ve 0,92 hassasiyet elde etti, en üst yapılandırmalar 0,93 dengeli doğruluğu aştı ve 1,0 hassasiyete sahipti. Bulgular ampirik olarak, ortalama havuzlamanın PD wav2vec tabanlı tespit için gizli özelliklerin zamansal olarak toplanması için uygulanabilir bir strateji olarak kullanılmaya devam edilmesini desteklemektedir.

Özgün kaynak özetini okuyun

Self-supervised pre-trained speech models such as wav2vec 2.0 provide rich frame-level embeddings that are increasingly used for clinical voice screening, including Parkinson’s disease (PD). Optimally aggregating the frame-level embeddings is a significant task, with the underexplored question of how to best aggregate the frame-level embeddings into fixed-length utterance descriptors for the downstream task of binary classification (healthy controls (HC) vs. PD). To address this, our study compared three wav2vec 2.0 variants, the base model and two fine-tuned variants (one adapted for dysarthric corpora), across multiple layer depths, ten statistical aggregation functions (e.g., mean, median, quantiles), and two proposed advanced schemes (attention-based and multi-scale average pooling). We used the MDVR-KCL as a read-speech corpus (16 PD, 21 HC). Contrary to the expectation that sophisticated pooling would help, statistical aggregations such as mean pooling consistently provided better performance and robustness. Early representations (pre-Transformer and 1 st Transformer block) were often the most informative, and mean aggregation produced relatively high, low-variance scores across models and depths. Attention and multi-scale pooling did not yield consistent gains. Moreover, wav2vec-based embeddings outperformed traditional acoustic baselines. Applying the supervised feature selection (ANOVA F-value) further improved performance, i.e. conservative selection (12 features) achieved a mean balanced accuracy of 0.87 and precision of 0.92, with top configurations exceeding a 0.93 balanced accuracy and had a precision of 1.0. The findings empirically support the continued use of mean pooling as a viable strategy for temporal aggregation of latent features for PD wav2vec-based detection.

Bilimsel değerlendirme

01

Araştırma sorusu

Sorunun kapsamı orijinal çalışma üzerinden değerlendirilir.

02

Yöntem ve örneklem

Çalışma tasarımı ve örneklem için kaynak makaleyi kontrol edin.

03

Temel bulgular

Bu kayıt için editoryal olarak onaylanmış bulgu özeti henüz yayımlanmadı.

04

Sınırlılıklar

Sonuçların genellenebilirliği, yanlılık ve klinik anlamı ayrıca incelenmelidir.

Bibliyografik veriden yöntem, örneklem veya klinik sonuç çıkarımı yapılmaz.