WavePulse Radio Raw Transcripts
WavePulse Radio Raw Transcripts est un immense dataset contenant des transcriptions segmentées de flux radio en direct issues de 396 stations américaines, couvrant débats, actualités et émissions politiques.
Plus de 250 millions de segments textuels issus de 750 000+ heures de radio, fichiers Parquet par État et mois
Apache 2.0
Description
Ce dataset comprend plus de 250 millions de segments textuels issus de transcriptions automatiques par WhisperX de 750 000+ heures d’enregistrements radio en direct à travers les États-Unis. Les fichiers sont organisés en Parquet par État et par mois.
À quoi sert ce dataset ?
- Entraîner et évaluer des modèles NLP sur de vastes données textuelles issues de la parole
- Analyser des débats politiques et émissions radiophoniques avec segmentation fine
- Améliorer la diarisation, la reconnaissance vocale et la compréhension du langage oral
Peut-on l’enrichir ou l’améliorer ?
Oui, le dataset peut être complété par des annotations manuelles, par des résumés, ou étendu à d’autres langues et périodes. Des corrections ou filtrages supplémentaires peuvent améliorer la qualité pour certaines applications.
🔎 En résumé
🧠 Recommandé pour
- Chercheurs en NLP oral
- Développeurs de modèles de reconnaissance vocale
- Analyse politique
🔧 Outils compatibles
- Hugging Face Datasets
- PySpark
- Pandas
- Frameworks NLP (spaCy, transformers)
💡 Astuce
Utiliser des méthodes de filtrage de segments pour extraire les passages les plus pertinents selon l’application ciblée.
Questions fréquemment posées
Quel est le format principal des fichiers du dataset ?
Le dataset est organisé en fichiers Parquet, segmentés par État et par mois, contenant les transcriptions segmentées.
Ce dataset contient-il une diarisation des locuteurs ?
Oui, la diarisation automatique a été réalisée avec WhisperX pour séparer et identifier les locuteurs.
Peut-on utiliser ce dataset pour l’analyse politique et sociale ?
Oui, le dataset couvre de nombreux débats, émissions d’actualité et discussions politiques à travers les États-Unis en 2024.




