本文へ移動
AI NEWS JOURNAL
arXiv cs.CLAI NEWS / JOURNAL

Lipi-Ghor:大規模で日記化された多領域のベンガル語音声コーパスおよびその構築のためのスケーラブルなパイプライン

arXiv:2610.36184v1 発表タイプ:新規 要旨:2億3,000万人以上が話すベンガル語は、音声言語研究において依然として極めてリソースが不足しています。既存のオープンなベンガル語ASRコーパスは、短い読み上げ音声やクラウドソーシングによる音声に限定されており、話者区別や長時間の音声データを欠いています。本稿では、Lipi-Ghorを提案します。これは大規模な弱教師ありベンガル語音声コーパスで、596のユニークなチャンネルにまたがる998本のYouTube動画から収集された885時間の音声を含み、オーディオブック、ドラマ、宗教説教、ニュース、地域方言など、17の多様な分野にわたっています。各録音にはSSTT形式(話者、発話、文字起こし、タイムスタンプ)でアノテーションが付与されており、自動化された話者区別とベンガル語のYouTube字幕トラックを組み合わせています。知る限り、Lipi-Ghorは大規模な

翻訳サービスが停止中のため原文を表示しています。

arXiv:2610.36184v1 Announce Type: new

Abstract: Bengali, spoken by over 230 million people, remains severely under-resourced in spoken language research. Existing open Bengali ASR corpora are confined to short, read or crowd-sourced speech and lack speaker diarization and long-form audio.

We present Lipi-Ghor, a large-scale weakly-supervised Bengali speech corpus comprising 885 hours of audio sourced from 998 YouTube videos across 596 unique channels, spanning 17 diverse domains including audiobooks, drama, religious sermons, news, and regional dialects. Each recording is annotated in SSTT format (Speaker, Speech, Transcription, Timestamp), which combines automated diarization with Bengali YouTube caption tracks.

To our knowledge, Lipi-Ghor is the first Bengali speech corpus to pair large-scale coverage with speaker-diarized, long-form audio annotations, both of which are absent from existing open Bengali resources. We also present the construction methodology as a replicable pipeline for any language with a sufficient captioned YouTube presence. Targeted channel curation across a handful of rich domains yields corpus scales that were previously out of reach for low-resource languages.

We benchmark four widely-used ASR models under zero-shot and fine-tuned conditions. All four degrade consistently on emotive, dialectal, and long-form content. Because caption targets are noisy, we also release a human-annotated gold evaluation split, verified by 17 volunteer annotators over 30 hours of human-in-the-loop correction and stratified across all 17 domains.

We release our original contributions (video-ID lists, diarization output, pipeline code, and the gold annotations) under CC-BY-4.0, and distribute caption-derived transcripts for research use only; no raw audio is redistributed.

出典

原文を読む ↗

関連テーマ

← すべてのニュースへ