본문으로 건너뛰기
AI NEWS JOURNAL
arXiv cs.CLAI NEWS / JOURNAL

Lipi-Ghor: 대규모, 일기화된 다중 도메인 벵골어 음성 코퍼스 및 이를 구축하기 위한 확장 가능한 파이프라인

arXiv:2610.36184v1 발표 유형: 신규 초록: 2억 3천만 명 이상이 사용하는 벵골어는 음성 언어 연구 분야에서 여전히 심각한 자원 부족 상태에 놓여 있습니다. 기존의 공개 벵골어 음성인식 데이터셋은 짧고, 읽기 방식으로 녹음되었거나 크라우드소싱된 음성에 국한되어 있으며, 발화자 디아리제이션과 장편 오디오가 부족합니다. 우리는 Lipi-Ghor를 제안합니다. 이는 대규모 약지도시 학습 기반 벵골어 음성 데이터셋으로, 596개의 고유 채널에서 수집된 998개의 유튜브 영상에 포함된 885시간의 오디오로 구성되어 있으며, 오디오북, 드라마, 종교 설교, 뉴스, 지역 사투리를 포함한 17개의 다양한 분야를 포괄합니다. 각 녹음은 SSTT 형식(발화자, 음성, 전사, 타임스탬프)으로 주석이 달려 있으며, 이는 자동 디아리제이션과 벵골어 유튜브 자막 트랙을 결합한 것입니다. 우리 지식으로는, Lipi-Ghor가 대규모를 함께 제공하는 최초의 벵골어 음성 데이터셋입니다.

번역이 완료되지 않아 원문을 표시합니다.

arXiv:2610.36184v1 Announce Type: new

Abstract: Bengali, spoken by over 230 million people, remains severely under-resourced in spoken language research. Existing open Bengali ASR corpora are confined to short, read or crowd-sourced speech and lack speaker diarization and long-form audio.

We present Lipi-Ghor, a large-scale weakly-supervised Bengali speech corpus comprising 885 hours of audio sourced from 998 YouTube videos across 596 unique channels, spanning 17 diverse domains including audiobooks, drama, religious sermons, news, and regional dialects. Each recording is annotated in SSTT format (Speaker, Speech, Transcription, Timestamp), which combines automated diarization with Bengali YouTube caption tracks.

To our knowledge, Lipi-Ghor is the first Bengali speech corpus to pair large-scale coverage with speaker-diarized, long-form audio annotations, both of which are absent from existing open Bengali resources. We also present the construction methodology as a replicable pipeline for any language with a sufficient captioned YouTube presence. Targeted channel curation across a handful of rich domains yields corpus scales that were previously out of reach for low-resource languages.

We benchmark four widely-used ASR models under zero-shot and fine-tuned conditions. All four degrade consistently on emotive, dialectal, and long-form content. Because caption targets are noisy, we also release a human-annotated gold evaluation split, verified by 17 volunteer annotators over 30 hours of human-in-the-loop correction and stratified across all 17 domains.

We release our original contributions (video-ID lists, diarization output, pipeline code, and the gold annotations) under CC-BY-4.0, and distribute caption-derived transcripts for research use only; no raw audio is redistributed.

자료 출처

원문 읽기 ↗

관련 주제

← 전체 소식 이어 읽기