Meta AI가 Wav2Vec2-BERT를 저자원 언어 ASR 미세 조정으로 Whisper 대비 10~30배 빠르고 2.5배 적은 리소스 사용 달성
Fine-Tune W2V2-Bert for low-resource ASR with 🤗 Transformers
Hugging Face Transformers가 CTC 구조의 Stride 기법을 도입해 Wav2Vec2 모델이 임의 길이의 오디오 파일 처리 가능
Making automatic speech recognition work on large files with Wav2Vec2 in 🤗 Transformers
Hugging Face Transformers가 pyctcdecode 라이브러리를 통합하여 Wav2Vec2 음성인식 모델에 n-gram 언어모델을 결합한 디코딩 방식 제공으로 WER 30% 상대 성능 향상
Boosting Wav2Vec2 with n-grams in 🤗 Transformers
Hugging Face Transformers를 사용해 XLS-R-300M 모델을 터키어 저리소스 음성인식 데이터셋(4시간)에 미세조정해 CTC 손실함수로 음성-텍스트 변환 모델 구축
Fine-Tune XLSR-Wav2Vec2 for low-resource ASR with 🤗 Transformers
Hugging Face Transformers 라이브러리를 사용하여 Wav2Vec2 사전학습 모델을 TIMIT 데이터셋(5시간)으로 파인튜닝해 CTC 기반 영어 자동음성인식 모델 구축
Fine-Tune Wav2Vec2 for English ASR in Hugging Face with 🤗 Transformers