https://ai.klavierhye.cc/ko/tags/training/ Recent content in Training on 노준탁 — AI 노트 Hugo -- 0.147.7 ko Sun, 15 Feb 2026 00:00:00 +0000 https://ai.klavierhye.cc/ko/posts/whisper-training/ Sun, 15 Feb 2026 00:00:00 +0000 https://ai.klavierhye.cc/ko/posts/whisper-training/ <p><em>이 글은 한국어 STT를 위한 Whisper fine-tuning 3부작 중 <strong>2부</strong>다: Preprocessing → <strong>Training</strong> → Evaluation. 여기서는 전처리된 dataset을 불러와 학습 루프를 돌린다. 1부는 전처리, 3부는 evaluation/benchmarking을 다룰 예정이다.</em></p> <hr> <p>Mel spectrogram과 tokenized label을 디스크에 저장해 두었다면, 다음은 이걸 training loop에 넣고 모델을 최적화하는 일이다. 말만 하면 간단한데, 막상 선택지가 쏟아진다. Full fine-tuning 할까 LoRA 할까? Learning rate랑 batch size는? Encoder-decoder에서 길이 다른 sequence는 어떻게 padding 하고, GPU 메모리를 낭비하지 않으면서 터지지 않게 할까? 이 글에서는 한국어 통화 음성에 대해 Whisper large-v3를 학습시킬 때 쓰는 training 설정과, 그 뒤에 있는 공학적 선택(trade-off)을 정리한다.</p>