Bu TTS Modeli unsloth/csm-1b modelini fullfinetuning yöntemi ile omersaidd/tts_nisan_kumru_tur veri seti ile eğitilmiştir.
Eğitim süresi 4 saattir. 4000 adım olarak eğitilmiş olup. GPU olarak A100 kullanılmıştır.
Eğitim parametreleri:
from transformers import TrainingArguments, Trainer
from unsloth import is_bfloat16_supported
trainer = Trainer(
model = model,
train_dataset = processed_ds,
args = TrainingArguments(
per_device_train_batch_size = 2,
gradient_accumulation_steps = 4,
warmup_steps = 5,
max_steps = 4000,
learning_rate = 2e-4,
fp16 = not is_bfloat16_supported(),
bf16 = is_bfloat16_supported(),
logging_steps = 1,
optim = "adamw_8bit",
weight_decay = 0.001,
lr_scheduler_type = "linear",
seed = 3407,
output_dir = "outputs",
report_to = "none",
),
)
Örnek Çıktılar :