TRL documentation

Topluluk Eğiticileri

You are viewing main version, which requires installation from source. If you'd like regular pip install, checkout the latest stable version (v1.17.1).
Hugging Face's logo
Join the Hugging Face community

and get access to the augmented documentation experience

to get started

Topluluk Eğiticileri

Topluluk eğitimleri, bilgilerini ve uzmanlıklarını başkalarıyla paylaşmak isteyen Hugging Face topluluğunun aktif üyeleri tarafından hazırlanır. Kütüphanenin ve özelliklerinin öğrenilmesi ile temel sınıflara ve modalitelere başlanması için harika bir yoldur.

Dil Modelleri

Eğitimler

GörevSınıfAçıklamaYazarEğitimColab
Pekiştirmeli ÖğrenmeGRPOTrainerTRL'de GRPO ve vLLM ile Verimli Çevrimiçi EğitimSergio PaniegoBağlantıOpen In Colab
Pekiştirmeli ÖğrenmeGRPOTrainerTRL ile GRPO kullanarak akıl yürütme için bir LLM'in eğitim sonrası eğitimiSergio PaniegoBağlantıOpen In Colab
Pekiştirmeli ÖğrenmeGRPOTrainerMini-R1: Deepseek R1'in „aha anı“nı yeniden üretmek için bir RL öğreticisiPhilipp SchmidBağlantıOpen In Colab
Pekiştirmeli ÖğrenmeGRPOTrainerGRPO ve Unsloth optimizasyonlarıyla LLaMA 3.1-8B üzerinde RLAndrea ManzoniBağlantıOpen In Colab
Talimat ayarlamaSFTTrainerChatML formatı ile QLoRA kullanarak Google Gemma LLM'lerini ince ayarPhilipp SchmidBağlantıOpen In Colab
Yapılandırılmış ÜretimSFTTrainerQLoRA ve PEFT kullanarak Llama-2-7B'yi JSON formatında Farsça ürün kataloğu üretmek için ince ayarMohammadreza EsmaeilianBağlantıOpen In Colab
Tercih OptimizasyonuDPOTrainerİnsan tercih hizalaması için Mistral-7b'yi Doğrudan Tercih Optimizasyonu ile hizalayınMaxime LabonneBağlantıOpen In Colab
Tercih Optimizasyonuexperimental.orpo.ORPOTrainerTalimat ayarlamayı ve tercih hizalamasını birleştiren ORPO ile Llama 3'ün ince ayarıMaxime LabonneBağlantıOpen In Colab
Talimat ayarlamaSFTTrainer2025'te Hugging Face ile açık LLM'leri nasıl ince ayar yapabilirsinizPhilipp SchmidBağlantıOpen In Colab
Adım Seviyesinde MuhakemeGRPOTrainervLLM ile adım adım akıl yürütme için Denetimli Pekiştirmeli Öğrenme (SRL)Deepak SwaminathanBağlantıOpen In Colab

Videolar

GörevBaşlıkYazarVideo
Talimat ayarlamaHugging Face TRL kullanarak açık yapay zeka modellerinin ince ayarıWietse Venema
Talimat ayarlamaHugging Face, TRL ve smoltalk Veri Seti ile bir smol-LM'yi nasıl ince ayar yaparsınızMayurji
⚠️ Deprecated features notice for "How to fine-tune a smol-LM with Hugging Face, TRL, and the smoltalk Dataset" (click to expand)

Eğitim, iki kullanımdan kaldırılmış özelliği kullanır:

  • SFTTrainer(..., tokenizer=tokenizer): Bunun yerine SFTTrainer(..., processing_class=tokenizer) kullanın veya bunu tamamen atlayın (modelden çıkarılacaktır).
  • setup_chat_format(model, tokenizer): SFTConfig(..., chat_template_path="Qwen/Qwen3-0.6B") kullanın; burada chat_template_path, sohbet şablonunu kopyalamak istediğiniz modeli belirtir.

Görüntü Dil Modelleri

Eğitimler

GörevSınıfAçıklamaYazarEğitimColab
Görsel QASFTTrainerChartQA veri setinde görsel soru yanıtlama için Qwen2-VL-7B'nin ince ayarıSergio PaniegoBağlantıOpen In Colab
Görsel QASFTTrainerTüketici GPU'sunda TRL ile SmolVLM'nin ince ayarıSergio PaniegoBağlantıOpen In Colab
SEO AçıklamasıSFTTrainerGörsellerden SEO uyumlu açıklamalar üretmek için Qwen2-VL-7B'nin ince ayarıPhilipp SchmidBağlantıOpen In Colab
Görsel QADPOTrainerPaliGemma 🤝 Doğrudan Tercih OptimizasyonuMerve NoyanBağlantıOpen In Colab
Görsel QADPOTrainerTüketici GPU üzerinde TRL ile doğrudan tercih optimizasyonu (DPO) kullanarak SmolVLM'nin ince ayarıSergio PaniegoBağlantıOpen In Colab
Nesne Tespiti YerleştirmeSFTTrainerTRL ile Nesne Algılama Yerelleştirme için VLM İnce AyarıSergio PaniegoBağlantıOpen In Colab
Görsel QADPOTrainerTRL ile MPO Kullanarak Bir Görsel Dil Modelinin İnce AyarlanmasıSergio PaniegoBağlantıOpen In Colab
Pekiştirmeli ÖğrenmeGRPOTrainerTRL ile GRPO kullanarak akıl yürütme için bir VLM eğitimiSergio PaniegoBağlantıOpen In Colab

Konuşma Dil Modelleri

Eğitimler

GörevSınıfAçıklamaYazarEğitim
Metinden SeseGRPOTrainerTRL ile GRPO kullanarak Ses Dil Modeli eğitimiSteven ZhengBağlantı

Katkıda Bulunma

Bu listeye eklemek istediğiniz bir öğretici varsa, lütfen eklemek için bir PR açın. Topluluk için uygunsa inceleyip birleştireceğiz.

Update on GitHub