TRL documentation
Topluluk Eğiticileri
Başlangıç
Kavramsal Kılavuzlar
Eğiticiler
Nasıl yapılır kılavuzları
Komut Satırı Arayüzü (CLI)Jobs kullanarak eğitimEğitimi ÖzelleştirmeBellek Kullanımını AzaltmaEğitimi HızlandırmaEğitimi DağıtmaAWS Trainium üzerinde EğitimAMD GPU'larında Eğitim1M Token Ötesinde EğitimEğitilmiş Modelleri Kullanma
Entegrasyonlar
Örnekler
API
Deneysel
You are viewing main version, which requires installation from source. If you'd like
regular pip install, checkout the latest stable version (v1.17.1).
Topluluk Eğiticileri
Topluluk eğitimleri, bilgilerini ve uzmanlıklarını başkalarıyla paylaşmak isteyen Hugging Face topluluğunun aktif üyeleri tarafından hazırlanır. Kütüphanenin ve özelliklerinin öğrenilmesi ile temel sınıflara ve modalitelere başlanması için harika bir yoldur.
Dil Modelleri
Eğitimler
| Görev | Sınıf | Açıklama | Yazar | Eğitim | Colab |
|---|---|---|---|---|---|
| Pekiştirmeli Öğrenme | GRPOTrainer | TRL'de GRPO ve vLLM ile Verimli Çevrimiçi Eğitim | Sergio Paniego | Bağlantı | |
| Pekiştirmeli Öğrenme | GRPOTrainer | TRL ile GRPO kullanarak akıl yürütme için bir LLM'in eğitim sonrası eğitimi | Sergio Paniego | Bağlantı | |
| Pekiştirmeli Öğrenme | GRPOTrainer | Mini-R1: Deepseek R1'in „aha anı“nı yeniden üretmek için bir RL öğreticisi | Philipp Schmid | Bağlantı | |
| Pekiştirmeli Öğrenme | GRPOTrainer | GRPO ve Unsloth optimizasyonlarıyla LLaMA 3.1-8B üzerinde RL | Andrea Manzoni | Bağlantı | |
| Talimat ayarlama | SFTTrainer | ChatML formatı ile QLoRA kullanarak Google Gemma LLM'lerini ince ayar | Philipp Schmid | Bağlantı | |
| Yapılandırılmış Üretim | SFTTrainer | QLoRA ve PEFT kullanarak Llama-2-7B'yi JSON formatında Farsça ürün kataloğu üretmek için ince ayar | Mohammadreza Esmaeilian | Bağlantı | |
| Tercih Optimizasyonu | DPOTrainer | İnsan tercih hizalaması için Mistral-7b'yi Doğrudan Tercih Optimizasyonu ile hizalayın | Maxime Labonne | Bağlantı | |
| Tercih Optimizasyonu | experimental.orpo.ORPOTrainer | Talimat ayarlamayı ve tercih hizalamasını birleştiren ORPO ile Llama 3'ün ince ayarı | Maxime Labonne | Bağlantı | |
| Talimat ayarlama | SFTTrainer | 2025'te Hugging Face ile açık LLM'leri nasıl ince ayar yapabilirsiniz | Philipp Schmid | Bağlantı | |
| Adım Seviyesinde Muhakeme | GRPOTrainer | vLLM ile adım adım akıl yürütme için Denetimli Pekiştirmeli Öğrenme (SRL) | Deepak Swaminathan | Bağlantı |
Videolar
| Görev | Başlık | Yazar | Video |
|---|---|---|---|
| Talimat ayarlama | Hugging Face TRL kullanarak açık yapay zeka modellerinin ince ayarı | Wietse Venema | ![]() |
| Talimat ayarlama | Hugging Face, TRL ve smoltalk Veri Seti ile bir smol-LM'yi nasıl ince ayar yaparsınız | Mayurji | ![]() |
⚠️ Deprecated features notice for "How to fine-tune a smol-LM with Hugging Face, TRL, and the smoltalk Dataset" (click to expand)
Eğitim, iki kullanımdan kaldırılmış özelliği kullanır:
SFTTrainer(..., tokenizer=tokenizer): Bunun yerineSFTTrainer(..., processing_class=tokenizer)kullanın veya bunu tamamen atlayın (modelden çıkarılacaktır).setup_chat_format(model, tokenizer):SFTConfig(..., chat_template_path="Qwen/Qwen3-0.6B")kullanın; buradachat_template_path, sohbet şablonunu kopyalamak istediğiniz modeli belirtir.
Görüntü Dil Modelleri
Eğitimler
| Görev | Sınıf | Açıklama | Yazar | Eğitim | Colab |
|---|---|---|---|---|---|
| Görsel QA | SFTTrainer | ChartQA veri setinde görsel soru yanıtlama için Qwen2-VL-7B'nin ince ayarı | Sergio Paniego | Bağlantı | |
| Görsel QA | SFTTrainer | Tüketici GPU'sunda TRL ile SmolVLM'nin ince ayarı | Sergio Paniego | Bağlantı | |
| SEO Açıklaması | SFTTrainer | Görsellerden SEO uyumlu açıklamalar üretmek için Qwen2-VL-7B'nin ince ayarı | Philipp Schmid | Bağlantı | |
| Görsel QA | DPOTrainer | PaliGemma 🤝 Doğrudan Tercih Optimizasyonu | Merve Noyan | Bağlantı | |
| Görsel QA | DPOTrainer | Tüketici GPU üzerinde TRL ile doğrudan tercih optimizasyonu (DPO) kullanarak SmolVLM'nin ince ayarı | Sergio Paniego | Bağlantı | |
| Nesne Tespiti Yerleştirme | SFTTrainer | TRL ile Nesne Algılama Yerelleştirme için VLM İnce Ayarı | Sergio Paniego | Bağlantı | |
| Görsel QA | DPOTrainer | TRL ile MPO Kullanarak Bir Görsel Dil Modelinin İnce Ayarlanması | Sergio Paniego | Bağlantı | |
| Pekiştirmeli Öğrenme | GRPOTrainer | TRL ile GRPO kullanarak akıl yürütme için bir VLM eğitimi | Sergio Paniego | Bağlantı |
Konuşma Dil Modelleri
Eğitimler
| Görev | Sınıf | Açıklama | Yazar | Eğitim |
|---|---|---|---|---|
| Metinden Sese | GRPOTrainer | TRL ile GRPO kullanarak Ses Dil Modeli eğitimi | Steven Zheng | Bağlantı |
Katkıda Bulunma
Bu listeye eklemek istediğiniz bir öğretici varsa, lütfen eklemek için bir PR açın. Topluluk için uygunsa inceleyip birleştireceğiz.
Update on GitHub
