Spekülatif difüzyon ile dil modellerinin çıkış hızını artırma yöntemi
arXiv Machine Learning kategorisinde yayımlanan yeni bir makale, difüzyon dil modelleri için spekülatif kodlama tekniğini inceleyerek çıkış hızını artırmayı hedeflemektedir.
#makine öğrenimi
3 yazı bu etiketle işaretlendi.
TWIG adlı yeni sinir ağı ağırlık temsilinin tanıtımı
arXiv'de TWIG (Tree-structured Weights with Inherited Gates) adlı yeni bir sinir ağı ağırlık temsilini tanımlayan makale yayımlanmıştır. Geliştirme, her ağırlığın paylaşılan diskret kararların bir yolunun sonu olduğu bir yapı öneriyor.
LLM ajan distilasyonunda hiyerarşik on-policyness çerçevesi sunuldu
Ya Gao tarafından yazılan yeni bir araştırma, LLM ajanlarının eğitiminde öğretmen ve öğrenci politikalarının farklı seviyelerde nasıl birleştirileceğini inceleyen hiyerarşik bir ajan distilasyon çerçevesi sunuyor.