JwumaAracılık görev ortamları, araç kullanan modeller için veri belirleme
· 2 dk okuma · expert data, specification
Bu çeviri makine tarafından üretilmiştir ve ana dili konuşan biri tarafından kontrol edilmemiştir. Tereddüt halinde İngilizce sürüm esastır. Yanlış görünen bir şey varsa bize bildirin, düzeltelim. English
Aracılık görev verisi, bir modelin araçları kullanarak bir şeyi başardığı tam çok adımlı yolları kaydeder, baştan sona kaydedilir ve ara durum korunur. Tek seferlik örnekler toparlanmayı öğretemez, bu yüzden başarısızlık yolları sadece başarılı çalışmalardan toplanmak yerine kasıtlı olarak oluşturulmalıdır.
Kısaca
- Aracılık verisi, tam yolları yakalar, bireysel dönüşleri değil.
- Araç çağrısı ara durumu faydalı olması için korunmalıdır.
- Başarısızlık ve toparlanma yolları kasıtlı olarak oluşturulmalıdır.
- Görev spesifikasyonları verilerle birlikte sürümlenmelidir.
- Sadece başarılı çalışmalarda eğitilen bir ajan hatalardan toparlanamaz.
Benzer bir proje mi planlıyorsunuz?
Hacim üzerinden fiyat vermek yerine sorunu konuşmayı tercih ederiz.
Hizmetleri görünNeden tek seferlik örnekler yeterli değil?
Çünkü aracılık sistemlerinde önemli olan hatalar birikicidir. Model bir aracı çağırır, sonucu yanlış okur ve ondan sonraki her şey bu yanlış okuma üzerine inşa edilir. Bu dizideki hiçbir tek dönüş kendi başına yanlış görünmez.
Bu nedenle izole dönüşlerde eğitim veya değerlendirme, önemsediğiniz şeyden başka bir şeyi ölçer. Gerçekte nerede yanlış gittiğini görmek için her adımda ara durumu içeren tüm yolu görmeniz gerekir.
Neden başarısızlık yolları kasıtlı olarak oluşturulmalı?
Çünkü sadece üretimden toplarsanız, ezici çoğunlukla başarılar ve başarıya yakın sonuçlar toplarsınız ve nadir gerçek başarısızlıklar temsil edici değildir ve yeterince örneklenmez.
Sadece her şeyin iyi gittiğini gören bir ajan toparlanmayı öğrenmemiştir. Beklediğiniz başarısızlık modlarını, araç zaman aşımı, hatalı yanıtlar ve makul ama yanlış ara sonuçlar dahil olmak üzere kasıtlı olarak oluşturmak, bunları faydalı yoğunlukta kapsamanın tek yoludur.
Bir görev spesifikasyonu neyi belirlemelidir?
Mevcut araç yüzeyi, başarı kriterleri, kabul edilebilir toparlanmanın ne olduğu ve ajanın beklenen yoldan ne kadar sapma hakkına sahip olduğu. Sonuncusu olmadan, anotatörler sıra dışı ama başarılı bir yolun doğru olup olmadığı konusunda anlaşamazlar.
Spesifikasyonu verilerle birlikte sürümlendirin. Aracılık spesifikasyonları hızlı değişir ve eski bir başarı kriterine göre değerlendirilen bir yol, yeni bir kritere göre değerlendirilenle karşılaştırılamaz.
- Mevcut araç yüzeyi
- Başarı kriterleri
- Kabul edilebilir toparlanmanın ne olduğu
- Beklenen yoldan izin verilen sapma
- Her yolda damgalanmış spesifikasyon sürümü
Diğer sorular
Aracılık görev ortamı nedir?
Bir modelin araçları kullanarak çok adımlı bir görevi tamamladığı, tam yolun ara durum dahil kaydedildiği bir ortam, böylece model tek bir dönüş yerine tüm dizide eğitilebilir veya değerlendirilebilir.
Başarısızlık yollarını neden kasıtlı olarak oluşturmalıyız?
Çünkü üretim verisi ezici çoğunlukla başarılı çalışmalardır. Hiçbir zaman bir araç zaman aşımı veya hatalı yanıt görmemiş bir ajan, bunlardan birinden toparlanmayı öğrenmemiştir.
Görev spesifikasyonları sürümlenmeli mi?
Evet. Aracılık spesifikasyonları hızlı değişir ve eski bir başarı kriterine göre değerlendirilen bir yol, yeni bir kritere göre değerlendirilenle karşılaştırılamaz, sürüm kaydedilmedikçe.