Teknik KILAVUZ

Toolformer ve Kendi Kendine Öğretilen Takım Kullanımı

Toolformer, bir dil modelinin hesap makineleri, arama motorları ve çevirmenler gibi harici araçları ne zaman ve nasıl çağıracağını kendi kendine öğretmesine olanak tanıyan bir 2023 Meta AI yöntemidir.

Bu kılavuzu dinleyinAI tarafından anlatılan · ~2 min

Bu sayfada2 dakika okuma
  1. Genel Bakış
  2. Derin Dalış
  3. Gerçek Dünya Uygulaması
  4. Toolformer'ın Geleceği ve Kendi Kendine Öğretilen Takım Kullanımı
  5. Uygulamaya koymak
  6. Keşfetmeye Devam Edin
  7. Sık sorulan sorular

Genel Bakış

Instead of humans labeling tool calls, the model generates and filters its own training examples, then fine-tunes on the ones that actually help.

Derin Dalış

Toolformer, Schick ve ark. Meta AI, bir paradoksun üstesinden geliyor: büyük modeller dil konusunda harikadır ancak aritmetik, yeni gerçekler ve hassas aramalar konusunda kötüdür. Eğitim döngüsü kendi kendini denetler. Modele, API çağrısı sözdizimini gösteren, insan tarafından yazılmış bir avuç örnek veriliyor ve ardından büyük bir metin külliyatı boyunca birçok konuma aday çağrıları (özel belirteçlerle sarılmış) eklemesi isteniyor. Her aday çağrı aslında yürütülür ve sonuç eklenir. Anahtar filtreleme adımı, bir araç çağrısını yalnızca API sonucuna sahip olmanın, modelin yaklaşan gerçek metin üzerindeki karışıklığını aramamaktan veya farklı şekilde çağırmaktan daha fazla azaltması durumunda tutar. Model daha sonra bu filtrelenmiş, kendi kendine oluşturulan veri kümesi üzerinde ince ayar yapıyor ve beş aracı kullanmayı öğreniyor: bir hesap makinesi, bir QA sistemi, bir arama motoru, bir çevirmen ve bir takvim.

Gerçek Dünya Uygulaması

Sayısal bir cevabı tahmin etmek yerine tam aritmetik elde etmek için cümlenin ortasında bir hesap makinesi API'sini çağırmak.

Güncel veya nadiren görülen gerçek bilgileri getirmek için bir arama veya QA sistemini sorgulamak.

Oluşturulan metin içinde başka bir dildeki bir ifadeyi işlemek için bir makine çeviri aracını çağırmak.

'Gelecek Cuma' gibi göreceli referansları somut bir tarihe çözümlemek için bir takvim/tarih aracı kullanmak.

Toolformer'ın Geleceği ve Kendi Kendine Öğretilen Takım Kullanımı

Toolformer günümüzün alet kullanan ve işlev çağıran aracılarının tohumunu attı. Sınır, sabit bir avuç dolusu araçtan çalışma zamanında keşfedilen düzinelerce veya yüzlerce araca doğru ilerliyor; modeller hangi aracın çağrılacağına, çağrıların zincirlenmesine ve arızaların ele alınmasına karar veriyor. Takviyeli öğrenme ve aracı döngüleri ile daha sıkı entegrasyonun yanı sıra yeni API'lerin anında öğrenilmesini bekleyebilirsiniz, böylece kendi kendine öğretilen araç kullanımı, özel bir ince ayar yerine standart bir yetenek haline gelir.

Uygulamaya koymak

Neden önemli?

  • Maliyet ve bütçe. Mimari kararlar yıllarca performansı ve işletme maliyetini etkiler.
  • Daha net kararlar. Teknik eğitim, ekiplerin yalnızca en yenisini değil, doğru yığını seçmesine de yardımcı olur.
  • Kalite kontrolü. Daha iyi mühendislik seçenekleri, üretimdeki güvenilirlik olaylarını azaltır.

Dikkat edin

  • Bir kıyaslamayı optimize etmek daha geniş sistem zayıflıklarını gizleyebilir.
  • Altyapı ve bakım maliyetleri genellikle hafife alınır.
  • Sistemler karmaşıklaştıkça güvenlik ve gözlemlenebilirlik boşlukları büyüyebilir.

Sonraki adımlar

  1. Uygulamadan önce gecikmeyi, kaliteyi ve maliyet hedeflerini tanımlayın.
  2. Gerçekçi yük ve veri koşulları altında kıyaslama yapın.
  3. Hatalar, sapmalar ve kullanıcı etkisi için cihaz izleme.
  4. Ölçeklendirmeden önce geri alma ve olay müdahale yollarını hazırlayın.

Keşfetmeye Devam Edin

Ücretsiz bülten

Günlük AI brifingini alın

Hafta içi her sabah sade İngilizce yazılmış, doğrulanmış üç yapay zeka hikayesi. Sonsuza kadar ücretsiz, reklam yok.

Hafta içi her gün bir e-posta. Tek tıklamayla aboneliğinizi iptal edin. Adresinizi asla satmayız veya paylaşmayız.

Kendinizi test edin

Take the Toolformer and Self-Taught Tool Use quiz

Her yanıtla ilgili anında geri bildirim ve bir kursu geçtiğinizde doğrulanabilir bir kimliğe sahip paylaşılabilir bir sertifika.

Testi başlat

Ücretsiz AI eğitimini destekleyin. AI Understanding, bir 501(c)(3) kâr amacı gütmeyen kuruluştur; hiçbir zaman reklam yoktur, ödeme duvarı yoktur. Bağış yap

Sık sorulan sorular

What is Toolformer and Self-Taught Tool Use?

Toolformer, bir dil modelinin hesap makineleri, arama motorları ve çevirmenler gibi harici araçları ne zaman ve nasıl çağıracağını kendi kendine öğretmesine olanak tanıyan bir 2023 Meta AI yöntemidir. İnsanların araç çağrılarını etiketlemesi yerine, model kendi eğitim örneklerini oluşturup filtreliyor, ardından gerçekten yardımcı olanlara ince ayar yapıyor.

Toolformer'ın öğrenme aracı kullanımına yaklaşımını farklı kılan şey nedir?

Toolformer kendi kendini denetler: model, aday API çağrılarını önerir, bunları yürütür ve doğru kullanıma ilişkin insan açıklaması olmadan yalnızca yararlı olanları saklar.

Toolformer, aday API çağrısını sürdürüp sürdürmeyeceğine karar vermek için hangi kriteri kullanır?

Bir çağrı, yalnızca sonucunun eklenmesi modelin yaklaşan gerçek metindeki şaşkınlığını/kaybını bir eşiğin ötesine düşürüyorsa ve bunun gerçekten yararlı olduğunu gösteriyorsa tutulur.

Orijinal Toolformer hangi araçları kullanmayı öğrendi?

Toolformer, beş API'yi çağırmak üzere eğitildi: hesap makinesi, soru yanıtlama sistemi, arama motoru, makine çevirmeni ve takvim.

Toolformer'ın işlemi sırasında araç çağrıları metinde nasıl temsil ediliyor?

Aday çağrıları ve döndürülen sonuçlar, özel belirteçler kullanılarak metne satır içi olarak eklenir, böylece model, yerleştirmeyi ve argümanları birlikte öğrenir.

Büyük dil modellerinin temelindeki zayıflık, Toolformer'ı motive etti mi?

Güçlü dil becerilerine rağmen yüksek lisans öğrencileri, harici araçların sağlayabileceği kesin aritmetik, güncel gerçekler ve kesin bilgi erişimi konusunda zorluk yaşıyor.