Şirketler KILAVUZU

Microsoft Phi

Microsoft Phi, dikkatli veri iyileştirmenin kaba kuvvet ölçeğine rakip olabileceğini kanıtlayan küçük dil modelleri ailesidir.

2 min readSon güncelleme

Genel Bakış

By training on textbook-quality and synthetic data, tiny Phi models punch far above their parameter count.

Derin Dalış

Phi, Microsoft Research'ün 2023'te 1,3 milyar parametreli bir kodlama modeli olan Phi-1 ile piyasaya sürülen küçük dil modelleri (SLM'ler) serisidir. 'Ders Kitapları İhtiyacınız Olan Her Şey' başlıklı makalenin başlığında yer alan yol gösterici tez, veri kalitesinin ham boyuttan daha önemli olduğudur. Microsoft, tüm web'i taramak yerine Phi'ye özel olarak hazırlanmış, ders kitabı benzeri içerik ve GPT-4 tarafından oluşturulan sentetik alıştırmalar konusunda eğitim verdi. Birbirini takip eden sürümler bu fikri ölçeklendirdi: Phi-2 (2,7B), Phi-3 (3,8B 'mini'den 14B 'orta'ya kadar) ve görüş ve uzman karışımı çeşitleriyle Phi-3,5. Phi modelleri, boyutlarına rağmen akıl yürütme ve matematik kıyaslamalarında çok daha büyük rakiplerle eşleşiyor veya onları geçiyor ve dizüstü bilgisayarlarda, telefonlarda ve uç cihazlarda verimli bir şekilde çalışıyor. Modeller izin verilen lisanslar altında açıkça yayınlanmaktadır.

Teknik Bilgi

Phi'nin üstünlüğü sentetik veri oluşturma ve filtrelemeden gelir. Microsoft temiz, pedagojik olarak yapılandırılmış örnekler yazmak ve yalnızca yüksek sinyalli belgeleri tutarak web metnini 'eğitim değeri' açısından puanlamak için GPT-4 gibi daha büyük modelleri kullanır. Bu yoğun, düşük gürültülü eğitim karışımı, 3.8B modelinin normalde on milyarlarca parametre gerektiren akıl yürütme kalıplarını öğrenmesine olanak tanır. Phi-3-mini, 4K veya 128K bağlam penceresi ve Llama'ya benzer bir transformatör kod çözücü mimarisi kullanarak mevcut araçlarla dağıtımı kolaylaştırır.

Stratejik Etki

Vendor strategy

Satıcı yol haritaları, ekibinizin bundan sonra hangi özellikleri geliştirebileceğini etkiler.

Maliyet ve bütçe

Ticari şartlar ve dağıtım seçenekleri uzun vadeli maliyet ve riski etkiler.

Risk and safety

Şirket teşvikleri ürün temerrütlerini, güvenlik duruşunu ve açıklığı şekillendirir.

Microsoft Phi'nin Geleceği

Microsoft, Phi'yi gecikme, gizlilik ve maliyetin bulut devlerini devre dışı bıraktığı cihaz içi ve aracılı kullanımlara doğru itiyor. Daha sıkı Windows ve Copilot+ PC entegrasyonu, daha güçlü çok modlu (görüntü ve ses) değişkenler ve belirteç başına parametrelerin yalnızca bir kısmını etkinleştiren sürekli uzman karışımı tasarımlar bekleyebilirsiniz. Phi'nin doğruladığı daha geniş trend, akıllı verilerin katıksız ölçeği geride bıraktığını doğruluyor ve özellikle küçük, yetenekli modellerin kazandığı telefonlar, Nesnelerin İnterneti ve çevrimdışı senaryolar için tüm sektörün modelleri eğitme biçimini yeniden şekillendiriyor.

Gerçek Dünya Uygulaması

Çevrimdışı kodlama yardımcısını buluta kod göndermeden doğrudan dizüstü bilgisayarda çalıştırma

Düşük gecikmenin önemli olduğu Copilot+ bilgisayarlarda ve mobil uygulamalarda cihaz içi özelliklerin güçlendirilmesi

Sınırlı belleğe sahip ve interneti olmayan IoT'ye veya uç donanıma bir muhakeme modeli yerleştirme

Araştırmacılar, alana özgü bir sohbet robotu için küçük, açık lisanslı bir Phi modeline ucuz bir şekilde ince ayar yapıyor

Riskler ve Korkuluklar

Lansman duyuruları, gerçek üretim iş akışlarında istikrarın önüne geçebilir.

API fiyatlandırması veya politika değişiklikleri, varsayımları bir gecede boşa çıkarabilir.

Tek satıcıya bağımlılık, bağlılık ve geçiş maliyetlerini artırır.

Uygulama Yol Haritası

1

Sağlayıcıları kendi görevlerinizi ve veri kümelerinizi kullanarak değerlendirin.

2

Entegrasyondan önce gizlilik, güvenlik ve yasal şartları inceleyin.

3

Modeller veya satıcılar arasında bir geri dönüş planı sürdürün.

4

Yol haritası değişikliklerinin ekipleri şaşırtmaması için sürüm notlarını izleyin.

Keşfetmeye Devam Edin

Free newsletter

Get the daily AI briefing

Three verified AI stories every weekday morning, written in plain English. Free forever, no ads.

One email each weekday. Unsubscribe in one click. We never sell or share your address.

Test yourself

Take the Microsoft Phi quiz

Instant feedback on every answer, and a shareable certificate with a verifiable ID once you pass a course.

Testi başlat

Support free AI education. AI Understanding is a 501(c)(3) nonprofit — no ads, no paywall, ever. Make a donation

Sık sorulan sorular

What is Microsoft Phi?

Microsoft Phi, dikkatli veri iyileştirmenin kaba kuvvet ölçeğine rakip olabileceğini kanıtlayan küçük dil modelleri ailesidir. Ders kitabı kalitesinde ve sentetik veriler üzerinde eğitim alan minik Phi modelleri, parametre sayılarının çok üzerinde performans sergiliyor.

Ünlü bir makale başlığında ele alınan Phi modellerinin ardındaki temel tez nedir?

Phi-1 makalesi 'İhtiyacınız Olan Tek Şey Ders Kitaplarıdır' başlığını taşıyordu ve yüksek kaliteli, özel olarak seçilmiş verilerin salt ölçekten daha önemli olduğunu savunuyordu.

Phi-3-mini'nin kabaca kaç parametresi var?

Phi-3-mini'nin yaklaşık 3,8 milyar parametresi vardır ve bu da onu güçlü bir performans sergilerken bir telefonda çalışacak kadar küçük kılar.

Microsoft Phi'nin eğitim verilerinin çoğunu nasıl üretiyor?

Microsoft, temiz sentetik alıştırmalar oluşturmak ve web metnini eğitim değeri açısından filtrelemek için GPT-4 gibi güçlü modelleri kullanır.

Phi için kullanıldığı şekliyle 'SLM' hangi model kategorisini ifade eder?

Phi, kompakt boyuttaki yeteneği vurgulayan Küçük Dil Modeli (SLM) olarak tanımlanır.

Phi'nin küçük boyutunun önemli bir pratik avantajı nedir?

Phi modelleri kompakt olduğundan tüketici donanımında yerel olarak çalışabilir, gizlilik, düşük gecikme süresi ve çevrimdışı kullanıma olanak tanır.