Microsoft พี่
Microsoft Phi คือกลุ่มโมเดลภาษาขนาดเล็กที่พิสูจน์ว่าการดูแลจัดการข้อมูลอย่างระมัดระวังสามารถเทียบเคียงระดับเดรัจฉานได้
ภาพรวม
By training on textbook-quality and synthetic data, tiny Phi models punch far above their parameter count.
เจาะลึก
Phi คือ Microsoft กลุ่มโมเดลภาษาขนาดเล็ก (SLM) ของ Research ที่เปิดตัวในปี 2023 ด้วย Phi-1 ซึ่งเป็นโมเดลการเข้ารหัสที่มีพารามิเตอร์ 1.3 พันล้านพารามิเตอร์ วิทยานิพนธ์ชี้แนะที่บันทึกไว้ในชื่อรายงาน 'หนังสือเรียนคือทุกสิ่งที่คุณต้องการ' คือคุณภาพของข้อมูลมีความสำคัญมากกว่าขนาดดิบ แทนที่จะรื้อเว็บทั้งหมด Microsoft ฝึก Phi เกี่ยวกับเนื้อหาที่เหมือนในหนังสือที่ได้รับการดูแลจัดการ รวมถึงแบบฝึกหัดสังเคราะห์ที่สร้างโดย GPT-4 การเปิดตัวที่ตามมาได้ขยายแนวคิดนี้: Phi-2 (2.7B), Phi-3 (3.8B 'mini' จนถึง 14B 'medium') และ Phi-3.5 พร้อมด้วยวิสัยทัศน์และการผสมผสานของผู้เชี่ยวชาญ แม้จะมีขนาด แต่โมเดล Phi ก็จับคู่หรือเอาชนะคู่แข่งรายใหญ่ในด้านเหตุผลและเกณฑ์มาตรฐานทางคณิตศาสตร์ และทำงานอย่างมีประสิทธิภาพบนแล็ปท็อป โทรศัพท์ และอุปกรณ์ Edge โมเดลดังกล่าวได้รับการเผยแพร่อย่างเปิดเผยภายใต้ใบอนุญาตที่ได้รับอนุญาต
ข้อมูลเชิงลึกทางเทคนิค
ขอบของ Phi มาจากการสร้างและการกรองข้อมูลสังเคราะห์ Microsoft ใช้โมเดลขนาดใหญ่ เช่น GPT-4 เพื่อเขียนตัวอย่างที่มีโครงสร้างชัดเจนและมีโครงสร้างการสอน และให้คะแนนข้อความเว็บสำหรับ "คุณค่าทางการศึกษา" โดยเก็บเฉพาะเอกสารที่มีสัญญาณสูงเท่านั้น การผสมผสานการฝึกที่หนาแน่นและมีเสียงรบกวนต่ำนี้ช่วยให้โมเดล 3.8B เรียนรู้รูปแบบการให้เหตุผลซึ่งปกติต้องใช้พารามิเตอร์นับหมื่นล้าน Phi-3-mini ใช้หน้าต่างบริบท 4K หรือ 128K และสถาปัตยกรรมตัวถอดรหัสหม้อแปลงที่คล้ายกับ Llama ทำให้ง่ายต่อการปรับใช้ด้วยเครื่องมือที่มีอยู่
ผลกระทบเชิงกลยุทธ์
กลยุทธ์ของผู้ขาย
โรดแมปของผู้จำหน่ายมีอิทธิพลต่อฟีเจอร์ที่ทีมของคุณสามารถสร้างได้ต่อไป
ต้นทุนและงบประมาณ
ข้อกำหนดทางการค้าและตัวเลือกการใช้งานส่งผลต่อต้นทุนและความเสี่ยงในระยะยาว
ความเสี่ยงและความปลอดภัย
สิ่งจูงใจของบริษัทจะกำหนดค่าเริ่มต้นของผลิตภัณฑ์ ท่าทางที่ปลอดภัย และความเปิดกว้าง
อนาคตของ Microsoft พี่
Microsoft กำลังผลักดัน Phi ไปสู่การใช้งานบนอุปกรณ์และเอเจนต์ โดยที่เวลาในการตอบสนอง ความเป็นส่วนตัว และต้นทุนขัดขวางยักษ์ใหญ่คลาวด์ คาดหวังการบูรณาการ Windows และ Copilot+ PC ที่เข้มงวดมากขึ้น รูปแบบมัลติโมดัลที่แข็งแกร่งยิ่งขึ้น (การมองเห็นและเสียง) และการออกแบบที่ผสมผสานกันโดยผู้เชี่ยวชาญอย่างต่อเนื่องที่เปิดใช้งานพารามิเตอร์เพียงเศษเสี้ยวต่อโทเค็น แนวโน้มที่กว้างขึ้น Phi ยืนยันว่าข้อมูลอัจฉริยะมีมากกว่าขนาดที่แท้จริง กำลังปรับโฉมวิธีที่อุตสาหกรรมทั้งหมดฝึกฝนโมเดล โดยเฉพาะอย่างยิ่งสำหรับโทรศัพท์ IoT และสถานการณ์ออฟไลน์ที่โมเดลขนาดเล็กและมีความสามารถชนะ
การใช้งานจริงในโลกแห่งความเป็นจริง
เรียกใช้ตัวช่วยเขียนโค้ดออฟไลน์บนแล็ปท็อปโดยตรงโดยไม่ต้องส่งโค้ดไปยังคลาวด์
การเปิดใช้คุณสมบัติบนอุปกรณ์ในพีซี Copilot+ และแอปมือถือที่เวลาแฝงต่ำมีความสำคัญ
การฝังโมเดลการใช้เหตุผลลงใน IoT หรือฮาร์ดแวร์ Edge ที่มีหน่วยความจำจำกัดและไม่มีอินเทอร์เน็ต
นักวิจัยปรับแต่งโมเดล Phi ขนาดเล็กที่ได้รับใบอนุญาตแบบเปิดเผยสำหรับแชทบอทเฉพาะโดเมนในราคาถูก
ความเสี่ยงและรั้ว
การประกาศเปิดตัวอาจแซงหน้าความเสถียรในขั้นตอนการทำงานจริง
การกำหนดราคา API หรือการเปลี่ยนแปลงนโยบายสามารถทำลายสมมติฐานได้ในชั่วข้ามคืน
การพึ่งพาผู้ขายรายเดียวจะเพิ่มค่าใช้จ่ายในการล็อคอินและการย้ายข้อมูล
แผนงานการดำเนินงาน
ประเมินผู้ให้บริการโดยใช้งานและชุดข้อมูลของคุณเอง
ตรวจสอบความเป็นส่วนตัว ความปลอดภัย และข้อกำหนดทางกฎหมายก่อนรวมระบบ
รักษาแผนสำรองสำหรับรุ่นหรือผู้จำหน่าย
ตรวจสอบบันทึกประจำรุ่นเพื่อให้การเปลี่ยนแปลงแผนงานไม่ทำให้ทีมแปลกใจ
สำรวจต่อไป
Free newsletter
Get the daily AI briefing
Three verified AI stories every weekday morning, written in plain English. Free forever, no ads.
One email each weekday. Unsubscribe in one click. We never sell or share your address.
Test yourself
Take the Microsoft Phi quiz
Instant feedback on every answer, and a shareable certificate with a verifiable ID once you pass a course.
Support free AI education. AI Understanding is a 501(c)(3) nonprofit — no ads, no paywall, ever. Make a donation
คำแนะนำต่อไป
Microsoft เอไอ
คำถามที่พบบ่อย
What is Microsoft Phi?
Microsoft Phi คือกลุ่มโมเดลภาษาขนาดเล็กที่พิสูจน์ว่าการดูแลจัดการข้อมูลอย่างระมัดระวังสามารถเทียบเคียงระดับเดรัจฉานได้ ด้วยการฝึกอบรมเกี่ยวกับคุณภาพตำราเรียนและข้อมูลสังเคราะห์ โมเดล Phi ขนาดเล็กจึงเจาะลึกเกินกว่าจำนวนพารามิเตอร์มาก
วิทยานิพนธ์หลักเบื้องหลังโมเดล Phi ที่ถูกบันทึกไว้ในชื่อบทความชื่อดังคืออะไร
รายงานของ Phi-1 มีชื่อว่า 'หนังสือเรียนคือสิ่งที่คุณต้องการ' โดยให้เหตุผลว่าข้อมูลคุณภาพสูงที่ได้รับการดูแลจัดการมีความสำคัญมากกว่าขนาดที่แท้จริง
Phi-3-mini มีพารามิเตอร์ประมาณกี่ตัว?
Phi-3-mini มีพารามิเตอร์ประมาณ 3.8 พันล้านพารามิเตอร์ ทำให้มีขนาดเล็กพอที่จะทำงานบนโทรศัพท์ในขณะที่ยังคงทำงานได้ดี
Microsoft สร้างข้อมูลการฝึกของ Phi จำนวนมากได้อย่างไร
Microsoft ใช้โมเดลที่ทรงพลัง เช่น GPT-4 เพื่อสร้างแบบฝึกหัดสังเคราะห์ที่ชัดเจน และเพื่อกรองข้อความเว็บเพื่อคุณค่าทางการศึกษา
'SLM' หมายถึงโมเดลประเภทใดที่ใช้กับ Phi
Phi ถูกอธิบายว่าเป็นรูปแบบภาษาขนาดเล็ก (SLM) โดยเน้นความสามารถในขนาดที่กะทัดรัด
อะไรคือข้อได้เปรียบในทางปฏิบัติที่สำคัญของขนาดที่เล็กของ Phi?
เนื่องจากโมเดล Phi มีขนาดกะทัดรัด จึงสามารถทำงานได้บนฮาร์ดแวร์สำหรับผู้บริโภคภายในเครื่อง ทำให้มีความเป็นส่วนตัว เวลาแฝงต่ำ และใช้งานแบบออฟไลน์ได้