ภาพรวม
ความฉลาดทางกายภาพ (มักมีสัญลักษณ์ pi) คือบริษัทสตาร์ทอัพในซานฟรานซิสโกที่สร้าง AI อเนกประสงค์สำหรับหุ่นยนต์ และ pi-zero ถือเป็นโมเดลหลักด้านการมองเห็น ภาษา และการกระทำ สิ่งสำคัญคือเนื่องจาก pi-zero แสดงให้เห็นว่าโมเดลเดียวสามารถพับผ้า โต๊ะรถบัส และประกอบกล่องบนหุ่นยนต์ต่างๆ ได้ มุ่งสู่นโยบายการควบคุมหุ่นยนต์สากล
ความฉลาดทางกายภาพและ pi-zero เป็นที่เข้าใจได้ดีที่สุดในบริบทของกลยุทธ์ การเข้าถึงโมเดล การตัดสินใจบนแพลตฟอร์ม และความร่วมมือในระบบนิเวศ
เจาะลึก
ก่อตั้งขึ้นในปี 2024 โดยนักวิจัยรวมถึง Karol Hausman, Sergey Levine, Brian Ichter และ Chelsea Finn หน่วยสืบราชการลับทางกายภาพ (มักเขียนเป็นอักษรกรีก pi) ระดมทุนได้ประมาณ 400 ล้านดอลลาร์ที่การประเมินมูลค่าประมาณ 2 พันล้านดอลลาร์จากผู้สนับสนุนเช่น Jeff Bezos, OpenAI, Thrive และ Lux รุ่นแรกคือ pi-zero ซึ่งเป็นโมเดลการมองเห็น-ภาษา-การกระทำ (VLA) ที่ถ่ายภาพจากกล้องและคำสั่งภาษาธรรมชาติ แล้วส่งออกคำสั่งมอเตอร์หุ่นยนต์ต่อเนื่อง pi-zero ได้รับการฝึกอบรมเกี่ยวกับข้อมูลจากแพลตฟอร์มและงานต่างๆ ของหุ่นยนต์ โดยสาธิตการทำงานบ้านในโลกแห่งความเป็นจริงที่คล่องแคล่ว การพับผ้าที่โด่งดังที่สุดจากเครื่องอบผ้า รวมถึงการเคลียร์โต๊ะ การพับกล่อง และการบรรจุถุง เป้าหมายของบริษัทคือเน้นซอฟต์แวร์เป็นอันดับแรก: โมเดลพื้นฐานที่นำความฉลาดทางกายภาพทั่วไปที่ยืดหยุ่นมาสู่หุ่นยนต์ที่หลากหลาย แทนที่จะมีทักษะเฉพาะตัวต่อเครื่องจักร
ข้อมูลเชิงลึกทางเทคนิค
pi-zero สร้างจากโมเดลภาษาการมองเห็นที่ได้รับการฝึกมาแล้ว และเพิ่มการดำเนินการ 'ผู้เชี่ยวชาญ' ที่เอาต์พุตการควบคุมอย่างต่อเนื่องผ่านการจับคู่การไหล ซึ่งเป็นเทคนิคคล้ายการแพร่กระจายที่สร้างวิถีมอเตอร์ความถี่สูงที่ราบรื่น (ประมาณ 50 Hz) ช่วยให้โมเดลสามารถจัดการงานที่ต้องใช้ความคล่องตัวในการปรับเปลี่ยนอย่างละเอียดและรวดเร็ว เช่น การพับผ้า ด้วยการสืบทอดความเข้าใจความหมายแบบกว้างจากแกนหลัก VLM และการปรับแต่งข้อมูลหุ่นยนต์ข้ามรูปลักษณ์อย่างละเอียด pi-zero จะปฏิบัติตามคำแนะนำภาษาในขณะเดียวกันก็สรุปทักษะทั่วทั้งแขนหุ่นยนต์และงานต่างๆ
การเรียนรู้ความฉลาดทางกายภาพและ pi-zero
ความฉลาดทางกายภาพ (มักมีสัญลักษณ์ pi) คือบริษัทสตาร์ทอัพในซานฟรานซิสโกที่สร้าง AI อเนกประสงค์สำหรับหุ่นยนต์ และ pi-zero ถือเป็นโมเดลหลักด้านการมองเห็น ภาษา และการกระทำ สิ่งสำคัญคือเนื่องจาก pi-zero แสดงให้เห็นว่าโมเดลเดียวสามารถพับผ้า โต๊ะรถบัส และประกอบกล่องบนหุ่นยนต์ต่างๆ ได้ มุ่งสู่นโยบายการควบคุมหุ่นยนต์สากล ความฉลาดทางกายภาพและ pi-zero เป็นที่เข้าใจได้ดีที่สุดในบริบทของกลยุทธ์ การเข้าถึงโมเดล การตัดสินใจบนแพลตฟอร์ม และความร่วมมือในระบบนิเวศ เพื่อสร้างความเข้าใจอย่างลึกซึ้ง ให้ถือว่าความฉลาดทางกายภาพและ pi-zero เป็นเพียงแบบจำลองการดำเนินงาน ไม่ใช่คุณลักษณะเดียว: กำหนดผลลัพธ์ที่ต้องการ ชี้แจงสมมติฐาน และแยกสิ่งที่ระบบสามารถทำได้อย่างน่าเชื่อถือจากสิ่งที่ยังต้องใช้วิจารณญาณจากผู้เชี่ยวชาญ
ในทางปฏิบัติ ทีมที่แข็งแกร่งที่ใช้ Physical Intelligence และ pi-zero จะประเมินกลยุทธ์ของผู้ขาย ความน่าเชื่อถือของแผนงาน และความเสี่ยงในการล็อคอินก่อนตัดสินใจ โดยจะบันทึกเกณฑ์ความสำเร็จที่ชัดเจน ทดสอบกับข้อมูลและขั้นตอนการทำงานที่สมจริง และทำซ้ำตามรูปแบบความล้มเหลวที่สังเกตได้ แทนที่จะชนะการวัดประสิทธิภาพเพียงครั้งเดียว นี่คือจุดที่ความเข้าใจทางทฤษฎีกลายเป็นความสามารถที่คงทนของผลิตภัณฑ์ นโยบาย และการดำเนินงาน
โรดแมปของผู้จำหน่ายมีอิทธิพลต่อฟีเจอร์ที่ทีมของคุณสามารถสร้างได้ต่อไป ในขณะเดียวกัน การประกาศเปิดตัวอาจแซงหน้าความเสถียรในขั้นตอนการทำงานจริง แนวทางที่ยืดหยุ่นที่สุดคือการรวมความเร็วของการทดลองเข้ากับวินัยในการกำกับดูแล: ดำเนินการนำร่อง จับหลักฐาน เผยแพร่บันทึกการตัดสินใจ และอัปเดตการป้องกันอย่างต่อเนื่องเมื่อพฤติกรรมของโมเดล ความคาดหวังของผู้ใช้ และข้อกำหนดด้านกฎระเบียบมีการเปลี่ยนแปลง
ผลกระทบเชิงกลยุทธ์
โรดแมปของผู้จำหน่ายมีอิทธิพลต่อฟีเจอร์ที่ทีมของคุณสามารถสร้างได้ต่อไป
โรดแมปของผู้จำหน่ายมีอิทธิพลต่อฟีเจอร์ที่ทีมของคุณสามารถสร้างได้ต่อไป ในการปรับใช้คุณภาพสูง สิ่งนี้จะถูกแปลเป็นกฎการปฏิบัติงานที่วัดผลได้ ขอบเขตความเป็นเจ้าของ และขั้นตอนการตรวจสอบที่เกิดซ้ำ เพื่อให้ทีมสามารถปรับขนาดความมั่นใจแทนที่จะปรับขนาดความคลุมเครือ
ข้อกำหนดทางการค้าและตัวเลือกการใช้งานส่งผลต่อต้นทุนและความเสี่ยงในระยะยาว
ข้อกำหนดทางการค้าและตัวเลือกการใช้งานส่งผลต่อต้นทุนและความเสี่ยงในระยะยาว ในการปรับใช้คุณภาพสูง สิ่งนี้จะถูกแปลเป็นกฎการปฏิบัติงานที่วัดผลได้ ขอบเขตความเป็นเจ้าของ และขั้นตอนการตรวจสอบที่เกิดซ้ำ เพื่อให้ทีมสามารถปรับขนาดความมั่นใจแทนที่จะปรับขนาดความคลุมเครือ
สิ่งจูงใจของบริษัทจะกำหนดค่าเริ่มต้นของผลิตภัณฑ์ ท่าทางที่ปลอดภัย และความเปิดกว้าง
สิ่งจูงใจของบริษัทจะกำหนดค่าเริ่มต้นของผลิตภัณฑ์ ท่าทางที่ปลอดภัย และความเปิดกว้าง ในการปรับใช้คุณภาพสูง สิ่งนี้จะถูกแปลเป็นกฎการปฏิบัติงานที่วัดผลได้ ขอบเขตความเป็นเจ้าของ และขั้นตอนการตรวจสอบที่เกิดซ้ำ เพื่อให้ทีมสามารถปรับขนาดความมั่นใจแทนที่จะปรับขนาดความคลุมเครือ
การใช้งานจริงในโลกแห่งความเป็นจริง
หุ่นยนต์สองแขนใช้ pi-zero เพื่อนำเสื้อผ้าที่ยับยู่ยี่ออกจากเครื่องอบผ้าและพับไว้บนโต๊ะอย่างเรียบร้อย
หุ่นยนต์ในร้านอาหารขับโต๊ะ ล้างจานและขยะ โดยทำตามคำแนะนำที่เป็นภาษาธรรมชาติ
หุ่นยนต์ในโกดังทำให้กล่องกระดาษแข็งเรียบและบรรจุถุงใส่ของชำโดยใช้นโยบายทั่วไปเดียวกัน
ห้องปฏิบัติการวิทยาการหุ่นยนต์ปรับแต่ง pi-zero บนแขนของตัวเองเพื่อฝึกฝนทักษะการจัดการใหม่ๆ โดยไม่ต้องฝึกฝนโมเดลตั้งแต่เริ่มต้น
รูปแบบการดำเนินงาน
ความฉลาดทางกายภาพและ pi-zero ในทางปฏิบัติ
หุ่นยนต์สองแขนใช้ pi-zero เพื่อนำเสื้อผ้าที่ยับยู่ยี่ออกจากเครื่องอบผ้าและพับไว้บนโต๊ะอย่างเรียบร้อย
หุ่นยนต์สองแขนใช้ pi-zero เพื่อนำเสื้อผ้าที่ยับยู่ยี่จากเครื่องอบผ้าและพับไว้บนโต๊ะอย่างเรียบร้อย ทีมมักจะได้รับผลลัพธ์ที่ดีกว่าเมื่อพวกเขากำหนดเกณฑ์คุณภาพล่วงหน้า รักษาเส้นทางการยกระดับของมนุษย์สำหรับกรณี Edge และติดตามทั้งประสิทธิภาพการผลิตที่เพิ่มขึ้นและต้นทุนข้อผิดพลาดเมื่อเวลาผ่านไป
ความฉลาดทางกายภาพและ pi-zero ในทางปฏิบัติ
หุ่นยนต์ในร้านอาหารขับโต๊ะ ล้างจานและขยะ โดยทำตามคำแนะนำที่เป็นภาษาธรรมชาติ
หุ่นยนต์ในร้านอาหารจะขึ้นรถบัสเก็บโต๊ะ ล้างจานและถังขยะโดยปฏิบัติตามคำแนะนำที่เป็นภาษาธรรมชาติ ทีมมักจะได้รับผลลัพธ์ที่ดีกว่าเมื่อกำหนดเกณฑ์คุณภาพล่วงหน้า รักษาเส้นทางการยกระดับโดยมนุษย์สำหรับกรณี Edge และติดตามทั้งประสิทธิภาพการผลิตที่เพิ่มขึ้นและต้นทุนข้อผิดพลาดเมื่อเวลาผ่านไป
ความฉลาดทางกายภาพและ pi-zero ในทางปฏิบัติ
หุ่นยนต์ในโกดังทำให้กล่องกระดาษแข็งเรียบและบรรจุถุงใส่ของชำโดยใช้นโยบายทั่วไปเดียวกัน
หุ่นยนต์ในคลังสินค้าทำให้กล่องกระดาษแข็งและถุงใส่สิ่งของในร้านขายของชำราบเรียบโดยใช้นโยบายทั่วไปเดียวกัน ทีมมักจะได้รับผลลัพธ์ที่ดีกว่าเมื่อกำหนดเกณฑ์คุณภาพล่วงหน้า รักษาเส้นทางการยกระดับโดยมนุษย์สำหรับกรณี Edge และติดตามทั้งผลผลิตที่เพิ่มขึ้นและต้นทุนข้อผิดพลาดเมื่อเวลาผ่านไป
ความฉลาดทางกายภาพและ pi-zero ในทางปฏิบัติ
ห้องปฏิบัติการวิทยาการหุ่นยนต์ปรับแต่ง pi-zero บนแขนของตัวเองเพื่อฝึกฝนทักษะการจัดการใหม่ๆ โดยไม่ต้องฝึกฝนโมเดลตั้งแต่เริ่มต้น
ห้องปฏิบัติการวิทยาการหุ่นยนต์ปรับแต่ง pi-zero บนแขนของตนเองเพื่อเริ่มทักษะการจัดการใหม่ๆ โดยไม่ต้องฝึกอบรมโมเดลตั้งแต่เริ่มต้น ทีมมักจะได้รับผลลัพธ์ที่ดีกว่าเมื่อพวกเขากำหนดเกณฑ์คุณภาพล่วงหน้า รักษาเส้นทางการยกระดับของมนุษย์สำหรับกรณี Edge และติดตามทั้งประสิทธิภาพการทำงานที่เพิ่มขึ้นและต้นทุนข้อผิดพลาดเมื่อเวลาผ่านไป
ความเสี่ยงและรั้ว
การประกาศเปิดตัวอาจแซงหน้าความเสถียรในขั้นตอนการทำงานจริง
การกำหนดราคา API หรือการเปลี่ยนแปลงนโยบายสามารถทำลายสมมติฐานได้ในชั่วข้ามคืน
การพึ่งพาผู้ขายรายเดียวจะเพิ่มค่าใช้จ่ายในการล็อคอินและการย้ายข้อมูล
แผนงานการดำเนินงาน
ประเมินผู้ให้บริการโดยใช้งานและชุดข้อมูลของคุณเอง
ประเมินผู้ให้บริการโดยใช้งานและชุดข้อมูลของคุณเอง ถือว่าแต่ละขั้นตอนเป็นเหมือนประตูหลักฐาน: หากไม่ตรงตามเกณฑ์ ให้หยุดการเปิดตัวชั่วคราว ปิดช่องว่าง จากนั้นจึงขยายการใช้งานเท่านั้น
ตรวจสอบความเป็นส่วนตัว ความปลอดภัย และข้อกำหนดทางกฎหมายก่อนรวมระบบ
ตรวจสอบความเป็นส่วนตัว ความปลอดภัย และข้อกำหนดทางกฎหมายก่อนรวมระบบ ถือว่าแต่ละขั้นตอนเป็นเหมือนประตูหลักฐาน: หากไม่ตรงตามเกณฑ์ ให้หยุดการเปิดตัวชั่วคราว ปิดช่องว่าง จากนั้นจึงขยายการใช้งานเท่านั้น
รักษาแผนสำรองสำหรับรุ่นหรือผู้จำหน่าย
รักษาแผนสำรองสำหรับรุ่นหรือผู้จำหน่าย ถือว่าแต่ละขั้นตอนเป็นเหมือนประตูหลักฐาน: หากไม่ตรงตามเกณฑ์ ให้หยุดการเปิดตัวชั่วคราว ปิดช่องว่าง จากนั้นจึงขยายการใช้งานเท่านั้น
ตรวจสอบบันทึกประจำรุ่นเพื่อให้การเปลี่ยนแปลงแผนงานไม่ทำให้ทีมแปลกใจ
ตรวจสอบบันทึกประจำรุ่นเพื่อให้การเปลี่ยนแปลงแผนงานไม่ทำให้ทีมแปลกใจ ถือว่าแต่ละขั้นตอนเป็นเหมือนประตูหลักฐาน: หากไม่ตรงตามเกณฑ์ ให้หยุดการเปิดตัวชั่วคราว ปิดช่องว่าง จากนั้นจึงขยายการใช้งานเท่านั้น