Penelitian yang Baik
Nous Research adalah laboratorium AI berbasis komunitas yang terkenal karena menyempurnakan model terbuka populer menjadi asisten yang berkemampuan tinggi dan tidak terlalu dibatasi, serta mendorong pelatihan terdesentralisasi.
Ikhtisar
It shows how a small team plus an open-source community can compete on model quality without owning massive infrastructure.
Menyelam Lebih Dalam
Nous Research menjadi terkenal dengan mengambil model basis terbuka, terutama keluarga Llama dan Mistral Meta, dan menyempurnakannya ke dalam seri Hermes dan Capybara yang banyak digunakan. Model OpenHermes dan Nous Hermes mereka menjadi penyempurnaan yang paling banyak diunduh di Hugging Face, dihargai karena kepatuhan terhadap instruksi yang kuat dan penekanan pada kemampuan kemudi daripada perilaku penolakan yang berat. Selain penyesuaian, Nous juga mengatasi masalah sulit: pelatihan terdistribusi. Penelitian DisTrO dan pengoptimal DeMo mereka bertujuan untuk memangkas bandwidth komunikasi yang diperlukan antar GPU, dan jaringan Psyche mengeksplorasi pelatihan model besar di perangkat keras yang tersebar secara geografis dan terhubung ke internet. Mereka juga bereksperimen dengan model yang menggunakan alat dan berfokus pada penalaran, memposisikan diri mereka di garis depan AI yang terbuka dan terdesentralisasi.
Wawasan Teknis
Sebagian besar model Nous tidak dilatih dari awal; mereka menerapkan penyesuaian yang diawasi dan pengoptimalan preferensi (seperti DPO) di atas bobot dasar terbuka menggunakan kumpulan data sintetis dan manusia yang dikurasi dengan cermat. Pekerjaan pelatihan terdistribusi mereka mengatasi hambatan bandwidth: biasanya GPU harus bertukar pembaruan gradien besar di setiap langkah. DisTrO/DeMo memampatkan dan memisahkan pembaruan ini sehingga node dapat berlatih bersama melalui tautan internet biasa daripada memerlukan interkoneksi pusat data yang digabungkan secara erat.
Dampak Strategis
Vendor strategy
Peta jalan vendor memengaruhi fitur apa yang dapat dibangun tim Anda selanjutnya.
Cost and budget
Persyaratan komersial dan opsi penerapan memengaruhi biaya dan risiko jangka panjang.
Risk and safety
Insentif perusahaan membentuk standar produk, postur keselamatan, dan keterbukaan.
Masa Depan Penelitian Nous
Nous bertaruh bahwa masa depan AI terbuka akan terdesentralisasi, di mana komputasi dikumpulkan di banyak kontributor independen, bukan terkonsentrasi di beberapa klaster skala besar. Jika metode pelatihan dengan bandwidth rendah dapat diperluas, masyarakat dapat secara kolektif melatih model kelas terdepan. Harapkan rilis lanjutan dari asisten terbuka yang mumpuni, investasi lebih dalam pada jaringan terdistribusi Psyche, dan model yang berorientasi pada penalaran. Pekerjaan mereka dapat menurunkan hambatan dalam melatih model-model besar di luar teknologi besar.
Implementasi Dunia Nyata
Pengembang menjalankan model Nous Hermes dan OpenHermes secara lokal untuk asisten obrolan pribadi yang dapat dikendalikan tanpa biaya API.
Para peneliti mengutip metode DisTrO dan DeMo Nous ketika mengeksplorasi pelatihan model terdistribusi yang hemat bandwidth.
Penghobi dan perusahaan kecil menyempurnakan kumpulan data yang dirilis Nous untuk membangun asisten khusus domain.
Jaringan Psyche digunakan untuk bereksperimen dengan model pelatihan di seluruh sukarelawan GPU yang tersebar secara geografis.
Risiko & Pagar Pembatas
Pengumuman peluncuran mungkin melampaui stabilitas alur kerja produksi sebenarnya.
Penetapan harga API atau perubahan kebijakan dapat mematahkan asumsi dalam sekejap.
Ketergantungan pada vendor tunggal meningkatkan biaya lock-in dan migrasi.
Peta Jalan Implementasi
Evaluasi penyedia menggunakan tugas dan kumpulan data Anda sendiri.
Tinjau persyaratan privasi, keamanan, dan hukum sebelum integrasi.
Pertahankan rencana cadangan di seluruh model atau vendor.
Pantau catatan rilis agar perubahan peta jalan tidak mengejutkan tim.
Terus Menjelajah
Free newsletter
Get the daily AI briefing
Three verified AI stories every weekday morning, written in plain English. Free forever, no ads.
One email each weekday. Unsubscribe in one click. We never sell or share your address.
Test yourself
Take the Nous Research quiz
Instant feedback on every answer, and a shareable certificate with a verifiable ID once you pass a course.
Support free AI education. AI Understanding is a 501(c)(3) nonprofit — no ads, no paywall, ever. Make a donation
Next guide
Lab Tongyi dan Penelitian Qwen
Pertanyaan yang sering diajukan
What is Nous Research?
Nous Research adalah laboratorium AI berbasis komunitas yang terkenal karena menyempurnakan model terbuka populer menjadi asisten yang berkemampuan tinggi dan tidak terlalu dibatasi, serta mendorong pelatihan terdesentralisasi. Ini menunjukkan bagaimana tim kecil ditambah komunitas sumber terbuka dapat bersaing dalam kualitas model tanpa memiliki infrastruktur yang besar.
Apa yang paling terkenal dari Nous Research pada awal kemunculannya?
Nous mendapat pengakuan dengan menyempurnakan model terbuka seperti Llama dan Mistral ke dalam keluarga Hermes yang populer.
Model dasar manakah yang paling sering disempurnakan oleh Nous?
Seri Hermes dan Capybara Nous dibangun di atas model basis terbuka, khususnya Llama dan Mistral.
Masalah apa yang diatasi oleh proyek DisTrO dan DeMo Nous?
DisTrO dan pengoptimal DeMo bertujuan untuk memotong bandwidth antar-GPU yang biasanya diperlukan, sehingga memungkinkan pelatihan melalui tautan internet biasa.
Apa itu jaringan Psyche?
Psyche adalah jaringan pelatihan terdesentralisasi Nous yang mengeksplorasi cara mengumpulkan GPU yang tersebar untuk melatih model besar.
Teknik apa yang biasanya digunakan Nous untuk menyelaraskan modelnya yang telah disesuaikan?
Nous menerapkan penyesuaian yang diawasi dan pengoptimalan preferensi selain bobot dasar terbuka menggunakan kumpulan data yang dikurasi.