GUIDE de sociétés
EleuterAI
EleutherAI kuréel la guy def ay gëstu yu amul benn njariñ, moo njëkka amal xeetu làkk yu yaatu yu ubbeeku yi, bi ñu tëjoo frontier IA ci ginnàaw miiru liggéeyukaay yi.
Déglul tegtal biiIA-nettali · ~2 min
Ci xët wii2 simili jàng
Résumé
Firndeelna ni askanu deff te Yalla tax munna tabax ak genne ci lu yomb ay model yuy joŋante ak sistem yu tëju yi, di soppali kii wara bokk ci gestu juntuwaay yu bees yi.
Plongeur bu xóot
EleutherAI mingi tàmbali ci weeru sulet 2020 ni askanu Discord bu Connor Leahy, Sid Black, ak Leo Gao amalee, seen mébet mooy nuru GPT-3 bu AIU. Ngir tàggat model yu mel noonu, ñu njëkka tabax ba noppi génne The Pile, muy 825GB dataset buñ tànn mu nekk corpus tàggat buñ ubbi. Ginaaw loolu ñu génne GPT-Neo, GPT-J-6B, ak GPT-NeoX-20B bu am 20 milyaar ciy parametre, muy benn ci xeeti làkk yi gëna mag te ñépp mëna ko jëfandikoo ci seen jamono. Seeni jumtukaay, lu ci melni GPT-NeoX bibliothèque de formation ak LM Evaluation Harness bi ñuy jëfandikoo ci liggéeyukaay bi yépp ngir def ay référence, nekk nañu jumtukaay yu ñeneen ñi tabax ci kaw. Ci atum 2023 EleutherAI dafa formalise nekk daara gëstu buy def te Yàlla tax, muy yaatal ci tekki, méngale, ak science ci ni model yi di jàngee.
Doxal ci àdduna dëgg
Gëstukat yi ci àdduna bi yépp dañuy jëfandikoo Pile dataset ngir tàggat ak jàngat xeeti làkk yu ubbeeku ci anam wu ñu mëna joxewaat.
GPT-J-6B ak GPT-NeoX-20B, ñiy sooga tàmbali liggéey ak jàngat yi ñoo leen di jëfandikoo ngir wuutu xeetu API yi ñuy jaay.
LM Evaluation Harness mooy jumtukaay bi lab yu bari di jëfandikoo ngir méngale model bi ci téemeeri liggéey.
Gëstukat yi moom seen bopp ci wàllu kaaraange ak mëna tekki dañuy jëfandikoo poid yu ubbeeku yu EleutherAI ngir jàngat xeetu biir yi API yu tëju yi di nëbb.
Ëlëgu EleutherAI
EleutherAI mingi joge ci kursu model-scaling bu seer dem ci tekki, tàggat-done leer, ak jàngat bu dëgër, wàll yi science ubbeeku gëna soxla. Xaarandi liggéey bu wéy ngir xam li model yi di representé ci biir, génne ay done yuñ bind bu baax, ak jàppale gëstub kaaraange bu moom boppam. Bi laboratuwaaru frontiere yi di gëna am sekkere, cër bi EleutherAI di def ci wàllu njariñu mbooloo, di tàggat gëstukat yu bees yi, mën na nekk lu ëppu limu parametre yi ci benn model bumuy yónnee.
Teg ko ci jëf
Lu tax mu am solo
- Pexem jaaykat. Kartu yoonu jaaykat yi ñooy wane man-man yi sa ekip mëna tabax ci kanam.
- Njëgg ak budget. Anamu jënd ak jaay ak tànneefi dugal dañu am njeexital ci njëg ak risk ci diir bu xawa yàgg.
- Risk ak kaaraange. Li liggéeyukaay bi di ñaax mooy tëral ni produit bi di doxee, kaaraange gi ak ubbeeku gi.
Moytul
- Koom-koomu ubbite mën na raw stabilite ci def liggéeyu defar dëgg.
- Njëg yi ci API wala coppite ci sàrt yi mën nañu dindi xalaat yi ci guddi gi.
- Dependence ci benn jaaykat dafay yokk njëgu tëjug ak migraasioŋ.
Jéego yi ci topp
- Saytu sa fournisseur yi nga jëfandikoo sa liggéey ak say done.
- Xoolaat mbir yu nëbbu, kaaraange ak sàrti yoon balaa ngay boole.
- Fexe am palaŋu fallback ci model yi wala jaaykat yi.
- Xool notu génne yi suko defee coppite yi ci kàrtu yoon du jaaxal ekip yi.
Weyal di banneexu
Bulletin bu amul fayda
Jàngal xibaar AI bu bes
Ñatti jaar-jaari IA yuñ firndeel bis bu nekk ci ayu-bis bi, ñu bind leen ci Àngle bu leer. Gratis ba fàww, amul yëgle.
Benn email bis bu nekk ci ayu-bis bi. Benn klik nga dindi abonemaa bi. Dunu musa jaay wala séddoo sa adres.
Nattal sa bopp
Take the EleutherAI quiz
Feedback ci saasi ci bépp tontu, ak sertifikaa buñ mëna séddoo ak ID buñ mëna saytu soo jàllee ci njàng mi.
Jàppale njàngum IA te doo fay. AI Understanding mbootaay la buy def te Yàlla tax — amul yëgle, amul paywall, musul am. Defal ab sarax
Laaj yi ñuy faral di laaj
Luy EleuterAI?
EleutherAI kuréel la guy def ay gëstu yu amul benn njariñ, moo njëkka amal xeetu làkk yu yaatu yu ubbeeku yi, bi ñu tëjoo frontier IA ci ginnàaw miiru liggéeyukaay yi. Firndeelna ni askanu deff te Yalla tax munna tabax ak genne ci lu yomb ay model yuy joŋante ak sistem yu tëju yi, di soppali ki wara bokk ci gestu juntuwaay yu bees yi.
How did EleutherAI first bring together its research community?
EleutherAI’s history page describes it as beginning in July 2020 as a Discord server for discussing GPT-3 and open language models.
Luy 'Pile' bi?
Pile bi dafa yaatu, bari ay mbir, ñu génne ko ci EleutherAI, ñu tabax ko ngir tàggat ak jàngat xeeti làkk yi.
Ci yii, yan ci ñoom mooy xeetu làkku EleutherAI?
GPT-NeoX-20B benn la ci xeetu ubbeeku yi gëna mag ci EleutherAI; ñeneen ñi ñu ngi bawoo ci Google wala Meta.
Lan lañuy jëfandikoo ngir jàngat LM?
Harnais bi jumtukaay la bu ñu bari jëfandikoo ngir jàngat modeli làkk yi ci téemeeri benchmark.
Which organizations are named in EleutherAI’s retrospective as research supporters?
EleutherAI’s paper on open research acknowledges support and contributions from CoreWeave and TPU Research Cloud, among other supporters.
Weyal di jàng
Gid yu jëm ci loolu
Tann nañu yeneen njiit ngir topic bii