What is Pruning? Definition | AI Understanding

Ufafanuzi

Kuondoa uzito wa kielelezo au nyuroni zisizo muhimu sana ili kupunguza ukubwa na kukokotoa.

Masharti yanayohusiana

Tahadhari ya Dirisha la Kuteleza

Mchoro wa umakini ambapo kila tokeni huhudumia dirisha la ukubwa usiobadilika la tokeni zilizo karibu ili kupunguza hesabu.

Sheria ya Upanuzi

Uhusiano wa kisayansi unaoonyesha jinsi utendakazi unavyoboreka kwa kutumia saizi ya mfano, data au kokotoo.

Mfano wa Distilled

Muundo mdogo uliofunzwa kuiga tabia ya modeli kubwa huku ukitumia compute kidogo katika makisio.

Uenezaji wa nyuma

Kanuni ya msingi ya mafunzo ambayo husasisha uzani wa modeli kwa kueneza makosa ya utabiri nyuma kupitia mtandao.

Rasilimali za usindikaji zinazohitajika ili kutoa mafunzo na kuendesha miundo, mara nyingi hupimwa kwa FLOPS au saa za GPU.

Vekta inayoonyesha ni kiasi gani kila kigezo kinapaswa kubadilika ili kupunguza hasara.

Pata maelezo zaidi katika miongozo yetu ya bila malipo

Attention Rollout and Head Pruning Structured Pruning and Layer Dropping Model Pruning

See also

Prompt Injection Quantization Prompt Engineering RAG (Retrieval-Augmented Generation)Prompt Recall Pretraining Recommendation System

Vinjari Kamusi kamili ya AI Gundua miongozo yote ya bure ya AI