ወደ ዜና ተመለስ
ፈጠራAI Understanding አጭር መግለጫ

ቅድመ ህትመት ለ GUI ወኪሎች ረጅም ጊዜ የሚያውቅ የስልጠና ዘዴን ያቀርባል

አዲስ የarXiv ቅድመ-ህትመት የ GUI ወኪሎችን ከትራጀክሪ-ደረጃ ግብረመልስ ጋር ለማሰልጠን ሀሳብ አቅርቧል ፣ አጭር የተሳካ አፈፃፀምን የሚክስ እና የተሳካ ባህሪን እንዴት እንደሚለያዩ በመለየት ።

5 min readRead the primary source
Primary-source image accompanying Preprint proposes length-aware training method for GUI agents
ዋና-ምንጭ ሰነድምንጭ ተመዝግቧል
አታሚ
arxiv.org
ምንጭ አገናኝ
arxiv.orghttps://arxiv.org/abs/2608.21830
የምንጭ ዓይነት
ዋና ሰነድ - ኦፊሴላዊ ማስታወቂያ ፣ ወረቀት ፣ ፋይል ወይም የመጀመሪያ ወገን ገጽ በቀጥታ እናነባለን።
አውድይህንን በ60 ሰከንድ ውስጥ ይረዱት።

እዚ ጀምር

ቁልፍ ቃላት

ትልቅ የቋንቋ ሞዴል (LLM)
ጽሑፍን ለማፍለቅ እና ለመተንተን በትልቅ ጽሑፍ ኮርፖራ ላይ የሰለጠነ የቋንቋ ሞዴል።
የማጠናከሪያ ትምህርት
ወኪሉ የረጅም ጊዜ መመለሻን ከፍ የሚያደርጉ ድርጊቶችን የሚማርበት የሽልማት ምልክቶችን ማሰልጠን።
ምደባ
አንድ ሞዴል ግብዓትን ለአንድ ወይም ከዚያ በላይ ቀድሞ ለተገለጹ ምድቦች የሚመድብበት ተግባር።
እራስህን ፈትን።AI ወኪሎች ጥያቄዎች

ምን ተፈጠረ

ተመራማሪዎች የመልቲ ሞዳል GUI ወኪሎችን የማጠናከሪያ-ትምህርት ማዕቀፍ ለGUI ወኪሎች ወይም LACL-GUI የረጅም ጊዜ ግንዛቤን ንፅፅር ትምህርትን ሀሳብ አቅርበዋል። ዘዴው የተሳካ ባህሪን ይበልጥ አጭር ለማድረግ እና ያልተሳኩ ሙከራዎች መካከል ጥሩ ልዩነቶችን ለማቅረብ በማሰብ በውጤት ላይ የተመሰረተ ክትትል ላይ የጥራት ደረጃ ምልክቶችን ይጨምራል። ወረቀቱ በGUI-ወኪል መመዘኛዎች ላይ ከቀደምት ዘዴዎች ወጥ የሆነ የአፈጻጸም ማሻሻያዎችን ዘግቧል።

ዋናው ምንጭ በኦገስት 22፣ 2026 የቀረበው የarXiv ቅድመ ህትመት ነው፣ “ከስኬት እና ውድቀት ባሻገር፡ ርዝመትን የሚያውቅ ንፅፅር ትምህርት ለ GUI ወኪሎች። እሱ በቀጥታ AIን ይመለከታል፡ በግራፊክ የተጠቃሚ በይነገጽ የሚሰሩ የመልቲሞዳል ትልቅ ቋንቋ ሞዴል ወኪሎች። ደራሲዎቹ የማጠናከሪያ ትምህርትን እንደ ዋና የሥልጠና አቀራረብ አድርገው ቀርፀው አንድ ወኪል አንድን ተግባር ሲሞክር የሥልጠና ምልክቱ እንዴት እንደሚገነባ ላይ ያተኩራሉ። በዚያ ቅንብር፣ የወረቀቱ ትኩረት አዲስ በይነገጽ ወይም ተጠቃሚን የሚመለከት ባህሪ አይደለም። ከተሞከሩ ተግባራት መዛግብት መማርን ለመቅረጽ የታቀደ መንገድ ነው።

ወረቀቱ እንደ የቡድን አንጻራዊ ፖሊሲ ማሻሻያ ያሉ በሰፊው ጥቅም ላይ የዋሉ ዘዴዎች ሽልማቱን ቀስ በቀስ የተሳሳተ አቀማመጥ በሚለው ነገር ሊሰቃዩ ይችላሉ ብሏል ውጤታማ ያልሆነ ወይም ያልተረጋጋ ማመቻቸት። የማጠናከሪያ ትምህርትን እንደ ንፅፅር ወይም ምደባ ላይ የተመሰረቱ አላማዎችን በተረጋገጡ ሽልማቶች ለማሻሻል በቅርብ ጥረቶች ውስጥ ስራውን ያስቀምጣል። እንደ ረቂቅ ገለጻ፣ እነዚያ አካሄዶች ችግር ያለበት ቀስ በቀስ ባህሪን በማስወገድ መረጋጋትን ሊያሻሽሉ ይችላሉ፣ ነገር ግን በአጠቃላይ የሂደቱን የመጨረሻ ውጤት ብቻ ይቆጣጠራሉ። ልዩነቱ አስፈላጊ ነው ምክንያቱም ተመሳሳይ የመጨረሻ መለያ አንድ ወኪል እንዴት እንደደረሰው ላይ ልዩነቶችን ሊደብቅ ስለሚችል። LACL-GUI ስለዚህ ትራጀክቱን እንደ የስልጠና ምልክት አካል አድርጎ ይቆጥረዋል።

LACL-GUI እንደ ተቃርኖ ማጠናከሪያ-ትምህርት-ከተረጋገጠ-ሽልማት ማዕቀፍ ጋር ስለ ሙሉ የድርጊት ቅደም ተከተል ጥራት መረጃን ይጨምራል። በስኬታማ አቅጣጫዎች ውስጥ፣ አጭር ግድያዎችን ለመደገፍ የታቀዱ ምርጫዎችን ያስቀምጣል። ባልተሳኩ ዱካዎች ውስጥ፣ ሙከራዎችን ከስኬታማ ዱካዎች በመለየት ይለያል። አብስትራክቱ በGUI-ወኪል ማመሳከሪያዎች ላይ የተደረጉ ሙከራዎችን ሪፖርት ያደርጋል እና ዘዴው የበለጠ ውጤታማ የመማሪያ ምልክቶችን እንዳመጣ እና ከቀደምት ዘዴዎች ጋር በተከታታይ የተሻሻለ አፈጻጸም እንዳለው ይናገራል። መለኪያዎችን፣ የሞዴል አወቃቀሮችን፣ የተግባር ብዛትን፣ የቁጥር ውጤቶችን ወይም ስታቲስቲካዊ ሙከራዎችን አይለይም። ይህ የሂደቱን አወቃቀር ለተገለጸው ዘዴ ዋና ያደርገዋል። የተዘገበው ውጤት በመመዘኛዎች ላይ የመማር ባህሪን በተመለከተ ነው፣ ልዩ የሙከራ ማስረጃዎች ለወረቀቱ ዝርዝሮች የተተወ።

የምንጭ ዝርዝሮች: arxiv.org ↗

ለምን አስፈላጊ ነው።

የ GUI ወኪሎች በዲጂታል አካባቢዎች ውስጥ ስራዎችን ለማጠናቀቅ የተነደፉ ናቸው, ስለዚህ የስልጠና ቅልጥፍና እና አስተማማኝነት ከማሳያ በላይ ጠቃሚ መሆን አለመቻል ላይ ተጽእኖ ያሳድራሉ. የወረቀቱ ማዕከላዊ አስተዋፅዖ እያንዳንዱን ውጤት በቀላሉ እንደ ስኬት ወይም ውድቀት ከማየት ይልቅ ከሁለቱም የተሳካ እና ያልተሳኩ ሙከራዎች የበለጠ መረጃ ለማውጣት የሚያስችል መንገድ ነው። ምንጩ ምንም የማመሳከሪያ ስሞች፣ ውጤቶች፣ የመነሻ መስመሮች ወይም የማሰማራት ማስረጃዎች ስለሌለ፣ የተዘገበው ማሻሻያ ተግባራዊ ልኬት ግልጽ አይደለም።

ጥናቱ በርካታ የበይነገጽ ድርጊቶችን ማከናወን ያለባቸውን የስልጠና ወኪሎች ተጨባጭ ድክመትን ይመለከታል። የሁለትዮሽ ውጤት አንድ ሙከራ እንደተሳካ ወይም እንዳልተሳካ ያሳያል ነገር ግን የተሳካ ሙከራ አላስፈላጊ እርምጃዎችን መጠቀሙን ወይም አንዱ ውድቀት ከሌላው በጣም ቅርብ ስለመሆኑ በራሱ አያመለክትም። የታቀደው ዘዴ እነዚያን ልዩነቶች እንደ ጠቃሚ ቁጥጥር አድርጎ ይመለከታቸዋል፣ ይህም ከእያንዳንዱ ከተመዘገበው አቅጣጫ ተጨማሪ መረጃ ለአመቻቹ ሊሰጥ ይችላል። ፕሮፖዛሉ በውጤቱም እነዚያ ምርጫዎች እንዴት እንደተገለጹ እና በማመቻቸት ጊዜ እንዴት እንደሚተገበሩ ላይ ይወሰናል. እነዚያ የንድፍ ምርጫዎች ሪፖርት የተደረጉትን የአፈጻጸም ማሻሻያዎች ለመተርጎም አስፈላጊ አውድ ናቸው።

ለ GUI ወኪሎች ገንቢዎች፣ ዲጂታል ተግባራት ብዙውን ጊዜ ነጠላ ትንበያዎችን ከማድረግ ይልቅ ቅደም ተከተሎችን ስለሚያካትቱ ያ ሀሳብ አስፈላጊ ሊሆን ይችላል። አጠር ያሉ የተሳካ መንገዶችን የሚያበረታታ የሥልጠና አካሄድ አላስፈላጊ መስተጋብርን ሊቀንስ ይችላል፣ የውድቀት ደረጃ የተሰጠው ሕክምና ግን አንድ ወኪል በመሠረታዊ የተሳሳቱ ሙከራዎች ከመቧደን ይልቅ በቅርብ ከሚጠጉ ሰዎች እንዲማር ይረዳዋል። እነዚህ የስልቱ ዲዛይን አንድምታዎች እንጂ ግኝቶች ከደራሲያን የቤንችማርክ የይገባኛል ጥያቄ ባለፈ በምንጩ በግል የታዩ አይደሉም። ያ ፍሬም ስራው በችግር ሲለያይ ወይም የበይነገጽ ባህሪ ሲቀየር ምን ያህል ጥቅም እንደሚገኝ ክፍት ያደርገዋል። ምንጩ ለእነዚህ ጥያቄዎች መፍትሄ አይሰጥም.

ውጤቱ በደንብ የተረዳው ለመሰማራት ዝግጁ የሆነ ምርትን ከማስረጃነት ይልቅ እንደ የምርምር እድገት ነው። የጨረሱ ይላል LACL-GUI በተከታታይ አፈጻጸምን ከቀደምት ዘዴዎች ያሻሽላል፣ ነገር ግን ምንም የውጤት መጠኖችን፣ የተግባር-ተኮር ውጤቶችን፣ መስፈርቶችን ወይም የንፅፅር ዝርዝሮችን አያቀርብም። እንዲሁም አቀራረቡ በገሃዱ ዓለም መገናኛዎች ውስጥ ደህንነትን፣ አጠቃላይነትን፣ ተደራሽነትን ወይም አስተማማኝነትን እንደሚያሻሽል አያሳይም። እነዚያ ገደቦች ህዝባዊ ተጽእኖውን እርግጠኛ ባልሆኑበት ሁኔታ ስራውን የስልጠና አቅጣጫን ለመረዳት ጠቃሚ ያደርገዋል። በተግባራዊ ሁኔታ, ሀሳቡ ውጤታማነትን ከቁጥጥር ጥራት ጋር ያገናኛል. አንድ ወኪል ፍጥነትን፣ ጥንቃቄን እና የመልሶ ማቋቋም አቅምን እንዴት ማመጣጠን እንዳለበት በራሱ አይወስንም። ጥንቃቄ የተሞላበት ግምገማ የስልቱን አስተዋፅኦ ከስር ሞዴል አቅም እና ከተመረጡት ተግባራት መለየት ያስፈልገዋል። ያ መለያየት በተገኘው ማጠቃለያ ላይ አልተገለጸም።

Interactive Mechanism

በይነተገናኝ ሜካኒዝም፡ በትክክል እንዴት እንደሚሰራ

ከዚህ ልማት በስተጀርባ ያለውን ቴክኖሎጂ በይነተገናኝ ያስሱ።

Agent Lifecycle Stage:
1
User Intent & Planning: "Audit customer refund request #4092 and settle payment."
2
Tool Calling: Emits structured JSON call crm_get_transaction(id='4092').
3
Guardrail & Verification:🛡️ Paused: High-value action requires human operator sign-off.
4
Final Settlement: Refund recorded, email receipt dispatched, and audit log stored.
Core takeaway: An AI agent is not just a language model—it is a closed loop of planning, tool invocation, and environment feedback. Production systems require self-healing retries and strict human approval guardrails.
በይነተገናኝ ጽንሰ-ሐሳብ ቼክ+10 Points
AI Agents Quiz

An agent must create a draft calendar event for Tuesday at 2 p.m. Which evidence would establish the requested result?

ቀጥሎ ምን እንደሚታይ

ዋናው ክትትል የLACL-GUI ሪፖርት የተደረጉት ግኝቶች በተለያዩ የ GUI አካባቢዎች፣ የማልቲሞዳል ሞዴሎች፣ የተግባር ርዝማኔዎች እና ገለልተኛ ግምገማዎች መያዛቸው ነው። አንባቢዎች ስለ ስልጠና ወጪ፣ የአመለካከት ባህሪ፣ የመራባት ችሎታ እና አጭር የተሳካላቸው አቅጣጫዎች በተቀየሩ መገናኛዎች ወይም ይበልጥ ውስብስብ በሆኑ ተግባራት ትክክል ሆነው ስለመቀጠላቸው ማስረጃዎችን መመልከት አለባቸው። ምንጩ ዘዴው በይፋ የተለቀቀ፣ ለምርት ዝግጁ የሆነ ወይም በወረቀቱ ላይ ከተገለጹት ሙከራዎች የላቀ መሆኑን አያረጋግጥም።

ገለልተኛ ማባዛት የተዘገበው ጥቅም ከረጅም ጊዜ ቁጥጥር በራሱ ወይም በስልጠና ማዋቀር ውስጥ ካሉ ሌሎች ምርጫዎች የመጣ መሆኑን መሞከር አለበት። ጠቃሚ ንጽጽሮች የተሳካ-ትራጀክቲቭ ምርጫን፣ የውድቀት-ጥራት ምልክትን እና ከስር ያለውን ንፅፅር አላማን ይለያሉ። ምንጩ እንደዚህ አይነት ጥፋቶች መካተታቸውን አይገልጽም, ስለዚህ የእያንዳንዱ አካል አስተዋፅኦ ግልጽ ጥያቄ ነው. እንዲህ ዓይነቱ ሙከራ ዘዴው የማመቻቸት ተለዋዋጭነትን ብቻ ይቀይራል ወይም ደግሞ ከግምገማ መቼቱ ውጭ አስተማማኝ ሆኖ የሚቆይ ባህሪን ያስገኛል የሚለውን ያብራራል። ምንጩ በአሁኑ ጊዜ ያንን ልዩነት ሳይፈታ ይተዋል.

አጠቃላይነት ሌላ አስፈላጊ የማይታወቅ ነው። የGUI ወኪሎች የተለያዩ አቀማመጦችን፣ የግንኙነቶች ስምምነቶችን፣ የተግባር አድማሶችን እና የበይነገጽ ለውጦችን ሊያጋጥማቸው ይችላል። ምንጩ ብቻ ሙከራዎች GUI-ወኪል መለኪያዎች ላይ ተካሂዶ ነበር ይላል; በማይታዩ በይነገጾች፣ ረጅም የስራ ፍሰቶች፣ ጫጫታ የሚታይባቸው ግብዓቶች፣ ወይም አጭሩ መንገድ በጣም አስተማማኝ ወይም አስተማማኝ መንገድ ባልሆኑ ተግባራት ላይ አፈጻጸምን አይመሰርትም። ወደፊት የሚደረጉ ግምገማዎች ትክክለኛነትን ከድርጊት ብዛት፣ ከስህተቶች ማገገም እና የለውጥ ጥንካሬን በጋራ መለካት አለባቸው።

የወረቀቱ ተገኝነት እና የትግበራ ሁኔታም ማረጋገጫ ያስፈልገዋል። ምንጩ የarXiv ማስረከቢያን እና ከወረቀቱ ጋር ማገናኛን ይለያል፣ ነገር ግን ኮድ፣ የስልጠና መረጃ፣ የፍተሻ ቦታዎች ወይም ወኪል በይፋ እንደሚገኝ አይገልጽም። እንዲሁም ስለ ፍቃድ አሰጣጥ፣ ሃርድዌር፣ የስልጠና ቆይታ፣ የውድቀት ጉዳዮች ወይም የሰዎች ቁጥጥር መረጃ አይሰጥም። እነዚያ ዝርዝሮች እስኪዘገቡ ድረስ፣ በጣም ጠንካራው የተደገፈው መደምደሚያ ደራሲዎቹ ጠቃሚ ሊሆን የሚችል የሥልጠና ዘዴን ሐሳብ አቅርበው እና መለካት እንጂ የሚጠቀሙት የGUI ወኪሎች ለሰፊ ማሰማራት ዝግጁ ናቸው ማለት አይደለም። እነዚያ የጎደሉት ቅርሶች ዘዴውን ለመመርመር እና የተዘገቡትን ንጽጽሮችን ለማባዛት ቀላል ያደርጉታል። ከምንጩ መቅረታቸው ስለ ተግባራዊ ጉዲፈቻ መደምደም ይቻላልን ይገድባል።

ተዛማጅ መመሪያዎች እና ጥያቄዎች

AI ወኪሎችAI ሞዴሎች ተብራርተዋልAI ስልጠናትራንስፎርመሮችየሚያውቁትን ይሞክሩ - ነፃ የ AI ጥያቄዎችን ይሞክሩበእኛ የቃላት መፍቻ ውስጥ የ AI ቃልን ይፈልጉየ AI ሞዴል መልቀቂያ መከታተያ ይከተሉ
ይህ ጠቃሚ ሆኖ ተገኝቷል?