GraphEcho: Evaluating LLM Graph Agents
Το GraphEcho ελέγχει εάν οι πράκτορες LLM μπερδεύουν τις επαναλαμβανόμενες συναντήσεις ως πρόσθετη επιβεβαίωση. Το GraphEcho είναι ένα σημείο αναφοράς που έχει σχεδιαστεί για την αξιολόγηση παραγόντων γραφικών μοντέλων μεγάλων γλωσσών (LLM). Ελέγχει εάν αυτοί οι παράγοντες μπορούν να διακρίνουν μεταξύ επαναλαμβανόμενων συναντήσεων και πρόσθετης επιβεβαίωσης. Το σημείο αναφοράς ποικίλλει τον αριθμό των διαδρομών…