GraphInfer-Bench: Benchmarking LLM's Inference Capability on Graphs
यह शोधपत्र GraphInfer-Bench को प्रस्तुत करता है, जो एक व्यापक बेंचमार्क है जिसमें छह वास्तविक दुनिया के ग्राफों के माध्यम से 42,000 नमूने शामिल हैं ताकि बड़े भाषा मॉडल (LLMs) की उन ओपन-एंडेड ग्राफ इन्फरेंस कार्यों को करने की क्षमता का मूल्यांकन किया जा सके जिन्हें एकल नोड्स या पथों को पुनर्प्राप्त करके हल नहीं किया जा सकता है, जिससे यह पता चलता है कि वर्तमान LLM-आधारित विधियाँ इस क्षमता में अभी भी साधारण GNNs से पीछे हैं।