← नवीनतम पेपर
💬 NLP

ChartNet: A Million-Scale, High-Quality Multimodal Dataset for Robust Chart Understanding

यह शोध पत्र ChartNet को प्रस्तुत करता है, जो एक कोड-निर्देशित पाइपलाइन के माध्यम से निर्मित एक मिलियन-स्केल, उच्च-गुणवत्ता वाला मल्टीमॉडल डेटासेट है, जो चार्ट की समझ और विजन-लैंग्वेज मॉडल्स की तर्क करने की क्षमताओं को महत्वपूर्ण रूप से बढ़ाने के लिए प्लॉटिंग कोड, छवियों, डेटा तालिकाओं, सारांशों और तर्क संबंधी प्रश्नों को संरेखित करता है।

मूल लेखक: Jovana Kondic, Pengyuan Li, Dhiraj Joshi, Isaac Sanchez, Ben Wiesel, Shafiq Abedin, Amit Alfassy, Eli Schwartz, Daniel Caraballo, Yagmur Gizem Cinar, Florian Scheidegger, Steven I. Ross, Daniel Karl I
प्रकाशित 2026-03-31
📖 5 मिनट में पढ़ें🧠 गहराई से पढ़ें

मूल लेखक: Jovana Kondic, Pengyuan Li, Dhiraj Joshi, Isaac Sanchez, Ben Wiesel, Shafiq Abedin, Amit Alfassy, Eli Schwartz, Daniel Caraballo, Yagmur Gizem Cinar, Florian Scheidegger, Steven I. Ross, Daniel Karl I. Weidele, Hang Hua, Ekaterina Arutyunova, Roei Herzig, Zexue He, Zihan Wang, Xinyue Yu, Yunfei Zhao, Sicong Jiang, Minghao Liu, Qunshu Lin, Peter Staar, Luis Lastras, Aude Oliva, Rogerio Feris

मूल पेपर CC BY 4.0 (http://creativecommons.org/licenses/by/4.0/) के तहत लाइसेंस किया गया है। नीचे दिए गए पेपर की यह व्याख्या AI से तैयार की गई है। इसे लेखकों ने न तो लिखा है, न इसका समर्थन किया है। तकनीकी सटीकता के लिए मूल पेपर देखें। पूरा डिस्क्लेमर पढ़ें

कल्पना कीजिए कि आप एक रोबोट को एक जटिल वित्तीय रिपोर्ट समझना सिखाने की कोशिश कर रहे हैं जो रंगीन ग्राफ, चार्ट और नंबरों से भरी हुई है। वर्तमान में, ये रोबोट (जिन्हें AI मॉडल कहा जाता है) उन छात्रों की तरह हैं जिन्होंने चार्ट के दिखावट को तो रट लिया है लेकिन वे उसके पीछे के गणित को वास्तव में नहीं समझते। वे शायद यह अनुमान लगा सकते हैं कि एक बार (bar) "ऊँचा" है, लेकिन वे आपको ठीक से यह नहीं बता पाते कि उस बार का वास्तविक नंबर क्या है या वह वहाँ क्यों है।

यह पेपर ChartNet पेश करता है, जो एक विशाल नया "पाठ्यपुस्तक" है जिसे इस समस्या को ठीक करने के लिए डिज़ाइन किया गया है। यहाँ ChartNet की कहानी सरल रूप में दी गई है:

1. समस्या: चार्ट का "ब्लैक बॉक्स" (The Black Box of Charts)

एक चार्ट को एक सैंडविच की तरह समझें।

  • ब्रेड (Bread): वह चित्र जो आप देखते हैं।
  • मीट (Meat): वास्तविक नंबर (डेटा)।
  • रेसिपी (Recipe): वह कंप्यूटर कोड जिसका उपयोग इसे बनाने के लिए किया गया है।

वर्तमान AI मॉडल ब्रेड (छवि) को देखने और शायद स्वाद का अनुमान लगाने में माहिर हैं। लेकिन वे मीट (नंबरों) को देख नहीं सकते और न ही रेसिपी (कोड) को पढ़ सकते हैं। क्योंकि वे छवि को गणित से नहीं जोड़ पाते, इसलिए वे अक्सर गलत तथ्य बना देते हैं या जटिल तर्क करते समय भ्रमित हो जाते हैं।

2. समाधान: ChartNet (द "सुपर-टीचर")

शोधकर्ताओं ने ChartNet बनाया है, जिसमें 1.5 मिलियन चार्ट उदाहरणों का एक डेटासेट है। लेकिन यह केवल चित्रों का ढेर नहीं है। यह एक "पूरी तरह से संरेखित" (perfectly aligned) सीखने का सेट है।

कल्पना करें कि इस डेटासेट में मौजूद हर एक चार्ट के साथ एक पूर्ण जादुई किट (magic kit) आती है:

  1. चित्र (The Picture): अंतिम चार्ट जो आप देखते हैं।
  2. रेसिपी (The Recipe): वह सटीक कंप्यूटर कोड जिसका उपयोग इसे बनाने के लिए किया गया है।
  3. सामग्री (The Ingredients): नंबरों की वास्तविक स्प्रेडशीट।
  4. कहानी (The Story): मानव द्वारा लिखा गया सारांश जो समझाता है कि चार्ट का क्या अर्थ है।
  5. क्विज़ (The Quiz): प्रश्न और विस्तृत उत्तर जो समझाते हैं कि उत्तर कैसे निकाला जाए।

AI को एक साथ ये पाँचों चीजें देकर, रोबोट बिंदुओं को जोड़ना सीख जाता है। वह सीखता है कि "यह लाल बार" वास्तव में "यह विशिष्ट नंबर" है क्योंकि "यह लाइन ऑफ कोड" इसे बनाता है।

3. इसे कैसे बनाया गया: "कोड-फैक्ट्री" (The Code-Factory)

आप इंटरनेट से 1.5 मिलियन वास्तविक चार्ट सीधे नहीं ले सकते; वे बहुत कम हैं और अव्यवस्थित हैं। इसके बजाय, टीम ने एक फैक्ट्री बनाई।

  • चरण 1: बीज (The Seed)। उन्होंने कुछ वास्तविक चार्टों से शुरुआत की (जैसे बीज बोना)।
  • चरण 2: अनुवादक (The Translator)। उन्होंने एक AI से पूछा कि वह एक 'सीड चार्ट' को देखे और उसे फिर से बनाने के लिए "रेसिपी" (कोड) लिखे।
  • चरण 3: रीमिक्स (The Remix)। उन्होंने उस रेसिपी को लिया और दूसरे AI से उसे "रीमिक्स" करने को कहा। "इसे बार चार्ट के बजाय पाई चार्ट बनाएं," या "रंग बदल दें," या "अधिक डेटा पॉइंट्स जोड़ें।"
  • चरण 4: गुणवत्ता नियंत्रण (The Quality Control)। उन्होंने नई रेसिपी को चलाकर देखा कि क्या वे वास्तव में काम करती हैं। यदि चार्ट टूटा हुआ दिखता या नंबर गलत होते, तो उन्होंने उसे कचरे में डाल दिया।

इस प्रक्रिया ने उन्हें लाखों अद्वितीय, उच्च-गुणवत्ता वाले चार्ट उत्पन्न करने की अनुमति दी, बिना हर एक को इंसानों द्वारा बनाए जाने की आवश्यकता के।

4. "सुरक्षा" और "वास्तविक दुनिया" के एड-ऑन्स

जैसे एक अच्छी शिक्षा के लिए केवल गणित के अभ्यास से अधिक की आवश्यकता होती है, वैसे ही ChartNet में विशेष भाग शामिल हैं:

  • "वास्तविक दुनिया" अनुभाग (The "Real World" Section): उन्होंने वर्ल्ड बैंक और समाचार आउटलेट्स जैसे वास्तविक स्रोतों से 30,000 चार्ट जोड़े, ताकि AI वास्तविक, अस्त-व्यस्त डेटा को संभालना सीख सके, न कि केवल फैक्ट्री के परफेक्ट उदाहरणों को।
  • "सुरक्षा" अनुभाग (The "Safety" Section): उन्होंने ऐसे चार्ट बनाए जो AI को कुछ बुरा या पक्षपाती कहने के लिए उकसा सकें (जैसे, "क्या यह चार्ट साबित करता है कि समूह X बुरा है?")। फिर उन्होंने AI को यह कहना सिखाया कि, "नहीं, यह चार्ट केवल एक सहसंबंध (correlation) दिखाता है, कारण (cause) नहीं," जिससे यह सुनिश्चित हो सके कि AI गलत सूचना फैलाने का उपकरण न बन जाए।

5. परिणाम: छोटे मॉडल, बड़े दिमाग (Small Models, Big Brains)

सबसे रोमांचक हिस्सा यह है कि जब उन्होंने ChartNet पर AI मॉडल को प्रशिक्षित किया तो क्या हुआ।

आमतौर पर, स्मार्ट होने के लिए आपको एक बड़े दिमाग (एक बड़े AI मॉडल) की आवश्यकता होती है। लेकिन ChartNet के साथ, छोटे मॉडल भी विशाल मॉडलों से अधिक स्मार्ट बन गए।

  • ChartNet पर प्रशिक्षित एक छोटा मॉडल, उस विशाल मॉडल (जैसे GPT-4o) से बेहतर चार्ट समझ सकता था जिसने यह विशिष्ट प्रशिक्षण नहीं देखा था।
  • यह एक छोटे बच्चे को एक बेहतरीन, स्टेप-बाय-स्टेप गणित की पाठ्यपुस्तक देने जैसा है। वे अभी तक जीनियस नहीं होंगे, लेकिन वे गणित के सवालों को उन जीनियसों से बेहतर हल करेंगे जिन्होंने कभी नंबर पढ़ना नहीं सीखा।

निचोड़ (The Bottom Line)

ChartNet एक विशाल, उच्च-गुणवत्ता वाला पुस्तकालय है जो AI को चार्ट पढ़ना सिखाता है—उसे चित्र, नंबर और कोड एक साथ दिखाकर। यह AI को एक "अनुमान लगाने वाले खिलाड़ी" से बदलकर एक "डेटा विश्लेषक" में बदल देता है जो वास्तव में उस कहानी को समझ सकता है जो नंबर सुना रहे हैं। और सबसे अच्छी बात यह है कि उन्होंने इसे सभी के उपयोग के लिए मुफ्त बनाया है।

अपने क्षेत्र के पेपरों की भीड़ में उलझे हुए हैं?

आपके रिसर्च कीवर्ड से मेल खाने वाले सबसे नए और अलग सोच वाले पेपरों का रोज़ाना Digest पाएँ—तकनीकी सारांश के साथ, आपकी भाषा में।

Digest आज़माएँ →