FreeTxt-Vi: A Benchmarked Vietnamese-English Toolkit for Segmentation, Sentiment, and Summarisation
تُعد FreeTxt-Vi مجموعة أدوات ويب مجانية ومفتوحة المصدر تدمج مسار معالجة لغات طبيعية ثنائي اللغة (فيتنامي-إنجليزي) مُقاس الأداء لعمليات التجزئة، وتحليل المشاعر، والتلخيص، مما يُمكّن غير المبرمجين من تحليل البيانات النصية مع إظهار أداء تنافسي مقابل النماذج المرجعية الحالية.
البحث الأصلي مرخَّص بموجب CC BY 4.0 (http://creativecommons.org/licenses/by/4.0/). هذا شرح مولَّده بالذكاء الاصطناعي للبحث أدناه. لم يكتبه المؤلفون ولم يصادقوا عليه. وللتحقق من الدقة التقنية، يرجى الرجوع إلى البحث الأصلي. اقرأ إخلاء المسؤولية الكامل
تخيل أن لديك مكتبة ضخمة من الرسائل، والبريد الإلكتروني، واستجابات الاستبيانات المكتوبة بلغتين: الفيتنامية والإنجليزية. تريد أن تفهم ما يقوله الناس، وكيف يشعرون، وما هي القصص الرئيسية. لكن هناك مشكلة: المكتبة فوضوية، والكتب مكتوبة بخطوط مختلفة، والأدوات التي تقرأها تتطلب عادةً أن تكون مبرمج حاسوب.
FreeTxt-Vi هو "مساعد المكتبة السحري" الجديد، المجاني وسهل الاستخدام، والمصمم لحل هذه المشكلة. إنه مجموعة أدوات قائمة على الويب تتيح لأي شخص — سواء كانوا معلمين، أو باحثين، أو قادة مجتمعيين — تحليل النصوص دون الحاجة لكتابة سطر برمجي واحد.
إليك كيف يعمل، مقسماً إلى مفاهيم بسيطة:
1. المترجم والمنظم اللغوي (التقسيم - Segmentation)
المشكلة: في اللغة الإنجليزية، الكلمات تشبه قطع "الليغو" المتميزة التي تفصلها مسافات (مثل "cat sat"). أما في اللغة الفيتنامية، فإن "القطع" غالباً ما تكون ملتصقة ببعضها، والمسافات تفصل بين المقاطع الصوتية بدلاً من الكلمات الكاملة. بالنسبة للحاسوب، قد تبدو كلمة "student" (طالب) كأنها ثلاث قطع منفصلة: "học" + "sinh". إذا لم يعرف الحاسوب كيفية إعادة لصقها معاً، فسيصاب بالارتباك.
الحل: يستخدم FreeTxt-Vi فريقاً هجيناً لإصلاح ذلك.
- تخيل VnCoreNLP كأمين مكتبة فيتنامي ماهر يعرف تماماً كيفية إعادة لصق المقاطع لتكوين كلمات صحيحة.
- تخيل BPE (ترميز زوج البايت) كروبوت ذكي يفهم كيف يتحدث الذكاء الاصط الاصطناعي الحديث.
- معاً، يعملان مثل مترجم ومنظم ثنائي اللغة، مما يضمن أنه سواء كان النص بالإنجليزية أو الفيتنامية، فإن الحاسوب يرى الكلمات بشكل صحيح قبل محاولة تحليلها.
2. قارئ الحالة المزاجية (تحليل المشاعر - Sentiment Analysis)
المشكلة: لديك آلاف من نماذج التقييم. هل يحب الناس سياسة المدرسة الجديدة، أم أنهم غاضبون؟ قراءتها واحداً تلو الآخر يستغرق وقتاً طويلاً جداً.
الحل: يمتلك FreeTxt-Vi خاتم مزاج ذكي للغاية.
- يستخدم "دماغًا مدربًا" (نموذج ذكاء اصطناعي مضبوط بدقة) قد قرأ ملايين المراجعات بكلتا اللغتين.
- لا يكتفي بقول "سعيد" أو "حزين" فقط، بل يمكنه إخبارك ما إذا كان الشخص "سعيداً جداً"، أو "منزعجاً قليلاً"، أو "محايداً".
- يرسم مخططات ملونة (مثل المخططات الدائرية والأعمدة البيانية) حتى تتمكن من رؤية "درجة الحرارة العاطفية" لبياناتك فوراً. إنه يشبه امتلاك توقعات جوية لمشاعر الناس.
3. ملخص القصة (التلخيص - Summarisation)
المشكلة: تخيل تقريراً من 50 صفحة مليئاً بالتعليقات الفوضوية والمشتتة. أنت بحاجة إلى "الخلاصات" في 30 ثانية.
الحل: يقدم FreeTxt-Vi طريقتين لتقليص القصة:
- المحدد (الاستخراجي - Extractive): يعمل كطالب يضع خطاً تحت الجمل الأكثر أهمية في النص الأصلي. إنه صادق ويظهر لك بالضبط ما اختاره.
- الحكواتي (التجريدي - Abstractive): هذا هو الجزء الرائع. يستخدم ذكاءً اصطناعياً قوياً (Qwen2.5) يعمل كصحفي مبدع. بدلاً من مجرد نسخ الجمل، فإنه يقرأ الفوضى بأكملها، ويفهم المعنى، ويكتب ملخصاً جديداً، قصيراً، وانسيابياً بأسلوبه الخاص.
- ميزة "التركيز": يمكنك حتى أن تطلب من الذكاء الاصطناعي: "لخص فقط الأجزاء المتعلقة بـ المعلمين"، أو "أخبرني فقط عن قضايا السلامة". إنه يعمل كفلتر يسمح فقط بالمواضيع المحددة التي تهتم بها بالمرور.
4. المستكشف البصري (سحب الكلمات والأشجار - Word Clouds & Trees)
المشكلة: أحياناً تريد فقط رؤية الكلمات التي تظهر بكثرة، أو كيف تجتمع الكلمات مع بعضها البعض.
الحل:
- سحب الكلمات (Word Clouds): تخيل سحابة حيث كلما كانت الكلمة أكبر، كانت أكثر أهمية. يمكن لـ FreeTxt-Vi إظهار هذه السحب بناءً على عمليات العد البسيطة، أو بناءً على مدى "تفرد" كلمة ما مقارنة باللغة العادية.
- أشجار الكلمات (Word Trees): هذا يشبه شجرة عائلة للكلمات. إذا اخترت كلمة "المعرفة" (Knowledge)، فسيقوم الأداة برسم فروع توضح كل كلمة تأتي عادةً قبل أو بعد هذه الكلمة. يساعدك هذا على رؤية الأنماط، مثل كيف أن كلمة "المعرفة" غالباً ما يتبعها "هي قوة" أو "هي مهمة".
لماذا هذا مهم؟
لفترة طويلة، كانت أدوات الذكاء الاصطناعي القوية تشبه سيارات الفيراري: سريعة ومذهلة، ولكنها مخصصة فقط للأشخاص الذين يعرفون كيفية قيادتها (المبرمجين) ومعظمها صُمم للمتحدثين بالإنجليزية.
FreeTxt-Vi يشبه سيارة عائلية موثوقة ومجانية يمكن لأي شخص قيادتها. لقد تم بناؤه خصيصاً للتعامل مع التحديات الفريدة للغة الفيتنامية بينما لا يزال يعمل بشكل مثالي للغة الإنجليزية.
الربح الكبير:
- إنه مجاني: لا توجد اشتراكات باهظة الثمن.
- إنه مفتوح: يمكن لأي شخص النظر تحت الغطاء لمعرفة كيفية عمله.
- إنه عادل: يعامل الفيتنامية والإنجليزية كمتساويين، مما يعطي صوتاً للغة غالباً ما يتم تجاهلها من قبل شركات التكنولوجيا الكبرى.
باختصار، يحول FreeTxt-Vi جبلاً من النصوص المربكة إلى قصة واضحة، ملونة، ومفهومة، مما يساعد الناس على اتخاذ قرارات أفضل بناءً على ما يقوله الناس حقاً.
غارق في أبحاث مجالك؟
تصلك نشرة يومية بأحدث الأبحاث المطابقة لكلماتك البحثية المفتاحية — مع ملخصات تقنية، بلغتك.