اختبار البحث الدلالي العربي قبل شراء نظام إدارة وثائق ذكي

كل أنظمة إدارة الوثائق (DMS) التي تقارنها تعلن عن «بحث يفهم المعنى». فإن كنت مدير التحول الرقمي أو مدير تقنية المعلومات، فأنت تحتاج طريقة يثبت بها الفرق أمام لجنة الشراء بدل الاعتماد على الانطباع. استعمل ما يلي قبل العرض التوضيحي الثاني أو قبل تجربة إثبات المفهوم، وتخرج منه بمجموعة استعلامات جاهزة وورقة تقييم يمكن أن يملأها أي عضو في الفريق.

لماذا يبدو كل بحث دلالي ممتازًا في العرض الجاهز

العرض الذي يعدّه المورد مصمم لينجح، وهذا طبيعي. لكن ثلاثة عوامل فيه تجعل نتيجته قليلة الدلالة على ما سيحدث في مؤسستك:

• الوثائق نظيفة: ملفات PDF نصية مولدة من Word، بعناوين واضحة ومصطلحات موحدة. أرشيفكم فيه مسح ضوئي مائل، ومراسلات بعناوين مثل «بخصوص الموضوع أعلاه»، وجداول ممسوحة.
• الاستعلامات مختارة: من يكتب السؤال يعرف ما في الوثائق. الموظف الحقيقي يبحث بكلمة تذكّرها خطأً، أو بوصف مبهم مثل «الخطاب اللي أرسلناه للمقاول عن التأخير».
• الحساب إداري: العرض يجري غالبًا بحساب يرى كل شيء، فلا يظهر سلوك البحث عند مستخدم لا يحق له رؤية نصف النتائج.

لذلك يكون الاختبار المفيد هو الذي تتحكم فيه أنت: وثائقك، واستعلاماتك، وإجاباتك المرجعية المكتوبة مسبقًا، وحسابات مستخدمين بأدوار مختلفة.

ما الذي يُنتظر من البحث الدلالي وما الذي لا يُنتظر منه

البحث النصي التقليدي يطابق الكلمات: تكتب «عقد صيانة» فيعيد ما يحتوي هاتين الكلمتين. البحث الدلالي يحاول مطابقة المعنى: تكتب «اتفاقية تشغيل وصيانة المصاعد» فيعيد عقدًا عنوانه «عقد خدمات المباني – المرحلة الثانية» لأن محتواه يتحدث عن ذلك. هذه قيمة حقيقية حين تختلف تسميات الموظفين للشيء الواحد.

لكن هناك أسئلة لا يكون المعنى فيها هو المطلوب، بل التطابق الحرفي: رقم عقد، رقم مستخلص، اسم مورد بعينه، رقم هوية في ملف موظف. إن أعاد النظام على «العقد 4471/ت» عقودًا «مشابهة في المعنى» بدل العقد نفسه فهذه نتيجة سيئة وإن بدت ذكية. لذلك يجب أن تغطي عينتك النوعين، وأن تسأل المورد: كيف يجمع النظام بين المطابقة الحرفية والمطابقة بالمعنى، وكيف يرتّب النتائج حين يتعارضان؟ لا تحتاج أن تفهم التقنية الداخلية؛ يكفي أن ترى السلوك في الاختبار.

خصائص العربية التي يجب أن تمر بها العينة

معظم إخفاقات البحث العربي لا تظهر إلا إذا تعمّدت إدخالها في الاختبار. راجع عينتك واستعلاماتك وتأكد أنها تشمل الحالات التالية:

• اختلاف الإملاء الشائع: «إنشاء/انشاء»، «مؤسسة/مؤسسه»، «مستشفى/مستشفي». اكتب الاستعلام بالصيغة الخاطئة عمدًا وانظر هل تظهر الوثيقة المكتوبة بالصيغة الصحيحة.
• السوابق واللواحق: «والعقود»، «بعقدها»، «للمقاولين». الوثيقة التي فيها «المقاول» يجب أن تظهر لمن كتب «مقاولين».
• المرادفات الإدارية: «خطاب/كتاب/مراسلة»، «مستخلص/فاتورة إنجاز»، «أمر تغيير/أمر تعديل»، «محضر استلام/شهادة إنجاز».
• الأرقام الهندية والعربية: «١٤٤٧» و«1447» في الوثيقة والاستعلام، وتواريخ هجرية وميلادية.
• المصطلح الإنجليزي داخل النص العربي: «تقرير KPI»، «ملف الـ BOQ»، «خطاب الـ LOA».
• استعلام عربي لوثيقة إنجليزية والعكس: «شهادة ضمان المعدات» لوثيقة عنوانها Equipment Warranty Certificate.
• لغة البريد غير الرسمية: وصف بالعامية يكتبه موظف مستعجل، مثل «ورقة التمديد حقت عقد النظافة».
• نص ناتج عن OCR: وثيقة ممسوحة فيها أخطاء تعرّف طفيفة، لأن البحث فيها يعتمد على جودة التعرف أولًا.

تصميم مجموعة الاستعلامات: ثمانية أنواع لا تكفي من دونها

وزّع الاستعلامات على أنواع محددة حتى لا تنتهي بثلاثين سؤالًا من النوع السهل نفسه. الجدول التالي نقطة بداية؛ غيّر الأمثلة لتطابق وثائقكم.

النوع الأخير يُنسى غالبًا وهو مهم: نظام يعيد دائمًا عشر نتائج «واثقة» حتى حين لا يوجد جواب يجعل المستخدم يضيع وقته في فتح ملفات لا علاقة لها. ولا تكتب الاستعلامات بنفسك وحدك؛ اطلب من ثلاثة أو أربعة موظفين من إدارات مختلفة أن يكتب كل منهم عشرة أسئلة حقيقية بحثوا عنها في الأشهر الأخيرة، ثم صنّفها أنت على الأنواع.

الإجابات المرجعية: اكتبها قبل أن ترى النتائج

أكثر ما يُفسد اختبار البحث أن يُحكم على النتائج بعد رؤيتها. حين ترى نتيجة معقولة تميل إلى قبولها، ولن تعرف أن الوثيقة الأهم لم تظهر أصلًا. الحل أن تعدّ لكل استعلام «بطاقة» تحدد فيها مسبقًا ما الذي يجب أن يظهر.

لا تحتاج أن تحصر كل وثيقة صحيحة في العينة لكل استعلام إن كانت العينة كبيرة. يكفي أن تحدد الوثائق التي تعرف يقينًا أنها صحيحة، وتضيف أثناء التقييم ما يظهر وتراه صحيحًا في عمود مستقل، حتى تفصل بين «ما توقعناه» و«ما اكتشفناه».

كيف تقيس النتائج دون إحصاء معقد

ثلاثة مقاييس تكفي لقرار شراء، ويستطيع أي عضو في اللجنة حسابها بجدول بسيط:

1. نسبة النجاح في الخمس الأولى لكل استعلام: هل ظهرت الوثيقة الأهم أو أي وثيقة صحيحة ضمن أول خمس نتائج؟ نعم أو لا. ثم احسب عدد «نعم» من مجموع الاستعلامات. هذا ما يشعر به المستخدم فعلًا، لأن قلة من الناس تتجاوز الصفحة الأولى.
2. التغطية في العشرين الأولى: من الوثائق الصحيحة المكتوبة في البطاقة، كم ظهر ضمن أول عشرين؟ هذا يقيس هل «يجد» النظام ما يجب أن يجده، وهو ما يسمى في أدبيات التقييم الاستدعاء (Recall) بصورة مبسطة.
3. الضجيج في الخمس الأولى: كم نتيجة من أول خمس لا علاقة لها بالسؤال؟ هذا وجه الدقة (Precision) الذي يحدد هل يثق المستخدم بالنتائج أم يملّ منها.

احسب المقاييس الثلاثة لكل نوع من أنواع الاستعلامات على حدة، لا للمجموع فقط. نظام ممتاز في المرادفات وضعيف في الأرقام الدقيقة يعطي متوسطًا مقبولًا يخفي مشكلة ستزعج قسم المالية كل يوم.

لا تضع حدًا مسبقًا من خارج بيئتك مثل «يجب أن ينجح النظام في كذا بالمئة». ضع الحد بعد أن تقيس بحثكم الحالي بالطريقة نفسها: إن كان البحث في المجلدات الشبكية أو النظام القديم ينجح في 12 استعلامًا من 40، فأنت تعرف ما الذي تشتريه حين ترى نظامًا ينجح في 31.

البحث والصلاحيات: الاختبار الذي يتخطاه أغلب المشترين

البحث الدلالي يعمل على فهرس يضم محتوى الوثائق. السؤال الذي يجب أن تتحقق منه بنفسك: هل يُطبّق الفهرس صلاحيات المستخدم قبل عرض النتائج، في العنوان والمقتطف معًا؟ مقتطف من سطرين تحت عنوان النتيجة قد يكشف راتب موظف أو قيمة عقد سري حتى لو لم يستطع المستخدم فتح الملف.

• كرر عشرة من الاستعلامات بحساب موظف في إدارة لا تملك صلاحية على بعض الوثائق الصحيحة. يجب ألا تظهر تلك الوثائق ولا مقتطفاتها.
• اسحب صلاحية مستخدم على مجلد، ثم ابحث بحسابه مباشرة عن محتوى من ذلك المجلد. لاحظ هل يختفي فورًا أم بعد مدة، واسأل المورد عن سبب أي تأخير.
• ابحث عن نص موجود في إصدار سابق من وثيقة فقط. هل يظهر؟ ولمن؟ هذا يهم حين يحتوي الإصدار السابق معلومة حُذفت عمدًا.
• تحقق من أن عمليات البحث نفسها، أو فتح النتائج على الأقل، تظهر في سجل التدقيق بحسب سياسة الجهة.

هذه الحالات تتقاطع مع اختبار مساعد الوثائق التحادثي، وتجد قائمة أوسع منها في دليل تقييم مساعد الوثائق الذكي ومصدر إجاباته واحترامه للصلاحيات.

أين يخطئ المشترون في اختبار البحث

ما الذي تختبره في وثيقة تحديدًا

يتيح وثيقة بحثًا نصيًا فوريًا داخل محتوى ملفات PDF والمستندات الممسوحة بعد تحويلها بتقنية التعرف الضوئي على الحروف (OCR) للعربية والإنجليزية، وبحثًا دلاليًا يفهم المعنى لا الكلمة الحرفية فقط، إلى جانب الفلاتر المتقدمة والوسوم والتصنيف الهرمي. وتُطبّق فيه صلاحيات مبنية على الأدوار على مستوى المجلد والمستند، ويسجل سجل التدقيق عمليات الفتح والتنزيل وغيرها. تفاصيل هذه القدرات في قسم البحث وOCR والذكاء الاصطناعي في صفحة المميزات.

ولأن العرض التوضيحي في وثيقة يمكن أن يجري على مستندات مؤسستك، استعمله لتنفيذ جزء من هذا الاختبار بدل مشاهدة سيناريو جاهز:

• أرسل مسبقًا عينة من وثائقكم (بعد استبعاد ما لا يجوز مشاركته) وعشرة استعلامات من بطاقاتكم دون الإجابات المرجعية.
• اطلب تنفيذ الاستعلامات أمامكم بحسابين: حساب واسع الصلاحيات وحساب محدود.
• اسأل مباشرة عن طريقة الجمع بين المطابقة الحرفية والدلالية، وعن توقيت تحديث الفهرس بعد رفع وثيقة أو تغيير صلاحية، وسجّل الإجابة في محضر العرض.
• إن احتجتم مدة أطول، تتيح صفحة الأسعار تجربة لمدة 30 يومًا يمكن أن تستوعب بقية الاستعلامات.

ولفهم أوسع لفكرة البحث بالمعنى في أرشيف المؤسسة يمكن الرجوع إلى مقال البحث الذكي داخل الملفات، ثم العودة إلى هذه الطريقة لقياسه.

بطاقات الاستعلام قبل العرض

1. اجمع من ثلاث إدارات أسئلة بحث حقيقية، وصنّفها على الأنواع الثمانية.
2. جهّز عينة فيها وثائق متشابهة ومشتتات وممسوحات، وفق طريقة بناء مجموعة اختبار لوثائق عربية وإنجليزية مختلطة.
3. املأ بطاقات الاستعلام قبل أي عرض، وقِس بحثكم الحالي بها أولًا.
4. احجز عرضًا توضيحيًا على مستندات مؤسستك ونفّذ فيه جزءًا من البطاقات بحسابين مختلفين، ثم وسّع الاختبار في التجربة أو في اختبار البحث في أرشيف كبير ببيانات مماثلة لبيئتك.