ما هي أتمتة الاختبار باستخدام اللغة الطبيعية؟ شرح مبسّط
Disclosure: Cognillo sponsors M365.FM. This page describes the company factually; paid partnerships and links are labelled as advertising.
By Mirko Peters · · Updated
تتيح أتمتة الاختبار باللغة الطبيعية للمختبرين كتابة الخطوات بلغة إنجليزية بسيطة، ثم يُنفّذها الذكاء الاصطناعي داخل المتصفح. تعرّف على طريقة عملها وحدودها وكيفية تقييمها.
Automatically translated with AI from the original post. Read the English original
تعني أتمتة الاختبار باللغة الطبيعية أن تكتب الاختبار بالإنجليزية اليومية، ويُنفّذه نموذج ذكاء اصطناعي داخل متصفح حقيقي. فبدلاً من نص برمجي مليء بالمحددات، تكتب "Click the Log In button" أو "Check that the order total shows 49.00". يستهدف هذا الشرح قادةَ ضمان الجودة والمختبرين الذين سمعوا بالمصطلح ويريدون معرفة ماهيته وكيفية عمله وأين تنتهي حدوده. ستتعرف على الفكرة خطوة بخطوة، وعلى الحدود التي يذكرها صانعو الأدوات بأنفسهم، وعلى طريقة بسيطة لتقييم مدى ملاءمتها لفريقك.
النقاط الرئيسية
- تعني أتمتة الاختبار باللغة الطبيعية أنك تصف خطوة اختبار بلغة إنجليزية بسيطة، ثم يحوّلها نموذج ذكاء اصطناعي إلى إجراءات في المتصفح عند تشغيل الاختبار.
- يحل هذا الأسلوب محل المحددات المكتوبة يدوياً وعمليات الانتظار، باستخدام تعليمات مثل «انقر فوق الزر Log In»، ما يتيح للمختبرين غير المبرمجين كتابة الاختبارات وقراءتها.
- توثّق الجهات المورّدة حدوداً واضحة: فالتعليمات الواسعة أو المعقدة تفشل بشكل أكثر، بينما تكون التعليمات ذات الخطوة الواحدة هي الأكثر موثوقية.
- قد تختلق أدوات الذكاء الاصطناعي المصممة لمهام الويب العامة نتائج دون فحص التطبيق الفعلي، لذلك يحتاج كل خطوة مُولَّدة إلى مراجعة وقاعدة واضحة للنجاح أو الفشل.
- اعتبرها وسيلة لكتابة اختبارات من طرف إلى طرف بشكل أسرع، لا بديلاً عن تصميم الاختبار أو بيانات الاختبار أو بيئات العمل السليمة.
ماذا تعني أتمتة الاختبار باللغة الطبيعية
الاختبار الآلي التقليدي لواجهة المستخدم شيفرة برمجية. يكتب المطوّر أو مهندس الأتمتة الخطوات، ويخبر الأداة بكيفية العثور على كل عنصر في الصفحة، مثلاً عبر المعرّف (ID) أو محدد CSS. يُنفّذ الاختبار الخطوات نفسها في كل مرة. وعندما تتغير الصفحة، قد يتوقف المحدد عن المطابقة فيفشل الاختبار.
في هذا الأسلوب، يكتب المختبر النيّة بدلاً من ذلك. يصف فريق Cypress أمر cy.prompt بأنه وسيلة لوصف الاختبارات بلغة يومية، مكتوبة كسلاسل نصية داخل ملف الاختبار. وتذكر مقالة على مدونة Cypress أنه يمكن فحص الخطوات المُولَّدة وتصحيحها، ثم تحويلها إلى شيفرة اختبار ثابتة يمكنك حفظها.
تقوم التقنية الأساسية على الذكاء الاصطناعي التوليدي: يقرأ النموذج النص والصفحة، ويقرر ما الذي يجب فعله. وفي معظم الأدوات يكون نموذجاً لغوياً كبيراً، وهو نموذج ذكاء اصطناعي مدرّب على كميات ضخمة من النصوص. ويطلق بعض المورّدين على البرنامج الذي يقوم بذلك اسم وكيل ذكاء اصطناعي، لأنه ينفّذ إجراءات بدلاً من الاكتفاء بالإجابة عن الأسئلة. والهدف واحد في كل الحالات: أن يكتب الأشخاص الذين يعرفون المنتج الاختبارات ويقرأونها دون تعلم لغة برمجة، ولهذا يُسوَّق هذا الأسلوب أحياناً باسم الاختبار بدون شيفرة.
بالنسبة لفرق اختبار البرمجيات، يغيّر هذا الأسلوب طريقة إنشاء الاختبارات، لا عملية الاختبار نفسها. فتصميم الاختبار وبيانات الاختبار وتنفيذه تبقى كما هي، ويبقى الإنسان من يقرر أي حالة اختبار يجب تغطيتها.
في اختبار الأتمتة التقليدي، يكتب المهندسون ويصونون نصاً برمجياً للاختبار لكل مسار. أما أدوات الذكاء الاصطناعي فتستخدم معالجة اللغة الطبيعية لقراءة كل جملة بدلاً من ذلك. وتذهب بعض الجهات المورِّدة أبعد من ذلك فتصف أدواتها بأنها «وكيلية» (agentic). ويوضح دليل صادر عن Autosana، وهو دليل ترويجي، الفرق بينهما: الأداة الوكيلية تفسّر هدفاً مكتوباً بلغة إنجليزية بسيطة، وتستكشف الصفحة الحية، وتتصرف وتعدّل مسارها أثناء التشغيل، وأن الاختبار دون كتابة تعليمات برمجية (codeless) ليس هو نفسه الاختبار الوكيل. ويحذّر الدليل نفسه من أن كثيراً من المنتجات تدّعي أنها تعمل باختبار مدعوم بالذكاء الاصطناعي لمجرد أنها أضافت الإكمال التلقائي إلى محرر النصوص البرمجية. لذا ينبغي التعامل مع هذه التسميات بحذر، والاحتفاظ بقاعدة النجاح أو الفشل تحت سيطرتك أنت.
كيف يعمل اختبار قائم على تعليمات مكتوبة
تختلف التفاصيل من أداة إلى أخرى، لكن المسار العام متشابه. توثّق BrowserStack وكيل «NL Test Automation Agent» لـ Selenium في نسخته التجريبية "NL Test Automation Agent" for Selenium، وتقدم صفحتها صورة واضحة:
- تكتب تعليمة قصيرة. كل أمر جملة إنجليزية واحدة، وليس محدِّداً ولا شيفرة برمجية. وتنصح الصفحة بالبدء بفعل حركي، مثل "Click the Submit button".
- يفسّر الذكاء الاصطناعي التعليمة وقت التشغيل. تُولَّد خطوات الأتمتة أثناء تشغيل الاختبار، فلا تُكتب المحددات أو عمليات الانتظار يدوياً.
- تنفّذ الأداة الإجراء في المتصفح. وتعرض الصفحة أنواع أوامر مثل النقر والكتابة والبحث والتمرير فوق العنصر والتمرير.
- تعرض الأداة النتيجة. تعرض التشغيلات الناجحة سجلات نجاح، وتعرض التشغيلات الفاشلة سجلات أخطاء مع سبب الفشل.
قارن ذلك بالنهج الذي توصي به Playwright في best practices: اختبر ما يراه المستخدم ويفعله، وفضّل محدِّدات الدور والنص ومعرّف الاختبار على محدِّدات XPath أو CSS التي تنكسر عند تغيّر الصفحة. ويذهب هذا النهج أبعد في الفكرة نفسها. فالمختبِر يسمّي ما سيراه المستخدم، مثل "the Log In button"، والأداة هي التي تجده.
أين يفيد اختبار اللغة الطبيعية
يناسب هذا النهج بعض المهام أكثر من غيرها.
- فحوصات الدخان والمسارات الشائعة للمستخدم. تسجيل الدخول، والبحث، وإضافة المنتج إلى السلة، والدفع. وهذه هي end-to-end testing flows الأكثر أهمية، وتسهل وصفها في جملة واحدة.
- فرق لا يكتب أعضاؤها التعليمات البرمجية. يستطيع المختبِر الذي يعرف عملية العمل أن يكتب الاختبار ويقرأه.
- توليد الاختبارات. تستطيع بعض الأدوات توليد اختبار من وصف قصير. ويظل الشخص مسؤولاً عن مراجعة تصميم الاختبار ونطاق التغطية.
يفيد هذا النهج أقل حين يعتمد الفحص على أرقام دقيقة، أو إعداد بيانات معقد، أو توقيت يحتاج إلى تحكم دقيق، كما في اختبار الأداء. فاختبار الوحدة لحساب ما لا يحتاج إلى متصفح أو نموذج ذكاء اصطناعي، ويظل الاختبار الاستكشافي بحاجة إلى شخص فضولي.
الحدود التي تعترف بها الجهات المورِّدة
تذكر الجهات الصادقة في تطوير الأدوات حدودها. استخدمها كقائمة مراجعة عند تقييم أي منتج.
- التعليمات المعقدة تفشل بمعدل أعلى. تذكر صفحة BrowserStack أن الأهداف المعقدة أو الواسعة أكثر من اللازم قد تفشل برسالة
UNSUPPORTED_OBJECTIVE، وأن الموثوقية تنخفض كلما زادت تعقيد الأوامر، وأن التعليمات ذات الخطوة الواحدة هي الأدق. لذا قسّم المهمة الطويلة إلى خطوات قصيرة. - النتائج قد تختلف. يفسّر نموذج الذكاء الاصطناعي كل تعليمة وقت التشغيل، لذا قد تؤدي الجملة الغامضة إلى إجراءات مختلفة في تشغيلات مختلفة. أبقِ كل خطوة قصيرة ومحددة.
- قد تكون الميزة في مرحلة تجريبية. تصف الصفحة نفسها الميزة بأنها تجريبية، وتذكر أن البيئات المدعومة قد تتغير.
- النتائج المختلقة خطر حقيقي. يحذّر مقال Cypress من أن كثيراً من أدوات المتصفح بالذكاء الاصطناعي صُممت لمهام ويب عامة، وليس للاختبار. وقد تنتج مخرجات مختلقة دون فحص التطبيق الفعلي، وغالباً ما تفتقر إلى دعم تصحيح الأخطاء والتأكيدات ودورة حياة الاختبار.
أبقِ الاختبارات قصيرة، وراجع ما ولّده الذكاء الاصطناعي، واطلب قاعدة نجاح أو فشل واضحة لكل خطوة.
الإخفاقات والصيانة وCI
الصيانة هي المرحلة التي تُثبت فيها الاختبارات المكتوبة بلغة طبيعية قيمتها، لذا اسأل نفسك كيف تتعامل كل أداة مع التغيير. يُظهر دليل Cypress حول توليد الاختبارات بالذكاء الاصطناعي أحد التصاميم المتبعة. فهو يخزّن الشيفرة المولّدة مؤقتًا، وتُشارك ذاكرة التخزين المؤقت بين الأجهزة والبيئات، بما في ذلك خطوط التكامل المستمر (CI)، لذا لا تستدعي إعادةُ تشغيل الاختبار الذكاءَ الاصطناعي مجددًا ما لم يتغيّر النص الموجّه أو الصفحة ويُبطلا ذاكرة التخزين المؤقت. وعندما يتغيّر محدِّد عنصر أو نصّه بين عمليتَي تشغيل، يُعيد الأداة توليد الشيفرة لتلك الخطوة ويُعلّم الخطوة في السجلات بأنها عولجت ذاتيًا. ويحذّر الدليل من أن المعالجة الذاتية في كل تشغيل تُضيف استدعاءات إضافية للذكاء الاصطناعي وتُبطئ التنفيذ، وينصح باستهداف العناصر عبر نصّها المرئي الثابت. كما يتيح لك عرض الشيفرة المولّدة، مع تعليقات تربط كل أمر بخطوة الموجّه التي أنتجته، وحفظها بديلًا عن الموجّه.
يقترح دليل Autosana تجربة إثبات مفهوم لمدة أسبوعين على تدفقات مستخدمين حقيقية، بما فيها تلك التي تعطّلت من قبل، مع مراجعة لقطات الشاشة وتسجيلات الجلسات لتدقيق ما نفّذه الوكيل. ولا يقدّم الدليل نسب فشل مقاسة، لذا شغّل تجربة تجريبية خاصة بك.
هل يمكنه أن يحل محل مهندسي ضمان الجودة؟ ليس بناءً على هذه الأدلة: فما زال البشر هم من يخططون لما يجب اختباره، ويُعدّون البيانات، ويقررون ما إذا كانت النتيجة صحيحة.
أسئلة يجب طرحها قبل اختيار أداة
استخدم هذه الأسئلة في مكالمة مع المورّد أو أثناء التجربة التجريبية. فهي تصلح لأي منتج.
- ماذا يرى النموذج بالضبط؟ هل يفحص الصفحة الفعلية، أم يخمّن اعتمادًا على نص التعليمات فقط؟
- هل يمكنني قراءة ما فعله وتصديره؟ تحتاج إلى سجل لكل خطوة مولّدة، ويُفضّل أن يكون لديك نص برمجي ثابت تحتفظ به في نظام التحكم بالإصدارات.
- كيف يقرر النجاح أو الفشل؟ ابحث عن فحوصات صريحة تكتبها أنت، لا أن تعتمد فقط على حكم النموذج الخاص.
- أين يعمل الاختبار، ومن يستطيع رؤية البيانات؟ قد تحتوي حسابات الاختبار ولقطات الشاشة على معلومات حقيقية.
- ماذا يتضمن تقرير الفشل؟ لقطات الشاشة والسجلات والخطوة الفاشلة توفر ساعات من تتبع الأخطاء.
- هل يتناسب مع مجموعة الاختبارات الحالية لدينا؟ تحقّق من إطار الأتمتة لديك، ومن خط الأنابيب (Pipeline)، ومن عملية الاختبار اليدوي.
مثال: اختبار تسجيل دخول واحد، بثلاث طرق
الأرقام تقديرية وغير حقيقية.
تقارن إحدى الفرق ثلاث طرق لكتابة اختبار تسجيل دخول.
- شيفرة بمحدِّدات. يكتب مهندس نحو 12 سطرًا. يستغرق ذلك 30 دقيقة. وعندما يُعيد المطوّر تسمية معرّف الزر، يفشل الاختبار ويحتاج إلى إصلاح.
- لغة طبيعية. يكتب المختبِر أربعة أسطر: افتح صفحة تسجيل الدخول، اكتب اسم المستخدم، اكتب كلمة المرور، انقر على "Log In" وتحقق من ظهور عنوان لوحة المعلومات. يستغرق ذلك 5 دقائق. يقرأ المختبِر الخطوات المولّدة ويتأكد من مطابقتها، ويستخدم الذكاء الاصطناعي فقط لتشغيلها.
- لغة طبيعية، ثم تصدير. تحتفظ الفرقة بالنسخة المكتوبة بالإنجليزية البسيطة للاستكشاف، وتُصدّر نصًا برمجيًا ثابتًا لتشغيل الانحدار الليلي، كما يصف مقال Cypress لأداته الخاصة.
على مدار شهر، تنتج ثلاثة إخفاقات: اثنان منها بسبب أخطاء حقيقية في البرمجيات، وواحد بسبب خطوة غامضة، إذ طابقت عبارة "click the button" الزر الخطأ. فأعادوا كتابتها إلى "click the Log In button". فالدقة في الجملة لا تقل أهمية عن الدقة في المحدِّد.
الأخطاء الشائعة
- كتابة تعليمات طويلة وغامضة. اعتمد هدفًا واحدًا لكل خطوة، وسمِّ العنصر بوضوح.
- الوثوق بالخطوات المولّدة بالذكاء الاصطناعي دون قراءتها. اقرأ كل خطوة مرة واحدة على الأقل، واحتفظ بالسجل.
- إغفال النتيجة المتوقعة. يحتاج الاختبار إلى فحص واضح، مثل عنوان أو مجموع. عبارة "تأكد من أن كل شيء يعمل" ليست فحصًا.
- استخدامه في كل شيء. تنتمي فحوصات الوحدات والتكامل إلى الشيفرة، قريبًا من المطوّرين.
- اعتماد أداة دون تجربة تجريبية. شغّل عشرة اختبارات حقيقية أولًا، وقارن أسباب الفشل.
كيف يمكن للبرمجيات أن تساعد
توجد عدة أنواع من أدوات الاختبار بالذكاء الاصطناعي. بعضها يضيف أوامر بلغة إنجليزية بسيطة إلى إطار قائم على الشيفرة، مثل ميزات Cypress وBrowserStack المذكورة أعلاه. وأخرى منصات مستقلة لفريق ضمان الجودة بأكمله. ولا تزال الأطر مفتوحة المصدر مثل Playwright مناسبة جدًا للفرق التي تفضّل العمل بالشيفرة.
Genta by Cognillo مثال على منصة مستقلة. وفقاً للمورّد، يصف المختبِرون بلغة بسيطة ما يجب أن يفعله التطبيق، فيشغّل Genta الاختبار في متصفح على جهاز افتراضي في السحابة ويُبلغ عن النجاح أو الفشل، مع لقطات الشاشة وسجلات التشغيل. ويقول المورّد إنها موجّهة إلى قادة ضمان الجودة ومهندسي SDET ومهندسي الأتمتة. هذه تصريحات المورّد. قارِنها بخيارات أخرى في تجربة تجريبية قبل أن تتخذ قرارك.
إفصاح: تُعد Cognillo راعية لبرنامج M365.FM.
الخطوة التالية
اختر مسار مستخدم واحداً مستقراً، مثل تسجيل الدخول والبحث، واكتبه في خمس خطوات بسيطة بالإنجليزية. ثم شغّله في أداة أتمتة اختبار تعتمد على اللغة الطبيعية وفي إطار الاختبار الحالي لديك، وقارن بين الجهد المبذول والإخفاقات وجودة السجلات.