مراقبة أسعار المنافسين على نون وأمازون باستخراج البيانات

في التجارة الإلكترونية الخليجية، تتغير أسعار المنافسين كل يوم، ويستطيع المشتري مقارنتها على نون وأمازون خلال ثوانٍ. إن كنت ما زلت تراجع الأسعار يدوياً، فإما أن أحد أفراد فريقك يقضي ساعات أسبوعياً في ذلك وحده، أو أن قرارات التسعير عندك تُبنى على بيانات الأمس.

مراقبة الأسعار الآلية تُسند هذا العمل إلى نظام: تُجمع أسعار منتجاتك ومنتجات منافسيك ومخزونها على فترات منتظمة، وتُربط المنتجات المتطابقة عبر المتاجر، ويصلك تنبيه عند كل تغيير مهم. يشرح هذا المقال كيف يُبنى مثل هذا النظام، وأين تكمن صعوباته، وما الذي يخص السوق الخليجي تحديداً. وهو مبني على لوحة مراقبة الأسعار التي بنيناها لفريق تجارة إلكترونية.

ما البيانات التي تستحق الجمع؟

السعر ليس إلا جزءاً من الصورة. لاتخاذ قرار صحيح تحتاج عادةً إلى:

• السعر الحالي والسعر قبل الخصم، لتعرف إن كان المنافس خفّض السعر فعلاً أم يقدّم عرضاً مؤقتاً.
• حالة المخزون. نفاد المنتج لدى المنافس فرصة لك.
• البائع الفائز بصندوق الشراء في الأسواق التي يبيع فيها عدة بائعين المنتج نفسه، كما في نون وأمازون.
• تكلفة الشحن وسرعته، مثل التوصيل السريع أو خدمات الشحن المميزة، لأن المشتري يقارن المجموع لا السعر وحده.
• التقييم وعدد المراجعات، مؤشر تقريبي على ما يُباع فعلاً.

قبل البناء، اكتب القرارات التي ستتخذها بكل حقل. البيانات التي لا يتبعها قرار ليست إلا تكلفة تخزين وصيانة.

المصادر في السوق الخليجي

• نون. مرجع أساسي لكثير من الفئات في السعودية والإمارات ومصر، وكل دولة لها موقعها وأسعارها.
• أمازون السعودية وأمازون الإمارات. يتميزان بحماية قوية ضد الأدوات الآلية. قبل بناء أداة جمع، تحقق إن كانت واجهات أمازون الرسمية للبائعين أو برنامج الشركاء تغطي حاجتك.
• متاجر التجزئة الكبرى مثل جرير وإكسترا وكارفور، حسب فئة منتجاتك.
• مواقع المنافسين المباشرين. كثير من المتاجر مبنية على سلة أو زد أو شوبيفاي أو ووكومرس، وكثير منها يضع بيانات المنتج في صيغة منظّمة داخل الصفحة يسهل قراءتها بدقة.

خصوصيات السوق الخليجي

هذه تفاصيل لا تجدها في الأدلة الأجنبية، وهي التي تفسد المقارنات إن أُهملت:

• ضريبة القيمة المضافة. معظم الأسعار المعروضة للمستهلك تشمل الضريبة، لكن نسبتها تختلف بين الدول، فهي ١٥٪ في السعودية و٥٪ في الإمارات. عند المقارنة بين دولتين، وحّد الأسعار إلى ما قبل الضريبة أو بعدها.
• العملات. الريال السعودي والدرهم الإماراتي وغيرهما. خزّن السعر بعملته الأصلية مع سعر التحويل وقت الجمع، لا بعد التحويل فقط.
• عناوين ثنائية اللغة. المنتج نفسه قد يظهر بعنوان عربي في متجر وبعنوان إنجليزي في آخر. المطابقة يجب أن تعمل عبر اللغتين.
• الأرقام. الأرقام العربية الهندية (١٢٣) والأرقام اللاتينية (123) تظهر في النصوص نفسها. وحّدها قبل أي مقارنة.

الجزء الأصعب: مطابقة المنتجات

جمع الأسعار هو النصف السهل. النصف الصعب أن تعرف أن «سامسونج جالكسي A55 سعة ٢٥٦ جيجا كحلي» في كتالوجك هو نفسه «Samsung Galaxy A55 5G 256GB Navy» لدى المنافس، لا نسخة ١٢٨ جيجا ولا لوناً آخر.

ما ينجح، بالترتيب:

1. المعرّفات القاطعة مثل الباركود (EAN أو GTIN) ورقم القطعة، وكثير من صفحات المنتجات تتضمنها.
2. توحيد النصوص. توحيد أشكال الحروف العربية، والأرقام، والوحدات مثل «جيجا» و«GB»، وحذف الكلمات التسويقية.
3. استخراج الخصائص مثل العلامة التجارية والطراز والسعة واللون، ومقارنتها بدل مقارنة العنوان كاملاً، وهذا ما يجعل المطابقة تعمل عبر العربية والإنجليزية.
4. تأكيد بشري للحالات المشكوك فيها. يقترح النظام المطابقة مع درجة ثقة، ويؤكدها شخص أو يرفضها بنقرة. كل مطابقة تُؤكَّد مرة واحدة ثم تبقى آلية.

في لوحتنا، كانت مطابقة الخصائص وربط المنتجات عبر الكتالوجات قلب النظام. بدونها، تبدو الرسوم البيانية جميلة لكنها غير جديرة بالثقة.

كم مرة تُجمع الأسعار؟

الجمع أكثر من حاجتك يرفع تكلفة البنية التحتية واحتمال الحظر دون فائدة.

الحماية من الأدوات الآلية، وحسن الضيافة

المواقع الكبيرة تحمي نفسها بحدود للطلبات وتقييم لعناوين IP وبصمة للمتصفح واختبارات CAPTCHA. نظام الإنتاج يتعامل مع ذلك عبر:

• تباعد معقول بين الطلبات وتجنّب أوقات الذروة.
• تدوير البروكسي حسب ما يتطلبه كل مصدر.
• متصفحات بلا واجهة فقط حيث تحتاج الصفحة إلى JavaScript لإظهار السعر.
• التراجع عند الاعتراض وإرسال تنبيه لشخص، بدل تكرار المحاولة بإلحاح.

واقتصر على البيانات العامة: لا تسجيل دخول، ولا تجاوز لقيود الوصول، ولا جمع لبيانات شخصية. الأسعار وحالة المخزون ليست بيانات شخصية، لكن أسماء المراجعين مثلاً قد تكون كذلك بموجب نظام حماية البيانات الشخصية في السعودية وقوانين مشابهة. اقرأ شروط كل موقع، واستشر مختصاً قانونياً للجمع التجاري واسع النطاق.

بنية النظام

النظام الذي نبنيه لهذا الغرض من خمس طبقات:

1. المجدول. يقرر أي منتج يُقرأ من أي مصدر ومتى. نستخدم n8n للجدولة وإعادة المحاولة والتنبيهات.
2. أدوات الجمع. برامج Python، واحدة لكل مصدر، تعيد السجلات الخام.
3. التوحيد والتحقق. معالجة العملة والضريبة، وتوحيد الوحدات، وفحص المعقولية، والمطابقة.
4. التخزين مع السجل التاريخي. قاعدة PostgreSQL تحفظ كل سعر مع وقته، لرؤية الاتجاهات واكتشاف التغيرات غير الطبيعية.
5. لوحة وتنبيهات. رسوم بيانية لكل منتج عبر المتاجر، وتنبيهات عبر البريد أو تيليغرام أو واتساب عند تفعيل قاعدة.

من البيانات إلى القرار

القيمة تظهر في التنبيهات. قواعد تثبت فائدتها عادةً:

• «خفّض منافس رئيسي سعر المنتج X بأكثر من ٥٪.»
• «لم نعد الأرخص في المنتج Y.»
• «نفد المنتج Z لدى منافس.»
• «أعاد مصدر سعراً غير منطقي»، وهذا غالباً خطأ في الجمع لا تغيير في السوق، والتنبيه عليه يمنع البيانات الخاطئة من التأثير في قراراتك.

وتحذير أخير: المراقبة أداة لقرار مدروس، لا أمر بأن تكون الأرخص دائماً. التسعير الآلي الذي يلحق بكل تخفيض من المنافس ينتهي عادةً بحرب أسعار يخسر فيها الجميع. ضع حدوداً دنيا للأسعار وهوامش للربح على أي قاعدة آلية.

أداة جاهزة أم نظام مخصص؟

الأدوات الجاهزة مناسبة للبداية عندما يبيع منافسوك على منصات معروفة وتكون المطابقة بسيطة. النظام المخصص يستحق تكلفته عندما:

• تكون مصادرك إقليمية أو غير مغطاة في الأدوات الجاهزة.
• تحتاج المطابقة إلى قواعد خاصة بكتالوجك، أو تعمل عبر العربية والإنجليزية.
• تريد أن تصل البيانات مباشرة إلى نظام التسعير أو ERP أو التقارير لديك.
• لا تريد أن تكون بيانات تسعيرك واستراتيجيتك على خوادم شركة أخرى.

لمزيد من التفاصيل عن طريقة عملنا، اطّلع على صفحة خدمات استخراج البيانات، أو ابدأ من أداة تقدير المشروع.