تحليل سجلات الخادم

لماذا السجلات وليس الأدوات؟#

كل أداة سيو تخبرك بما تتوقع أن يفعله جوجل. سجلات الخادم تخبرك بما فعله بالفعل: أي صفحة طلبها، ومتى، وكم مرة، وبأي رمز استجابة ردّ خادمك.

هذا المصدر الوحيد الذي لا يعتمد على تقدير أو عيّنة. وهو متاح لك مجاناً، وأغلب المواقع لا تفتحه أبداً.

التحقق من Googlebot الحقيقي#

لا تثق بترويسة User-Agent إطلاقاً؛ تزويرها يستغرق ثانية. الطريقة الرسمية هي البحث العكسي المزدوج:

إن لم تتطابق الخطوتان فهو بوت مزيّف. تنشر جوجل أيضاً ملفات JSON رسمية بنطاقات عناوين زواحفها، وهي الأنسب للتحقق الآلي.

ما تقرأه في السجلات#

كشف الصفحات المهملة#

أقوى استخدام عملي: قارن قائمة صفحاتك القابلة للفهرسة بقائمة ما زُحف إليه فعلاً خلال 30 يوماً. الفرق بينهما هو صفحاتك المنسية.

1. صدّر كل روابط موقعك من أداة زحف
2. استخرج الروابط الفريدة التي طلبها Googlebot من السجلات
3. اطرح الثانية من الأولى
4. لكل صفحة في الناتج اسأل: هل تستحق البقاء؟ إن نعم، اربطها داخلياً. إن لا، احذفها

هذه العملية وحدها تكشف عادةً عشرات الصفحات التي كتبتها ونسيتها، ولم يرها جوجل منذ نشرها.

أدوات#

• Screaming Frog Log File Analyser: الأسهل للبدء، يستورد ويصنّف تلقائياً
• إحصائيات الزحف في Search Console: ملخص جاهز دون سجلات خام، ويكفي معظم المواقع
• GoAccess: مفتوح المصدر، يعمل مباشرة على الخادم
• سطر الأوامر: grep وawk يكفيان لتحليل سريع