ما هو انتفاخ الفهرس وكيفية إصلاحه؟

باعتبارك متخصصًا في تحسين محركات البحث، ربما تكون قد بذلت قدرًا كبيرًا من الجهد في تحسين المواد الجديدة ولكنك لا تزال لا تلبي إمكانات التصنيف الخاصة بك. قد يكون السبب في ذلك هو إهمال تهديد غير مرئي: انتفاخ الفهرس.

يشكل انتفاخ الفهرس مشكلات لكل من محركات البحث وأصحاب مواقع الويب. فهو يعيق جهود خوارزميات محرك البحث للتعرف على المعلومات المفيدة، مما يؤدي إلى تقليل عمليات الزحف إلى الموقع.

علاوة على ذلك، فإنه يدفن مواد عالية الجودة خلف صفحات أقل فائدة، مما يقلل من تعرض موقعك وإمكانات التصنيف الإجمالية.

ولحسن الحظ، فإن معالجة انتفاخ الفهرس أمر بسيط.

سننظر في تضخم الفهرس، وكيفية تأثيره على ميزانيات الزحف، والحلول العملية لـزيادة عرض موقع الويب الخاص بك على الإنترنت.

ما هو مؤشر الانتفاخ؟

يحدث تضخم الفهرس عندما يحتوي موقع الويب الخاص بك على العشرات أو المئات أو الآلاف من الصفحات منخفضة الجودة المفهرسة بواسطة Google والتي لا تقدم أي فائدة للزائرين المحتملين.

يؤدي هذا إلى قيام برامج زحف البحث بقضاء الكثير من الوقت في البحث عبر الصفحات غير ذات الصلة على موقعك بدلاً من تركيز جهودها على المواقع التي تفيد عملك. كما أنه يوفر تجربة مستخدم رهيبة لزوار موقع الويب الخاص بك.

يحدث تضخم الفهرس بشكل متكرر على مواقع التجارة الإلكترونية التي تحتوي على عدد كبير من السلع والفئات ومراجعات المستخدمين. الصفحات ذات الجودة المنخفضة التي تقوم محركات البحث بفهرستها قد تطغى على الموقع بسبب صعوبات فنية.

باختصار، يتسبب تضخم الفهرس في إبطاء موقعك وإهدار تمويل الزحف. يضمن الحفاظ على موقع ويب نظيف أن تقوم محركات البحث بفهرسة عناوين URL التي تريد من المستخدمين العثور عليها فقط.

انتفاخ الفهرس أثناء العمل: مثال

منذ بضع سنوات، خططنا للعمل على موقع للتجارة الإلكترونية يتضمنتقريبًا 10000 صفحة.

عندما قمنا بزيارة Google Search Console، أذهلنا عندما اكتشفنا أن Google قامت بفهرسة 38000 صفحة لنطاقنا. وكان ذلك مرتفعًا جدًا نظرًا لحجم الموقع.

(تلميح: يمكنك اكتشاف هذه الأرقام لموقعك ضمن "Search Console" > "الفهرسة" > "الصفحات.")

وقد زاد هذا العدد بشكل كبير في فترة قصيرة. في البداية، قام Google Analytics بفهرسة 16000 صفحة.

ماذا كان يحدث؟

أنشأ برنامج الموقع المئات من صفحات المنتجات غير الضرورية.

على مستوى عالٍ، إذا تم بيع مخزون موقع الويب الخاص بعلامة تجارية ما (وهو ما يحدث بشكل متكرر)، فإن خوارزمية ترقيم الصفحات تولد مئات الصفحات الإضافية.

نتيجة لهذا الخطأ، ارتفعت فهرسة موقع الويب بشكل كبير وتأثر أداء تحسين محركات البحث (SEO).

أعط هذا قراءة سريعة:كيف نفعل إلغاء الفهرسة؟ يتم شرح الطرق الفعالة هنا!

انتفاخ الفهرس: لماذا يهم؟

يؤدي انتفاخ الفهرس إلى تضخيم تواجدك في محرك البحث بمحتوى لا يقدم أي غرض أو لا صلة له بالزائرين.

عندما تقوم روبوتات البحث بفهرسة هذه الصفحات غير ذات الصلة، تكون:

• تواجه محركات البحث صعوبة أكبر في تصنيف موقعك. يجب أن تتعرف برامج زحف البحث على موقع الويب الخاص بك لمطابقة المحتوى بدقة مع طلبات المستخدم وتصنيفه. الصفحات التي تفتقر إلى غرض واضح ومنطقي تزيد من صعوبة فهم Google ومحركات البحث الأخرى للمعلومات والحصول عليها.

• يؤثر سلباً على تصنيفات محركات البحث. عندما تستهدف الصفحات ذات المحتوى المشابه نفس الكلمات الرئيسية، فإنها تتنافس ضد بعضها البعض. قد تفشل الصفحات منخفضة الجودة أو المحتوى المكرر في تصنيف القراء أو إثارة اهتمامهم، مما يقلل من السلطة العامة لموقعك.

• الاستخدام غير الفعال لميزانية الزحف. يتسبب تضخم الفهرس في قيام روبوتات البحث بإهدار ميزانية الزحف المحدودة الخاصة بها للحصول على مواد لا تتطلبها Google. يؤدي هذا إلى تحويل الوقت والموارد بعيدًا عن الصفحات التي تريد تصنيفها.

كيفية تشخيص انتفاخ الفهرس؟

يعد تقرير تغطية Google Search Console أحد أسرع التقنيات وأكثرها موثوقية لاكتشاف أنواع الصفحات التي تسبب تضخم الفهرس.

عناوين URL التي تمت فهرستها ولكن لم يتم إرسالها إلى خريطة موقع XML، على افتراض أن خريطة الموقع الخاصة بك تتبع أفضل ممارسات تحسين محركات البحث وتحتوي علىعناوين URL ذات الصلة بـ SEO.

استخدم أداة زحف لا حدود لها للعثور على عدد عناوين URL القابلة للفهرسة إذا كانت خرائط موقع XML الخاصة بك لا تمثل الصفحات الشرعية على النحو الأمثل.

إذا كان لديك صفحات أكثر شرعية من عناوين URL التي تم الزحف إليها، فمن المؤكد أنك تواجه تضخمًا في الفهرس.

لا تستخدم الموقع: ابحث عن عامل متقدم لحساب عدد الصفحات المفهرسة؛ إنه غير دقيق تمامًا.

بمجرد العثور على صفحات منخفضة القيمة لإلغاء فهرستها، قم بمقارنة عناوين URL مع بيانات Google Analytics لتحديد التأثير المتوقع على حركة المرور العضوية.

ونظرًا لطبيعتها، فهي عادةً لا يكون لها أي تأثير ضار، ولكن من الضروري التحقق مرة أخرى قبل الشروع في عملية إلغاء الفهرسة على نطاق واسع.

كيف يؤثر تضخم المؤشر على أداء تحسين محركات البحث؟

مع وجود أكثر من 1.13 مليار موقع على الإنترنت، فإن محركات البحث لديها "ميزانية زحف" مقيدة لكل موقع. وهذا يعني أنه يمكنهم فقط عرض وتحليل عدد معين من الصفحات في إطار زمني معين.

يتم الزحف إلى الصفحات الرئيسية لموقعك ولكن لا تتم فهرستها بسبب تضخم الفهرس، وإذا نفدت ميزانيتك، فستتوقف عملية الفهرسة.

ونتيجة لذلك، سيستغرق المحتوى الخاص بك وقتًا أطول لـتظهر على SERPsمما يؤدي إلى الإضرار بتصنيفات موقع الويب الخاص بك وتقليل معدلات التحويل.

يحتوي موقع الويب الخاص بك على عدد محدود من الصفحات المفهرسة بواسطة Google، باستثناء قيود ميزانية الزحف.

وهذا يترك مواد عظيمة دون مساس وربما غير معروفة. الصفحة عالية الجودة التي تستقبل 7000 مشاهدة شهريًا قد تتلقى 2500 مشاهدة فقط إذا قام Google بالزحف إلى الصفحات غير المرغوب فيها التي تتنافس على نفس عدد الزيارات.

انتفاخ المؤشر يمكن أن يؤدي إلىانخفاض معدلات النقر إلى الظهوروتجربة مستخدم سيئة. 

عندما يواجه المستخدمون صفحات من فهرس كبير جدًا، يتعين عليهم التدقيق في المزيد من النتائج منخفضة الجودة للعثور على ما يبحثون عنه، مما يؤدي إلى المزيد من الارتداد ونقرات أقل على موقعك.

وبمرور الوقت، يؤدي هذا إلى تقليل نسبة النقر إلى الظهور، مما يتسبب في فقدان Google الثقة فيك وتصنيفك في مرتبة أقل.

فيما يلي ملخص لكيفية تأثير انتفاخ الفهرس على صحة تحسين محركات البحث:

• إهدار ميزانية زحف باهظة الثمن على الصفحات التي لا تساهم بأي شيء في نمو عملك.
• يؤدي ذلك إلى الإضرار بالتصنيفات، وانخفاض حركة المرور، وفي النهاية تقليل معدلات التحويل.
• تقليل نسبة النقر إلى الظهور وإنشاء تجربة مستخدم رهيبة.

باختصار، يؤدي انتفاخ الفهرس إلى تأخير تقدم تحسين محركات البحث (SEO) لديك بشكل كبير بينما يقلل بهدوء من فعاليةأعظم محتوى. إنه مثل محاولة الخروج من الرمال المتحركة؛ يسحبك إلى الأسفل مع كل خطوة.

كيفية إصلاح انتفاخ الفهرس؟

أ. إجراء تدقيق الفهرس

استكشف Search Console وGoogle Analytics لتحديد قيمة الصفحات المفهرسة. فرز إلى:

• المحتوى الأساسي للمحافظة عليه
• زغب متوسط ​​للتقوية أو التصلب
• صفحات الزومبي عديمة الفائدة لحذفها أو إعادة توجيهها

من خلال تقسيم الصفحات بهذه الطريقة، يمكنك الكشف عن إمكانيات الدمج والتشذيب، مما يتيح لك تغيير قيمة المحتوى التاريخي بسهولة. حركة الارتباط المستمرة إلى مناطق موقعك التي تلبي متطلبات المستخدم على أفضل وجه.

ستعرض هذه التقنية أيضًا الثغرات الموجودة في تصميم الموقع والتي تتطلب وضع محتوى جديدًا.

ب. إزالة الروابط الداخلية

إذا كنت تنوي عدم فهرسة المادة الخاصة بك، فإن حذف الاتصالات الداخلية بها سيؤدي إلى تقليل قدرة Google على اكتشافها وفهرستها.

نظرًا لأن Google تستخدم الروابط الداخلية للعثور على مواد جديدة على موقعك، فإن إزالة تلك القناة تؤدي إلى تركيز Google اهتمامها على الاتصالات الداخلية الأخرى على صفحتك وفحصها بدلاً من ذلك.

إذا كنت ترغب في إزالة صفحاتك غير الضرورية، فإن حذف الاتصالات الداخلية لتلك الصفحات سيقلل من احتمالية الروابط المعطلة ويسمح لك بالربط بمعلومات أكثر صلة تريد من Google العثور عليها.

ج. 301 إعادة توجيه

إذا كان موقع الويب الخاص بك يحتوي على العديد من عناوين URL التي تحتوي على نفس المعلومات أو معلومات مماثلة، فاستخدم عمليات إعادة التوجيه 301 إلى الإصدار الأساسي المطلوب من الصفحة.

سيؤدي هذا إلى ربط إشارات الأسهم والتصنيف مباشرة بـعنوان URL الأساسي، والقضاء على انتفاخ الفهرس من المواقع المكررة.

د. قم بتعيين العلامات الأساسية المناسبة

يعطي Google الأولوية للمواقع التي تحتوي على علامات أساسية في قسم الرأس () للفهرسة.

يؤدي هذا إلى منع الصفحات المكررة ويدمج حقوق الارتباط، ويعيد توجيهها إلى الصفحة الأساسية بدلاً من ذلك.

هـ. تحديث أو تثبيت robot.txt

إذا لم يكن موقع الويب الخاص بك يحتوي بالفعل على ملف robot.txt، فقم بإنشاء واحد. للتأكد من وصول برامج زحف البحث إلى المواقع الصحيحة، يوصى بما يلي: نقوم بانتظام بمراجعة وتحديث ملفات robots.txt الحالية.

يمنع ملف robots.txt روبوتات محرك البحث من الوصول إلى الدلائل الفرعية. على سبيل المثال، نمنع Google من الزحف إلى نتائج البحث التي ينشئها المستخدمون.

إذا لم يقم ملف robots.txt الخاص بنا بإنجاز ذلك، فقد يتمكن Google من الوصول إلى آلاف الصفحات التي لا نريد ظهورها في نتائج البحث والزحف إليها وفهرستها، مما يؤدي إلى استنفاد ميزانية الزحف الخاصة به.

و. استخدم أداة إزالة عناوين URL الخاصة بـ Google Search Console

ومع ذلك، استخدم هذا الإجراء كعلاج مؤقت. عندما تطلب من Google، فإنه يقوم على الفور بحذف الصفحات من فهرسه (عادةً في غضون ساعات قليلة اعتمادًا على حجم الاستعلامات).

تعمل أدوات الإزالة بشكل أفضل عند استخدامها مع توجيه noindex. تذكر أن أي عمليات حذف تقوم بها يمكن التراجع عنها في المستقبل.

ز. استخدم علامات Meta Robot وX-robots

يمكن لمستند HTML إضافة علامة تعريفية لروبوت لتقديم معلومات حول صفحة واحدة دون التأثير على برامج الروبوت على مستوى الموقع. ويمنحك هذا مزيدًا من التحكم في كيفية الزحف إلى كل صفحة.

ويمكن أن يتضمن أيضًا تعليمات لبرامج زحف محددة ("Google bot" أو "Bing bot") وحذف الصفحات من عمليات البحث عن الصور ومقاطع الفيديو والأخبار في Google. يجب على المرء استخدام علامة meta robots على الصفحات التي لا تريد أن تزحف إليها محركات البحث.

إذا قمت عن غير قصد بإضافة علامة noindex إلى صفحة لا ينبغي فهرستها وفقًا لبرامج الروبوت الخاصة بك.

The علامة X-Robotsيظهر في استجابة رأس HTTP. إنها تخدم نفس الغرض كعلامة meta robots، حيث تتحكم في فهرسة الصور ومقاطع الفيديو وملفات PDF والمستندات الأخرى غير HTML.

ح. تنفيذ ترقيم الصفحات بشكل صحيح

إذا كان موقع الويب الخاص بك يحتوي على مواد مقسمة إلى صفحات (مثل قوائم المنتجات أو أرشيفات المقالات)، فاستخدم علامتي rel=”next” وrel=”prev” للإشارة إلى ترقيم الصفحات المناسب لمحركات البحث.

وهذا يمنعهم من فهرسة كل صفحة مرقّمة على حدة، مما يقلل من تضخم الفهرس. 

الخلاصة

يعد تضخم الفهرس مشكلة شائعة تؤثر على أداء موقع الويب في صفحات نتائج محرك البحث وتجربة المستخدم.

تؤدي الفهرسة المفرطة للمواقع غير ذات الصلة بواسطة محركات البحث إلى دفن مواد مفيدة. يؤدي هذا إلى تصنيفات مخففة وإهدار موارد الزحف.

ومع ذلك، فإن التعرف على الأسباب وتنفيذ العلاجات التكنولوجية المناسبة يمكن أنتحسين أداء تحسين محركات البحث (SEO) بشكل عام.

يمكنك تحديد الصفحات الموجودة على موقعك التي تحتوي على فهرس منتفخ وإزالتها باستخدام التقنيات التي تمت مناقشتها أعلاه.

يمكن أن يساعدك هذا على تحسين تقييم الجودة الشاملة لموقعك في محركات البحث، والحصول على تصنيف أعلى، وإنشاء فهرس أكثر وضوحًا، مما يسمح لـ Google بتحديد الصفحات التي تريد تصنيفها بسرعة وفعالية.

الأسئلة المتداولة