خسرت اغلب الصفحات التى تم ارشفتها فى جوجل وانخفض عددها للنصف

[Pepo]

خسرت اغلب الصفحات التى تم ارشفتها فى جوجل ووصلت لنصف العدد
وايضا عدد الزوار انخفض للنصف
لماذا؟

فى هذا الوقت ليس المهم انك خسرت المهم لماذا وصلت لهذا.

بالرغم ان روابطك فى المواقع الكبيرة مازالت كما هى وموقعك كما هو مهئ جيدا لمحركات البحث

والموقع متجدد اذا لماذا يحدث لى هذا التراجع المخيب للأمل؟!

حقا انا نفسى عشت ساعات بؤس ويأس بسبب هذا الأمر

ووصل بى الأمر للجنون فلا اجد سبب مقنع لهذا الأمر

كان اجمالى الصفحات فى خريطة الموقع 2332
والصفحات المؤرشفة منها 2215

بعد هذا التراجع الغريب والقاسى اصبحت الروابط المؤرشفة حوالى 1350 من اصل 2346
فى البداية ظننت ان السبب كان بسبب وقوع الموقع فى الأونة الأخير بشكل متكرر
لكن بعدها بأيام وبعد ثبات السيرفر بشكل جيد وجدت ان الأمر يسوء اكثر فقد انخفض عدد الصفحات الى 1200
وعدد الزوار بعد ماكان فى المعتاد حوالى 2400 زائر وصل لـ 1300 زائر يوميا

تعهدت مع نفسى الا ايأس الا بعد ان اوصل للسبب حتى لو لم اتمكن من حل المشكلة. لكن يكفينى شرف المحاولة ومعرفة السبب
فبدأت بمراجعة حساباتى مرة اخرى
ولم ارى اى شئ يمكن ان يكون سبب فى هذا الا شئ واحد (الواضح حتى الأن) وهو المواقع التى اتبادل معها
بروابط نصية.. ربما بينهم موقع تم عقابه لسبب ما ولهذا السبب يتم عقاب موقعى ايضا لأنى اضع رابطه
ففحصت هذه المواقع موقع موقع. وجدت بينهم موقع واحد فقط ربما يكون موضع شك
الا انه لا يمكنى ان يتسبب لى فى هذا العقاب. فقررت ان انظف بعض من المواقع التى اتبادل معها حتى اتأكد اذا كانت المشكلة من هذه المواقع ام لا. فأتضح لى بعدها ان الأمر مازال ينحدر كما هو.
عندها علمت ان هذا شئ جديد على لم اتابعه او اقرأ عنه من قبل او انى قرأت عنه ولم اعيره اهتمام كاغرور منى
او كاثقة زائدة بالنفس. وعلى الفور بدأت بإعادة قرأة ماكنت اكتبه فى مجال محركات البحث
واراجع مصادرى مرة اخرى.
اكتشفت ان هناك سبب وحيد كان غائب عنى وهو مايدعى بالـ hijack هذا المصطلح الذى لم استوعب مدى خطورته الا عندما تعرضت له.
ماهو الـ hijack بالنسبة للمواقع؟
الـ hijack له عدة انواع مختلفها وسأذكر لكم اشهرها
النوع الأول هو استغلال ثغرة التحويل 302 بجوجل

ويمكن استغلالها على اى موقع
وهى عبارة عن.
مثلا موقعك كبير وبه ترتيب جيد فى جوجل. وانا موقعى مازال جديدا وخالى من اى محتوى
بقوم عامل لموقعى Redirect 302 الى موقعك لأجعل موقعى يوجه الى موقعك
لكن بالنسبة لمحركات البحث الـ redirect 302 يعنى تحويل مؤقت
واظل مفعل هذا التحويل لفترة معينة حتى يظن عنكبوت جوجل ان موقعك الكبير صاحب الترتيب الجيد
هو فى الأصل موقعى وتم نقله على نطاقك بشكل مؤقت. بعدها بمجرد ان الغى هذا التحويل
سيهتم جوجل بموقعى ويترك موقعك. ولهذا السبب قولت انها ثغرة بجوجل!.
بإختصار اليكم كيف يعمل الأمر..
1- الموقع الأول (الأصلى) يظل محفوظ كما هو فى احد مراكز بيانات جوجل data centers
2- نسخة من الموقع الذى قام بعملية التحويل يتم ارشفتها بأحد مراكز البيانات الأخرى لجوجل
3- عناكب جوجل تقوم بزيارة موقعك لتتأكد اذا كان محتوى مكرر ام لا. ويتم معاملته على انه محتوى مكرر
4- يتم معاقبة موقعك ورميه خارج جوجل
اذا ماهو الحل لهذه المشكلة؟ حقا لم يتمكن احد ان يحلها بشكل نهائى حتى الأن
لكن كل شئ ممكن حله حتى ولو انقاذ ماتبقى من موقعك بعد كل ماحدث له من ضرر
اولا عليك ان تتأكد ان مايحدث لك فعلا هو الـ hijack الخاص بالـ redirect 302
ولن تتأكد من ذلك الا اذا عرفت الموقع الذى يفعل هذا بك
وهذا الأمر يمكن ان يكون سهل عندما ينحدر حال موقعك الى الأسفل بشكل كبير
كل ماعليك هو البحث عن عناوين صفحاتك الرئيسية او البحث عن نطاق موقعك yourdomain.com بين علامات التنصيص "" سترى ان هناك موقع معين يتكرر ظهوره بالترتيب الذى كنت تظهر به انت. وعندما تزوره ترى المحتوى شئ اخر تماما.
هذا هو الموقع الذى يجب ان نرد له ضربته
هناك احد المحترفين اقترح اقتراح ما لحل هذه المشكلة لكنى شخصيا لم اجربه بعد
لنفترض ان موقع هذا الشخص هو spydomain.com
ادخل الى ادوات اصحاب المواقع
ثم قم بإضافة النطاق spydomain.com الى حسابك
عندها سيطلب منك جوجل ان تقوم بتأكيد ملكية الموقع. قم بعملية التأكيد بإستخدام الـ meta tag
ثم اضف الـ meta tag المطلوبة الى صفحات موقعك. وستتم عملية التأكيد
بعدها قم بطلب حذف هذا الموقع من خلال اداة حذف الروابط
لكن احتمال كبير ان لا تنجح هذه الطريقة حيث ان جوجل يتطلب شروط معينة لحذف الرابط من فهرسه.
اذا ماهو الحل؟
الحل (لا ينجح فى بعض الأحيان ايضا) ان تستخدم بعض ادوات فحص الدومين كاموقع http://whois.domaintools.com
وتكتب اسم النطاق spydomain.com
سيظهر لك بيانات استضافة هذا الموقع, ومن ضمنها الـ ip التابع لهذا النطاق
ثم اذهب اضف الكود التالى بملف .htaccess بداخل صفحات موقعك

كود :

SetEnvIfNoCase Referer ".*.spydomain.com/" BadReferrer
deny from *.*.*.*
order deny,allow
deny from env=BadReferrer

بالطبع مع مراعاة تغيير spydomain.com بالنطاق الذى فعل هذا بك وتغيير *.*.*.* برقم الـ ip التابع لإستضافته

نوع اخر من الـ hijack وهو مواقع البروكسى.. كل ماعليك ان تجتهد لمعرفة رابط الموقع وتقوم بالطريقة التى عرضتها لك لحجبه من عرض موقعك.

واحد الطرق الأصعب تعقيدا ويكون حلها الوحيد تابع لإستضافتك اذا استخدم هذا الشخص مايدعى بالـ dns spoofing ويمكنه فعل ذلك فقط اذا كانت استضافتك تسمح بما يدعى الـ dns zone tranfer
يمكنك فحص موقعك بموقع مثل هذا الموقع http://www.dynamicnetworkservices.com/report/
اذا رأيت ان استضافتك تسمح بهذا الأمر عليك فورا بمراسلتهم وطلب منهم حل هذه المشكلة
(فقد تعرضت انا لهذه المشكلة واستطعت التفاهم مع المستضيف وحلها والحمد لله)
واذا لم يستطيعوا فعليك ان تبحث عن استضافة اخرى. ودائما عند انتقالك لأى استضافة تأكد انهم لا يسمحوا بهذا الأمر.
وان شاء الله خلال عدة ايام (حسب اهمية موقعك لجوجل) سيعود كل شئ على مايرام.
واذا صادفتك مشاكل اضافية متعلقة بهذا الموضوع فعلى الرحب والسعى لنحاول سويا حلها

[طالب العلم]

مشكور على الموضوع المميز
ولكن ننتظر النتيجة، هل سيتم اعادة فهرسة الصفحات التي تم الغائها الخاصة بمنتداك.

سلام

[Pepo]

اعزرنى يا طيب نسيت ان اذكر الأمر
دى احصائية خريطة الموقع من حسابى بجوجل

كود :

Total URLs: 2342
Indexed URLs: 2110

لكنى كنت معرض ان اخسر هذه الصفحات للأبد مانفعنى فى الأمر
ان هذا المنتدى فى البداية كنت استخدم له نطاق مجانى وهذا النطاق المجانى له pr 3
وبعد التحويل للمدفوع قمت بعملية redirect 301
وبعد ان وصل نطاقنا الحالى لما هو عليه لغيت هذا التحويل.. لكن بعد هذه المشكلة قمت بإعادة عملية التحويل واخترت للنطاق المجانى الحد الأقصلى لسرعة الزحف عليه مما ساعدنى فى استعادة صفحاتى..

[Pepo]

هذه احصائية اليوم

كود :

Total URLs: 2357
Indexed URLs: 2313

الحمد لله

[raoaa]

الحمد لله

[عاشق العندليب]

جزاك الله كلّ خير و إن كان يصعب عليّ فهمه نظراً لموضوع المقال الـّـذي أسمعه لأول مرّة.

[Pepo]

بالنسبة لك اخى عاشق لا تقلق من موضوع الـ dns spoofing
استضافتك مؤمنة جيدا ضد هذه الأمور..
اما بالنسبة لموضوع الـ redirect لقدر الله لو حدث معك او مع غيرك سيسعدنى جدا ان اساعد بكل ما اتانى من خيرة ان شاء الله

[عاشق العندليب]

جزاك الله كلّ خير أخي العزيز بالفعل أنا مطمئن بالنـّـسبة لاستضافتي لكن موقعي ترتيبه يتراجع في محركات البحث منذ فترة و لا تتم أرشفة الصـّـفحات و عندما تاتي بعض العناكب أجدها توجد في صفحة لا تصريح بعد أن كانت موجودة في موضوع معيـّـن مثلاً و هذا ما لم أعرف له سبباً ؟!

[Pepo]

بالنسبة لوجودهم فى صفحة لا تصريح فلا تعطى لهذه المسألة اهتمام فهى مسألة وقت ليس الا.
لكن المشكلة ان صفحاتك لا تؤرشف فهذا بسبب قلة الروابط التى تشير الى موقعك. وعدم كثرة المحتوى

[عاشق العندليب]

أنا أحاول دوماً اخي الكريم و أزيد من الأقسام و المواضيع و الله هو الموفـّـق بإذن الله.
شكراً على ردّك و جزاك الله كلّ خير.