مراجعة برامج الزحف والفهرسة الخاصة لمدونة بلوجر
إعداد علامات الروبوت وملف robots.txt مخصّص بشكل صحيح هو خطوة حيوية لتحسين أداء مدونتك على بلوجر في نتائج محركات البحث. تُستخدم هذه العلامات للتحكم في كيفية فهرسة صفحات المدونة، مما يساعدك على تجنب المحتوى المكرر وتحسين ترتيب المحتوى الأساسي. في هذا الدليل، سنتناول كيفية ضبط علامات الروبوت على صفحات مدونتك المختلفة مثل الصفحة الرئيسية، وصفحات الأرشيف، والبحث، والمشاركات، بالإضافة إلى الشرح المفصل لكل علامة وأهمية تفعيلها أو تعطيلها.
 |
| علامات الروبوت المخصصة |
شرح ومراجعة ملف robots.txt مخصّص :
User-agent: Mediapartners-Google
Disallow:
User-agent: *
Disallow: /search
Allow: /
Sitemap:
sitemap.xml/رابط المدونة//:https
ملف robots.txt السابق يبدو بسيطًا ويحتوي على الأساسيات، ولكن إليك بعض النقاط لمراجعة الملف والتحقق من فاعليته:
تحليل ملف robots.txt الحالي :
User-agent: *
Disallow: /search
Allow: /
Allow: /) هو إعداد جيد لفهرسة بقية المحتوى.sitemap.xml/رابط المدونة//:https
إضافة رابط السايت ماب هنا خطوة ممتازة، فهي تسهّل على محركات البحث الوصول إلى جميع صفحات مدونتك وفهرستها بسرعة
تحسينات مقترحة
مراجعة محتوى السايت ماب: تأكد من أن السايت ماب يحتوي على روابط لجميع صفحات مدونتك المهمة، سواء المقالات أو الصفحات الثابتة.
تحديثات الفهرسة الدورية: يمكنك متابعة أداة Google Search Console لتحليل أي مشاكل في الفهرسة قد تواجهها مدونتك وللتأكد من أن جميع الصفحات الرئيسية تتم فهرستها بشكل صحيح.
اختبار إعدادات الملف: بعد التعديلات، جرب أداة robots.txt Tester في Google Search Console للتأكد من عدم وجود أي عوائق في الوصول إلى الصفحات الرئيسية.
بهذا الملف، يجب أن تكون إعدادات الزحف والفهرسة في مدونتك جيدة وتتماشى مع متطلبات تحسين محركات البحث (SEO).
شرح ومراجعة علامات برامج روبوت مخصّصة للصفحة الرئيسية :
لتفعيل علامات برامج الروبوت المخصصة للصفحة الرئيسية لمدونتك على بلوجر، إليك شرح لأهمية كل علامة، وما إذا كانت تحتاج إلى التفعيل حسب هدفك من الصفحة الرئيسية.
شرح العلامات المتاحة وأهميتها للصفحة الرئيسية
all
- المعنى: يسمح لمحركات البحث بأرشفة الصفحة وتتبع الروابط بداخلها.
- التفعيل: موصى به. هذا الخيار مهم لتظهر الصفحة الرئيسية في نتائج البحث وتتيح لمحركات البحث الزحف إلى روابطها.
noindex
- المعنى: يمنع محركات البحث من أرشفة الصفحة في نتائج البحث.
- التفعيل: غير موصى به للصفحة الرئيسية. يجب ألا يتم تفعيل هذه العلامة لأنك تريد أن تكون الصفحة الرئيسية ظاهرة في نتائج البحث.
nofollow
- المعنى: يمنع محركات البحث من تتبع الروابط الموجودة على الصفحة.
- التفعيل: غير موصى به للصفحة الرئيسية. من الأفضل ترك هذه العلامة بدون تفعيل حتى يتمكن محرك البحث من متابعة جميع الروابط.
none
- المعنى: يجمع بين "noindex" و"nofollow"، مما يعني عدم فهرسة الصفحة وعدم تتبع الروابط.
- التفعيل: غير موصى به للصفحة الرئيسية، لأنه يمنع فهرستها بالكامل.
noarchive
- المعنى: يمنع محركات البحث من الاحتفاظ بنسخة مؤرشفة من الصفحة.
- التفعيل: اختياري. يمكنك تفعيله إذا كنت لا تريد أن يعرض جوجل نسخة مؤرشفة لصفحتك الرئيسية.
nosnippet
- المعنى: يمنع عرض مقتطفات من النص أو الصور المصغرة في نتائج البحث.
- التفعيل: غير موصى به. من الأفضل ترك هذه العلامة معطلة للسماح بعرض محتوى مقتبس في نتائج البحث.
noodp
- المعنى: يمنع محركات البحث من استخدام وصف DMOZ (إن وجد) للصفحة.
- التفعيل: موصى به. نظرًا لأن DMOZ لم يعد مستخدمًا بشكل شائع، يمكنك تفعيلها لضمان عرض الوصف الخاص بك.
notranslate
- المعنى: يمنع محركات البحث من عرض خيار الترجمة للصفحة.
- التفعيل: غير موصى به إذا كنت تريد لصفحتك أن تكون متاحة للترجمة.
noimageindex
- المعنى: يمنع محركات البحث من فهرسة الصور الموجودة على الصفحة.
- التفعيل: غير موصى به. من الأفضل عدم تفعيل هذه العلامة للسماح بفهرسة الصور وجذب المزيد من الزيارات.
unavailable_after
- المعنى: يسمح بتحديد تاريخ معين بعده تتوقف محركات البحث عن فهرسة الصفحة.
- التفعيل: غير ضروري عادةً للصفحة الرئيسية، إلا إذا كنت تريد عرضها مؤقتًا فقط، وهو أمر نادر لصفحة رئيسية.
التوصيات النهائية للصفحة الرئيسية
لأفضل إعداد، يُنصح بتفعيل all وnoodp فقط، وترك باقي العلامات معطلة لضمان فهرسة الصفحة الرئيسية وجعلها مرئية بالكامل لمحركات البحث مع الحفاظ على ظهور وصف الصفحة الذي قمت بإعداده.
شرح ومراجعة علامات برامج روبوت مخصّصة لصفحات الأرشيف والبحث
في حالة صفحات الأرشيف والبحث على بلوجر، من الأفضل استخدام علامات الروبوت بحذر لتجنب فهرسة محتوى مكرر، حيث إن صفحات الأرشيف والبحث غالبًا تحتوي على مقالات مكررة أو مقتبسة. إليك أفضل الإعدادات لكل علامة مع شرح بسيط:
شرح العلامات المتاحة وأهميتها لصفحات الأرشيف والبحث
all
- المعنى: يسمح بفهرسة الصفحة وتتبع الروابط داخلها.
- التفعيل: غير موصى به في هذه الحالة. بدلاً من ذلك، استخدم العلامة "noindex" لمنع تكرار الفهرسة لمحتوى قد يكون موجودًا بالفعل في صفحات المقالات.
noindex
- المعنى: يمنع فهرسة الصفحة في نتائج البحث.
- التفعيل: موصى به. من الجيد تفعيل "noindex" لصفحات الأرشيف والبحث لتجنب تكرار المحتوى في نتائج البحث.
nofollow
- المعنى: يمنع تتبع الروابط الموجودة داخل الصفحة.
- التفعيل: اختياري. يمكنك ترك هذه العلامة بدون تفعيل، خاصة إذا كنت تريد السماح لمحركات البحث بالوصول إلى المقالات الفردية عبر هذه الروابط.
none
- المعنى: يمنع فهرسة الصفحة وتتبع الروابط داخلها (تجمع بين "noindex" و"nofollow").
- التفعيل: بديل جيد. يمكنك تفعيلها إذا كنت تفضل عدم فهرسة هذه الصفحات وعدم تتبع الروابط.
noarchive
- المعنى: يمنع محركات البحث من حفظ نسخة مؤرشفة للصفحة.
- التفعيل: موصى به. تفعيلها مناسب لأن صفحات الأرشيف والبحث لا تحتاج عادة إلى أرشفة.
nosnippet
- المعنى: يمنع ظهور مقتطفات من الصفحة في نتائج البحث.
- التفعيل: موصى به. يمنع ظهور مقتطفات من صفحات الأرشيف والبحث، وهو جيد لتجنب المحتوى المكرر.
noodp
- المعنى: يمنع استخدام وصف DMOZ في نتائج البحث.
- التفعيل: اختياري. هذه العلامة ليست ضرورية غالبًا، لكن يمكنك تفعيلها لضمان عرض الوصف الخاص بك.
notranslate
- المعنى: يمنع محركات البحث من عرض خيار الترجمة للصفحة.
- التفعيل: اختياري. يمكن ترك هذه العلامة بدون تفعيل.
noimageindex
- المعنى: يمنع فهرسة الصور الموجودة على الصفحة.
- التفعيل: موصى به. صفحات الأرشيف والبحث لا تحتوي عادةً على صور مهمة للفهرسة، فيفضل تفعيلها.
unavailable_after
- المعنى: يحدد تاريخ انتهاء لفهرسة الصفحة.
- التفعيل: غير ضروري لصفحات الأرشيف والبحث، إلا إذا كانت لديك حاجة خاصة.
التوصيات النهائية لصفحات الأرشيف والبحث
لأفضل إعداد، يوصى بتفعيل noindex وnoarchive وnosnippet وnoimageindex لهذه الصفحات، وترك باقي العلامات بدون تفعيل. هذا يضمن عدم ظهور صفحات الأرشيف والبحث في نتائج البحث لتجنب تكرار المحتوى، مع السماح لفهرسة الصفحات الفردية عبر روابطها.
شرح ومراجعة علامات برامج روبوت مخصصة للمشاركات والصفحات
العلامات المتاحة وأفضل استخدام لها في المشاركات والصفحات
all
- المعنى: يسمح بفهرسة الصفحة وتتبع الروابط داخلها.
- التفعيل: موصى به. هذه العلامة تتيح لمحركات البحث أرشفة الصفحة وتتبع الروابط، وهي مهمة للمشاركات والصفحات التي تريد لها الظهور في نتائج البحث.
noindex
- المعنى: يمنع محركات البحث من فهرسة الصفحة في نتائج البحث.
- التفعيل: غير موصى به، إلا إذا كنت تريد منع فهرسة صفحة معينة (مثل صفحة الشروط والسياسات أو صفحات غير ذات صلة SEO). للمشاركات العادية، من الأفضل ترك هذه العلامة غير مفعّلة لتظهر في نتائج البحث.
nofollow
- المعنى: يمنع محركات البحث من تتبع الروابط الموجودة في الصفحة.
- التفعيل: غير موصى به بشكل عام للمشاركات والصفحات العادية. إذا كانت هناك روابط تريد منع تتبعها، يمكنك إضافة السمة "nofollow" للروابط نفسها، دون الحاجة لتطبيقها على الصفحة ككل.
none
- المعنى: يجمع بين "noindex" و"nofollow"، مما يعني عدم فهرسة الصفحة وعدم تتبع الروابط.
- التفعيل: غير موصى به للمشاركات والصفحات، حيث يمنع الصفحة من الظهور تمامًا في نتائج البحث.
noarchive
- المعنى: يمنع محركات البحث من الاحتفاظ بنسخة مؤرشفة من الصفحة.
- المعنى: يمنع محركات البحث من استخدام وصف DMOZ للصفحة (إن وجد).
- التفعيل: اختياري. إذا كانت هناك صفحات ترغب بعدم ظهورها بنسخة مخزنة (مثل صفحات تحتوي على معلومات حساسة أو متغيرة باستمرار)، يمكنك تفعيل هذه العلامة.
nosnippet
- المعنى: يمنع عرض مقتطفات نصية أو صور مصغرة في نتائج البحث.
- التفعيل: غير موصى به بشكل عام، حيث إن المقتطفات تساعد على زيادة جذب الزوار. ولكن، يمكنك تفعيله إذا كنت لا تريد عرض نصوص أو صور معينة في نتائج البحث.
noodp
- التفعيل: موصى به. يمكنك تفعيلها لضمان أن محركات البحث تستخدم الوصف الذي تقدمه في المدونة.
notranslate
- المعنى: يمنع محركات البحث من عرض خيار الترجمة للصفحة.
- التفعيل: اختياري. إذا كانت الصفحة تحتوي على محتوى تريد عدم ترجمته، يمكنك تفعيل هذه العلامة، ولكن من الأفضل تركها غير مفعلة لتتيح الوصول إلى محتوى أكبر.
noimageindex
- المعنى: يمنع محركات البحث من فهرسة الصور الموجودة في الصفحة.
- التفعيل: غير موصى به بشكل عام، حيث يساعد فهرسة الصور على جذب الزوار من نتائج الصور. تفعيلها قد يكون مفيدًا فقط إذا كانت الصور خاصة أو حساسة.
unavailable_after
- المعنى: يحدد تاريخ انتهاء لفهرسة الصفحة.
- التفعيل: غير ضروري للمشاركات والصفحات إلا إذا كان هناك محتوى مؤقت ترغب في عرضه لفترة معينة فقط.
التوصيات النهائية للمشاركات والصفحات
خاتمة المقال:
إعداد علامات الروبوت في مدونتك على بلوجر هو خطوة مهمة تساعد على توجيه محركات البحث إلى المحتوى الذي تريد التركيز عليه، وتجنب فهرسة الصفحات الثانوية أو المحتوى المكرر. عبر ضبط هذه العلامات بشكل صحيح على الصفحات الرئيسية، وصفحات الأرشيف والبحث، والمشاركات، يمكنك تحسين تجربة المستخدم وجعل محتوى مدونتك أكثر وضوحًا وقيمة لمحركات البحث والزوار. احرص دائمًا على مراجعة إعداداتك بشكل دوري، وفحص أداء مدونتك عبر أدوات مثل Google Search Console لضمان تحقيق أفضل نتائج لفهرسة صفحاتك.
