journalar.com
robots.txt

Robots Exclusion Standard data for journalar.com

Resource Scan

Scan Details

Site Domain journalar.com
Base Domain journalar.com
Scan Status Ok
Last Scan2025-12-19T21:50:47+00:00
Next Scan 2025-12-26T21:50:47+00:00

Last Scan

Scanned2025-12-19T21:50:47+00:00
URL https://journalar.com/robots.txt
Domain IPs 85.90.245.136
Response IP 85.90.245.136
Found Yes
Hash ef4939317769e625dc8da84081fc47674eebcab9e2ba2733fc28a6952a89b52b
SimHash 3886d510d279

Groups

*

Rule Path
Disallow /?s=
Disallow /search/
Disallow /wp-json/
Disallow /?rest_route=
Disallow /category/*/page/
Disallow /tag/*/page/
Disallow /author/
Disallow /page/
Disallow /wp-admin/
Disallow /wp-login.php
Disallow /cgi-bin/
Disallow /readme.html
Disallow /xmlrpc.php
Allow /wp-content/uploads/
Allow /wp-content/themes/
Allow /wp-includes/js/
Allow /wp-includes/css/
Allow /*.js$
Allow /*.css$
Disallow /*.bak$
Disallow /*.tmp$
Disallow /*.old$

Other Records

Field Value
sitemap https://journalar.com/sitemap_index.xml

Comments

  • ================================
  • START RANK MATH BLOCK (محدث 2025)
  • ================================
  • منع صفحات البحث وصفحات البحث الديناميكية لتقليل المحتوى المكرر
  • منع الوصول إلى REST API لتقليل طلبات غير مهمة
  • منع أرشفة صفحات التصنيفات المؤرخة وصفحات الأرشيف المكررة
  • منع ملفات خاصة للنظام أو إعدادات لا يجب أرشفتها
  • السماح بزحف ملفات الموارد الحيوية لتحسين عرض الموقع
  • السماح بزحف ملفات الجافاسكريبت و CSS (مهمة لأداء الموقع وللزحف الحديث)
  • منع الملفات المؤقتة أو النسخ الاحتياطية التي قد تسبب مشاكل أو محتوى مكرر
  • تحسين سرعة الزحف وتقليل ضغط السيرفر:
  • إضافة معدل الزحف (crawl-delay) لأجهزة الزحف التي تدعمها (غير مدعومة من Google)
  • Crawl-delay: 10
  • إضافة خريطة الموقع الرئيسية لتسهيل الزحف
  • ================================
  • END RANK MATH BLOCK
  • ================================