فایل robots.txt در وردپرس به صورت پیش‌فرض دارای دستورالعمل‌هایی برای محدود کردن ربات‌های جستجوگر از دسترسی به شاخه‌ی wp-admin وردپرس است. تنها فایلی که لازم است در این شاخه در دسترس ربات‌ها باشد، فایل admin-ajax.php است که کلیه درخواست‌های AJAX در وردپرس به وسیله این فایل پردازش می‌شوند. فایل پیش‌فرض در وردپرس شامل دستورالعمل‌های زیر […]
بیشتر بخوانید...
موتور جستجوی گوگل با روش‌های مختلف تلاش می‌کند تا سایت‌های اینترنتی را پیدا کند و محتوای آنان را برای کاربران خود قابل جستجو نماید. شما به عنوان مدیر یک سایت علاوه بر اینکه می‌توانید درخواست ثبت سایت در گوگل را ایجاد نمایید، همچنین می‌توانید با روش‌های مختلف از دسترسی گوگل به محتوای سایت خود جلوگیری […]
بیشتر بخوانید...
موتورهای جستجوگر از جمله گوگل و برخی ربات‌های دیگر که سایت‌های اینترنتی را پیمایش می‌کنند، ممکن است برای حفظ اطلاعات شخصی صاحبان سایت‌ها و حفظ حریم خصوصی آنان، پیش از پیمایش اجازه‌های لازم را از دارندگان سایت‌ها دریافت کنند. شیوه‌ی کسب اجازه از صاحبان سایت‌ها طبق قراردادهای رسمی و غیر رسمی از طریق قرار دادن […]
بیشتر بخوانید...