یک فایل با محتویات بالا و نام 'robots.txt' در شاخه اصلی سایت خود بارگذاری کنید
با استفاده از این ابزار به راحتی می توانید متحوای سایت خود برای موتور های جستجو محدود کنید.
فایل robots.txt برای محدود کردن دسترسی موتور های جستجو برای برخی از صفحات و دایرکتوری های سایت استفاده می شود.
