جلوگیری از ایندکس صفحات تکراری: صفحات مشابه مانند نسخههای مختلفی از یک صفحه (مثلاً فیلترهای مختلف محصولات در سایت فروشگاهی)
ایندکس نشدن صفحات محتوای حساس یا خصوصی: مانند صفحات پروفایل کاربران، صفحات ورود و ثبتنام
Why should we use Naindex
Prevent indexing of duplicate pages: similar pages such as different versions of the same page (e.g. different product filters on a shopping site)
Not indexing pages with sensitive or private content: such as user profile pages, login and registration pages