سازنده robots.txt

برای هر مسیر دستور Allow یا Disallow انتخاب کنید و متن آماده robots.txt را دریافت کنید.

User-agent: *
Disallow: /admin/
Disallow: /api/

robots.txt دسترسی را امن نمی‌کند؛ برای حفاظت از مسیرهای خصوصی از احراز هویت و کنترل دسترسی استفاده کنید.