ساخت فایل روبوت
(Robots.txt Generator)
نحوه ایجاد فایل Robots.txt
Robots.txt وظیفه داشته تا یک فایل ایجاد کند که کاملا برعکس نقشه سایت بوده تا نشان دهد که صفحاتی را شامل میشود. بنابراین داشتن Robots.txt برای هر سایت لازم است. زمانی که یک موتور جستجوگر وب، سایتی را بررسی می کند، اول فایل robots.txt را در سطح ریشه پیدا کرده و بعد از شناسایی آن، خزنده فایل را خوانده و در آخر فایل ها و دایرکتوری هایی که شاید مسدود شوند را پیدا می کند.
این قسمت در حال تکمیل می باشد
این قسمت در حال تکمیل می باشد
مشکل این ابزار را گزارش دهید:
پیوند یکتا:
QR Code:
اشتراک گذاری
Speed Checkup Tools
بررسی سرعت سایت در ایران با مرورگرهای مختلف
DNS Checkup Tools
ابزار تخصصی بررسی آنلاین وضعیت DNS
SEO Checkup Tools
بررسی کامل سئو و مقایسه آن با سایتهای رقیب
WHOIS Checkup Tools
بررسی وضعیت دامنه و نمایش مشخصات آن
IP Checkup Tools
پیدا کردن موقعیت جغرافیایی یک آدرس آی پی
SSL Checkup Tools
بررسی کامل SSL/TLS و دیکد کردن CSR
Page Size Checker
محاسبه حجم یک صفحه
RGB to Hex
تبدیل RGB به Hex
Robots.txt Generator
ساخت فایل روبوت
Word Counter
شمارنده کلمه ها
Domain Hosting Checker
بررسی هاستینگ سایت
