نقشهٔ سایت برای خزندهها (sitemap.xml) و قواعد ورود/خروج آنها (robots.txt). این صفحه را مثل برگهٔ کنار دستتان ببینید: فهرستی از کارهایی که قبل، حین و بعد از سرِ کار باید انجام دهید. ابزار سادهای که موجب میشود گوگل همهٔ صفحات مهم فارسی شما پیدا کند و وقتش را روی صفحات بیارزش تلف نکند.
چکلیست قبل از شروع
- هدف دقیق را بنویسید: چه میخواهم از سایتمپ و Robots.txt به دست بیاورم؟
- سایتمپ XML خودکار و بهروز؛ هر صفحهٔ ایندکسی یک URL، با lastmod درست.
- در robots.txt صفحات خصوصی، جستوجو و پنل ادمین را disallow کنید و سایتمپ را معرفی کنید.
چکلیست حین کار
- نسخههای تکراری (پارامترها، صفحاتبندی بیارزش) را با canonical مدیریت کنید نه با حذف عجولانه.
- بعد از هر تغییر ساختاری، سایتمپ را در کنسول سابمیت و وضعیت را چک کنید.
- سایتمپ تصویر و ویدیو را برای محتوای بصری اضافه کنید.
چکلیست بعد از اتمام
- نتیجه را ثبت کنید تا دفعهٔ بعد از تجربهٔ خودتان شروع کنید
چکلیست منابع و ابزار
| منبع / ابزار | چه استفادهای؟ |
|---|---|
| XML Sitemap Generator | تولید سریع (وردپرس: خودکار) |
| robots.txt Tester | اعتبارسنجی قواعد |
| Search Console (Sitemaps) | ثبت و مانیتورینگ |
| Screaming Frog | بررسی lastmod واقعی |
خطاهایی که چکلیست از آنها جلوگیری میکند
- قرار دادن URLهای noindex داخل سایتمپ (سیگنال متناقض).
- lastmod همیشه «امروز»؛ گوگل یاد میگیرد بیاعتبار است.
- بلاک کردن اشتباه CSS/JS در robots — رندر صفحه خراب میشود.
توصیه: این چکلیست را یکبار با دقت بخوانید و دفعهٔ بعد فقط از روی تیترها جلو بروید؛ بعد از سه بار تکرار، بخشی از عادت شما شده است.
پرسشهای پرتکرار
سایتمپ لازم است؟
سایت کوچک هم بهرش میبرد؛ برای کشف سریع و کامل، بله.
noindex در robots بگذارم؟
نه! robots برای دسترسی است؛ noindex متا است و باید دیده شود تا اجرا شود.
چند سایتمپ؟
بالای ۵۰ هزار URL یا تفکیک نوع محتوا: سایتمپ ایندکس بزنید.
حرف آخر
نکتهٔ اصلی این نوشته دربارهٔ سایتمپ و Robots.txt ساده بود: کوچک شروع کنید، منظم ادامه بدهید و از تجربهٔ دیگران عبور کنید. این صفحه را نشانهگذاری کنید؛ فهرستها وقتی دوباره خوانده شوند، نیمی از ارزششان را برمیگردانند.
دیدگاهها
۰ دیدگاههنوز دیدگاهی ثبت نشده؛ اولین نفر باشید.