نقشهٔ سایت برای خزندهها (sitemap.xml) و قواعد ورود/خروج آنها (robots.txt). اگر حوصلهٔ راهنماهای بلند را ندارید، این نوشته برای شماست: یک مسیر ۱۵ دقیقهای از صفر تا اولین نتیجهٔ واقعی. ابزار سادهای که موجب میشود گوگل همهٔ صفحات مهم فارسی شما پیدا کند و وقتش را روی صفحات بیارزش تلف نکند.
آمادهسازی (۲ دقیقه)
قبل از هر چیز اینها را آماده کنید:
- یک هدف کوچک و مشخص برای همین امروز
- محیط کار: Screaming Frog را باز کنید
- یک یادداشت برای ثبت نکتهها
قدمهای اصلی (۱۰ دقیقه)
- سایتمپ XML خودکار و بهروز؛ هر صفحهٔ ایندکسی یک URL، با lastmod درست.
- در robots.txt صفحات خصوصی، جستوجو و پنل ادمین را disallow کنید و سایتمپ را معرفی کنید.
- نسخههای تکراری (پارامترها، صفحاتبندی بیارزش) را با canonical مدیریت کنید نه با حذف عجولانه.
- بعد از هر تغییر ساختاری، سایتمپ را در کنسول سابمیت و وضعیت را چک کنید.
بعد از شروع چه کنیم؟ (۳ دقیقه)
- نتیجهٔ کوچک امروز را ثبت کنید
- یکی از نکتههای پیشرفته را برای فردا انتخاب کنید
- این صفحه را نشانهگذاری کنید
مسیر ادامهٔ راه
وقتی اولین نتیجه را گرفتید، سراغ اینها بروید:
- سایتمپ تصویر و ویدیو را برای محتوای بصری اضافه کنید.
مراقب این اشتباهات باشید
- قرار دادن URLهای noindex داخل سایتمپ (سیگنال متناقض).
- lastmod همیشه «امروز»؛ گوگل یاد میگیرد بیاعتبار است.
- بلاک کردن اشتباه CSS/JS در robots — رندر صفحه خراب میشود.
پرسشهای شروع
سایتمپ لازم است؟
سایت کوچک هم بهرش میبرد؛ برای کشف سریع و کامل، بله.
noindex در robots بگذارم؟
نه! robots برای دسترسی است؛ noindex متا است و باید دیده شود تا اجرا شود.
چند سایتمپ؟
بالای ۵۰ هزار URL یا تفکیک نوع محتوا: سایتمپ ایندکس بزنید.
پایان صحبت
سایتمپ و Robots.txt قرار نیست جایگزین تفکر شما شود؛ قرار است ضربکنندهٔ آن باشد. هرچه ابزار را بهتر بشناسید، تصمیمهای بهتری میگیرید و سریعتر به نتیجه میرسید. این نوشته را نشانهگذاری کنید و هر از گاهی سر بزنید — استفادهٔ دوباره از فهرستها، نیمی از ارزش آنهاست.
دیدگاهها
۰ دیدگاههنوز دیدگاهی ثبت نشده؛ اولین نفر باشید.