آرشیو برچسب های: robots.txt

اهمیت فایل robots
فایلی که همه فراموشش میکنید و خیلی توی سئو مهم هست.
سایتای بزرگ همگی به فایل robots.txt اهمیت می دهند و لینک نقشه سایت در این فایل قرار می دهند مثل سایت آمازون و دیجی کالا و…