Robots.txt va sitemap.xml: barcha qoidalarga muvofiq yaratish va sozlash

Har qanday CMS-da har bir sayt uchun 2 ta juda muhim faylni sozlayman - robots.txt va sitemap.xml. Bu sizning saytingizni eng yuqori darajaga ko'tarish imkonini beradi!

Bu fayllar nima uchun?

p>

Robots.txt - turli qidiruv robotlari uchun saytni indekslash qoidalarini belgilaydigan direktiv (qaysi bo'limlar va sahifalar indekslanishi kerak va qaysi biri kiritilmasligi kerak).

Sayt xaritasi – sayt xaritasi, u saytning barcha mavjud html-sahifalariga havolalarni o‘z ichiga olgan va tizimlashtirilgan havolalar bo‘lib, qidiruv robotlari uchun strukturani tushunish va saytni ko‘rib chiqishni osonlashtiradi.

Robots.txt faylini oʻrnating:

1. Barcha kalit qidiruv robotlari uchun User-agent qoidalarida (Yandex, Google, umumiy qoida va boshqalar)

2. Ishlamaydigan Xost parametrini saqlab qolaman

3. Sayt xaritasiga yo'lni belgilang

4. Yandex

5 uchun skriptlar va CSS uslublarini yopaman. 404 ta xato va buzilgan sahifalarni yopmayman

6. Hammasini haqiqiyligini tekshiring

.xml katalogida:

1. Sayt xaritasini faqat kerakli sahifalar bilan toʻgʻri sozlang.

2. Men barcha sahifalar uchun toʻgʻri ustuvorliklarni oʻrnatdim

3. Men haqiqiyligini tekshiraman

Men barcha platformalarda ishlayman, jumladan WordPress, OpenCart / OcStore, Joomla, PrestaShop, Shop Scipt va Simpla. Men barcha CMS bilan ishlayman: WordPress WebAsyst DLE, DLE, ModX, UMI. CMS, Netcat, Host CMS, InSales, Tilda va boshqalar.