robots.txt, vietnes karte un Search Console bez galvassāpēm
· Atjaunots · 2 min. lasīšanas
Šīs trīs lietas nosaka, vai Google vispār ieraudzīs jūsu lapas. Tās iestata pusstundā, un kļūdas šeit ir visdārgākās.
Ko robots.txt dara un ko nedara
robots.txt norāda meklētājrobotiem, kuras vietnes daļas neapmeklēt. Svarīgi: tas vada apmeklēšanu, nevis indeksēšanu. Lapa, kas bloķēta robots.txt, tomēr var parādīties rezultātos, ja uz to ved saites. Lai neļautu indeksēt, izmantojiet noindex tagu, un lapai jābūt pieejamai, lai robots to redzētu.
Vienkāršs pareizs piemērs:
- User-agent: *
- Disallow: /admin/
- Sitemap: https://jusu-vietne.lv/sitemap.xml
Pēc palaišanas nekad neatstājiet "Disallow: /": tā ir bieža kļūda, kad izstrādes versiju pārnes uz dzīvo vietni.
Ko likt sitemap.xml
Kartē jābūt tikai adresēm, ko vēlaties redzēt meklētājā: kanoniskām, kas atbild ar 200 kodu, bez noindex. Viens fails var saturēt līdz 50 000 adrešu vai 50 MB, vairāk dalīt vairākos.
Laukus priority un changefreq Google ignorē, bet lastmod izmanto tikai tad, ja tas atspoguļo reālas izmaiņas. Daudzvalodu vietnēm pievienojiet hreflang saites.
Search Console: ko izdarīt uzreiz
Apstipriniet domēnu (ar DNS ierakstu), iesniedziet sitemap.xml un apskatiet atskaiti "Lapas". Svarīgākais rīks ir "URL pārbaude": tā parāda, vai Google redz lapu, kuru kanonisko adresi izvēlējies un vai ir problēmas.
Biežākās indeksēšanas problēmas
"Atrasta, bet neindeksēta" bieži norāda uz vāju vai atkārtotu saturu vai trūkstošām iekšējām saitēm. "Noskenēta, bet neindeksēta" nozīmē, ka Google lapu redzēja, bet neuzskatīja to par pietiekami noderīgu. Palīdz unikāls saturs, iekšējās saites no spēcīgām lapām un ātrāka lapa: skatiet /lv/blogs/majaslapas-atrums-core-web-vitals/.
Pārbaude pēc izmaiņām
Pēc robots.txt vai kartes mainīšanas pārbaudiet tos pārlūkā un Search Console. Šīs vietnes bezmaksas audits pārbauda arī robots.txt, sitemap, kanoniskās adreses un noindex. Kopējo plānu skatiet /lv/blogs/seo-audits-bez-maksas/.
Biežākie jautājumi
Vai robots.txt neļauj lapai nonākt Google?
Ne vienmēr. Tas bloķē apmeklēšanu, bet lapa tāpat var tikt rādīta bez apraksta. Indeksēšanas aizliegšanai izmantojiet noindex.
Vai sitemap.xml ir obligāts?
Nē, bet tas palīdz Google ātrāk atrast lapas, īpaši jaunā vai lielā vietnē.
Cik ātri Google indeksēs jaunu lapu?
No dažām stundām līdz dažām nedēļām. Paātrināt palīdz iekšējās saites un "URL pārbaudes" pieprasījums.