Vietnes karte un robots.txt WordPress un Jūsu pašu vietnē

Vietnes karte ir to adrešu saraksts, kurus vēlaties redzēt meklētājprogrammās. Fails robots.txt norāda meklētājprogrammām, kurus adresus tās nedrīkst apmeklēt un kur atrodas Jūsu vietnes karte. Lūk, kā tos pārbaudīt WordPress un vietnē, ko veidojat paši.

WordPress

Kopš versijas 5.5 WordPress pats izveido vietnes karti un robots.txt:

• Vietnes karte atrodas adresē https://jouwdomein.nl/wp-sitemap.xml.
• robots.txt ir virtuāls: Jūsu tīmekļa mapē nav šāda faila, bet WordPress to parāda adresē https://jouwdomein.nl/robots.txt, kopā ar norādi uz vietnes karti.
• Vai izmantojat SEO spraudni, piemēram, Yoast SEO vai Rank Math? Tad tas bieži izveido savu vietnes karti, piemēram, sitemap_index.xml. Adresi atradīsiet spraudņa iestatījumos. Šo adresi iesniedziet Google un Bing.

Standarta WordPress robots.txt izskatās aptuveni šādi:

User-agent: *
Disallow: /wp-admin/
Allow: /wp-admin/admin-ajax.php
Sitemap: https://jouwdomein.nl/wp-sitemap.xml

Vai WordPress attur meklētājprogrammas?

1. Piesakieties WordPress un atveriet Iestatījumi, pēc tam Lasīšana.
2. Sadaļā par redzamību meklētājprogrammām apskatiet izvēles rūtiņu Atturēt meklētājprogrammas no šīs vietnes indeksēšanas.
3. Šai rūtiņai jābūt neatzīmētai. Noklikšķiniet uz Saglabāt izmaiņas.

Ja rūtiņa ir atzīmēta, WordPress lūdz meklētājprogrammām izlaist visu Jūsu vietni. To bieži ieslēdz vietnes izstrādes laikā un pēc tam aizmirst izslēgt.

Vairāk par atrodamību WordPress varat izlasīt rakstā Atrodamība: pamati.

Savs robots.txt

Ja paši ievietojat failu robots.txt savā tīmekļa mapē, tas ir noteicošais pār WordPress virtuālo robots.txt. WebOké hostinga plānā tīmekļa mape ir Jūsu domēna public_html. Failu tajā varat ievietot ar File Manager rīku DirectAdmin (skatiet File Manager atvēršana: mapes Jūsu plānā) vai ar FTP.

Vienkāršs robots.txt, kas atļauj visu un norāda uz Jūsu vietnes karti:

User-agent: *
Allow: /
Sitemap: https://jouwdomein.nl/sitemap.xml

Vietne, ko veidojat paši

Vai veidojat vietni paši vai ar citu programmu? Tad pārbaudiet, vai šī programma izveido vietnes karti. Ja ne, varat iztikt arī bez tās: neliela vietne ar labām saitēm starp lapām arī tiek atrasta. Tomēr vietnes karte palīdz. Ievietojiet to savā tīmekļa mapē un norādiet to savā robots.txt, kā parādīts iepriekš.

Pārbaude

• Atveriet https://jouwdomein.nl/robots.txt. Vai zem User-agent: * ir rinda Disallow: /? Tad neviena meklētājprogramma nedrīkst apmeklēt Jūsu vietni. Izdzēsiet šo rindu, kad vietne ir gatava.
• Vai ir rinda Sitemap:? Atveriet šo adresi pārlūkprogrammā. Jums jāredz Jūsu vietnes adrešu saraksts ar https un Jūsu domēnu.

Padoms: robots.txt neizslēdz lapu no Google. Lapa, kuru nedrīkst apmeklēt, tomēr var parādīties meklēšanas rezultātos, ja uz to ir saites no citām vietnēm. Ja vēlaties lapu patiešām izslēgt no Google, izmantojiet noindex. Atšķirību varat izlasīt kursa „Atrodamība tiešsaistē” nodarbībā robots.txt: ko Jūs bloķējat un ko ne.