Sitemap a robots.txt vo WordPress a na vašej vlastnej stránke

Sitemap je zoznam adries, ktoré chcete mať vo vyhľadávačoch. Súbor robots.txt hovorí vyhľadávačom, ktoré adresy nesmú navštíviť a kde sa nachádza vaša sitemap. Tu je návod, ako ich skontrolovať vo WordPress a na stránke, ktorú si vytvárate sami.

WordPress

WordPress od verzie 5.5 sám vytvára sitemap aj robots.txt:

• Sitemap nájdete na adrese https://jouwdomein.nl/wp-sitemap.xml.
• Súbor robots.txt je virtuálny: vo vašom webovom priečinku nie je žiadny súbor, ale WordPress ho zobrazuje na adrese https://jouwdomein.nl/robots.txt, spolu s odkazom na sitemap.
• Používate SEO plugin, napríklad Yoast SEO alebo Rank Math? Ten často vytvára vlastnú sitemap, napríklad sitemap_index.xml. Adresu nájdete v nastaveniach pluginu. Práve túto adresu odošlite do Google a Bing.

Štandardný robots.txt vo WordPress vyzerá približne takto:

User-agent: *
Disallow: /wp-admin/
Allow: /wp-admin/admin-ajax.php
Sitemap: https://jouwdomein.nl/wp-sitemap.xml

Neblokuje WordPress vyhľadávače?

1. Prihláste sa do WordPress a prejdite do Nastavenia a potom Čítanie.
2. Pri viditeľnosti pre vyhľadávače skontrolujte zaškrtávacie políčko Požiadať vyhľadávače, aby neindexovali túto webovú stránku.
3. Toto políčko musí byť nezaškrtnuté. Kliknite na Uložiť zmeny.

Ak je políčko zaškrtnuté, WordPress žiada vyhľadávače, aby celú vašu stránku vynechali. Často sa zapína počas tvorby stránky a potom sa naň zabudne.

Viac o viditeľnosti vo WordPress si prečítajte v článku Viditeľnosť vo vyhľadávačoch: základy.

Vlastný robots.txt

Ak do webového priečinka sami vložíte súbor robots.txt, má prednosť pred virtuálnym robots.txt z WordPress. Pri hostingovom balíku od WebOké je webovým priečinkom public_html vašej domény. Súbor doň vložíte pomocou Správcu súborov v DirectAdmin (pozrite Otvorenie Správcu súborov: priečinky vo vašom balíku) alebo cez FTP.

Jednoduchý robots.txt, ktorý povoľuje všetko a odkazuje na vašu sitemap:

User-agent: *
Allow: /
Sitemap: https://jouwdomein.nl/sitemap.xml

Stránka, ktorú si vytvárate sami

Vytvárate si stránku sami alebo v inom programe? Overte si, či daný program vytvára sitemap. Ak nie, zaobídete sa aj bez nej: malá stránka s dobrými odkazmi medzi jednotlivými stránkami sa tiež nájde. Sitemap však pomáha. Vložte ju do webového priečinka a uveďte ju v robots.txt, ako je uvedené vyššie.

Kontrola

• Otvorte https://jouwdomein.nl/robots.txt. Je pod User-agent: * uvedené Disallow: /? V tom prípade nesmie vašu stránku navštíviť žiadny vyhľadávač. Keď je stránka hotová, tento riadok odstráňte.
• Je tam riadok Sitemap:? Otvorte túto adresu v prehliadači. Mali by ste vidieť zoznam adries vašej stránky s https a vašou vlastnou doménou.

Tip: robots.txt nezabráni tomu, aby sa stránka objavila v Google. Stránka, ktorú nie je povolené navštíviť, sa môže napriek tomu dostať do výsledkov vyhľadávania, ak na ňu odkazujú iné stránky. Ak chcete stránku z Google naozaj vylúčiť, použite noindex. Rozdiel sa dozviete v lekcii robots.txt: čo blokujete a čo nie z kurzu Byť nájdený online.