Robots.txt

Humán Web honlapkészítés, keresőoptimalizálás logo

Honlapok létrehozása, honlap optimalizálás +36 20 2305054, skype: seo-web-marketing

Talán segíthetünk ...

Mi a lényeg?

Mi a fájl szerepe

A weblap és keresőrobotok közötti kommunikációban van szerepe.

Mire jó?

Eredetileg arra szolgált a fájl, hogy a kereső rendszerekkel közöljük, hogy melyik fájlt vagy almappát akarjuk kizárni a weblap indexelésekor. A kereső rendszerek közül a Google, MSN, Ask kezeli a főgyökérben elhelyezett fájlban megadható új információt.

Az újdonság a példa első sorában van. Így adható meg a sitemap elérési útvonala:

SITEMAP: http://www.valamipelda.hu/sitemap.xml
	User-agent: *
	Disallow: /mappa1/file1.php
	Disallow: /mappa2/file2.html
	Disallow: /mappa3/file3.cgi
	Disallow: /mappa4/

Fájlok kizárása az indexelésből

A disallow paranccsal adható a szoftverek értésére: ne indexeljék be a megjelőlt fájlokat. Lásd fenti példa.

Ellenőrző eszköz

Kiváló ingyenes eszköz:
tool.motoricerca.info/robots-checker.phtml

Nem mindegyik validator kezeli az új sitemap szintakszist. Előfordulhat, hogy tévedésből hibát jelez némelyik validator.

Az internet felhasználók zöme egyáltalán nem találkozik a kereső-robotoknak szánt fájllal. A webszerkesztők is ritkán, pedig a robotokkal történő kommunikáció szempontjából fontos ez a fájl.

A nyomtatott oldal szinei: fehér háttér, fekete betű. Nyomtatás most

Kapcsolódó téma: Meta tag indexeléshez, Robots kód mobil kereső-robotokhoz

Ajánlott külső oldal: The Web Robots Pages

Frissítés dátuma: 2013-06-02.

Visszatérés az oldal elejére