Mnoho prevádzkovateľov webových stránok nie je vyrovnaných. Očividne musíte mať súbor s názvom robots.txt. Čo je to?
Windows + Linux / angličtina / otvorený zdroj. Ak máte domovskú stránku, zvyčajne chcete, aby vás niekto našiel. Je veľká frustrácia, keď sa vaša vlastná stránka nezobrazí na Googli. Príčinou môže byť súbor robots.txt. Ale iba ak tam je. Tento súbor môže robiť iba jednu vec: zakázať.
V súbore robots.txt môžete zakázať automatickým programom, ktoré nepretržite prehliadajú internet, prístup na vaše stránky. Zákaz môžete vysloviť plošne pre všetkých týchto robotov alebo pre niektorých. Svoje stránky môžete zablokovať úplne alebo len v určitých oblastiach.
Ak súbor neexistuje, neexistujú preto žiadne zákazy. Vaše stránky sú otvorené pre všetky vyhľadávače. Ak sa stále nezobrazujete na Googli, vyvstáva úplne iná otázka: Zaregistrovali ste už svoje stránky? Najlepšie urobíte, ak to urobíte ihneď. Jednoducho zadajte adresu tu:
https://www.google.com/webmasters/tools/submit-url
Ak to chcete urobiť, musíte sa prihlásiť do svojho účtu Google.
Aby bol chýbajúci súbor robots.txt problémom, musel by byť server nesprávne nakonfigurovaný. Potom sa robot môže pokúsiť získať prístup k súboru a objaviť neobvyklé chybové správy, čo spôsobí prerušenie procesu. Tento prípad je však veľmi nepravdepodobný.
Ak chcete vytvoriť súbor robots.txt, uložte ho do hlavného priečinka webového servera. Ak chcete každému umožniť urobiť všetko, napíšte do neho nasledujúce:
Užívateľský agent: *
Zakázať:
Riadok „User-Agent“ označuje, na koho sa zákaz vzťahuje. * znamená: pre každého. Riadok „Zakázať“ vyjadruje zákaz. Ak už nič nie je, znamená to, že sú povolené všetky prístupy.
Viac k téme:Zatvorte hlavu, tu je vaša webová stránka: Ako vytvoriť webovú stránku s malým úsilím