Re: robots.txt

From: Michal Janik <michal (zavinac)>
Date: Thu, 01 Oct 2009 07:53:12 +0200
Dobré ráno,
co se týká parametru Allow v Robots.txt, tak ho lze využít. Přikládám 
pár oficiálních zdrojů:
- Jak to vidí Seznam: 
http://napoveda.seznam.cz/cz/hledani-fulltext-komunikace-s-vyhledavaci-robots-txt.html#robots_txtSeznam
- Robotstxt.org nyní vrací 503, jak věc vidí Google se lze podívat např. 
zde: http://www.google.com/robots.txt - Allow tam najdete.

Zdraví

*Michal Janík*
<http://www.twitter.com/michaljanik>



Michal Illich, adresa do konferenci napsal(a):
>> Ale ještě k příkladu uvedenému v původním dotazu - Allow je
>> nestandardní zápis, takže je pro sichr jistější se mu vyhnout. Pokud
>> chcete explicitně povolit veškeré indexování, použijte místo toho
>> následující  definici:
>
>     Allow sice neni podle puvodniho standardu definovane, ale pokud 
> vim, vsichni roboti, kteri stoji za rec, jej podporuji
>
> m.
>
Received on 01. 10. 2009, 07:53 CEST

Chcete se nauit vc? Navtivte nae odborn kolen pro webdesignry

This archive was generated by PROGNAME VERSION on DATE and TIME