Re: FYI: robots.txt na Seznamu (Was: Seznam neindexuje hlavni stranku)

From: Michal Illich, adresa do konferenci <list (zavinac)>
Date: 09. 08. 2005, 09:17 CEST
Ahoj,

	to, co říkáš, zní logicky.
	Hlavní rozdíl bude v chápání toho "path" - já (a zřejmě i Google) to beru 
šířejí (prostě jako celé to, co robot posílá v GET požadavku), ty (a Seznam) 
to bereš úžeji.

	V tom starším (platném) standardu to není definováno nijak.

	V tom novějším ("which is not yet completed or implemented") to dává za 
pravdu tobě.

	Trochu se mi zdá, že absence otazníku je daná hlavně tím, že obě 
specifikace vznikaly v rocích 1994 a 1996 - a tehdy nebyly query stringy moc 
používané. Takže si nejsem jist, zda nepřítomnost otazníku nebyla opomenutím 
(namísto záměru).

	Vyplývá mi z toho, že se teď robot může rozhodnout, jak cestu pojímat. Volí 
víceméně mezi tím novějším strikně popsaným systémem a liberálnějším 
přístupem. Ten druhý způsob, jak to dělá Jyxo, dává webmasterům trochu víc 
možností, ale určitě se nedá říct, že by to Seznam v tomto případě dělal špatně.

	(on teda Seznambot v jiných případech interpretuje /robots.txt blbě, ale to 
už nesouvisí s tímhle vláknem)

	Díky za upřesnění,

M.
Received on Tue, 09 Aug 2005 09:17:03 +0200

This archive was generated by hypermail 2.1.8 : 09. 08. 2005, 09:15 CEST