Linux prý neumí česky

30.7.2006 00:02 | Přečteno: 1843× | Ze života | | poslední úprava: 30.7.2006 00:40

Toto si myslí "specialista na vyhledávání v češtině" - vyhledávač Morfeo. Zkuste si vyhledat něco ryze českého, tedy nějaké slovo s diakritikou. Budete se divit.

Potřeboval jsem něco vyhledat a jak Google, tak ani Seznam nepodávaly uspokojivé výkony. Proto jsem zkusil použít další vyhledávač, a tím bylo Morfeo - právě ten vyhledávač, který používá portál Centrum. Požadovaný text jsem napsal a odeslal na server. Žádné stránky nebyly nalezeny. To bylo velice podezřelé. Ovšem vzápětí jsem si všiml něčeho co mě pořádně zarazilo.

Celá stránka s výsledky byla nikoli v češtině, nýbrž v "cestine", a z vyhledávaného slova byly nevhodné znaky prachsprostě odstraněny. Říkám si: problém s kódováním. A zkouším jiné nastavení kódování. Výsledky stále stejné. Už mi bylo téměř jasné, že problém bude s hlavičkou User-Agent (Konqueror mu třeba nevoní), proto jsem nastavil MSIE 6 pod XP a odeslal dotaz. A všechno proběhlo tak, jak má.

Aha, tak Konqueror to nezná a proto předpokládá, že umí jen ASCII. Tak schválně, co to udělá, když se mu nastaví MSIE 6, ovšem už ne pod XP. A je to tady: opět bez češtiny. Takže ne Konqueror, nýbrž Linux mu nevoní. Situace se je ale mnohem zajímavější. Ovšem pozor - některé prohlížeče (např. Opera 9, Mozilla 1.7.x nebo Netscape 7.1) jsou brány na milost, kdežto jiné nikoli (Firefox 1.0, Opera 7.53, Mozilla 1.2 apod.), a to přesto, že pro jejich windowsovské kolegy funguje vše správně.

Největší legrace ale teprve přijde. Zkuste schválně v Konqueroru nastavit identifikaci jako libovolný prohlížeč pod Mac OS X nebo Mac PPC. Můžete se pak pokochat čajem místo písmen. Morfeo totiž pošle stránku v macovském kódování (které Konqueror zřejmě nezvládá), aniž by ho o to někdo žádal - v HTTP hlavičce Konqueror označuje jako preferované kódování UTF-8.

Je zajímavé, jakou práci si dali vývojáři Morfea, aby rozebírali hlavičku User-Agent a na jejím základě vymýšleli, jak naložit s obsahem. Současně totiž ignorují další HTTP hlavičky, přinejmenším Accept-Charset. Navíc znakové sada v hlavičce Content-Type v odpovědi většinou chybí (!), kromě onoho macovského kódování (i když v případech, kdy s češtinou naloží správně, znakovou sadu uvádí). Příslušný META tag v HTML pak chybí ve všech případech.

Působí velice komicky, když si tak diletantsky implementovaný vyhledávač říká "specialista na vyhledávání v češtině", a přitom s tou češtinou nakládá tak macešsky. A absolutně nerozumím tomu, proč to není uděláno standardním způsobem (podle Accept-Charset), což by bylo podstatně jednodušší. Portál Centrum samozřejmě toto beze zbytku přebírá, proto se stejného chování dočkáme i tam (možná je rozdíl jen v obrázcích na stránkách).

       

Komentáře

[midar]

lol, morfeo ani neznam....Na češtinu jedině JyXo;)

[David Watzke]

Zkusil jsem něco vyhledat a úplně to ty písmenka s diakritikou vynechalo, tzn. pokusil se vyhledat "rk"

[Luk]

No vždyť to píšu: "z vyhledávaného slova byly nevhodné znaky prachsprostě odstraněny"

[David Watzke]

Napoprvé bych spíš soudil, že odstranil nevhodná slova

[#Tom]

Mně to teda funguje. http://morfeo.centrum.cz/index.php?q=%E8%F9r%E1k&submit.x=0&submit.y=0&mt=2&tt=2&mts=1&sec=mor

[Pietro]

Mne toto konkretne vo Firefoxe 1.5.0.5 ano, v Opere 9 nie, v Konquerore 3.5.3 nie.

[Rezza]

Jede...

Mozilla/5.0 (compatible; Konqueror/3.5; Linux) KHTML/3.5.1 (like Gecko)

Krasne slovo ;)

[David Watzke]

Jo, ale to "rk" zbylo z trochu jinýho slova Zkus hádat

[David Watzke]

Aha, já na to zas čuměl Konquerorem Tys to uhod

[diverman]

Uniká mi něco? link

[xkesh]

Ano jsou to amatérské prasárny (stejně se chová i slavné aktualne.cz, které spadá pod centrum.cz), ale to odpovídá bulvárnímu zaměření těchto médií. O informace a jejich dostupnost jde až někde v (před?)poslední řadě, proto jsou menšiny (a k tomu ještě většinou těch inteligentnějších návštěvníků) nežádoucí.

Ti, kdo bojují o uznání Linuxu takovými stránkami (firmami) anebo o inteligentně a nerušivě umístěnou reklamu, si asi neuvědomují, že o myslící a inteligentní "konzumenty" není zájem. Aktualne.cz je např. nějak podivně zařízeno tak, že sežere většinu výkonu CPU ... (v Linuxu).

Jelikož se jedná o soukromé firmy, navrhoval bych se tím vůbec nezabývat. Jejich škoda (kterou momentálně snadno skousnou). Zaměřme se tam, kde je to provozováno za naše daně, např. do oblasti státní správy, do veřejnoprávních médií (ČTV, ČRo - btw tam propagují teď cíleně OGG Vorbis) atd. V poslední době jsem si např. oblíbil psané zprávy na ct24.cz, které mě často překvapují svou věcností a úplností (shrnou jmenovitě všechno důležité i z ostatních médií a vynechají ideologickou příchuť a propagandu).

PS. Tím nechci říct, že je zbytečné o tom vědět nebo že je zbytečný tvůj blog, naopak - jen mi snaha o řešení přijde zatím jako nedůstojná "nás elitářů" (říkejte si co chcete, lidi s Linuxem na desktopu jsou specifická kasta ;) :D Něco jako snažit se ovlivňovat z intelektuálních pozic program TV Nova :D

[Luk]

Tady vůbec nejde o boj o uznání Linuxu, ani o snahu řešit nefunkčnost (v tomto případě mě absolutně netrápí). Jen mě překvapilo, že někdo (firma takového významu; i když i z pohledu českého trhu je to stejně spíš trpaslík) něco dělá složitě a blbě, když to jde jednoduše a dobře. A také, že působí komicky, když "specialista na češtinu" s češtinou pracuje na takové úrovni.

[xkesh]

Jen mě překvapilo, že někdo (firma takového významu; i když i z pohledu českého trhu je to stejně spíš trpaslík) něco dělá složitě a blbě, když to jde jednoduše a dobře.

Mě ne :D

[KV]

Vsechny servery ktere spadaji pod NetCentrum pouzivaji modul mod_czech v Apachi ktery se o toto prekodovavani do ruznych kodovani stara. Vice informaci ohledne mod_czech lze urcite vygooglit.

Chovani toho do jakeho kodovani se stranka prekoduje jde trosku ovlivnit. Napriklad pokud chci stranku ciste v ASCII, staci nacist stranku http://morfeo.cz/asc a stranka bude jen v ascii kodovani. Pokud chci stranku v kodovani UTF8, staci nacist http://morfeo.cz/utf.

Takto lze servery pouzivajici modul mod_czech prohlizene pres "nepodporovany" browser donutit zasilat text s diaktritikou.

[Michal Kubeček]

Tak to by musela být extrémně stará verze. Protože je to už pěkných pár let, co jsem mod_czech používal a už tehdy se přednostně orientoval podle Accept-Charset. Navíc se zmršenou konfigurací, protože defaultní konfigurace odjakživa linuxovým prohlížečům posílala ISO 8859-2.

[Non_E]

Co za programátora, že vypustil Content-Type? To si skutečně myslí pár lidí z Centra, že vědí, co je pro zrovna můj browser nejlepší? Tohle bych pochopil jedině, kdyby stránka byla v cp1250 a on si myslel, že všichni mají IE Nebudu sprostý…

[Luk]

Kdyby stránka byla tupě v cp1250 a korektně se to tam uvedlo, tak si s tím i Linuxové browsery poradí.

[MJ]

V tomhle je Centrum velice pravděpodobně nevinně a může za to spíš mod_czech, který používá hlavičku User-Agent jako součást heuristiky k uhádnutí kódování. Hádejte, jak je kódování u parametrů předávaných v URL ve standardu definováno

Znakovou sadu v Content-type Morfeo předává zcela korektně, váš případ byl velmi pravděpodobně takový, že mod_czech rozhodl, že prohlížeč umí pouze iso-8859-1 a u toho samozřejmě znakovou sadu v Content-type uvádět netřeba (je to default), naopak se kvůli kompatibilitě s prohlížeči používajícími staré verze HTTP úmyslně vynechává.

Co se znakové sady v META týče, myslím si, že že je to spíš na škodu.

Zkrátka bych autorovi doporučil, aby se naučil místo nadávání raději psát bug reporty, případně aspoň přesně popsat svůj problém.