Dohromady nyní existuje cca 587 různých Instant Answers ve 4 hlavních kategoriích. Goodies (cheatshety a vychytávky pro geeky), Spice (produktové moduly, recepty či převody měn), Fathead (napojení na různé databáze a Wiki) a Longtail (zpracování komplexních dotazů, Q&A, napojení na diskuze ze StackExchange). Některé opravdu jen čerpají informace z různých databází nebo encyklopedií. Často se však jedná i o propracované funkce. DuckDuckGo proto může být i užitečným pomocníkem při běžné práci nebo při rešerších. Čtrnáct vybraných IA představuji v tomto článku. Snažil jsem se zaměřit především na funkce, které neumí Google.

Výběr Instant Answers

Zásadní výhodou IA je fakt, že jsou vyvíjeny komunitou. Existuje tak velká škála různých modulů. Zároveň je to i velká nevýhoda. Mnohé IA nejsou pravidelně aktualizovány a udržovány ve funkčním stavu. Nezřídka se tak stává, že ze dne na den některé z vyhledávání beze stopy mizí. Jen za poslední měsíc přestaly fungovat minimálně 3 zajímavé IA. Je tedy možné, že některé zde uvedené IA nebudou funkční, až je budete chtít vyzkoušet. Uvedené Instant Answers jsou řazeny abecedně. Obrázky fungují jako odkazy na příslušné vyhledávací dotazy v DuckDuckGo.

Alternative to

Hledá alternativy k software a aplikacím.

Bangs

DuckDuckGo umožňuje prohledávat několik tisíc webů na přímo, pomocí značky ! (tzv. bang).
Stačí zadat do vyhledávání vykřičník a ze seznamu vybrat web, který chcete prohledávat.
Kompletní seznam Bangů naleznete na adrese https://duckduckgo.com/bang.
Ke dni 5. října 2015 jich je celkem 6395.

Calendar

Zobrazí kalendář pro zadaný rok a měsíc.

Is down

Kontrola zda je vybraný web online a vrací stavový kód 200.
Update: Již nefunguje.

Lorem ipsum

Generátor textu Lorem ipsum.

HEX color codes

Zobrazení kódů barev za předpokladu, že znáte jejich názvy v angličtině.
Pokud nemáte problém z rukávu vysypat obskurní názvy barev typu GoldenRod či DeepPink, tak určitě doporučuji.

How many people are in space

Když vás zrovna zajímá, kdo všechno je ve vesmíru.

HTML Entity Encode

Převod speciálních znaků na HTML entity.

QR code

Vygenerování QR kódu.

Regex cheat sheet

Pomůcka pro práci s regulárními výrazy.

Stopky

Stopky přímo ve vyhledávání.

Shorten a expand URL

Zkracovač URL.

Dešifrovač již zkrácených URL

Twitter

Po zadání jména Twitter účtu zobrazí náhled profilu.

Zodiac

Po zadání výrazu „chinese zodiac today“ zobrazí aktuální znamení čínského zvěrokruhu.
Totéž funguje i pro běžný zvěrokruh po zadání dotazu „zodiac today“.

Podpora češtiny

Instant Answers s podporou češtiny byly spuštěny v únoru roku 2015. Jedná se však primárně o vyhledávací dotazy, na které je možné generovat odpověď z české Wikipedie. Žádná velká revoluce se tedy zatím nekoná.

Vyhledávač zvládne najít i české firmy.

A na betě je k nahlédnutí pěkný česko-anglický cheat sheet často používaných frází.

V případě zájmu se můžete zapojit i do překládání DuckDuckGo do češtiny na adrese https://duck.co/translate.

API

Nudíte se? Nepořizujte si medvídka mývala ani pásovce devítipásého. DuckDuckGo má totiž dostupné Instant Answers API. Zatím je k dispozici pouze několik typů IA, ale budou přibývat další. Třeba se vám podaří najít nějaké zajímavé využití. Další potřebné informace naleznete na adrese https://duckduckgo.com/api.

Závěrem

Seznam všech Instant Answers naleznete zde: https://duck.co/ia. Do článku jsem se snažil vybrat ty, které mi připadaly zajímavé, užitečné nebo zábavné.

Pokud vás tato funkce zaujala, můžete se zapojit i do komunity aktivních vývojářů. Potřebné informace jsou dostupné na webu http://duckduckhack.com/. Vývoj Instant Answers je otevřený všem a dokážu si představit, že se z toho může stát i poměrně užitečný marketingový nástroj. Znáte snad jiný vyhledávač, který vám umožní vyvinout modul, který se bude v SERP zobrazovat na „nulté“ pozici i s odkazem na váš web? Potenciál je obrovský, stačí ho jen využít.

⇦ DuckDuckGo.com – díl I. – Nový referral v Google Analytics

Seznam referrer spamu, na který můžete v Google Analytics narazit, se neustále rozšiřuje. Stále častěji také najdete v GA mezi referraly pochybně vypadající doménu duckduckgo.com. Odfiltrovat ji, by však byla chyba.

Pokud máte přístup do Google Analytics alespoň u nějakého středně velkého webu, je velká pravděpodobnost, že tam duckduckgo.com uvidíte. První návštěvy z tohoto zdroje můžete očekávat především z přelomu let 2014 a 2015. Možná, že prvních pár “vlaštovek” objevíte i v letech 2013 nebo 2012. Ale spíš bych s tím nepočítal, pokud se nejedná o Analytics většího zahraničního webu.

Kde se duckduckgo.com vzalo a co to je?

Vyhledávač s poutavým názvem DuckDuckGo založil v roce 2008 ve Spojených státech investor a entrepreneur Gabriel Weinberg. Můžete ho potkat na Twitteru a diskuzních fórech pod přezdívkou @yegg. Nevyčerpatelnou ochotou odpovídat na veškeré dotazy a aktivní participací na fungování komunity, odvrátil Weinberg předčasný konec tohoto vyhledávače na internetovém smetišti. V roce 2011 se také účastnil startupových soutěží, které mu zajistily zájem několika angel investorů. Díky nim a společnosti Union Ventures nakonec získal dostatek financí pro uspokojivý rozvoj svého projektu.

Inspirací se při výběru jména vyhledávače stala Weinbergovi dětská hra Duck Duck Goose. Přestože se tento název nedá dobře využít jako sloveso, objevuje se snaha zavést výraz “duck it” jako alternativa ke klasickému “google it”.

Technologie vyhledávače

S ohledem na použité technologie se nejedná o klasický vyhledávač ale “hybridní”. DuckDuckGo totiž výsledky vyhledávání agreguje z různých zdrojů pomocí API. Jen zčásti využívá vlastního crawlera (tzv. DuckDuckBot). Mezi zmíněné zdroje patří například Bing, Yahoo, Yandex či Wikipedia. Jednu dobu se také spekulovalo o tom, že DuckDuckGo je pouze nadstavba/agregátor Bingu. Tato zpráva se nakonec nepotvrdila.

DuckDuckGo si neklade za cíl vybudovat velký index a netají se využíváním zdrojů třetích stran. Sám Weinberg řekl, že crawling a indexace jsou velmi drahé a časově náročné procesy, pro které nemají přebytečné peníze. Ani nedává smysl v tomto soupeřit s Googlem. Z toho důvodu se DuckDuckGo zaměřuje na tři aspekty vyhledávání, které ostatní vyhledávače zanedbávají. Které to jsou?

Tři přednosti vyhledávače

První přednost je uživatelská přívětivost. Vyhledávací rozhraní DuckDuckGo je velice jednoduché. Stejně tak i samotné výsledky vyhledávání jsou přehledné a osekané o balast ve formě velkého množství reklam. Podobně jako jiné vyhledávače pochopitelně i DuckDuckGo vydělává primárně reklamně. Žádný remarketing. Reklamy jsou kontextové na základě zadaného vyhledávacího dotazu. Pro fungování a cash flow tohoto vyhledávače je to prý plně dostačující.

Druhou výhodou je relevance a kvalita výsledků vyhledávání. Důraz je kladen především na kvalitní agregační a především vyhledávací algoritmy. Relevance výsledků vyhledávání je na prvním místě. Hodně úsilí je také věnováno vybudování tzv. Instant Answers. Je to obdoba Knowledge Graphu od Google. Na určité vyhledávací dotazy se vám zobrazí okamžité odpovědi nebo relevantní úryvky z Wikipedie.

Třetím benefitem je zachování soukromí uživatelů. Díky tomu se stal DuckDuckGo skutečně populární a je to zároveň jeho hlavní marketingová zbraň. Tento vyhledávač totiž o svých uživatelích nesbírá žádná data. Umožňuje tak kompletně anonymní brouzdání na internetu. Také nenabízí personalizované výsledky hledání. Všichni uživatelé vidí u konkrétního vyhledávacího dotazu stejné výsledky.

Dílčí úspěchy

O DuckDuckGo se čím dál tím více mluví i píše a nabírá na popularitě. Ve stručnosti proto uvedu některé dílčí úspěchy a zajímavé články z posledních let.

• V dubnu 2014 o DuckDuckGo píše New York Times.
• V září 2014 Apple přidal možnost si v iOS8, OS X a prohlížeči Safari zvolit jakou defaultní vyhledávač DuckDuckGo. Díky tomu za necelý rok vyhledávač vzrostl o 600%.
• V listopadu 2014 byl DuckDuckGo zařazen do nové verze Firefoxu mezi vyhledávače, které je možné vybrat jako defaultní.
• V květnu 2015 proběhl zásadní redesign DuckDuckGo.
• Později v květnu 2015 magazín Time označil DuckDuckGo jako “Anti-Google” a mluví se o něm jako o nejprogresivnějším a nejnebezpečnějším konkurentovi pro Google.
• V červnu 2015 překonal DuckDuckGo hranici 10 milionů vyhledávacích dotazů za den. Pro srovnání, Google má kolem 3,5 miliardy vyhledávacích dotazů denně.
• DuckDuckGo aktuálně figuruje na 5. pozici v Alexa žebříčku vyhledávačů.

Rychlý pohled do Google Analytics

Tři různě velké weby a přístupy z DuckDuckGo

Dle některých zpráv může u vybraných (zahraničních) webů DuckDuckGo údajně dělat až 18 % referral návštěvnosti (!nepotvrzeno, neověřeno!). Možné to sice je, ale pojďme se raději podívat na 3 rozdílné reálně existující weby a jejich GA. Žádné velké zázraky se tam nedějí. Podíl návštěvnosti činí přinejlepším 0.03 %, což není zrovna mnoho. Zajímavý je prostřední web – středně velký eshop. Všimnout si můžete nízké míry opuštění a vysokého konverzního poměru. Právě na tomto eshopu jsem vyhledávač poprvé zaregistroval.

Velký zahraniční web	Středně velký eshop	Malý obsahový web

DuckDuckGo referrers

• duckduckgo.com

– běžný zdroj návštěvnosti v cca 95 % návštěv

• r.duckduckgo.com

– redirectovací URL pro staré prohlížeče, které neumí pracovat s meta referrery
– více viz https://duck.co/help/results/rduckduckgocom

• images.duckduckgo.com

– přístup přes vyhledávání obrázků

Srovnání Yahoo, Bing a DuckDuckGo

Z méně používaných vyhledávačů v ČR dominuje Bing, daleko za ním Yahoo a až úplně na konci DuckDuckGo. Časem uvidíme zda DuckDuckGo zvládne překonat alespoň jednoho z těchto dvou konkurentů. V každém případě je zřejmé, že pro Google v této chvíli zásadním konkurentem zcela určitě není.

Přidejte duckduckgo.com mezi vyhledávače

Google automaticky nerozpoznává všechny vyhledávače. Je tedy nutné si některé přidat v Google Analytics manuálně, aby přestaly padat do referralů ale do organicu. DuckDuckGo je jeden z nich. Pokud nevíte jak na to, pomůže vám návod na následujícím screenshotu.

Pro zajímavost. V případě střetu DuckDuckGo a Google se G. Weinberg jednou vyjádřil ve smyslu, že jim Google háže klacky pod nohy a je k nim v některých ohledech neférový. Toto může být jedna z ukázek. Původně se to týkalo přidání DuckDuckGo mezi vyhledávače v prohlížeči Chrome. Psal se rok 2012. K tématu se tenkrát vyjádřila SEO a PR specialistka Mihaela Lica Butler ve článku DuckDuckGo Vs. Google – The War Gets Dirty pro Search Engine Journal. Počínání Google však označila za naprosto běžné a naopak komunikaci DuckDuckGo, potažmo Weinberga, za zavádějící a neférovou. V diskuzi pod článkem naleznete i Weinbergovy rozsáhlé komentáře.

Závěrem

Podle některých dostupných údajů se může zdát, že trend soukromí na internetu postupně klesá. Ovšem velký zájem o vyhledávač DuckDuckGo, jehož hlavní předností je především zachování soukromí uživatelů, spíše prokazuje opak. Podle grafu z Google Trends se růst vyhledávače mírně svezl na kauze Edwarda Snowdena. Zájem o podivnou kauzu bývalého zaměstnance CIA klesá. Oproti tomu podíl ve vyhledávání, celková popularita a počet uživatelů vyhledávače roste. Těžko odhadovat jak se DuckDuckGo bude rozvíjet dále. Uvidíme, jestli se mu podaří dotáhnout se alespoň na úroveň Yahoo či Bingu. Těžko dělat závěry z toho mála dat, co nyní máme k dispozici.

Stručný slovníček pojmů

Hybridní vyhledávač – využívá více informačních zdrojů, nejen data získaná díky svému crawleru. Výsledky vyhledávání generuje pomocí vlastních algoritmů.
Referral – zdroj návštěvnosti z odkazů.
Referrer – zdroj odkazu.
HTTP referer – identifikační pole adresy (URI) zdrojového webu v HTTP headeru. Jedno chybějící r je překlep, ze kterého se stal postupem času standard.
Meta referrer – relativně nový meta tag, který se umisťuje do hlavičky webu. Určuje zda budou údaje o referreru poslány dál. Více v článku Cyruse Sheparda na MOZ: The Meta Referrer Tag: An Advancement for SEO and the Internet.

Na příští týden připravuji druhý díl článku, ve kterém představím několik užitečných vychytávek (Instant Answers) ve vyhledávání DuckDuckGo.

Co si myslíte o novém vyhledávači? A jaký je váš názor na soukromí na internetu (např. ve vztahu k remarketingu)?

DuckDuckGo.com – díl II. – Instant Answers ⇨

User-agent: *
Disallow: /

Zapamatujte si jednoduché pravidlo. Robots.txt neslouží k zákazu indexace stránek. Nikdy a ani trochu. A naopak může uškodit.

Indexace versus crawlování

Pro pochopení je nutné znát rozdíl mezi crawlováním a indexací. Crawlování znamená, že se robot vyhledávače prochází po vašem webu a stahuje si k sobě od vás jednotlivé stránky pro další zpracování.

Indexace je pak sestavování indexu – tedy databáze, ve které fulltext po zadání dotazu hledá. Do indexu přitom zařazuje stránky a informace o nich získané nejen z crawlování, ale i z dalších zdrojů, které vyhledávači přijdou zajímavé a užitečné.

Typicky už jenom tím, že se na nějakou konkrétní stránku odkazuje odjinud, dostává vyhledávač o dané stránce řadu zásadních informací – link text odkazu, klíčová slova v její URL, tematický kontext, ze kterého se na ni odkazuje, podobu a sílu jejího odkazového profilu. Další údaje může získat z popisků či kategorií v katalozích, do kterých je stránka zařazena. A tak dále.

Co je na zákazu indexace přes robots.txt špatně?

Robots.txt nezakazuje zařazení dané stránky do indexu, ale jen a pouze její crawlování robotem vyhledávače. Říkáte tím tedy, že si na danou URL nesmí crawler přímo sáhnout a stáhnout si k sobě její obsah.

Vyhledávače si ale i nadále můžou zařadit stránku do indexu jen na základě dalších údajů z jiných zdrojů a nabízet ji ve výsledcích hledání. A skutečně to velice často dělají:

Je vidět, že informace, které Google o stránce na SERPu zobrazuje, nepochází ze samotné stránky, ale právě z nějakého link textu a dalších zdrojů v okolí dané stránky. Všimněte si, že vyhledávač uživatele upozorní, že o stránce má jenom dílčí neúplně informace. Ale i přesto ji indexuje, nabízí a zobrazuje.

Jak tedy správně zakázat indexaci?

Správný zákaz indexace závisí na kontextu a důvodech, proč to vlastně vůbec chcete dělat:

Link rel=canonical

V případě, kdy máte na webu duplicity nebo silné podobnosti, které nelze vyřešit sloučením všech stránek v jedinou a přesměrováním ostatních přes HTTP 301, je místo zákazu všech duplicitních variant lepší použít meta značku canonical:

<link rel="canonical" href="http://www.example.com/my-canonical-page"/>

Nejedná se o zákaz indexace v pravém slova smyslu, ale spíš o nezávaznou nápovědu vyhledávači, kam by měl všechny duplicitní a podobné stránky kanonizovat. Výhodou je, že pokud na to vyhledávač přistoupí, koncentruje do navržené kanonické stránky odkazy a rank ze všech takto označených stránek. Nevýhodou je, že to vyhledávač nemusí vůbec respektovat.

Meta robots noindex

Tohle je ta správná, čistá a bezpečná metoda, jak skutečně zakázat indexaci dané stránky. Do její HTML hlavičky přidáte meta značku:

<meta name="robots" content="noindex"/>

Využijete to v případě stránek, na které vůbec nechcete, aby vám uživatelé chodili z vyhledávačů napřímo. Typicky třeba kroky nákupního procesu nebo děkovací stránky po odeslání konverze. Čistě pro jistotu i všechny stránky s nějakými neveřejnými citlivými údaji, i přesto, že ty máte určitě všechny dávno schované za přihlášením.

Po meta robots noindex sáhnete i v případě, kdy se reálně potýkáte s duplicitami či podobnostmi, ale vyhledávač odmítá zohlednit navržený meta canonical. Nevýhodou je, že se vám pak rank tematicky nekoncentruje v ideální kanonické stránce, ale rozplizne se vám bezkontextově přes všechny odchozí odkazy do zbytku webu.

HTTP hlavička X-Robots-Tag

Alternativa k meta robots noindex. Jenom místo HTML zdrojáku se posílá přímo v HTTP hlavičkách v HTTP odpovědi od serveru:

HTTP/1.1 200 OK
Date: Tue, 25 May 2010 21:42:43 GMT
(…)
X-Robots-Tag: noindex
(…)

Čili v zásadě totéž jako meta robots noindex. Jenom je to složitější na implementaci – HTML tag vrazí do zdrojáku každý, HTTP hlavičky už jsou vyšší dívčí. A navíc písmeno X na začátku naznačuje, že je to nestandardní HTTP hlavička, takže nemusí být podporovaná zdaleka všemi vyhledávači. Takže meta robots noindex bude asi většinou lepší variantou.

Více viz článek Robots meta tag and X-Robots-Tag HTTP header specifications.

HTTP autentizace

Zejména pro testovací verze vyvíjeného webu se místo zákazu indexace hodí skrýt paušálně celý web za HTTP autentizaci. To se zapíná obvykle přímo v konfiguraci daného webového serveru. Testovací verze webu se schová za heslo, takže na ni nevidí nikdo nepovolaný. Vedlejším efektem pak je, že je chráněna i před nechtěným zcrawlováním a indexací vyhledávačem.

Čistě formálně vzato, stejně jako u robots.txt platí, že ani HTTP autentizace přímo nezakazuje indexaci, jenom se crawler nedostane k samotným stránkám. U testovací verze webu se ale neočekává, že by měla nějaký smysluplný odkazový profil a vnější kontext, ze kterého by mohl vyhledávač čerpat další informace. A i kdyby ji nějakým omylem zaindexoval, tak příchozí návštěvníci z vyhledávače narazí nanejvýš tak na přihlašovací formulář. Takže pro náš účel poslouží HTTP autentizace zpravidla uspokojivě.

Výhodou je i to, že po překlopení webu na ostrou doménu se často meta robots nebo robots.txt zákazy zapomínají odstranit, takže vedou obratem k vypadnutí celého webu z indexu vyhledávačů. U HTTP autentizace je riziko nechtěného zapomenutí minimální.

Pozor na chybné kombinace

Teď už víte, že pro zákaz indexace slouží primárně meta robots noindex. Možná vás napadne, že pro jistotu to stejně navíc podpoříte současným zákazem v robots.txt. Čistě pro sichr, co kdyby, za to nic nedáte.

To je ale přeci úplně špatně! Jen si to srovnejte v hlavě. Tím, že robotovi zakážete přistupovat na vaše stránky, nemůže si stáhnout HTML zdroják, takže se ani vůbec nedozví o tom, že tam nějaký meta robots noindex je. V důsledku paradoxně může tyto stránky vesele indexovat a nabízet ve výsledcích hledání.

Robots.txt prostě opravdu nesmí být u zákazu stránek ani trochu.

Obdobně doprovodí řada lidí meta robots noindex ještě dalším parametrem nofollow. Přeci čím víc zákazů, tím jistější:

<meta name="robots" content="noindex,nofollow"/>

Ve skutečnosti tím ale zakážete následování interních odkazů ze stránky dál a dost možná i přelévání ranku do zbytku webu. Vytvoříte tak černou díru na rank, což se vám může promítnout do nižších pozic obecně celého webu. Ale vy chcete zachovat a předat co nejvíce ranku, chcete, aby robot snáze objevil indexovatelný zbytek vašeho webu. Správný zápis je tedy:

<meta name="robots" content="noindex,follow"/>

S tím, že follow je výchozí hodnota, takže ji můžete úplně vynechat. Nofollow smysluplně použijete opravdu tak jednou za sto let.

A k čemu tedy v praxi využiju robots.txt?

Zůstává otázka, k čemu tedy vlastně robots.txt je, když ne k zákazu indexace.

Je přesně k tomu, k čemu byl navržený. Tedy pro zákaz přímého přístupu robota na web nebo nějakou jeho dílčí stránku. To se občas hodí, sic zdaleka ne tak často, jak jste si mysleli.

Například pokud máte URL, jehož pingnutím se hlasuje v nějaké anketě, a nechcete, aby vám roboti při procházení vaším webem přičítali hlasy. Totéž platí pro jakékoliv trackovací a přesměrovací skripty, například pro počítání návštěvnosti nebo prokliků z reklamního systému:

User-agent: *
Disallow: /poll/vote
Disallow: /clickthru

Roboty budete chtít někdy zakázat také z výkonnostních důvodů. Ať už na dílčích skriptech a stránkách, jejichž každé zobrazení představuje složitý výpočet náročný na serverové zdroje či vám prostě přijde zbytečné, aby si je vyhledávač stahoval:

User-agent: *
Disallow: /overkill-page

Anebo třeba přes robots.txt můžete paušálně odříznout nějakého konkrétního robota, pokud je neukázněný a sestřeluje vám web:

User-agent: badbot
Disallow: /

User-agent: *
Disallow:

Pořád jenom roboti. A co lidi?

Aby to bylo spravedlivé, máme tu pro zájemce jako bonus na závěr i standard humans.txt.

Podívejte se například, jak si žijí humans.txt na našem Medio webu!

Související odkazy

• Daniel Bradbury Dočekal: Robots.txt? K čemu něco takového je? A proč je to užitečné?
• Lindsay Wassell: Serious Robots.txt Misuse & High Impact Solutions

Klasické nástroje pro analýzu zpětných odkazů, jako je MajesticSEO nebo Ahrefs, se pro prvotní oddělení zrn od plev moc nehodí, mají příliš zastaralé údaje. Na řadu tak přicházejí třeba pokročilejší možnosti vyhledávání, jako jsou operátory site: a link:. V následujícím článku shrnujeme jednu z technik při odstraňování penalizace, která nám v Medio Interactive pomáhá odfiltrovat největší odkazové bahno snadno a rychle.

Na co se tedy nejdříve díváme u každé domény odkazující na náš web?

• Operátor site: slouží k zobrazení zaindexovaných stránek pro zadanou doménu včetně subdomén. Nízký nebo dokonce nulový počet zaindexovaných stránek může signalizovat problematický či zabannovaný web, který chceme ze svého odkazového profilu dostat co nejdříve.
• Operátor link: umožňuje zjistit, jaké důležité stránky na konkrétní doménu odkazují. Opět čím nižší počet zobrazených zpětných odkazů, tím větší pozornost bychom měli danému odkazujícímu webu věnovat.

Chtělo by to nějak elegantně a automatizovaně (domén mohou být tisíce) dostat data do přehledné tabulky, třeba takovéto:

Jak jsem ji vytvořila?

Na začátek jsem si z nástroje pro analýzu zpětných odkazů vytáhla všechny odkazující domény. V tomto konkrétním případě mne zajímaly domény končící na .com, .info a .org. Seznam bez duplicit jsem zkopírovala do tabulky v Google Drive.

Do dalších sloupců v řádku jsem vložila následující hustokrutopřísný vzorec:

=VALUE(SUBSTITUTE(REGEXEXTRACT(IMPORTXML(CONCATENATE("https://www.google.cz/search?q=site%3A",A2),"//*[contains(@id, 'resultStats')]"),"\d+\s*\d*")," ",""))

=VALUE(SUBSTITUTE(REGEXEXTRACT(IMPORTXML(CONCATENATE("https://www.google.cz/search?q=link%3A",A2),"//*[contains(@id, 'resultStats')]"),"\d+\s*\d*")," ",""))

Co to přesně dělá? Přes příkaz CONCATENATE jsem vytvořila URL výsledků vyhledávání a vybraným operátorem. Z výsledkové stránky jsem přes funkci IMPORTXML vytáhla samotnou statistiku o přibližném počtu výsledků  – vzorec v ní umí pomocí XPath vystřihnout z HTML libovolný element a dále pracovat s jeho hodnotami a atributy. V tomto případě nás zajímá řádek se statistikou, který je označen id=resultStats. Pomocí REGEXEXTRACT jsem vytáhla pomocí regulárního výrazu podřetězec s hodnotou statistiky. Kombinace vzorců VALUE a SUBSTITUTE slouží k přetavení textového řetězce představující číslo skutečně v číslo. Protože, když už mám číselný údaj, tak podle něj chci filtrovat a řadit.

S vytvořením tabulky práce nekončí. Stále je třeba domény s nejhoršími výsledky (počet zaindexovaných stránek je menší než 10 nebo bez hodnoty) ručně projít a jednu po druhé vyhodnotit. Mravenčí práce nezbytná pro následující odpenalizační aktivity, největší část dřiny nám ale již zautomatizovala naše tabulka výše.

Jaké používáte techniky, nástroje a ulehčující postupy při zbavování se penalizace vy?

Související odkazy

• Negative Domain Research Part 2 – Filtering Majestic’s Referring Domain Data
• 27 Types of Unnatural Links & Link Building Strategie
• How A Single Guest Post May Have Gotten An Entire Site Penalized By Google
• 7 Things I Learned Analyzing Penalized Sites’ Backlinks
• Řešení manuální penalizace webu – případová studie
• SEO a affiliate – tipy, triky, možné problémy a penalizace
• Reportážně pojaté shrnutí toho, jak Portent.com doslali penalizaci a kterak se z ní dostávali ven
• Záznam z webinář zdarma na téma odstranění penalizace

Google Analytics ve svých výkazech zdrojů návštěvnosti nepracují úplně správně s českými vyhledávači. Do reportu neplaceného vyhledávání padá vlastně jen Seznam a Google, případně shodou náhod ještě pár dalších, které se ale schovají pod nic neřikající „search“.

Zbylé vyhledávače či zbožáky pak Google Analytics vůbec nepoznají. Řadí je chybně mezi běžné odkazující stránky do reportu „Odkazy“. A hlavně z nich nijak nereportují dotazy uživatelů.

Upravené skripty v klasických Google Analytics

Ve starých Google Analytics bylo pro přidání dalších vyhledávačů nutné upravit měřicí kód ve vašem webu. Konkrétně pro to sloužil příkaz _addOrganic.

Protože to byl poměrně častý případ a bylo zbytečné, aby si to psal každý zas a znovu sám, existovala řada hotových předpřipravených skriptů. Asi nejvíc se z nich v Česku rozšířil můj upravený asynchronní kód.

Jak na české vyhledávače v Universal Analytics

Dnes ale už dost pravděpodobně používáte Universal Analytics, tedy novou generaci Google Analytics. Tady je postup zcela jiný. Většina nastavení se tu přesunula z měřicího kódu přímo do grafického rozhraní. Takže místo „programování“ si všechny potřebné změny prostě „naklikáte“.

Vše najdete v sekci Správce > Služba > Údaje o měření > Zdroje z neplaceného vyhledávání:

Přidání fulltextových vyhledávačů do Google Analytics

 
Protože se vše musí pokaždé klikat pracně ručně, je účelné vkládat jen ty nejdůležitější vyhledávače a zbožáky, kde to má význam. Není přitom nutné zadávat vyhledávače, které už Google zná sám. Co tedy při revizi nastavení Universal Analytics přidáváme my?

Existuje samozřejmě celá řada dalších vyhledávačů a zbožáků, které je určitě možné také přidat. Návštěvnost z nich přicházejících je ale zpravidla tak mizivá, že to nemá valný smysl.

Pomůžeme vám!

Bojíte se, že nastavení vašich Google Analytics je tristní a nástroj vám kvůli podobným nedostatkům zobrazuje zcela špatná čísla? Tušíte, že máte v měření velké rezervy, ale nevíte, kudy začít? Ozvěte se nám, uděláme kompletní revizi vašeho účtu Google Analytics a společně s vámi nalajnujeme celou vaši webovou analytiku.

Chcete se dozvědět víc tipů, jak lépe pracovat s vyhodnocováním návštěvnosti? Přijďte na naše školení Google Analytics.

Je to očividné. Stačí si uvědomit, jaké jsou ty opravdu klíčové faktory, které drtivě rozhodují o úspěchu vašeho webu ve vyhledávačích:

Žádnou z těchto důležitých věcí SEOmaty nehodnotí.

Namísto toho vedle několika málo užitečných faktorů sledují zejména celou řadu nesmyslů, jako je validita, sémantika, hustota zvoleného klíčového slova, využití nadpisů druhé úrovně, přítomnost sitemapy na pětistránkovém webu, GTPR nebo absolutní počet zpětných odkazů. Ty celkový úspěch ve vyhledávačích neovlivňují často vůbec nebo okrajově, jsou spíše podružné nebo podmíněné nebo se SEO vůbec nesouvisí.

SEOmaty měří všechno, jenom ne to, jak dobře děláte SEO. Jejich výsledkem jsou povětšinou hlouposti, které nemá cenu vůbec řešit nebo se jimi byť i jen sebeméně trápit. Natož pak zbytečně vyhazovat peníze na jejich „opravu“.

P. S.: Abychom ale neházeli všechny SEOmaty do jednoho pytle, doporučuji k vaší pozornosti SEO Servisní Analyzátor.

Související odkazy

• SEO servis a SEO analyzátor
• @365tipu: Co mám dělat, pokud v SEO testu od SEO Servis nemám 100 procent? Dá se změřit SEO?
• Miloslav Lešetický: Pojednání o zbytečnosti SEOmatů
• Daniel Dočekal: SEO Analyzátor od SEO Expert s.r.o je blábol
• Plaváčkův blábolník: Jak vzniká SEO analyzátor
• Jakpsátweb.cz: Revoluční SEO analyzátor je tu!
• Webtrh.cz: Kritika revolučního SEO analyzátoru
• Medio blog: Tak nám vypnuli Google, paní Pohlová!

Co by na takovém internetu dělali uživatelé? Přestali by číst články a nakupovat v e-shopech? Nejspíš ne. Tak co by četli? Kde by nakupovali? Podle čeho by se řídili? Chodili by na weby:

• se silnou značkou, kterou dobře znají a věří jí,
• které si pamatují a se kterými již mají z minula dobrou zkušenost,
• kde se vždy dozvěděli, co potřebovali, na kterých nikdy nenarazili, na kterých se nikdy neztratili a kde vždy všechno probíhalo bez problémů,
• které jim někdo doporučil, o kterých někde slyšeli nebo četli,
• které vystupují z řady a které se umí odlišit od ostatních,
• které na sebe uměly zajímavě nebo netradičně upozornit,
• o kterých píší a na které odkazují některé z dalších takových webů.

V našem hypotetickém světě bez vyhledávačů by spousta webů propadla, naopak řada dalších by výrazně uspěla. Co budu se svým webem dělat, abych byl mezi vítězi, nikoliv mezi poraženými? Budu:

• budovat silnou značku a dobrou pověst,
• vytvářet použitelný web plný přínosných informací a užitečných funkcí,
• snažit se, aby se ke mně návštěvníci rádi a s důvěrou vraceli,
• stavět na své odlišnosti, jedinečnosti, na svých konkurenčních výhodách,
• pracovat na všeobecném povědomí, aby se o mně mluvilo a psalo,
• snažit se objevovat na jiných webech, kde se pohybuje má cílová skupina.

Úplně stejně, jako uživatelé v našem hypotetickém světě, se snaží přemýšlet dnešní fulltextové vyhledávače při svém rozhodování, koho ve výsledcích hledání umístit výš.

A platí na ně i stejné aktivity.

Tohle je SEO.

Ohlasy na článek

• Matěj Novák: Pravda o SEO

Co je vlastně český trh?

Pokud se chceme bavit o podílech vyhledávačů na českém trhu, musíme si nejprve onen relevantní trh vymezit. Což samo o sobě není úplně triviální. Nabízí se mnoho různých možností:

Počty unikátních českých návštěvníků

Reflektuje aktivní známost jednotlivých vyhledávačů mezi uživateli. Víceméně nepoužitelné, protože uživatel brouzdající po internetu celý den je započítáván stejně jako uživatel, co se připojí večer na deset minut.

Počty zobrazených pageviews českými uživateli

Nejlépe asi počty zobrazení stránek s výsledky hledání. Klasická metoda mediálního poměřování, ovšem vyhledávače nejsou klasickým mediálním prostorem, který by byl postavený na bannerových impresích, takže pageviews jsou u nich z tohoto pohledu irelevantní. Navíc tu platí nepřímá úměra – čím horší kvalita vyhledávání, tím za jinak stejných okolností více pageviews, protože se uživatelé častěji vrací z nerelevantních stránek zpátky do výsledků hledání. To asi není měřítko, jakým bychom chtěli posuzovat tržní úspěšnost jednotlivých vyhledávačů.

Počet hledání resp. počet zadaných dotazů českými uživateli

Z mého pohledu nejlepší měřítko pro vyhodnocení podílů vyhledávačů. Počet hledání provedených českými uživateli by měl být očištěný o opakované dotazy téhož uživatele při návratu z nerelevantních webů či přechodech na další stránky výsledků.

Finanční příjmy z vyhledávání

Z pohledu vyhledávačů je jediným smysluplným dlouhodobým měřítkem řepa, kterou jim hledání vydělá. Při současných obchodních modelech by nás tedy mohl zajímat zejména poměr celkových search útrat v Adwords či Skliku, a to buď za české hledající uživatele, nebo za české inzerenty.

Počet prokliků není dobrým měřítkem

Další možností pak je počítat prokliky z výsledků hledání. To se dá sledovat na cílových webech počty příchozích uživatelů z jednotlivých vyhledávačů. Což je metoda, kterou používá právě třeba i Navrcholu.cz. Bohužel je významně ovlivněná chováním konkrétní cílové skupiny a dalšími okolnostmi, které s tržním podílem nemají nic společného:

• Nekvalitní vyhledávač s méně relevantními výsledky takto získá vyšší „tržní podíl“, protože jeho uživatelé budou muset z jednoho hledání prokliknout v průměru více výsledků, než dojdou k tomu správnému.
• Méně zkušení uživatelé se hůře orientují na stránkách a mohou mít sklony méně číst a více zběsile a náhodně klikat na jakékoliv i jen lehce povědomé odkazy. Nejsem bez nějakého testování schopen říct, zda to povede k menšímu (prokliknou se hned prvním odkazem pryč a už se nevrátí) či většímu (proklikají si všechno, zatímco zkušený uživatel jde rovnou na slibně vypadající odkaz) počtu celkových prokliků, každopádně to naše číslo nějak ovlivní.
• Zkušenější uživatelé si často preventivně rozkliknou více výsledků do nových tabů a teprve potom je postupně procházejí, zatímco ti méně zkušení se mohou spokojit už s prvním výsledkem.
• A tak podobně.

Odlišné chování různých skupin uživatelů tak může způsobit nezanedbatelné rozdíly v těchto statistikách na jednu či na druhou stranu, aniž by to cokoliv říkalo o tržním podílů jednotlivých vyhledávačů. Můj ničím nepodpožený pocitový odhad je, že celkově to jde spíš ve prospěch Seznamu a na úkor Google.

Ale to by se asi dalo s přihmouřením oka přehlédnout, kdyby kdyby tu nebyla ještě jedna věc. Vždycky je tu nějaká „ještě jedna věc“.

Nejpalčivější problém? Nereprezentativní vzorek webů!

Důležité je uvědomit si, že Seznam posílá úplně všechny své české uživatele výhradně na české weby (pomiňme teď hledání ve světě – používá to vůbec někdo?). Google posílá nemalou část z nich i jinam do světa.

Navrcholu.cz přitom měří pouze na českých webech.

Do statistiky Navrcholu.cz tedy padají naprosto všechny prokliky ze Seznamu, ale jen část prokliků z Google a dalších světových vyhledávačů!

Můžeme se teď bavit, jak velkou odchylku oproti reálnému podílu vyhledávačů všechny uvedené chyby zaviní. Já si myslím, že poměrně zásadní. A vůbec bych se nedivil, kdyby měl ve skutečnosti Google už nějakou dobu srovnatelný počet hledání českými uživateli jako Seznam. Nebo klidně i více.

Není to tržní podíl vyhledávačů

Kde ale vzít věrohodnější statistiky? Nikde. Je to smutné, ale opravdu nikde.

Hodnoty, které by nás zajímaly, vyhledávače nezveřejňují nebo dokonce ani nesledují. Všechny české měřicí systémy jsou z uvedených důvodů nepoužitelné. O mnoho lepší by byla třeba obdobná data z Google Analytics, ta ale není reálné jakkoliv získat.

Abych tedy nebyl špatně pochopen, reporty od Navrcholu.cz vůbec nezavrhuji. Právě naopak, při vší téhle bídě je to stále jeden z nejlepších dostupných zdrojů a díky za ně. Jenom je potřeba z nich číst pouze to, co tam je. Tedy z jakých vyhledávačů chodí různí uživatelé na české weby. Nic víc, nic míň.

S reálnými podíly vyhledávačů na českém trhu, tak jak alespoň já tento pojem intuitivně chápu, mají statistiky Navrcholu.cz pramálo společného.

Ostatně se sluší zdůraznit, že Internet Info nikdy ani nic jiného netvrdilo a ve svých tiskových zprávách a metodikách bylo vždy úzkostlivě přesné. Za zcestnou intrerpretaci si mohou až média a čtenáři sami.