Co je webový prohledávač a jak to funguje?

už jste někdy hledali něco na Googlu a přemýšleli jste, ” jak ví, kde hledat.”?”Odpověď je ” webové prohledávače”, které prohledávají web a indexují jej, takže můžete snadno najít věci online. Vysvětlíme to.

vyhledávače a prohledávače

při vyhledávání pomocí klíčového slova ve vyhledávači, jako je Google nebo Bing, web prochází biliony stránek a generuje seznam výsledků souvisejících s tímto termínem. Jak přesně mají tyto vyhledávače všechny tyto stránky v souboru, vědí, jak je hledat, a generovat tyto výsledky během několika sekund?

odpovědí jsou webové prohledávače, známé také jako pavouci. Jedná se o automatizované programy (často nazývané “roboty” nebo “roboty”), které “procházejí” nebo procházejí po webu, aby mohly být přidány do vyhledávačů. Tito roboti indexují webové stránky a vytvářejí seznam stránek, které se nakonec objeví ve výsledcích vyhledávání.

prohledávače také vytvářejí a ukládají kopie těchto stránek do databáze motoru, což vám umožňuje provádět vyhledávání téměř okamžitě. To je také důvod, proč vyhledávače často obsahují mezipaměti verze stránek ve svých databázích.

SOUVISEJÍCÍ: Jak přistupovat na webovou stránku, když je dole

Mapy a výběr stránek

jak tedy prohledávače vybírají, které webové stránky se mají procházet? Nejběžnějším scénářem je, že majitelé webových stránek chtějí, aby vyhledávače procházely své stránky. Toho mohou dosáhnout tím, že požádají Google, Bing, Yahoo nebo jiný vyhledávač o indexování svých stránek. Tento proces se liší od motoru k motoru. Vyhledávače také často vybírají populární, dobře propojené weby, které se mají procházet sledováním počtu odkazů na URL na jiných veřejných webech.

majitelé webových stránek mohou pomocí určitých procesů pomoci vyhledávačům indexovat své webové stránky, například
Nahrát mapu stránek. Jedná se o soubor obsahující všechny odkazy a stránky, které jsou součástí vašeho webu. Obvykle se používá k označení stránek, které chcete indexovat.

jakmile vyhledávače již jednou procházely webovou stránku, automaticky ji znovu prohledají. Frekvence se liší podle toho, jak populární je web, mimo jiné metriky. Majitelé stránek proto často udržují aktualizované mapy stránek, aby mohli motorům vědět, které nové weby mají indexovat.

roboti a faktor zdvořilosti

co když web nechce, aby se některé nebo všechny jeho stránky zobrazovaly ve vyhledávači? Například možná nebudete chtít, aby lidé hledali stránku pouze pro členy nebo viděli vaši chybovou stránku 404. Zde je seznam vyloučení procházení, známý také jako roboti.txt, přichází do hry. Jedná se o jednoduchý textový soubor, který diktuje prohledávačům, které webové stránky vyloučit z indexování.

další důvod, proč roboti.txt je důležité, že webové prohledávače mohou mít významný vliv na výkon webu. Protože prohledávače v podstatě stahují všechny stránky na vašem webu, spotřebovávají zdroje a mohou způsobit zpomalení. Přicházejí v nepředvídatelných časech a bez souhlasu. Pokud nepotřebujete, aby vaše stránky byly opakovaně indexovány, zastavení prolézacích modulů může pomoci snížit část zatížení vašeho webu. Naštěstí většina prohledávačů přestane procházet určité stránky na základě pravidel vlastníka webu.

Metadata Magic

pod adresou URL a názvem každého výsledku vyhledávání v Google najdete krátký popis stránky. Tyto popisy se nazývají úryvky. Možná si všimnete, že úryvek stránky v Googlu není vždy v souladu se skutečným obsahem webu. Je to proto, že mnoho webových stránek má něco, co se nazývá “meta tagy”, což jsou vlastní popisy, které majitelé stránek přidávají na své stránky.

majitelé stránek často přicházejí s lákavými popisy metadat napsanými tak, abyste chtěli kliknout na web. Google také uvádí další meta-informace, jako jsou ceny a dostupnost akcií. To je užitečné zejména pro ty, kteří provozují webové stránky elektronického obchodování.

vaše vyhledávání

vyhledávání na webu je nezbytnou součástí používání internetu. Vyhledávání na webu je skvělý způsob, jak objevit nové webové stránky, obchody, komunity, a zájmy. Webové prohledávače každý den navštěvují miliony stránek a přidávají je do vyhledávačů. Zatímco prohledávače mají některé nevýhody, jako je využívání zdrojů webu,jsou neocenitelné jak pro majitele stránek, tak pro návštěvníky.

SOUVISEJÍCÍ: Jak odstranit posledních 15 minut historie vyhledávání Google