Luboši myslím že se pouštíš na tenkých led. Problematika viditelného a neviditelného webu je už trochu specifická. Jednoduše řečeno-viditelný web (visible web, surface web) obsahuje dokumenty, které jsou běžně volně přístupné a jdou snadno vyhledat různými vyhledávači. Jeho velikost se odhaduje okolo 2,5 miliard indexovatelných dokumentů, tj. dokumentů, které jsou zachyceny databázemi vyhledávacích služeb. Jsou založené na robotickém sběru dat .
Neviditelný web (invisible web), někdy také nazývaný hluboký web (deep web). Existují dokumenty, které jsou běžnými dostupnými vyhledávači těžko vyhledatelné, prostě jsou pro ně neviditelné. Dle dostupných studií se odhaduje, že prostor neviditelného webu je asi šestset násobek webu viditelného.
Jsou to ale především adresáře, dokumenty v jiných formátech než HTML atd...
domnívám se, že pro běžného uživatele internetu nevyužitelné. Jsou to především výzkumné dokumenty a studie, zprávy z různých ale také třeba stránky které nemají odkazy na jiné stránky, stránky, které jsou chráněné heslem atd. atd. Bylo by to složité podrobněji vysvětlovat a opravdu nemá cenu pro obyčejného uživatele se tímto problémem trápit.
Tak ještě jen malý dodatek. Jsou speciální vyhledávací služby a vyhledávače, které umožňují prohledávání neviditelného webu. Ale to už je opravdu odbornější problém, klidně ti o tom napíši, když budeš chtít.