Webben är en oerhört stor, komplicerad och ständigt växande enhet. Det är därför det inte går att använda ett verktyg - en sökmotor - att indexera, kurera och hämta allt innehåll från webben hela tiden.
Även om det finns miljarder webbsidor som indexeras av sökmotorer, kommer ingen av dessa databaser i närheten av att innehålla en logg på hela webben, än mindre hela internet.
Vilka sökmotorer ser inte
Här är flera exempel på vad en sökmotor inte indexerar:
- Den osynliga webben är ett stort informationsregister som de flesta sökmotorer inte indexerar.
- Privata nätverk, som kallas intranät, är faktiskt inte anslutna till internet och det finns inte heller sökmotorer. Detta gäller även för lokala filer som du öppnar med din webbläsare; En offentlig sökmotor kan inte se de lokala filerna om de inte finns på en webbserver.
- Former som ColdFusion eller CGI indexeras inte av sökmotorer.
- Lösenordsskyddade webbplatser som ett universitets bibliotek eller innehåll som kräver betalda prenumerationer, är inte tillgängliga via en sökmotor.
- Webbplatser kan avsiktligt ställa in en sida som inte ska indexeras av sökmotorer så att de inte kommer att hittas när någon söker efter det innehållet.
Kommer det någonsin att bli en sökmotor som hittar allt?
Döma av exponentiell tillväxt av webben dag efter dag, vecka efter vecka och år efter år, är oddsen mot det.
Detta är en anledning till att experter sökande tenderar att inte lita på bara en sökmotor för deras webbsökningsbehov. en sökmotor kan inte leverera den fullständiga webbsökningsupplevelse som många inte ens inser att de saknar.
Det är smart att diversifiera dina webbsökningsflöden; Här är några resurser som kan hjälpa dig att ta itu med det:
- Den ultimata sökmotorlistan: En lista över sökmotorer från allmänhet till otroligt nisch som du kan använda som en hoppa av punkt för din webbaserade utforskning.
- Så här väljer du rätt sökmotor för dina behov: Kolla här om du inte är säker på vilken sökmotor du behöver för att hitta något du letar efter.
- Hur sökmotorer fungerar: Hur mycket vet du verkligen om sökmotorer? Förmodligen mer än du tror!
Hur man begränsar vad du ser med en sökmotor
Det finns några fall där du kan definiera vilken typ av resultat sökmotorn ska ge dig, så att du begränsar vad du se från resultaten.
Denna typ av filtrering använder det som kallas "sökoperatörer" för att omedelbart begränsa de potentiella miljarder resultaten som hämtas från en sökmotor. Med Google Search kan du till exempel söka på specifika webbplatser, söka efter vissa fraser och till och med hitta särskilda filtyper.
Se dessa avancerade Google-sökgenvägar för mer information om hur du använder sökoperatörer för att förfina dina sökningar på Google-webbsidor.