Focused Crawling
Alle Milliarden Webseiten des Internets zu erfassen und zu indexieren bedeutet für die Suchmaschinen einen erheblichen Aufwand. Als Beispiel sie hier die bekannteste und meist genutzte Suchmaschine Google aufgeführt, die für die Erstellung eines neuen Indexes ca. einen ganzen Monat braucht. Um diesen Aufwand und die Zeit der Indexierung auf ein Minimum zu reduzieren wird…