Tag Archives: crawl

Der google Crawl – Die Indexierung durch google

Die google Crawler/Bots Das sind kleine Programme, die nach der jeweiligen Erlaubnis in z.B. der Robots.txt, Webseiten durcharbeiten und die Ergebnisse abspeichern/ zurücksenden an ihr eigenes kleines Zentrum. So weit, so klar? Ok. Es sind also Programme. Was das heisst? Sie arbeiten nach Programmcodes und als wichtigster Punkt für uns, mit Formeln, Variablen. Das ermöglicht …