Gdy wyszukiwarka odwiedza witrynę, robots.txt znajduje się w katalogu głównym jest pierwszy plik robota. Plik robots.txt jest następnie analizowane i poleca robota co do których strony nie są zaindeksowane. W wyszukiwarce robot może przechowywać w pamięci podręcznej kopię tego pliku, może to okazja na indeksowanie stron webmastera nie chce robota. Strony zazwyczaj zapobiec zaindeksowanych stron obejmują logowania szczególnych, takich jak koszykami i specyficzne dla użytkownika treści, takie jak wyniki wyszukiwania z wewnętrznych poszukiwań.



Najpierw najważniejsza informacja: Google rządzi w Polsce! Zajrzyj koniecznie na http://ranking.pl - firma Gemius zamieszcza tam statystyki popularności poszczególnych wyszukiwarek (i nie tylko). Jeden z moich znajomych mówi, że 98% wejść na jego stronę pochodzi właśnie z wyszukiwarki Google. Moje doświadczenia są podobne. Jaki płynie z tego wniosek? Powinieneś pozycjonować swoją witrynę najpierw "pod" Google .

"Ręceprecz odtybetu" to nie tylko fraza konkursowa, drugich mistrzostw pozycjonowania stron internetowych, to też zawołanie skierowane do serc i umysłów ludzi na całym świecie, mające poruszyć sumienia i umożliwić uzyskanie niepodległości państu, które swoją postawą, rozwiniętą kulturą i tradycją zasłużyło sobie jak niewiele z dziś istniejących na niepodległość. Rzesza pozycjonerów krzyczy dziś, poprzez liczne artykuły, wpisy i notki: ręceprecz odtybetu! I ja się do nich dołączam. Babcia przyjemna spokojnie krzyczy kolorowe portfele.