Moją stronę zobaczy obficie automatów. Czekam z utęsknieniem na dodatkową wizytę bota. W dysputach webmasterów często pojawiają się słowa robot bądź bot. Pod nazwą tą kryją się aplikacje, których zleceniem jest badanie Internetu i podnoszenie dany o stronach internetowych.
Konkurencja na rynku wyszukiwarek internetowych postuluje, żeby cechowane produkty były jak najniezwyklej ważne i ścisłe. Od była nie ma przedtem fizycznej możliwości, żeby dane na przedmiot strony internetowych zbierali i przechowywali ludziach. Wyręcza ich armia skryptów, która na niekrągło, 24 godziny na dobę i 365 dni w roku indeksuje strony internetowe, uaktualnia wygodne dane i wyszukuje nowiutką kompozycja.
Jak boty czynią?
W współczesnych okresach można ważnie parafować się pod stwierdzeniem, że jeżeli czegoś nie ma w Google, to coś nie istnieje. Kiedy stronica wchodzi do podstawy wyszukiwarki? Między innymi wtedy, gdy podczas grzebania sieci napotka na nią robot. Wczytuje on kompozycja strony, indeksuje, i następnie śledzi rozluźnić wszystkie linki załatwione w danym serwie. W ten sposób kroczy wgłąb witryny indeksując podstrony, i także skacze z jednego serwisu na inny, gdy napotka na link obcy przewodniczący poza informacją stronę WWW. Egzystuje wiele rodzajów, żeby uprościć botowi indeksowanie treści serwisu - śliczne linki upitraszone przy podpory mod_rewrite, opracowanie mapy strony itd.
Mój serwis wytwarza obszerne zatłoczenie. Czy boty mogą mieć coś z tym gminnego?
Niestety, tak. Ideę postępowania botów jest jak najszybsze otwieranie następnych przyuważonych linków, i to skutkuje wystąpienie pewnego ilości kłopotów. Przypadkiem może istnień zapętlenie się robota, który napotkał na kondycję, w której wychodząc ze strony ZAŚ kroczy kilka/kilkanaście podstron i ponownie wchodzi na stronę ZAŚ. Przeważnie roboty umieją sobie doradzić z takimi pętlami, ale odwiedza tymże inaczej.
Pozostałą sprawą jest wywoływane poprzez boty zatłoczenie serwera. Jak wiadomo, skrypty PHP mają ogromny wpływ na okres profesji procesora. Przy szablonowym czynu, nie ma pasztetu - nawet stosunkowo obszerne fora czy sklepy mogą funkcjonować w środowisku hostingu współdzielonego. Problem pojawia się, gdy na dane forum wstąpi bot, którego zleceniem jest jak najszybsze otwarcie wszystkich napotkanych linków (trzeba pamiętać że każdy link, to wywołanie skryptu PHP). Nieczęsto można taką kondycję porównać do owego, jakby kilkudziesięciu klientów poczęło pilnie klikać po paginie. Rezultatem jest spory wzrost narzucenia, który odda się powolniej na danę w panelu rozkazywania kontem hostingowym.
Jeżeli taki nalot automatów jest jednokrotny,[…]