Yanga WorldSearch Bot v1.1/beta – nyttig og uoppdragen
søndag, april 19th, 2009Jeg så igjennom ulike logger og la merke til at Yanga WorldSearch Bot v1.1/beta henter en haug av nettsider og bruker store mengder båndbredde.
Jeg søkte litt rundt for å finne ut om denne Yanga er nyttig eller ond.
Nyttig
Yanga-gjengen har tydeligvis en søkemotor hvor du kan søke igjennom sidene som webroboten deres henter. Noen søk på banale ting som navnet mitt ga resultater. Alt antyder at Yanga er en faktisk nyttig robot som brukes til en nyttig offentlig tilgjengelig tjeneste.
…og uoppdragen
Roboten deres spiste over fire tusen nettsider på ett av nettstedene mine i løpet av de siste 24 timene. Det er en haug av sider. Loggene viser videre at roboten deres er dum og uhøflig.
Jeg kommer til å tillate Yanga inntil videre og jeg anbefaler å tillate den – om webtjenerne klarer å takle den store belastningen roboten deres gir. Det er bra å støtte alternativer til den sterkt sensurerte Google-søkemotoren. De som har webservere med tung PHP/MySQL-bruk på pinglete servere bør derimot forby Yanga med -j DROP da den fort kan belaste webtjenere i den grad at de som bruker websidene merker at de lastes betydelig treigere.