googlebot die verzoekje aan vraagt in de nieuwe samphp

[pergo]

hi,

sinds vandaag heb ik te maken met een fijne robot van google die heerlijk bij mij verzoekjes aanvraagt naar veel aanpassing in firewalls en zo.
bleek de oplossing zeer makkelijk.

in de directory web op je van webserver een txt bestandje plaatsen met de text. robots.txt
en daar in de volgend tekst.

Code: Selecteer alles

User-agent: Googlebot*
Disallow: /
User-agent: *
Allow: /

zo te zien ben ik van die google bot af.

met vriendelijke groet,
Pergo

[drOhimself]

Kreeg jij niet zoveel verzoekjes dan ?

[pergo]

lol

65 per uur wordt je gestoord van en je database loopt er zo lekker vol van.

[drOhimself]

65 per uur wordt je gestoord van en je database loopt er zo lekker vol van.

(Als ie maar wel GOEIE muziek aanvraagt..... )
Maar houdt jouw Request Policy die dan niet tegen als je dat op 2 per uur zou zetten ?
Op een of andere manier kijkt SAM toch naar het IP van de aanvrager ?

[pergo]

hi,

Dat maakt niet uit al staat hij op 1 per uur.
er wordt toch een request gedaan dus komt er een melding in je database. in het veld status staat alleen dan ignored.
dus voor je het weet heb je een table requestlist met 10000 regels er in als google zijn gang laat gaan.

maar ik ben er vanaf. [smilie=music.gif] [smilie=music.gif]

grt,
Pergo

[drOhimself]

duidelijk verhaal !
bedankt Pergo