Habt Ihr Euch schonmal die Robots-txt von Youtube angesehen?
Ich habs heute in der Schule entdeckt, und musste echt schmunzeln
http://www.youtube.com/robots.txt
Youtubes Robots.txt
|
|||||||||||||||||||||
| |||||||||||||||||||||
|
Benutzer, die gerade dieses Thema anschauen: