WordPress Multisite und robots.txt Siehe Anleitung von F. Brinkmann. Anlehnend an diese Anleitung ein Plugin erstellen!