User-agent: * Disallow: Disallow: /core/ Disallow: /adm/ Disallow: /titkos/ Disallow: /data/ Disallow: /file/ disallow: /*http://