# robots.txt for freitext.ub.tu-berlin.de # # verhindert das Durchsuchen einzelner Directories durch Roboter User-agent: * Disallow: /manual/ Disallow: /dist/ Disallow: /pdf/ Disallow: /hilfe/