# robots.txt # Gibt an, welche Unterverzeichnisse nicht durch einen Crawler durchsucht werden sollen User-agent: * #Disallow: / Disallow: /cms_addon Disallow: /cms_cache Disallow: /cms_docs Disallow: /redFACT Disallow: /inc Disallow: /pear Disallow: /tmp # Custom disallow part Disallow: /lokales/markdorf/markdorf_artikel,-Fette-Beute-statt-Sammlung-Bunte-_arid,2725153.html Disallow: /sport/weitere-sportarten_artikel,-Ungewoehnliche- Blutwerte-bei-Eisschnellaeuferinnen-_arid,4063060.html Disallow: /lokales/aalen-ellwangen/aalen_artikel,-Markus-Kroeber-ist-neuer-Chefarzt-der-Chirurgie-_arid,2907150.html