1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
|
# generated robots.txt
User-agent: *
User-Agent: Googlebot
Disallow: /*?
Disallow: /*atct_album_view$
Disallow: /*folder_factories$
Disallow: /*folder_summary_view$
Disallow: /*login_form$
Disallow: /*mail_password_form$
Disallow: /*/search$
Disallow: /search$
Disallow: /*/search_form$
Disallow: /search_form$
Disallow: /*/mindbreezesearch$
Disallow: /mindbreezesearch$
Disallow: /*/search_mindbreeze$
Disallow: /search_mindbreeze$
Disallow: /*search_rss$
Disallow: /*sendto_form$
Disallow: /*summary_view$
Disallow: /*thumbnail_view$
Disallow: /*view$
# custom config
Disallow: /studium/junge-uni/sternstunden-in-tannenbusch
Disallow: /forschung/forschungsprofil/forschungsberichte/
Disallow: /studium/archiv-alte-websites/
Allow: /einrichtungen/mitgliedervertretungen/personalrat
Allow: /einrichtungen/universitaetsverwaltung/organisationsplan/dezernat-3/familienbuero
Allow: /einrichtungen/universitaetsverwaltung/personalentwicklung/
Allow: /einrichtungen/careercenter
Allow: /*research
|
