File: www.bmc.com

package info (click to toggle)
python-protego 0.6.0%2Bdfsg-1
  • links: PTS, VCS
  • area: main
  • in suites: forky, sid
  • size: 30,048 kB
  • sloc: python: 1,492; perl: 190; cpp: 33; sh: 4; makefile: 3
file content (80 lines) | stat: -rw-r--r-- 4,212 bytes parent folder | download | duplicates (4)
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
38
39
40
41
42
43
44
45
46
47
48
49
50
51
52
53
54
55
56
57
58
59
60
61
62
63
64
65
66
67
68
69
70
71
72
73
74
75
76
77
78
79
80
#                                                                                           
#   ;;;;                                                                                    
#  ;;;;;;;                                                                                  
#  ;;;;;;;;;                                                                                
#  ;;;;;;;;;;                                                                               
#  ;;;  ;;;;;;;                                                                             
#  ;;;   ;;;;;;;;                                                                           
#  ;;;     ;;;;;;;                ++++                                                      
#  ;;;       ;;;;;;;              ++++                                                      
#  ;;;        ;;;;;;;;            ++++                                                      
#  ;;;;         ;;;;;;;           ++++                                                      
#  ;;;;           ;;;;;;;         ++++                                                      
#   ;;;;;           ;;;;;;        ++++                                                      
#   ;;;;;;           ;;;;;        ++++                                                      
#    ;;;;;;;         ;;;;;        ++++   +++               +++      +++            +++      
#      ;;;;;;;      ;;;;;;        ++++ +++++++      ++++ +++++++  +++++++       +++++++++   
#       ;;;;;;;;  ;;;;;;;         ++++++++++++++    ++++++++++++++++++++++     +++++++++++  
#         ;;;;;;;;;;;;;           ++++++++++++++    +++++++++++++++++++++++   +++++++++++++ 
#           ;;;;;;;;;;            ++++++   ++++++   ++++++  +++++++  ++++++   +++++   +++++ 
#            ;;;;;;;;             +++++     +++++   +++++    +++++    +++++  +++++     +++++
#          ;;;;;;;;;;;;           ++++       +++++  ++++     +++++    +++++  +++++          
#         ;;;;;;;;;;;;;;          ++++       +++++  ++++     +++++     ++++  ++++           
#       ;;;;;;;   ;;;;;;;;        ++++       +++++  ++++     +++++     ++++  ++++           
#     ;;;;;;;       ;;;;;;        ++++       +++++  ++++     +++++     ++++  ++++           
#    ;;;;;;;          ;;;;        ++++       +++++  ++++     +++++     ++++  ++++           
#   ;;;;;;           ;;;;;        +++++      +++++  ++++     +++++     ++++  +++++     +++++
#  ;;;;;           ;;;;;;         +++++     +++++   ++++     +++++     ++++  +++++     ++++ 
#  ;;;;          ;;;;;;;          +++++++++++++++   ++++     +++++     ++++   +++++++++++++ 
#  ;;;;         ;;;;;;            ++++++++++++++    ++++     +++++     ++++    ++++++++++++ 
#  ;;;        ;;;;;;;             +++++++++++++     ++++     +++++     ++++     ++++++++++  
#  ;;;      ;;;;;;;               ++++  ++++++      ++++     +++++     ++++      +++++++    
#  ;;;     ;;;;;;                                                                           
#  ;;;   ;;;;;;;                                                                            
#  ;;; ;;;;;;;                                                                              
#  ;;;;;;;;;;                                                                               
#  ;;;;;;;;                                                                                 
#  ;;;;;;                                                                                   
#   ;;;;   


User-agent: *
Disallow: /search
Disallow: /webservices/search  
Disallow: /webservices         
Disallow: /web-services        
Disallow: /florida
Disallow: /2546ytglj5
Disallow: /videos/ozpgibayvar
Disallow: /info/webinars
Disallow: /*action=doLogin$
Disallow: /support/reg
Disallow: /info/dwdjosmhbn.html
Disallow: /apps
Disallow: /available
Disallow: *ty.PURL*
Sitemap: http://www.bmc.com/sitemap.xml

User-agent: Nutch
Disallow: /

User-agent: Spiderbot
Disallow: /

User-agent: Spiderbot/Nutch-1.7
Disallow: /

User-agent: sukibot_heritrix
Disallow: /

User-agent: AhrefsBot 
Crawl-Delay: 2

User-agent: netEstate NE Crawler
Disallow: /

User-agent: dotbot
Disallow: /