Report for General Profile: Spiders

Time range: Wed, Mar-30-2005 0:03:14 AM - Wed, Mar-30-2005 23:58:48 PM

Spiders

Daily Spider Activity




Top Spiders




Top Spiders

  

 Spider 

 Hits 

 % of Total 

 Visits 

 1 

 Internetseer Web site monitoring Spider 

 24 

 19.67% 

 24 

 2 

 Mozilla/4.0 (compatible; SpeedySpider; ww w.entireweb.com) 

 24 

 19.67% 

 8 

 3 

 MSIECrawler 

 18 

 14.75% 

 3 

 4 

 IRLbot/1.0 (+http://irl.cs.tamu.edu/ crawler) 

 16 

 13.11% 

 4 

 5 

 SoftHypermarketFileCheckBot/ 1.0+(+http:/ / www.softhypermaket.com) 

 10 

  8.20% 

 1 

 6 

 Google Spider 

 6 

  4.92% 

 4 

 7 

 Wisenut Spider 

 5 

  4.10% 

 5 

 8 

 Ask Jeeves Spider 

 4 

  3.28% 

 2 

 9 

 Wespe.de Spider 

 4 

  3.28% 

 4 

 10 

 itLocation-PADBot (http:/ / www.itlocation.com) 

 2 

  1.64% 

 2 

 11 

 Yahoo Spider 

 2 

  1.64% 

 2 

 12 

 Helmdall ([email protected]) 

 2 

  1.64% 

 2 

 13 

 http://www.almaden.ibm.com/ cs/ crawler [fc3] 

 2 

  1.64% 

 1 

 14 

 Gigabot Spider 

 2 

  1.64% 

 2 

 15 

 BaiDu Spider 

 1 

  0.82% 

 1 

  

 Subtotal 

 122 

 100.00% 

 65 

  

 Total 

 122 

 100.00% 

 65 



Top Spider IP

  

 IP 

 Country 

 Hits 

 Visits 

 Bandwidth 

 1 

 62.13.25.237
 sverige.net (Unknown Spider) 

 Sweden 

 24 

 8 

 2.98 KB 

 2 

 63.238.163.75
 cavtel.net (Internetseer Web site monitoring Spider) 

 United States 

 24 

 24 

 0 Bytes 

 3 

 24.187.132.177
 optonline.net (MSIECrawler) 

 United States 

 18 

 3 

 0 Bytes 

 4 

 128.194.135.83
 tamu.edu (Unknown Spider) 

 United States 

 10 

 2 

 1.44 KB 

 5 

 69.93.56.82
 ipxf.net (Unknown Spider) 

 United States 

 10 

 1 

 0 Bytes 

 6 

 128.194.135.76
 tamu.edu (Unknown Spider) 

 United States 

 6 

 2 

 739 Bytes 

 7 

 64.242.88.50
 looksmart.com (Wisenut Spider) 

 United States 

 5 

 5 

 26.86 KB 

 8 

 62.2.173.19
 cablecom.ch (Unknown Spider) 

 Switzerland 

 4 

 2 

 18.36 KB 

 9 

 66.249.64.18
 google.com (Google Spider) 

 United States 

 2 

 1 

 382 Bytes 

 10 

 217.16.26.114
 masterhost.ru (Wespe.de Spider) 

 Russian Federation 

 2 

 2 

 18.36 KB 

 11 

 66.249.71.15
 google.com (Google Spider) 

 United States 

 2 

 1 

 315 Bytes 

 12 

 216.55.133.27
 abac.net (Wespe.de Spider) 

 United States 

 2 

 2 

 18.36 KB 

 13 

 65.214.44.182
 ask.com (Ask Jeeves Spider) 

 United States 

 2 

 1 

 382 Bytes 

 14 

 219.134.128.101 (Unknown Spider) 

 China 

 2 

 2 

 147.76 KB 

 15 

 65.214.44.163
 ask.com (Ask Jeeves Spider) 

 United States 

 2 

 1 

 382 Bytes 

 16 

 66.147.154.3 (Unknown Spider) 

 United States 

 2 

 1 

 11.13 KB 

 17 

 64.62.168.31
 he.net (Gigabot Spider) 

 United States 

 1 

 1 

 0 Bytes 

 18 

 66.249.64.44
 google.com (Google Spider) 

 United States 

 1 

 1 

 0 Bytes 

 19 

 64.62.168.69
 he.net (Gigabot Spider) 

 United States 

 1 

 1 

 382 Bytes 

 20 

 66.196.90.134
 inktomisearch.com (Yahoo Spider) 

 United States 

 1 

 1 

 512.00 KB 

 21 

 66.196.90.205
 inktomisearch.com (Yahoo Spider) 

 United States 

 1 

 1 

 0 Bytes 

 22 

 66.249.64.58
 google.com (Google Spider) 

 United States 

 1 

 1 

 13.26 KB 

 23 

 61.135.145.215 (BaiDu Spider) 

 China 

 1 

 1 

 512.00 KB 

  

 Subtotal 

  

 124 

 65 

 1.25 MB 

  

 Total 

  

 122 

 65 

 1.24 MB 



Top Pages (Which are never accessed by Spider)

  

 Pages 

 Pageview 

 % of Total  Pageviews 

 Visits 

 % of Total  Visits 

 Bandwidth 

 Average Visit Length 

 Average Time Taken(ms) 

 1 

 Download - Search Local File 
 /download.htm 

 21 

  8.68% 

 20 

  2.44% 

 146.60 KB 

 0:02 

 140 

 2 

 /cx_localization.htm 

 16 

  6.61% 

 15 

  1.83% 

 5.57 KB 

 0:04 

 154 

 3 

 Advanced File Search Utility - Cool Find - Register 
 /register.html 

 7 

  2.89% 

 6 

  0.73% 

 47.85 KB 

 0:21 

 131 

 4 

 Nihuo Software - Cool Find - Contact Information 
 /contact_info.htm 

 5 

  2.07% 

 5 

  0.61% 

 36.67 KB 

 0:53 

 158 

 5 

 File Search Utility - FAQ 
 /faq.htm 

 5 

  2.07% 

 5 

  0.61% 

 37.02 KB 

 0:09 

 153 

 6 

 File Search Utility - Screen Shots 
 /screen_shots.htm 

 5 

  2.07% 

 5 

  0.61% 

 36.27 KB 

 0:07 

 125 

 7 

 Advanced File Search Utility - Cool Find - Links 
 /links.html 

 5 

  2.07% 

 4 

  0.49% 

 56.99 KB 

 2:19 

 182 

 8 

 File Types Supported 
 /supportfiletype.html 

 3 

  1.24% 

 3 

  0.37% 

 18.54 KB 

 0:16 

 166 

 9 

 Index of /downloads 
 /downloads/ 

 2 

  0.83% 

 2 

  0.24% 

 590 Bytes 

 0:02 

 45 

 10 

 /selviscoldlg.htm 

 2 

  0.83% 

 2 

  0.24% 

 0 Bytes 

 0:00 

 99 

 11 

 /cw_home.htm?AfID=17064 

 2 

  0.83% 

 1 

  0.12% 

 382 Bytes 

 1:54 

 183 

 12 

 /purchase.htm 

 1 

  0.41% 

 1 

  0.12% 

 356 Bytes 

 0:00 

 98 

 13 

 /cw_home.htm?AfID=14660 

 1 

  0.41% 

 1 

  0.12% 

 382 Bytes 

 0:00 

 56 

 14 

 ISO263 
 /iso263.htm 

 1 

  0.41% 

 1 

  0.12% 

 0 Bytes 

 0:00 

 150 

  

 Subtotal 

 76 

 31.40% 

 N/A 

 N/A 

 387.17 KB 

 N/A 

 1,021 

  

 Total 

 242 

 100% 

 N/A 

 N/A 

 224.77 MB 

 N/A