Report for General Profile: Spiders

Time range: Sat, Apr-02-2005 0:00:56 AM - Sat, Apr-02-2005 23:58:41 PM

Spiders

Daily Spider Activity




Top Spiders




Top Spiders

  

 Spider 

 Hits 

 % of Total 

 Visits 

 1 

 Internetseer Web site monitoring Spider 

 23 

 26.14% 

 23 

 2 

 IRLbot/1.0 (+http://irl.cs.tamu.edu/ crawler) 

 20 

 22.73% 

 4 

 3 

 MSN Spider 

 6 

  6.82% 

 3 

 4 

 Mozilla/4.0 (compatible; SpeedySpider; ww w.entireweb.com) 

 6 

  6.82% 

 2 

 5 

 Google Spider 

 5 

  5.68% 

 3 

 6 

 Ask Jeeves Spider 

 4 

  4.55% 

 2 

 7 

 Yahoo Spider 

 4 

  4.55% 

 4 

 8 

 Wisenut Spider 

 4 

  4.55% 

 4 

 9 

 Wespe.de Spider 

 4 

  4.55% 

 4 

 10 

 NutchCVS/0.06-dev (Nutch; http:/ / www.nutch.org/ docs/ en/ bot.html; [email protected] et) 

 2 

  2.27% 

 1 

 11 

 abot/0.1 (abot; http:/ / www.abot.com; [email protected]) 

 2 

  2.27% 

 1 

 12 

 http://www.almaden.ibm.com/ cs/ crawler [fc3] 

 2 

  2.27% 

 1 

 13 

 Gigabot Spider 

 2 

  2.27% 

 2 

 14 

 Agent-SharewarePlazaFileCheckBot/ 2.0+(+http:/ / www.SharewarePlaza.com) 

 2 

  2.27% 

 1 

 15 

 itLocation-PADBot (http:/ / www.itlocation.com) 

 1 

  1.14% 

 1 

 16 

 Softizerbot (http://www.softizer.com) 

 1 

  1.14% 

 1 

  

 Subtotal 

 88 

 100.00% 

 57 

  

 Total 

 88 

 100.00% 

 57 



Top Spider IP

  

 IP 

 Country 

 Hits 

 Visits 

 Bandwidth 

 1 

 63.238.163.75
 cavtel.net (Internetseer Web site monitoring Spider) 

 United States 

 23 

 23 

 0 Bytes 

 2 

 128.194.135.83
 tamu.edu (Unknown Spider) 

 United States 

 20 

 4 

 2.89 KB 

 3 

 62.13.25.237
 sverige.net (Unknown Spider) 

 Sweden 

 6 

 2 

 764 Bytes 

 4 

 64.242.88.50
 looksmart.com (Wisenut Spider) 

 United States 

 4 

 4 

 26.86 KB 

 5 

 65.54.188.132
 msn.com (MSN Spider) 

 United States 

 4 

 2 

 357 Bytes 

 6 

 64.69.39.75
 calpop.com (Unknown Spider) 

 United States 

 2 

 1 

 357 Bytes 

 7 

 65.214.44.131
 ask.com (Ask Jeeves Spider) 

 United States 

 2 

 1 

 382 Bytes 

 8 

 24.177.134.6
 charter.com (Unknown Spider) 

 United States 

 2 

 1 

 11.13 KB 

 9 

 66.249.64.47
 google.com (Google Spider) 

 United States 

 2 

 1 

 0 Bytes 

 10 

 217.16.26.114
 masterhost.ru (Wespe.de Spider) 

 Russian Federation 

 2 

 2 

 18.36 KB 

 11 

 66.147.154.3 (Unknown Spider) 

 United States 

 2 

 1 

 357 Bytes 

 12 

 62.2.173.19
 cablecom.ch (Unknown Spider) 

 Switzerland 

 2 

 1 

 8.83 KB 

 13 

 65.214.44.56
 ask.com (Ask Jeeves Spider) 

 United States 

 2 

 1 

 0 Bytes 

 14 

 67.19.157.42
 theplanet.com (Unknown Spider) 

 United States 

 2 

 1 

 0 Bytes 

 15 

 66.249.71.32
 google.com (Google Spider) 

 United States 

 2 

 1 

 7.25 KB 

 16 

 216.55.133.27
 abac.net (Wespe.de Spider) 

 United States 

 2 

 2 

 18.36 KB 

 17 

 65.54.188.131
 msn.com (MSN Spider) 

 United States 

 2 

 1 

 0 Bytes 

 18 

 66.249.64.66
 google.com (Google Spider) 

 United States 

 1 

 1 

 7.33 KB 

 19 

 68.142.250.208
 inktomisearch.com (Yahoo Spider) 

 United States 

 1 

 1 

 0 Bytes 

 20 

 68.142.249.152
 inktomisearch.com (Yahoo Spider) 

 United States 

 1 

 1 

 0 Bytes 

 21 

 64.62.168.31
 he.net (Gigabot Spider) 

 United States 

 1 

 1 

 0 Bytes 

 22 

 64.62.168.65
 he.net (Gigabot Spider) 

 United States 

 1 

 1 

 382 Bytes 

 23 

 68.142.251.98
 inktomisearch.com (Yahoo Spider) 

 United States 

 1 

 1 

 0 Bytes 

 24 

 66.34.67.179
 propagation.net (Unknown Spider) 

 United States 

 1 

 1 

 8.83 KB 

 25 

 68.142.251.209
 inktomisearch.com (Yahoo Spider) 

 United States 

 1 

 1 

 0 Bytes 

  

 Subtotal 

  

 89 

 57 

 112.37 KB 

  

 Total 

  

 88 

 57 

 103.54 KB 



Top Pages (Which are never accessed by Spider)

  

 Pages 

 Pageview 

 % of Total  Pageviews 

 Visits 

 % of Total  Visits 

 Bandwidth 

 Average Visit Length 

 Average Time Taken(ms) 

 1 

 Download - Search Local File 
 /download.htm 

 20 

 10.81% 

 19 

  2.85% 

 131.17 KB 

 1:01 

 174 

 2 

 Changer XP 
 /changerxp 

 14 

  7.57% 

 12 

  1.80% 

 4.46 KB 

 0:05 

 135 

 3 

 Advanced File Search Utility - Cool Find - Links 
 /links.html 

 4 

  2.16% 

 4 

  0.60% 

 45.59 KB 

 0:25 

 179 

 4 

 /purchase.htm 

 3 

  1.62% 

 1 

  0.15% 

 0 Bytes 

 1:56 

 141 

 5 

 File Search Utility - FAQ 
 /faq.htm 

 3 

  1.62% 

 3 

  0.45% 

 22.21 KB 

 0:02 

 120 

 6 

 Advanced File Search Utility - Cool Find - Register 
 /register.html 

 2 

  1.08% 

 2 

  0.30% 

 15.95 KB 

 0:01 

 107 

 7 

 File Types Supported 
 /supportfiletype.html 

 1 

  0.54% 

 1 

  0.15% 

 6.18 KB 

 0:33 

 158 

 8 

 /cx_localization.htm 

 1 

  0.54% 

 1 

  0.15% 

 380 Bytes 

 11:42 

 72 

 9 

 /cw_home.htm?AfID=17064 

 1 

  0.54% 

 1 

  0.15% 

 382 Bytes 

 0:00 

 208 

  

 Subtotal 

 49 

 26.49% 

 N/A 

 N/A 

 226.30 KB 

 N/A 

 1,100 

  

 Total 

 185 

 100% 

 N/A 

 N/A 

 198.96 MB 

 N/A