Report for General Profile: Spiders

Time range: Wed, Apr-06-2005 0:00:11 AM - Wed, Apr-06-2005 23:59:40 PM

Spiders

Daily Spider Activity




Top Spiders




Top Spiders

  

 Spider 

 Hits 

 % of Total 

 Visits 

 1 

 Internetseer Web site monitoring Spider 

 23 

 15.23% 

 23 

 2 

 MSIECrawler 

 21 

 13.91% 

 5 

 3 

 MSN Spider 

 20 

 13.25% 

 7 

 4 

 Feedster Crawler/1.0; Feedster, Inc. 

 15 

  9.93% 

 1 

 5 

 Yahoo Spider 

 12 

  7.95% 

 12 

 6 

 Agent-SharewarePlazaFileCheckBot/ 2.0+(+http:/ / www.SharewarePlaza.com) 

 12 

  7.95% 

 2 

 7 

 SoftHypermarketFileCheckBot/ 1.0+(+http:/ / www.softhypermaket.com) 

 10 

  6.62% 

 1 

 8 

 Wisenut Spider 

 7 

  4.64% 

 6 

 9 

 Gigabot Spider 

 6 

  3.97% 

 5 

 10 

 Wespe.de Spider 

 6 

  3.97% 

 5 

 11 

 Google Spider 

 6 

  3.97% 

 4 

 12 

 IRLbot/1.0 (+http://irl.cs.tamu.edu/ crawler) 

 5 

  3.31% 

 1 

 13 

 aipbot/1.0 (aipbot; http:/ / www.aipbot.com; [email protected]) 

 5 

  3.31% 

 2 

 14 

 itLocation-PADBot (http:/ / www.itlocation.com) 

 2 

  1.32% 

 2 

 15 

 BaiDu Spider 

 1 

  0.66% 

 1 

  

 Subtotal 

 151 

 100.00% 

 77 

  

 Total 

 151 

 100.00% 

 77 



Top Spider IP

  

 IP 

 Country 

 Hits 

 Visits 

 Bandwidth 

 1 

 63.238.163.75
 cavtel.net (Internetseer Web site monitoring Spider) 

 United States 

 23 

 23 

 0 Bytes 

 2 

 24.187.132.177
 optonline.net (MSIECrawler) 

 United States 

 21 

 5 

 0 Bytes 

 3 

 65.54.188.131
 msn.com (MSN Spider) 

 United States 

 20 

 7 

 140.90 KB 

 4 

 66.151.189.11
 colospace.com (Unknown Spider) 

 United States 

 15 

 1 

 4.75 KB 

 5 

 67.19.157.42
 theplanet.com (Unknown Spider) 

 United States 

 12 

 2 

 0 Bytes 

 6 

 69.93.56.82
 ipxf.net (Unknown Spider) 

 United States 

 10 

 1 

 0 Bytes 

 7 

 64.242.88.50
 looksmart.com (Wisenut Spider) 

 United States 

 7 

 6 

 40.02 KB 

 8 

 128.194.135.83
 tamu.edu (Unknown Spider) 

 United States 

 5 

 1 

 739 Bytes 

 9 

 24.177.134.6
 charter.com (Unknown Spider) 

 United States 

 5 

 2 

 11.78 KB 

 10 

 62.2.173.19
 cablecom.ch (Unknown Spider) 

 Switzerland 

 4 

 2 

 18.36 KB 

 11 

 68.142.251.48
 inktomisearch.com (Yahoo Spider) 

 United States 

 3 

 3 

 0 Bytes 

 12 

 64.62.168.31
 he.net (Gigabot Spider) 

 United States 

 3 

 2 

 0 Bytes 

 13 

 66.249.71.57
 google.com (Google Spider) 

 United States 

 2 

 1 

 0 Bytes 

 14 

 216.55.133.27
 abac.net (Wespe.de Spider) 

 United States 

 2 

 2 

 18.36 KB 

 15 

 24.148.220.159
 mindspring.com (Wespe.de Spider) 

 United States 

 2 

 1 

 382 Bytes 

 16 

 217.16.26.114
 masterhost.ru (Wespe.de Spider) 

 Russian Federation 

 2 

 2 

 18.36 KB 

 17 

 66.249.64.66
 google.com (Google Spider) 

 United States 

 2 

 1 

 11.40 KB 

 18 

 66.196.91.92
 inktomisearch.com (Yahoo Spider) 

 United States 

 1 

 1 

 0 Bytes 

 19 

 66.196.90.184
 inktomisearch.com (Yahoo Spider) 

 United States 

 1 

 1 

 0 Bytes 

 20 

 68.142.250.156
 inktomisearch.com (Yahoo Spider) 

 United States 

 1 

 1 

 382 Bytes 

 21 

 64.62.168.3
 he.net (Gigabot Spider) 

 United States 

 1 

 1 

 192.00 KB 

 22 

 64.62.168.41
 he.net (Gigabot Spider) 

 United States 

 1 

 1 

 192.00 KB 

 23 

 68.142.250.33
 inktomisearch.com (Yahoo Spider) 

 United States 

 1 

 1 

 0 Bytes 

 24 

 66.196.91.42
 inktomisearch.com (Yahoo Spider) 

 United States 

 1 

 1 

 0 Bytes 

 25 

 66.196.90.205
 inktomisearch.com (Yahoo Spider) 

 United States 

 1 

 1 

 0 Bytes 

 26 

 68.142.251.148
 inktomisearch.com (Yahoo Spider) 

 United States 

 1 

 1 

 382 Bytes 

 27 

 66.249.64.44
 google.com (Google Spider) 

 United States 

 1 

 1 

 0 Bytes 

 28 

 61.135.146.202 (BaiDu Spider) 

 China 

 1 

 1 

 357 Bytes 

 29 

 66.249.71.53
 google.com (Google Spider) 

 United States 

 1 

 1 

 315 Bytes 

 30 

 66.196.91.60
 inktomisearch.com (Yahoo Spider) 

 United States 

 1 

 1 

 0 Bytes 

 31 

 64.62.168.68
 he.net (Gigabot Spider) 

 United States 

 1 

 1 

 192.00 KB 

 32 

 66.196.90.209
 inktomisearch.com (Yahoo Spider) 

 United States 

 1 

 1 

 0 Bytes 

  

 Subtotal 

  

 153 

 77 

 842.43 KB 

  

 Total 

  

 151 

 77 

 824.07 KB 



Top Pages (Which are never accessed by Spider)

  

 Pages 

 Pageview 

 % of Total  Pageviews 

 Visits 

 % of Total  Visits 

 Bandwidth 

 Average Visit Length 

 Average Time Taken(ms) 

 1 

 Index of /downloads 
 /downloads/ 

 18 

  6.62% 

 2 

  0.25% 

 5.19 KB 

 0:31 

 132 

 2 

 /cx_localization.htm 

 6 

  2.21% 

 5 

  0.63% 

 1.86 KB 

 0:26 

 118 

 3 

 /purchase.htm 

 1 

  0.37% 

 1 

  0.13% 

 356 Bytes 

 0:00 

 249 

 4 

 /selviscoldlg.htm 

 1 

  0.37% 

 1 

  0.13% 

 0 Bytes 

 0:00 

 234 

 5 

 0 

 1 

  0.37% 

 1 

  0.13% 

 331 Bytes 

 0:00 

 83 

  

 Subtotal 

 27 

  9.93% 

 N/A 

 N/A 

 7.71 KB 

 N/A 

 876 

  

 Total 

 272 

 100% 

 N/A 

 N/A 

 187.52 MB 

 N/A