Report for General Profile: Spiders

Time range: Sat, Apr-16-2005 0:00:33 AM - Sat, Apr-16-2005 23:59:47 PM

Spiders

Daily Spider Activity




Top Spiders




Top Spiders

  

 Spider 

 Hits 

 % of Total 

 Visits 

 1 

 Internetseer Web site monitoring Spider 

 23 

 25.27% 

 23 

 2 

 SoftHypermarketFileCheckBot/ 1.0+(+http:/ / www.softhypermaket.com) 

 10 

 10.99% 

 1 

 3 

 Yahoo Spider 

 10 

 10.99% 

 10 

 4 

 Google Spider 

 9 

  9.89% 

 5 

 5 

 IRLbot/1.0 (+http://irl.cs.tamu.edu/ crawler) 

 6 

  6.59% 

 1 

 6 

 Agent-SharewarePlazaFileCheckBot/ 2.0+(+http:/ / www.SharewarePlaza.com) 

 6 

  6.59% 

 1 

 7 

 NutchCVS/0.06-dev (Nutch; http:/ / www.nutch.org/ docs/ en/ bot.html; [email protected] et) 

 5 

  5.49% 

 3 

 8 

 Wisenut Spider 

 4 

  4.40% 

 4 

 9 

 Wespe.de Spider 

 4 

  4.40% 

 4 

 10 

 aipbot/1.0 (aipbot; http:/ / www.aipbot.com; [email protected]) 

 4 

  4.40% 

 2 

 11 

 Ask Jeeves Spider 

 3 

  3.30% 

 1 

 12 

 MSN Spider 

 3 

  3.30% 

 2 

 13 

 hl_ftien_spider 

 2 

  2.20% 

 1 

 14 

 http://www.almaden.ibm.com/ cs/ crawler [fc3] 

 2 

  2.20% 

 1 

  

 Subtotal 

 91 

 100.00% 

 59 

  

 Total 

 91 

 100.00% 

 59 



Top Spider IP

  

 IP 

 Country 

 Hits 

 Visits 

 Bandwidth 

 1 

 63.238.163.75
 cavtel.net (Internetseer Web site monitoring Spider) 

 United States 

 23 

 23 

 0 Bytes 

 2 

 69.93.56.82
 ipxf.net (Unknown Spider) 

 United States 

 10 

 1 

 0 Bytes 

 3 

 67.19.157.42
 theplanet.com (Unknown Spider) 

 United States 

 6 

 1 

 0 Bytes 

 4 

 128.194.135.83
 tamu.edu (Unknown Spider) 

 United States 

 6 

 1 

 14.59 KB 

 5 

 24.177.134.6
 charter.com (Unknown Spider) 

 United States 

 4 

 2 

 11.47 KB 

 6 

 64.242.88.50
 looksmart.com (Wisenut Spider) 

 United States 

 4 

 4 

 44.28 KB 

 7 

 207.68.146.55
 msn.net (MSN Spider) 

 United States 

 3 

 2 

 19.62 KB 

 8 

 65.214.44.212
 ask.com (Ask Jeeves Spider) 

 United States 

 3 

 1 

 11.47 KB 

 9 

 69.199.177.187 (Unknown Spider) 

 Unknown 

 3 

 2 

 739 Bytes 

 10 

 68.142.251.24
 inktomisearch.com (Yahoo Spider) 

 United States 

 3 

 3 

 0 Bytes 

 11 

 69.41.173.105
 800hosting.com (Unknown Spider) 

 United States 

 2 

 1 

 357 Bytes 

 12 

 66.249.64.58
 google.com (Google Spider) 

 United States 

 2 

 1 

 11.13 KB 

 13 

 216.55.133.27
 abac.net (Wespe.de Spider) 

 United States 

 2 

 2 

 18.36 KB 

 14 

 66.249.71.69
 google.com (Google Spider) 

 United States 

 2 

 1 

 315 Bytes 

 15 

 61.181.217.208
 asd.tj.cn (Unknown Spider) 

 China 

 2 

 1 

 0 Bytes 

 16 

 66.249.64.7
 google.com (Google Spider) 

 United States 

 2 

 1 

 0 Bytes 

 17 

 66.249.64.68
 google.com (Google Spider) 

 United States 

 2 

 1 

 357 Bytes 

 18 

 66.147.154.3 (Unknown Spider) 

 United States 

 2 

 1 

 357 Bytes 

 19 

 217.16.26.114
 masterhost.ru (Wespe.de Spider) 

 Russian Federation 

 2 

 2 

 18.36 KB 

 20 

 66.196.101.89
 inktomisearch.com (Yahoo Spider) 

 United States 

 1 

 1 

 0 Bytes 

 21 

 68.142.250.122
 inktomisearch.com (Yahoo Spider) 

 United States 

 1 

 1 

 512.00 KB 

 22 

 68.142.251.177
 inktomisearch.com (Yahoo Spider) 

 United States 

 1 

 1 

 528.00 KB 

 23 

 66.249.64.30
 google.com (Google Spider) 

 United States 

 1 

 1 

 1.32 MB 

 24 

 68.142.251.148
 inktomisearch.com (Yahoo Spider) 

 United States 

 1 

 1 

 0 Bytes 

 25 

 66.196.101.90
 inktomisearch.com (Yahoo Spider) 

 United States 

 1 

 1 

 0 Bytes 

 26 

 68.142.250.56
 inktomisearch.com (Yahoo Spider) 

 United States 

 1 

 1 

 512.00 KB 

 27 

 68.142.251.21
 inktomisearch.com (Yahoo Spider) 

 United States 

 1 

 1 

 0 Bytes 

  

 Subtotal 

  

 91 

 59 

 2.98 MB 

  

 Total 

  

 91 

 59 

 2.98 MB 



Top Pages (Which are never accessed by Spider)

  

 Pages 

 Pageview 

 % of Total  Pageviews 

 Visits 

 % of Total  Visits 

 Bandwidth 

 Average Visit Length 

 Average Time Taken(ms) 

 1 

 /cx_localization.htm 

 23 

 12.43% 

 22 

  3.13% 

 8.54 KB 

 0:11 

 124 

 2 

 Download - Search Local File 
 /download.htm 

 13 

  7.03% 

 13 

  1.85% 

 84.87 KB 

 0:21 

 139 

 3 

 File Search Utility - FAQ 
 /faq.htm 

 3 

  1.62% 

 3 

  0.43% 

 22.21 KB 

 0:04 

 129 

 4 

 ISO263 
 /iso263.htm 

 3 

  1.62% 

 2 

  0.28% 

 0 Bytes 

 0:02 

 114 

 5 

 Nihuo Software - Cool Find - What's new 
 /whatisnew.htm 

 2 

  1.08% 

 2 

  0.28% 

 38.85 KB 

 0:02 

 127 

 6 

 File Types Supported 
 /supportfiletype.html 

 1 

  0.54% 

 1 

  0.14% 

 6.18 KB 

 0:30 

 32 

 7 

 Index of /downloads 
 /downloads/ 

 1 

  0.54% 

 1 

  0.14% 

 295 Bytes 

 0:00 

 0 

 8 

 /downloads/ch 

 1 

  0.54% 

 1 

  0.14% 

 0 Bytes 

 0:00 

 52 

 9 

 Link2us 
 /link2us.htm 

 1 

  0.54% 

 1 

  0.14% 

 1.95 KB 

 0:00 

 33 

 10 

 /cw_home.htm/ 

 1 

  0.54% 

 1 

  0.14% 

 0 Bytes 

 0:00 

 97 

  

 Subtotal 

 49 

 26.49% 

 N/A 

 N/A 

 162.88 KB 

 N/A 

 1,087 

  

 Total 

 185 

 100% 

 N/A 

 N/A 

 211.62 MB 

 N/A