Report for General Profile: Spiders

Time range: Thu, Apr-14-2005 0:00:26 AM - Thu, Apr-14-2005 23:58:58 PM

Spiders

Daily Spider Activity




Top Spiders




Top Spiders

  

 Spider 

 Hits 

 % of Total 

 Visits 

 1 

 IRLbot/1.0 (+http://irl.cs.tamu.edu/ crawler) 

 26 

 21.31% 

 6 

 2 

 Internetseer Web site monitoring Spider 

 24 

 19.67% 

 24 

 3 

 OmniExplorer_Bot/1.18 (+http:/ / www.omni-explorer.com) Torrent Crawler 

 21 

 17.21% 

 1 

 4 

 Yahoo Spider 

 15 

 12.30% 

 15 

 5 

 Wisenut Spider 

 6 

  4.92% 

 6 

 6 

 Agent-SharewarePlazaFileCheckBot/ 2.0+(+http:/ / www.SharewarePlaza.com) 

 6 

  4.92% 

 1 

 7 

 Gigabot Spider 

 5 

  4.10% 

 4 

 8 

 Unitix PAD Spider (for more info see http :/ / unitix.com) 

 4 

  3.28% 

 2 

 9 

 Wespe.de Spider 

 4 

  3.28% 

 4 

 10 

 Google Spider 

 4 

  3.28% 

 2 

 11 

 MSN Spider 

 3 

  2.46% 

 2 

 12 

 aipbot/1.0 (aipbot; http:/ / www.aipbot.com; [email protected]) 

 3 

  2.46% 

 2 

 13 

 SoftdllSpider/1.0 (+http:/ / www.freesoftdownloads.com/ spider.html) 

 1 

  0.82% 

 1 

  

 Subtotal 

 122 

 100.00% 

 70 

  

 Total 

 122 

 100.00% 

 70 



Top Spider IP

  

 IP 

 Country 

 Hits 

 Visits 

 Bandwidth 

 1 

 128.194.135.83
 tamu.edu (Unknown Spider) 

 United States 

 26 

 6 

 3.61 KB 

 2 

 63.238.163.75
 cavtel.net (Internetseer Web site monitoring Spider) 

 United States 

 24 

 24 

 0 Bytes 

 3 

 64.62.175.137
 he.net (Unknown Spider) 

 United States 

 21 

 1 

 192.83 KB 

 4 

 67.19.157.42
 theplanet.com (Unknown Spider) 

 United States 

 6 

 1 

 0 Bytes 

 5 

 64.242.88.50
 looksmart.com (Wisenut Spider) 

 United States 

 6 

 6 

 37.98 KB 

 6 

 68.142.251.21
 inktomisearch.com (Yahoo Spider) 

 United States 

 5 

 5 

 0 Bytes 

 7 

 62.79.25.35
 vbr.tiscali.dk (Unknown Spider) 

 Denmark 

 4 

 2 

 17.94 KB 

 8 

 207.68.146.55
 msn.net (MSN Spider) 

 United States 

 3 

 2 

 11.50 KB 

 9 

 24.177.134.6
 charter.com (Unknown Spider) 

 United States 

 3 

 2 

 128.00 KB 

 10 

 66.249.64.77
 google.com (Google Spider) 

 United States 

 2 

 1 

 0 Bytes 

 11 

 217.16.26.114
 masterhost.ru (Wespe.de Spider) 

 Russian Federation 

 2 

 2 

 18.36 KB 

 12 

 216.55.133.27
 abac.net (Wespe.de Spider) 

 United States 

 2 

 2 

 18.36 KB 

 13 

 66.249.64.30
 google.com (Google Spider) 

 United States 

 2 

 1 

 315 Bytes 

 14 

 64.62.168.21
 he.net (Gigabot Spider) 

 United States 

 2 

 1 

 672 Bytes 

 15 

 64.62.168.72
 he.net (Gigabot Spider) 

 United States 

 1 

 1 

 0 Bytes 

 16 

 64.62.168.31
 he.net (Gigabot Spider) 

 United States 

 1 

 1 

 0 Bytes 

 17 

 68.142.251.142
 inktomisearch.com (Yahoo Spider) 

 United States 

 1 

 1 

 512.00 KB 

 18 

 66.148.86.163
 hopone.net (Unknown Spider) 

 United States 

 1 

 1 

 9.77 KB 

 19 

 66.196.101.90
 inktomisearch.com (Yahoo Spider) 

 United States 

 1 

 1 

 11.13 KB 

 20 

 64.62.168.61
 he.net (Gigabot Spider) 

 United States 

 1 

 1 

 382 Bytes 

 21 

 68.142.250.92
 inktomisearch.com (Yahoo Spider) 

 United States 

 1 

 1 

 512.00 KB 

 22 

 68.142.250.151
 inktomisearch.com (Yahoo Spider) 

 United States 

 1 

 1 

 353 Bytes 

 23 

 68.142.250.33
 inktomisearch.com (Yahoo Spider) 

 United States 

 1 

 1 

 0 Bytes 

 24 

 68.142.249.27
 inktomisearch.com (Yahoo Spider) 

 United States 

 1 

 1 

 512.00 KB 

 25 

 66.196.90.202
 inktomisearch.com (Yahoo Spider) 

 United States 

 1 

 1 

 0 Bytes 

 26 

 68.142.251.148
 inktomisearch.com (Yahoo Spider) 

 United States 

 1 

 1 

 0 Bytes 

 27 

 66.196.101.89
 inktomisearch.com (Yahoo Spider) 

 United States 

 1 

 1 

 0 Bytes 

 28 

 66.196.90.98
 inktomisearch.com (Yahoo Spider) 

 United States 

 1 

 1 

 512.00 KB 

  

 Subtotal 

  

 122 

 70 

 2.44 MB 

  

 Total 

  

 122 

 70 

 2.44 MB 



Top Pages (Which are never accessed by Spider)

  

 Pages 

 Pageview 

 % of Total  Pageviews 

 Visits 

 % of Total  Visits 

 Bandwidth 

 Average Visit Length 

 Average Time Taken(ms) 

 1 

 /cx_localization.htm 

 16 

  6.18% 

 14 

  1.89% 

 5.20 KB 

 0:15 

 146 

 2 

 Index of /downloads 
 /downloads/ 

 2 

  0.77% 

 2 

  0.27% 

 590 Bytes 

 0:00 

 245 

 3 

 0 

 2 

  0.77% 

 1 

  0.13% 

 662 Bytes 

 0:00 

 180 

 4 

 /purchase.htm 

 1 

  0.39% 

 1 

  0.13% 

 356 Bytes 

 0:00 

 165 

 5 

 /selviscoldlg.htm 

 1 

  0.39% 

 1 

  0.13% 

 0 Bytes 

 0:04 

 254 

 6 

 /cw_home.htm?AfID=20542 

 1 

  0.39% 

 1 

  0.13% 

 382 Bytes 

 0:00 

 37 

  

 Subtotal 

 23 

  8.88% 

 N/A 

 N/A 

 7.14 KB 

 N/A 

 816 

  

 Total 

 259 

 100% 

 N/A 

 N/A 

 197.80 MB 

 N/A