开通博客赚积分
发布资源赚积分
分类

源码开发语言/平台
当前位置：首页 > 源码/资料 > Windows编程 > 通讯编程 > 查看源码
ModelGen
资源名称：ns-allinone-2.33.tar.gz　[点击查看]
上传用户：rrhhcc
上传日期：2015-12-11
资源大小：54129k
文件大小：11k
源码类别：

通讯编程

开发平台：

Visual C++

ModelGen：源码内容
  1. #! /bin/sh
  3. #!/usr/bin/tclsh
  5. #
  6. # Copyright (C) 2001 by USC/ISI
  7. # All rights reserved.
  8. #
  9. # Redistribution and use in source and binary forms are permitted
  10. # provided that the above copyright notice and this paragraph are
  11. # duplicated in all such forms and that any documentation, advertising
  12. # materials, and other materials related to such distribution and use
  13. # acknowledge that the software was developed by the University of
  14. # Southern California, Information Sciences Institute.  The name of the
  15. # University may not be used to endorse or promote products derived from
  16. # this software without specific prior written permission.
  17. #
  18. # THIS SOFTWARE IS PROVIDED "AS IS" AND WITHOUT ANY EXPRESS OR IMPLIED
  19. # WARRANTIES, INCLUDING, WITHOUT LIMITATION, THE IMPLIED WARRANTIES OF
  20. # MERCHANTABILITY AND FITNESS FOR A PARTICULAR PURPOSE.
  21. #
  22. # ModelGen is a set of scripts that take tcpdump trace as input and
  23. # output a set of CDF files that model Web traffic. It also outputs
  24. # a time series of traffic size (in 1ms block) for further wavelet 
  25. # scaling analysis
  26. #
  27. #             usage:
  28. #                  ./ModelGen <tcpdump trace> <threshold> <network prefix>
  29. #
  30. #                  <tcpdump trace> : tcpdump trace file generated using
  31. #                                    tcpdump -w option
  32. #                  <threshold>     : the threshold time value (in millisecond)
  33. #                                    that distinguishes idle periods in order 
  34. #                                    to infer user "think" times between 
  35. #                                    requests for new top-level pages.
  36. #                  <network prefix>: network prefix used to distinguish
  37. #                                    inbound vs. outbound traffic
  38. #
  39. #             example: ./ModelGen tracefile 1000 128.9
  40. #
  41. # Note that current it's only tested on Linux system
  42. #
  43. # This work is supported by DARPA through SAMAN Project
  44. # (http://www.isi.edu/saman/), administered by the Space and Naval
  45. # Warfare System Center San Diego under Contract No. N66001-00-C-8066
  46. #
  47. #
  48. #
  50. date
  51. echo "***  parsing tcpdump file  ***"
  52. echo "***  parsing .all  ***"
  53. ./tcpdump -n -tt -q -r $1  > $1.all
  54. date
  55. echo "***  parsing .www  ***"
  56. ./tcpdump -n -tt -r $1 tcp port 80 > $1.www
  57. #./tcpdump -n -tt -r $1 port ftp or port ftp-data > $1.ftp
  58. date
  59. echo "***  parsing .ftp  ***"
  60. ./tcpdump -n -tt -r $1 port ftp  > $1.ftp1
  61. cat $1.ftp1 | getFTPclient.pl  > $1.ftp2
  62. cat $1.all | getFTP.pl -r $1.ftp2 > $1.ftp
  63. #./tcpdump -q -n -tt -r $1 port ftp or port ftp-data > $1.ftps
  64. #./tcpdump -n -tt -r $1 port domain > $1.dns
  65. date
  66. echo "***  parsing .http-srv  ***"
  67. ./tcpdump -n -tt -r $1 tcp src port 80 > $1.http-srv
  69. date
  70. echo "***  analyze traffic mix  ***"
  71. #cat $1.all | io.pl -s $3  -w $1.all
  72. #cat $1.all.inbound | traffic-classify > $1.traffic.cnt.inbound
  73. #cat $1.all.outbound | traffic-classify > $1.traffic.cnt.outbound
  75. date
  76. echo "***  analyze flow statistics  ***"
  77. #awk -f flow.awk < $1.all.outbound > $1.all.outbound.flow
  78. #awk -f flow.awk < $1.all.inbound > $1.all.inbound.flow
  79. #sort -s -o $1.all.outbound.flow.sort -T /tmp $1.all.outbound.flow
  80. #sort -s -o $1.all.inbound.flow.sort -T /tmp $1.all.inbound.flow
  81. #cat $1.all.outbound.flow.sort | flow.pl -w $1.outbound.flow
  82. #cat $1.all.inbound.flow.sort | flow.pl -w $1.inbound.flow
  83. #sort -s -o $1.inbound.flow.start.sort $1.inbound.flow.start
  84. #sort -s -o $1.outbound.flow.start.sort $1.outbound.flow.start
  85. #awk -f arrive2inter.awk < $1.outbound.flow.start.sort > $1.outbound.flow.arrival
  86. #awk -f arrive2inter.awk < $1.inbound.flow.start.sort > $1.inbound.flow.arrival
  87. #dat2cdf -e 1024 -i 1024 -d 1024 -t $1.outbound.flow.size
  88. #dat2cdf -e 1024 -i 1024 -d 1024 -t $1.inbound.flow.size
  89. #dat2cdf -e 0 -i 1 -d 1 -t $1.outbound.flow.dur
  90. #dat2cdf -e 0 -i 1 -d 1 -t $1.inbound.flow.dur
  91. #dat2cdf -e 0 -i 0.001 -d 1 -t $1.outbound.flow.arrival
  92. #dat2cdf -e 0 -i 0.001 -d 1 -t $1.inbound.flow.arrival
  94. date
  95. echo "***  seperate Inbound and Outbound traffic  ***"
  96. echo "DNS"
  97. #io.tcl $1.dns
  99. date
  100. echo "WWW"
  101. #cat $1.www | io.www.pl -s $3  -w $1.www
  102. cat $1.http-srv | io.www.pl -s $3  -w $1.http-srv
  104. date
  105. echo "FTP"
  106. #cat $1.ftp | io.ftp.pl -s $3  -w $1.ftp
  107. #cat $1.ftps | io.ftp.pl -s $3  -w $1.ftps
  109. ##############################
  111. date
  113. /bin/rm -rf *.time-series
  114. /bin/rm -rf *connect.time*
  116. echo "***  Analyze Inbound traffic  ***"
  117. echo "run http_connect"
  118. sort -s -o $1.in.http-srv-sort +1 -2 +3 -4 +0 -1 -T /tmp $1.http-srv.inbound
  119. http_connect -r $1.in.http-srv-sort -w $1.in.http-srv.connect
  120. grep "ACT" $1.in.http-srv.connect > $1.in.http-srv.connect.time
  121. sort $1.in.http-srv.connect.time > $1.in.http-srv.connect.time.sort
  124. date
  125. echo "run http_active"
  126. sort -s -o $1.in.http-srv.connect.sort +1 -2 +0 -1 -T /tmp $1.in.http-srv.connect
  127. http_active -r $1.in.http-srv.connect.sort -w $1.in.http-srv.active -I $2
  130. date
  131. echo "compute CDF statistics"
  132. cat $1.in.http-srv.active.activity | outputCDF -e inbound
  135. date
  136. echo "compute time series (1ms block)"
  137. bw.tcl $1.http-srv.inbound
  138. cat $1.http-srv.inbound.bw | time-series.pl > $1.in.time-series
  140. ##############################
  142. date
  143. echo "***  Analyze Outbound traffic  ***"
  144. echo "run http_connect"
  145. sort -s -o $1.out.http-srv-sort +1 -2 +3 -4 +0 -1 -T /tmp $1.http-srv.outbound
  146. http_connect -r $1.out.http-srv-sort -w $1.out.http-srv.connect
  147. grep "ACT" $1.out.http-srv.connect > $1.out.http-srv.connect.time
  148. sort $1.out.http-srv.connect.time > $1.out.http-srv.connect.time.sort
  151. date
  152. echo "run http_active"
  153. sort -s -o $1.out.http-srv.connect.sort +1 -2 +0 -1 -T /tmp $1.out.http-srv.connect
  154. http_active -r $1.out.http-srv.connect.sort -w $1.out.http-srv.active -I $2
  157. date
  158. echo "compute CDF statistics"
  159. cat $1.out.http-srv.active.activity | outputCDF -e outbound
  162. date
  163. echo "compute time series (1ms block)"
  164. bw.tcl $1.http-srv.outbound
  165. cat $1.http-srv.outbound.bw | time-series.pl > $1.out.time-series
  167. ######################################
  169. echo "***  Delay and Bandwidth estimation  ***"
  171. echo "WWW traffic"
  173. date
  174. echo "output traffic between web servers and clients"
  175. cat $1.www | BW-seq.pl -s $3 -p 80
  176. sort inbound.seq -o inbound.seq.sorted
  177. sort outbound.seq -o outbound.seq.sorted
  179. date
  180. echo "search for DATA/ACK packets which have the same seqence number for outboun
  181. d traffic"
  182. cat outbound.seq.sorted | BW-pair.pl > $1.outbound.pair
  184. date
  185. echo "estimate the bandwidth for inbound/outbound traffic"
  186. cat $1.outbound.pair | BW.out.pl -w $1.www
  187. cat inbound.seq.sorted | BW.in.pl -w $1.www
  189. dat2cdf -e 0 -i 0.001 -d 1 -t $1.www.outbound.BW
  190. dat2cdf -e 0 -i 0.001 -d 1 -t $1.www.inbound.BW
  191. dat2cdf -e 0 -i 0.001 -d 1 -t $1.www.outbound.delay
  193. date
  194. echo "Locate SYN connection"
  195. cat $1.www | delay.pl -p 80 > $1.sync
  196. sort -s -o $1.sync.sorted -T /tmp $1.sync
  198. date
  199. echo "compute delay for each SYN connection pair between servers and clients"
  200. pair.tcl $1.sync.sorted >  $1.sync.delay
  201. sort -s -o $1.sync.delay.sorted -T /tmp $1.sync.delay
  202. awk -f delay.awk < $1.sync.delay.sorted > $1.www.inbound.delay
  204. dat2cdf -e 0 -i 0.001 -d 1 -t $1.www.inbound.delay
  206. ######################################
  209. echo "FTP traffic"
  211. date
  212. echo "output traffic between ftp servers and clients"
  213. cat $1.ftp | BW-seq.pl -s $3 -p 20
  214. sort inbound.seq -o inbound.seq.sorted
  215. sort outbound.seq -o outbound.seq.sorted
  217. date
  218. echo "search for DATA/ACK packets which have the same seqence number for outboun
  219. d traffic"
  220. cat outbound.seq.sorted | BW-pair.pl > $1.outbound.pair
  222. date
  223. echo "estimate the bandwidth for inbound/outbound traffic"
  224. cat $1.outbound.pair | BW.out.pl -w $1.ftp
  225. cat inbound.seq.sorted | BW.in.pl -w $1.ftp
  227. dat2cdf -e 0 -i 0.001 -d 1 -t $1.ftp.outbound.BW
  228. dat2cdf -e 0 -i 0.001 -d 1 -t $1.ftp.inbound.BW
  229. dat2cdf -e 0 -i 0.001 -d 1 -t $1.ftp.outbound.delay
  231. date
  232. echo "Locate SYN connection"
  233. cat $1.ftp | delay.pl -p 21 > $1.sync
  234. sort -s -o $1.sync.sorted -T /tmp $1.sync
  236. date
  237. echo "compute delay for each SYN connection pair between servers and clients"
  238. pair.tcl $1.sync.sorted >  $1.sync.delay
  239. sort -s -o $1.sync.delay.sorted -T /tmp $1.sync.delay
  240. awk -f delay.awk < $1.sync.delay.sorted > $1.ftp.inbound.delay
  242. dat2cdf -e 0 -i 0.001 -d 1 -t $1.ftp.inbound.delay
  244. ######################################
  245. echo "Output statistics for FTP traffic"
  246. date
  248. grep ".20 >" $1.ftps.outbound | awk -f ftp.awk | sort > $1.ftp.outbound.conn
  249. cat $1.ftp.outbound.conn | ftp.pl -w $1.ftp.outbound
  250. sort -o $1.ftp.outbound.sess.arrive.sort $1.ftp.outbound.sess.arrive
  251. grep ".20 >" $1.ftps.inbound | awk -f ftp.awk | sort > $1.ftp.inbound.conn
  252. cat $1.ftp.inbound.conn | ftp.pl -w $1.ftp.inbound
  253. sort -o $1.ftp.inbound.sess.arrive.sort $1.ftp.inbound.sess.arrive
  255. dat2cdf -e 0 -i 0.001 -d 1 -t $1.ftp.outbound.file.inter
  256. dat2cdf -e 0 -i 1000 -d 1000 -t $1.ftp.outbound.size
  257. dat2cdf -e 0 -i 1 -d 1 -t $1.ftp.outbound.fileno
  258. dat2cdf -e 0 -i 0.001 -d 1 -t $1.ftp.inbound.file.inter
  259. dat2cdf -e 0 -i 1000 -d 1000 -t $1.ftp.inbound.size
  260. dat2cdf -e 0 -i 1 -d 1 -t $1.ftp.inbound.fileno
  262. awk -f arrive2inter.awk < $1.ftp.outbound.sess.arrive.sort > $1.ftp.outbound.sess.inter
  263. dat2cdf -e 0 -i 0.01 -d 1 -t $1.ftp.outbound.sess.inter
  264. awk -f arrive2inter.awk < $1.ftp.inbound.sess.arrive.sort > $1.ftp.inbound.sess.inter
  265. dat2cdf -e 0 -i 0.01 -d 1 -t $1.ftp.inbound.sess.inter
  267. ######################################
  268. echo "Output TCP window size
  269. date
  271. echo "WWW"
  272. grep " S " $1.www.outbound | grep ".80 >" > $1.www.outbound.svr.win
  273. grep " S " $1.www.inbound | grep ".80 >" > $1.www.inbound.svr.win
  274. grep " S " $1.www.outbound | grep ".80:" > $1.www.outbound.clnt.win
  275. grep " S " $1.www.inbound | grep ".80:" > $1.www.inbound.clnt.win
  276. awk -f win.awk < $1.www.outbound.svr.win > $1.www.outbound.wins
  277. awk -f win.awk < $1.www.inbound.svr.win > $1.www.inbound.wins
  278. awk -f win.awk < $1.www.outbound.clnt.win > $1.www.outbound.winc
  279. awk -f win.awk < $1.www.inbound.clnt.win > $1.www.inbound.winc
  280. dat2cdf -e 1024 -i 1024 -d 1024 -t $1.www.outbound.wins
  281. dat2cdf -e 1024 -i 1024 -d 1024 -t $1.www.outbound.winc
  282. dat2cdf -e 1024 -i 1024 -d 1024 -t $1.www.inbound.wins
  283. dat2cdf -e 1024 -i 1024 -d 1024 -t $1.www.inbound.winc
  285. echo "FTP"
  286. grep " S " $1.ftp.outbound | grep ".20 >" > $1.ftp.outbound.svr.win
  287. grep " S " $1.ftp.inbound | grep ".20 >" > $1.ftp.inbound.svr.win
  288. grep " S " $1.ftp.outbound | grep ".20:" > $1.ftp.outbound.clnt.win
  289. grep " S " $1.ftp.inbound | grep ".20:" > $1.ftp.inbound.clnt.win
  290. awk -f win.awk < $1.ftp.outbound.svr.win > $1.ftp.outbound.wins
  291. awk -f win.awk < $1.ftp.inbound.svr.win > $1.ftp.inbound.wins
  292. awk -f win.awk < $1.ftp.outbound.clnt.win > $1.ftp.outbound.winc
  293. awk -f win.awk < $1.ftp.inbound.clnt.win > $1.ftp.inbound.winc
  294. dat2cdf -e 1024 -i 1024 -d 1024 -t $1.ftp.outbound.wins
  295. dat2cdf -e 1024 -i 1024 -d 1024 -t $1.ftp.outbound.winc
  296. dat2cdf -e 1024 -i 1024 -d 1024 -t $1.ftp.inbound.wins
  297. dat2cdf -e 1024 -i 1024 -d 1024 -t $1.ftp.inbound.winc
  300. date
  301. echo "execution complete"