test-insert
上传用户:dzyhzl
上传日期:2019-04-29
资源大小:56270k
文件大小:48k
源码类别:

模拟服务器

开发平台:

C/C++

  1. #!/usr/bin/perl
  2. # Copyright (C) 2000 MySQL AB & MySQL Finland AB & TCX DataKonsult AB
  3. #
  4. # This library is free software; you can redistribute it and/or
  5. # modify it under the terms of the GNU Library General Public
  6. # License as published by the Free Software Foundation; either
  7. # version 2 of the License, or (at your option) any later version.
  8. #
  9. # This library is distributed in the hope that it will be useful,
  10. # but WITHOUT ANY WARRANTY; without even the implied warranty of
  11. # MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the GNU
  12. # Library General Public License for more details.
  13. #
  14. # You should have received a copy of the GNU Library General Public
  15. # License along with this library; if not, write to the Free
  16. # Software Foundation, Inc., 59 Temple Place - Suite 330, Boston,
  17. # MA 02111-1307, USA
  18. #
  19. # Test of creating a simple table and inserting $record_count records in it,
  20. # $opt_loop_count rows in order, $opt_loop_count rows in reverse order and
  21. # $opt_loop_count rows in random order
  22. #
  23. # changes made for Oracle compatibility
  24. # - $limits{'func_odbc_mod'} is OK from crash-me, but it fails here so set we
  25. #   set it to 0 in server-cfg
  26. # - the default server config runs out of rollback segments, so I added a couple
  27. #   of disconnect/connects to reset
  28. ##################### Standard benchmark inits ##############################
  29. use DBI;
  30. use Benchmark;
  31. $opt_loop_count=100000; # number of rows/3
  32. $small_loop_count=10; # Loop for full table retrieval
  33. $range_loop_count=$small_loop_count*50;
  34. $many_keys_loop_count=$opt_loop_count;
  35. $opt_read_key_loop_count=$opt_loop_count;
  36. chomp($pwd = `pwd`); $pwd = "." if ($pwd eq '');
  37. require "$pwd/bench-init.pl" || die "Can't read Configuration file: $!n";
  38. if ($opt_small_test)
  39. {
  40.   $opt_loop_count/=100;
  41.   $many_keys_loop_count=$opt_loop_count/10;
  42.   $range_loop_count=10;
  43.   $opt_read_key_loop_count=10;
  44. }
  45. elsif ($opt_small_tables)
  46. {
  47.   $opt_loop_count=10000; # number of rows/3
  48.   $many_keys_loop_count=$opt_loop_count;
  49.   $opt_read_key_loop_count=10;
  50. }
  51. elsif ($opt_small_key_tables)
  52. {
  53.   $many_keys_loop_count/=10;
  54. }
  55. if ($opt_loop_count < 100)
  56. {
  57.   $opt_loop_count=100; # Some tests must have some data to work!
  58. }
  59. $range_loop_count=min($opt_loop_count,$range_loop_count);
  60. print "Testing the speed of inserting data into 1 table and do some selects on it.n";
  61. print "The tests are done with a table that has $opt_loop_count rows.nn";
  62. ####
  63. #### Generating random keys
  64. ####
  65. print "Generating random keysn";
  66. $random[$opt_loop_count]=0;
  67. for ($i=0 ; $i < $opt_loop_count ; $i++)
  68. {
  69.   $random[$i]=$i+$opt_loop_count;
  70. }
  71. my $tmpvar=1;
  72. for ($i=0 ; $i < $opt_loop_count ; $i++)
  73. {
  74.   $tmpvar^= ((($tmpvar + 63) + $i)*3 % $opt_loop_count);
  75.   $swap=$tmpvar % $opt_loop_count;
  76.   $tmp=$random[$i]; $random[$i]=$random[$swap]; $random[$swap]=$tmp;
  77. }
  78. $total_rows=$opt_loop_count*3;
  79. ####
  80. ####  Connect and start timeing
  81. ####
  82. $start_time=new Benchmark;
  83. $dbh = $server->connect();
  84. ####
  85. #### Create needed tables
  86. ####
  87. goto keys_test if ($opt_stage == 2);
  88. goto select_test if ($opt_skip_create);
  89. print "Creating tablesn";
  90. $dbh->do("drop table bench1" . $server->{'drop_attr'});
  91. $dbh->do("drop table bench2" . $server->{'drop_attr'});
  92. $dbh->do("drop table bench3" . $server->{'drop_attr'});
  93. do_many($dbh,$server->create("bench1",
  94.      ["id int NOT NULL",
  95.       "id2 int NOT NULL",
  96.       "id3 int NOT NULL",
  97.       "dummy1 char(30)"],
  98.      ["primary key (id,id2)",
  99.      "index index_id3 (id3)"]));
  100. if ($opt_lock_tables)
  101. {
  102.   $sth = $dbh->do("LOCK TABLES bench1 WRITE") || die $DBI::errstr;
  103. }
  104. ####
  105. #### Insert $total_rows records in order, in reverse order and random.
  106. ####
  107. $loop_time=new Benchmark;
  108. if ($opt_fast_insert)
  109. {
  110.   $query="insert into bench1 values ";
  111. }
  112. else
  113. {
  114.   $query="insert into bench1 (id,id2,id3,dummy1) values ";
  115. }
  116. if (($opt_fast || $opt_fast_insert) && $server->{'limits'}->{'insert_multi_value'})
  117. {
  118.   $query_size=$server->{'limits'}->{'query_size'};
  119.   print "Inserting $opt_loop_count multiple-value rows in ordern";
  120.   $res=$query;
  121.   for ($i=0 ; $i < $opt_loop_count ; $i++)
  122.   {
  123.     $tmp= "($i,$i,$i,'ABCDEFGHIJ'),";
  124.     if (length($tmp)+length($res) < $query_size)
  125.     {
  126.       $res.= $tmp;
  127.     }
  128.     else
  129.     {
  130.       $sth = $dbh->do(substr($res,0,length($res)-1)) or die $DBI::errstr;
  131.       $res=$query . $tmp;
  132.     }
  133.   }
  134.   print "Inserting $opt_loop_count multiple-value rows in reverse ordern";
  135.   for ($i=0 ; $i < $opt_loop_count ; $i++)
  136.   {
  137.     $tmp= "(" . ($total_rows-1-$i) . "," .($total_rows-1-$i) .
  138.       "," .($total_rows-1-$i) . ",'BCDEFGHIJK'),";
  139.     if (length($tmp)+length($res) < $query_size)
  140.     {
  141.       $res.= $tmp;
  142.     }
  143.     else
  144.     {
  145.       $sth = $dbh->do(substr($res,0,length($res)-1)) or die $DBI::errstr;
  146.       $res=$query . $tmp;
  147.     }
  148.   }
  149.   print "Inserting $opt_loop_count multiple-value rows in random ordern";
  150.   for ($i=0 ; $i < $opt_loop_count ; $i++)
  151.   {
  152.     $tmp= "(" . $random[$i] . "," . $random[$i] . "," . $random[$i] .
  153.       ",'CDEFGHIJKL')," or die $DBI::errstr;
  154.     if (length($tmp)+length($res) < $query_size)
  155.     {
  156.       $res.= $tmp;
  157.     }
  158.     else
  159.     {
  160.       $sth = $dbh->do(substr($res,0,length($res)-1)) or die $DBI::errstr;
  161.       $res=$query . $tmp;
  162.     }
  163.   }
  164.   $sth = $dbh->do(substr($res,0,length($res)-1)) or die $DBI::errstr;
  165. }
  166. else
  167. {
  168.   print "Inserting $opt_loop_count rows in ordern";
  169.   for ($i=0 ; $i < $opt_loop_count ; $i++)
  170.   {
  171.     $sth = $dbh->do($query . "($i,$i,$i,'ABCDEFGHIJ')") or die $DBI::errstr;
  172.   }
  173.   print "Inserting $opt_loop_count rows in reverse ordern";
  174.   for ($i=0 ; $i < $opt_loop_count ; $i++)
  175.   {
  176.     $sth = $dbh->do($query . "(" . ($total_rows-1-$i) . "," .
  177.     ($total_rows-1-$i) . "," .
  178.     ($total_rows-1-$i) . ",'BCDEFGHIJK')")
  179.       or die $DBI::errstr;
  180.   }
  181.   print "Inserting $opt_loop_count rows in random ordern";
  182.   for ($i=0 ; $i < $opt_loop_count ; $i++)
  183.   {
  184.     $sth = $dbh->do($query . "(". $random[$i] . "," . $random[$i] .
  185.     "," . $random[$i] . ",'CDEFGHIJKL')") or die $DBI::errstr;
  186.   }
  187. }
  188. $end_time=new Benchmark;
  189. print "Time for insert (" . ($total_rows) . "): " .
  190.   timestr(timediff($end_time, $loop_time),"all") . "nn";
  191. if ($opt_lock_tables)
  192. {
  193.   $sth = $dbh->do("UNLOCK TABLES") || die $DBI::errstr;
  194. }
  195. if ($opt_fast && defined($server->{vacuum}))
  196. {
  197.   $server->vacuum(1,$dbh,"bench1");
  198. }
  199. if ($opt_lock_tables)
  200. {
  201.   $sth = $dbh->do("LOCK TABLES bench1 WRITE") || die $DBI::errstr;
  202. }
  203. ####
  204. #### insert $opt_loop_count records with duplicate id
  205. ####
  206. if ($limits->{'unique_index'})
  207. {
  208.   print "Testing insert of duplicatesn";
  209.   $loop_time=new Benchmark;
  210.   for ($i=0 ; $i < $opt_loop_count ; $i++)
  211.   {
  212.     $tmpvar^= ((($tmpvar + 63) + $i)*3 % $opt_loop_count);
  213.     $tmp=$tmpvar % ($total_rows);
  214.     $tmpquery = "$query ($tmp,$tmp,2,'D')";
  215.     if ($dbh->do($tmpquery))
  216.     {
  217.       die "Didn't get an error when inserting duplicate record $tmpn";
  218.     }
  219.   }
  220.   $end_time=new Benchmark;
  221.   print "Time for insert_duplicates (" . ($opt_loop_count) . "): " .
  222.   timestr(timediff($end_time, $loop_time),"all") . "nn";
  223. }
  224. ####
  225. #### Do some selects on the table
  226. ####
  227. select_test:
  228. print "Retrieving data from the tablen";
  229. $loop_time=new Benchmark;
  230. $error=0;
  231. # It's really a small table, so we can try a select on everything
  232. $count=0;
  233. for ($i=1 ; $i <= $small_loop_count ; $i++)
  234. {
  235.   if (($found_rows=fetch_all_rows($dbh,"select id from bench1")) !=
  236.       $total_rows)
  237.   {
  238.     if (!$error++)
  239.     {
  240.       print "Warning: Got $found_rows rows when selecting a whole table of " . ($total_rows) . " rowsnContact the database or DBD author!n";
  241.     }
  242.   }
  243.   $count+=$found_rows;
  244. }
  245. $end_time=new Benchmark;
  246. print "Time for select_big ($small_loop_count:$count): " .
  247.     timestr(timediff($end_time, $loop_time),"all") . "n";
  248. #
  249. # Do a lot of different ORDER BY queries
  250. #
  251. $loop_time=new Benchmark;
  252. $estimated=$rows=0;
  253. for ($i=1 ; $i <= $small_loop_count ; $i++)
  254. {
  255.   $rows+=fetch_all_rows($dbh,"select id,id2 from bench1 order by id,id2",1);
  256.   $end_time=new Benchmark;
  257.   last if ($estimated=predict_query_time($loop_time,$end_time,$i,$i,
  258.  $small_loop_count));
  259. }
  260. if ($estimated)
  261. { print "Estimated time"; }
  262. else
  263. { print "Time"; }
  264. print " for order_by_big_key ($small_loop_count:$rows): " .
  265.   timestr(timediff($end_time, $loop_time),"all") . "n";
  266. $loop_time=new Benchmark;
  267. $estimated=$rows=0;
  268. for ($i=1 ; $i <= $small_loop_count ; $i++)
  269. {
  270.   $rows+=fetch_all_rows($dbh,"select id,id2 from bench1 order by id desc, id2 desc",1);
  271.   $end_time=new Benchmark;
  272.   last if ($estimated=predict_query_time($loop_time,$end_time,$i,$i,
  273.  $small_loop_count));
  274. }
  275. if ($estimated)
  276. { print "Estimated time"; }
  277. else
  278. { print "Time"; }
  279. print " for order_by_big_key_desc ($small_loop_count:$rows): " .
  280.   timestr(timediff($end_time, $loop_time),"all") . "n";
  281. $loop_time=new Benchmark;
  282. $estimated=$rows=0;
  283. for ($i=1 ; $i <= $small_loop_count ; $i++)
  284. {
  285.   $rows+=fetch_all_rows($dbh,"select id from bench1 order by id desc",1);
  286.   $end_time=new Benchmark;
  287.   last if ($estimated=predict_query_time($loop_time,$end_time,$i,$i,
  288.  $small_loop_count));
  289. }
  290. if ($estimated)
  291. { print "Estimated time"; }
  292. else
  293. { print "Time"; }
  294. print " for order_by_big_key_prefix ($small_loop_count:$rows): " .
  295.   timestr(timediff($end_time, $loop_time),"all") . "n";
  296. $loop_time=new Benchmark;
  297. $estimated=$rows=0;
  298. for ($i=1 ; $i <= $small_loop_count ; $i++)
  299. {
  300.   $rows+=fetch_all_rows($dbh,"select id3 from bench1 order by id3",1);
  301.   $end_time=new Benchmark;
  302.   last if ($estimated=predict_query_time($loop_time,$end_time,$i,$i,
  303.  $small_loop_count));
  304. }
  305. if ($estimated)
  306. { print "Estimated time"; }
  307. else
  308. { print "Time"; }
  309. print " for order_by_big_key2 ($small_loop_count:$rows): " .
  310.   timestr(timediff($end_time, $loop_time),"all") . "n";
  311. $sel=$limits->{'order_by_unused'} ? "id2" : "*";
  312. $loop_time=new Benchmark;
  313. $estimated=$rows=0;
  314. for ($i=1 ; $i <= $small_loop_count ; $i++)
  315. {
  316.   $rows+=fetch_all_rows($dbh,"select $sel from bench1 order by id3",1);
  317.   $end_time=new Benchmark;
  318.   last if ($estimated=predict_query_time($loop_time,$end_time,$i,$i,
  319.  $small_loop_count));
  320. }
  321. if ($estimated)
  322. { print "Estimated time"; }
  323. else
  324. { print "Time"; }
  325. print " for order_by_big_key_diff ($small_loop_count:$rows): " .
  326.   timestr(timediff($end_time, $loop_time),"all") . "n";
  327. $sel=$limits->{'order_by_unused'} ? "id" : "*";
  328. $loop_time=new Benchmark;
  329. $estimated=$rows=0;
  330. for ($i=1 ; $i <= $small_loop_count ; $i++)
  331. {
  332.   $rows+=fetch_all_rows($dbh,"select $sel from bench1 order by id2,id3",1);
  333.   $end_time=new Benchmark;
  334.   last if ($estimated=predict_query_time($loop_time,$end_time,$i,$i,
  335.  $small_loop_count));
  336. }
  337. if ($estimated)
  338. { print "Estimated time"; }
  339. else
  340. { print "Time"; }
  341. print " for order_by_big ($small_loop_count:$rows): " .
  342.   timestr(timediff($end_time, $loop_time),"all") . "n";
  343. $sel=$limits->{'order_by_unused'} ? "dummy1" : "dummy1,id3";
  344. $loop_time=new Benchmark;
  345. $estimated=$rows=0;
  346. for ($i=1 ; $i <= $range_loop_count ; $i++)
  347. {
  348.   $start=$opt_loop_count/$range_loop_count*$i;
  349.   $end=$start+$i;
  350.   $rows+=fetch_all_rows($dbh,"select $sel from bench1 where id>=$start and id <= $end order by id3",1);
  351.   $end_time=new Benchmark;
  352.   last if ($estimated=predict_query_time($loop_time,$end_time,$i,$i,
  353.  $range_loop_count));
  354. }
  355. if ($estimated)
  356. { print "Estimated time"; }
  357. else
  358. { print "Time"; }
  359. print " for order_by_range ($range_loop_count:$rows): " .
  360.   timestr(timediff($end_time, $loop_time),"all") . "n";
  361. $sel=$limits->{'order_by_unused'} ? "dummy1" : "dummy1,id";
  362. $loop_time=new Benchmark;
  363. $estimated=$rows=0;
  364. for ($i=1 ; $i <= $range_loop_count ; $i++)
  365. {
  366.   $start=$opt_loop_count/$range_loop_count*$i;
  367.   $end=$start+$i;
  368.   $rows+=fetch_all_rows($dbh,"select $sel from bench1 where id>=$start and id <= $end order by id",1);
  369.   $end_time=new Benchmark;
  370.   last if ($estimated=predict_query_time($loop_time,$end_time,$i,$i,
  371.  $range_loop_count));
  372. }
  373. if ($estimated)
  374. { print "Estimated time"; }
  375. else
  376. { print "Time"; }
  377. print " for order_by_key_prefix ($range_loop_count:$rows): " .
  378.   timestr(timediff($end_time, $loop_time),"all") . "n";
  379. $sel=$limits->{'order_by_unused'} ? "id2" : "id2,id3";
  380. $loop_time=new Benchmark;
  381. $estimated=$rows=0;
  382. for ($i=1 ; $i <= $range_loop_count ; $i++)
  383. {
  384.   $start=$opt_loop_count/$range_loop_count*$i;
  385.   $end=$start+$range_loop_count;
  386.   $rows+=fetch_all_rows($dbh,"select $sel from bench1 where id3>=$start and id3 <= $end order by id3",1);
  387.   $end_time=new Benchmark;
  388.   last if ($estimated=predict_query_time($loop_time,$end_time,$i,$i,
  389.  $range_loop_count));
  390. }
  391. if ($estimated)
  392. { print "Estimated time"; }
  393. else
  394. { print "Time"; }
  395. print " for order_by_key2_diff ($range_loop_count:$rows): " .
  396.   timestr(timediff($end_time, $loop_time),"all") . "n";
  397. #
  398. # Test of select on 2 different keys with or
  399. # (In this case database can only use keys if they do an automatic union).
  400. #
  401. $loop_time=new Benchmark;
  402. $estimated=0;
  403. $rows=0;
  404. $count=0;
  405. for ($i=1 ; $i <= $range_loop_count ; $i++)
  406. {
  407.   my $rnd=$i;
  408.   my $rnd2=$random[$i];
  409.   $rows+=fetch_all_rows($dbh,"select id2 from bench1 where id=$rnd or id3=$rnd2",1);
  410.   $count++;
  411.   $end_time=new Benchmark;
  412.   last if ($estimated=predict_query_time($loop_time,$end_time,$count,$count,
  413.  $range_loop_count));
  414. }
  415. if ($estimated)
  416. { print "Estimated time"; }
  417. else
  418. { print "Time"; }
  419. print " for select_diff_key ($count:$rows): " .
  420.   timestr(timediff($end_time, $loop_time),"all") . "n";
  421. # Test select that is very popular when using ODBC
  422. check_or_range("id","select_range_prefix");
  423. check_or_range("id3","select_range_key2");
  424. # Check reading on direct key on id and id3
  425. check_select_key("*","id","select_key_prefix");
  426. check_select_key2("*","id","id2","select_key");
  427. check_select_key2("id,id2","id","id2","select_key_return_key");
  428. check_select_key("*","id3","select_key2");
  429. check_select_key("id3","id3","select_key2_return_key");
  430. check_select_key("id,id2","id3","select_key2_return_prim");
  431. ####
  432. #### A lot of simple selects on ranges
  433. ####
  434. @Q=("select * from bench1 where !id!=3 or !id!=2 or !id!=1 or !id!=4 or !id!=16 or !id!=10",
  435.     6,
  436.     "select * from bench1 where !id!>=" . ($total_rows-1) ." or !id!<1",
  437.     2,
  438.     "select * from bench1 where !id!>=1 and !id!<=2",
  439.     2,
  440.     "select * from bench1 where (!id!>=1 and !id!<=2) or (!id!>=1 and !id!<=2)",
  441.     2,
  442.     "select * from bench1 where !id!>=1 and !id!<=10 and !id!<=5",
  443.     5,
  444.     "select * from bench1 where (!id!>0 and !id!<2) or !id!>=" . ($total_rows-1),
  445.     2,
  446.     "select * from bench1 where (!id!>0 and !id!<2) or (!id!>= " . ($opt_loop_count/2) . " and !id! <= " . ($opt_loop_count/2+2) . ") or !id! = " . ($opt_loop_count/2-1),
  447.     5,
  448.     "select * from bench1 where (!id!>=5 and !id!<=10) or (!id!>=1 and !id!<=4)",
  449.     10,
  450.     "select * from bench1 where (!id!=1 or !id!=2) and (!id!=3 or !id!=4)",
  451.     0,
  452.     "select * from bench1 where (!id!=1 or !id!=2) and (!id!=2 or !id!=3)",
  453.     1,
  454.     "select * from bench1 where (!id!=1 or !id!=5 or !id!=20 or !id!=40) and (!id!=1 or !id!>=20 or !id!=4)",
  455.     3,
  456.     "select * from bench1 where ((!id!=1 or !id!=3) or (!id!>1 and !id!<3)) and !id!<=2",
  457.     2,
  458.     "select * from bench1 where (!id! >= 0 and !id! < 4) or (!id! >=4 and !id! < 6)",
  459.     6,
  460.     "select * from bench1 where !id! <= -1 or (!id! >= 0 and !id! <= 5) or (!id! >=4 and !id! < 6) or (!id! >=6 and !id! <=7) or (!id!>7 and !id! <= 8)",
  461.     9,
  462.     "select * from bench1 where (!id!>=1 and !id!<=2 or !id!>=4 and !id!<=5) or (!id!>=0 and !id! <=10)",
  463.     11,
  464.     "select * from bench1 where (!id!>=1 and !id!<=2 or !id!>=4 and !id!<=5) or (!id!>2 and !id! <=10)",
  465.     10,
  466.     "select * from bench1 where (!id!>1 or !id! <1) and !id!<=2",
  467.     2,
  468.     "select * from bench1 where !id! <= 2 and (!id!>1 or !id! <=1)",
  469.     3,
  470.     "select * from bench1 where (!id!>=1 or !id! <1) and !id!<=2",
  471.     3,
  472.     "select * from bench1 where (!id!>=1 or !id! <=2) and !id!<=2",
  473.     3
  474.     );
  475. print "nTest of compares with simple rangesn";
  476. check_select_range("id","select_range_prefix");
  477. check_select_range("id3","select_range_key2");
  478. ####
  479. #### Some group queries
  480. ####
  481. if ($limits->{'group_functions'})
  482. {
  483.   $loop_time=new Benchmark;
  484.   $count=1;
  485.   $estimated=0;
  486.   for ($tests=0 ; $tests < $small_loop_count ; $tests++)
  487.   {
  488.     $sth=$dbh->prepare($query="select count(*) from bench1") or die $DBI::errstr;
  489.     $sth->execute or die $sth->errstr;
  490.     if (($sth->fetchrow_array)[0] != $total_rows)
  491.     {
  492.       print "Warning: '$query' returned wrong resultn";
  493.     }
  494.     $sth->finish;
  495.     # min, max in keys are very normal
  496.     $count+=7;
  497.     fetch_all_rows($dbh,"select min(id) from bench1");
  498.     fetch_all_rows($dbh,"select max(id) from bench1");
  499.     fetch_all_rows($dbh,"select sum(id+0.0) from bench1");
  500.     fetch_all_rows($dbh,"select min(id3),max(id3),sum(id3-0.0) from bench1");
  501.     if ($limits->{'group_func_sql_min_str'})
  502.     {
  503.       fetch_all_rows($dbh,"select min(dummy1),max(dummy1) from bench1");
  504.     }
  505.     $count++;
  506.     $sth=$dbh->prepare($query="select count(*) from bench1 where id >= " .
  507.        ($opt_loop_count*2)) or die $DBI::errstr;
  508.     $sth->execute or die $DBI::errstr;
  509.     if (($sth->fetchrow_array)[0] != $opt_loop_count)
  510.     {
  511.       print "Warning: '$query' returned wrong resultn";
  512.     }
  513.     $sth->finish;
  514.     $count++;
  515.     $sth=$dbh->prepare($query="select count(*),sum(id+0.0),min(id),max(id),avg(id-0.0) from bench1") or die $DBI::errstr;
  516.     $sth->execute or die $DBI::errstr;
  517.     @row=$sth->fetchrow_array;
  518.     if ($row[0] != $total_rows ||
  519. int($row[1]+0.5) != int((($total_rows-1)/2*$total_rows)+0.5) ||
  520. $row[2] != 0 ||
  521. $row[3] != $total_rows-1 ||
  522. 1-$row[4]/(($total_rows-1)/2) > 0.001)
  523.     {
  524.       # PostgreSQL 6.3 fails here
  525.       print "Warning: '$query' returned wrong result: @rown";
  526.     }
  527.     $sth->finish;
  528.     if ($limits->{'func_odbc_mod'})
  529.     {
  530.       $tmp="mod(id,10)";
  531.       if ($limits->{'func_extra_%'})
  532.       {
  533. $tmp="id % 10"; # For postgreSQL
  534.       }
  535.       $count++;
  536.       if ($limits->{'group_by_alias'}) {
  537. if (fetch_all_rows($dbh,$query=$server->query("select $tmp as last_digit,count(*) from bench1 group by last_digit")) != 10)
  538. {
  539.   print "Warning: '$query' returned wrong number of rowsn";
  540. }
  541.       } elsif ($limits->{'group_by_position'}) {
  542. if (fetch_all_rows($dbh,$query=$server->query("select $tmp,count(*) from bench1 group by 1")) != 10)
  543. {
  544.   print "Warning: '$query' returned wrong number of rowsn";
  545. }
  546.       }
  547.     }
  548.     if ($limits->{'order_by_position'} && $limits->{'group_by_position'})
  549.     {
  550.       $count++;
  551.       if (fetch_all_rows($dbh, $query="select id,id3,dummy1 from bench1 where id < 100+$count-$count group by id,id3,dummy1 order by id desc,id3,dummy1") != 100)
  552.       {
  553. print "Warning: '$query' returned wrong number of rowsn";
  554.       }
  555.     }
  556.     $end_time=new Benchmark;
  557.     last if ($estimated=predict_query_time($loop_time,$end_time,$count,$tests,
  558.    $small_loop_count));
  559.   }
  560.   print_time($estimated);
  561.   print " for select_group ($count): " .
  562.       timestr(timediff($end_time, $loop_time),"all") . "n";
  563.   $loop_time=new Benchmark;
  564.   $count=$estimated=0;
  565.   for ($tests=1 ; $tests <= $range_loop_count*5 ; $tests++)
  566.   {
  567.     $count+=6;
  568.     fetch_all_rows($dbh,"select min(id) from bench1");
  569.     fetch_all_rows($dbh,"select max(id) from bench1");
  570.     fetch_all_rows($dbh,"select min(id2) from bench1 where id=$tests");
  571.     fetch_all_rows($dbh,"select max(id2) from bench1 where id=$tests");
  572.     if ($limits->{'group_func_sql_min_str'})
  573.     {
  574.       fetch_all_rows($dbh,"select min(dummy1) from bench1 where id=$tests");
  575.       fetch_all_rows($dbh,"select max(dummy1) from bench1 where id=$tests");
  576.     }
  577.     $end_time=new Benchmark;
  578.     last if ($estimated=predict_query_time($loop_time,$end_time,$count,$tests,
  579.    $range_loop_count*5));
  580.   }
  581.   if ($estimated)
  582.   { print "Estimated time"; }
  583.   else
  584.   { print "Time"; }
  585.   print " for min_max_on_key ($count): " .
  586.       timestr(timediff($end_time, $loop_time),"all") . "n";
  587.   $loop_time=new Benchmark;
  588.   $count=$estimated=0;
  589.   for ($tests=1 ; $tests <= $small_loop_count ; $tests++)
  590.   {
  591.     $count+=6;
  592.     fetch_all_rows($dbh,"select min(id2) from bench1");
  593.     fetch_all_rows($dbh,"select max(id2) from bench1");
  594.     fetch_all_rows($dbh,"select min(id3) from bench1 where id2=$tests");
  595.     fetch_all_rows($dbh,"select max(id3) from bench1 where id2=$tests");
  596.     if ($limits->{'group_func_sql_min_str'})
  597.     {
  598.       fetch_all_rows($dbh,"select min(dummy1) from bench1 where id2=$tests");
  599.       fetch_all_rows($dbh,"select max(dummy1) from bench1 where id2=$tests");
  600.     }
  601.     $end_time=new Benchmark;
  602.     last if ($estimated=predict_query_time($loop_time,$end_time,$count,$tests,
  603.    $range_loop_count));
  604.   }
  605.   if ($estimated)
  606.   { print "Estimated time"; }
  607.   else
  608.   { print "Time"; }
  609.   print " for min_max ($count): " .
  610.       timestr(timediff($end_time, $loop_time),"all") . "n";
  611.   $loop_time=new Benchmark;
  612.   $count=0;
  613.   $total=$opt_loop_count*3;
  614.   for ($tests=0 ; $tests < $total ; $tests+=$total/100)
  615.   {
  616.     $count+=1;
  617.     fetch_all_rows($dbh,"select count(id) from bench1 where id < $tests");
  618.   }
  619.   $end_time=new Benchmark;
  620.   print "Time for count_on_key ($count): " .
  621.       timestr(timediff($end_time, $loop_time),"all") . "n";
  622.   $loop_time=new Benchmark;
  623.   $count=0;
  624.   for ($tests=0 ; $tests < $total ; $tests+=$total/100)
  625.   {
  626.     $count+=1;
  627.     fetch_all_rows($dbh,"select count(dummy1) from bench1 where id2 < $tests");
  628.   }
  629.   $end_time=new Benchmark;
  630.   print "Time for count ($count): " .
  631.       timestr(timediff($end_time, $loop_time),"all") . "n";
  632.   if ($limits->{'group_distinct_functions'})
  633.   {
  634.     $loop_time=new Benchmark;
  635.     $count=$estimated=0;
  636.     for ($tests=1 ; $tests <= $small_loop_count ; $tests++)
  637.     {
  638.       $count+=2;
  639.       fetch_all_rows($dbh,"select count(distinct dummy1) from bench1");
  640.       fetch_all_rows($dbh,"select dummy1,count(distinct id) from bench1 group by dummy1");
  641.       $end_time=new Benchmark;
  642.       last if ($estimated=predict_query_time($loop_time,$end_time,$count,$tests,
  643.      $small_loop_count));
  644.     }
  645.     if ($estimated)
  646.     { print "Estimated time"; }
  647.     else
  648.     { print "Time"; }
  649.     print " for count_distinct_big ($count): " .
  650.     timestr(timediff($end_time, $loop_time),"all") . "n";
  651.   }
  652. }
  653. if ($server->small_rollback_segment())
  654. {
  655.   $dbh->disconnect; # close connection
  656.   $dbh = $server->connect();
  657. }
  658. ####
  659. #### Some updates on the table
  660. ####
  661. $loop_time=new Benchmark;
  662. if ($limits->{'functions'})
  663. {
  664.   print "nTesting update of keys with functionsn";
  665.   my $update_loop_count=$opt_loop_count/2;
  666.   for ($i=0 ; $i < $update_loop_count ; $i++)
  667.   {
  668.     my $tmp=$opt_loop_count+$random[$i]; # $opt_loop_count*2 <= $tmp < $total_rows
  669.     $sth = $dbh->do("update bench1 set id3=-$tmp where id3=$tmp") or die $DBI::errstr;
  670.   }
  671.   $end_time=new Benchmark;
  672.   print "Time for update_of_key ($update_loop_count):  " .
  673.     timestr(timediff($end_time, $loop_time),"all") . "n";
  674.   if ($opt_lock_tables)
  675.   {
  676.     do_query($dbh,"UNLOCK TABLES");
  677.   }
  678.   if ($opt_fast && defined($server->{vacuum}))
  679.   {
  680.     $server->vacuum(1,$dbh,"bench1");
  681.   }
  682.   if ($opt_lock_tables)
  683.   {
  684.     $sth = $dbh->do("LOCK TABLES bench1 WRITE") || die $DBI::errstr;
  685.   }
  686.   if ($server->small_rollback_segment())
  687.   {
  688.     $dbh->disconnect; # close connection
  689.     $dbh = $server->connect();
  690.   }
  691.   $loop_time=new Benchmark;
  692.   $count=0;
  693.   $step=int($opt_loop_count/$range_loop_count+1);
  694.   for ($i= 0 ; $i < $opt_loop_count ; $i+= $step)
  695.   {
  696.     $count++;
  697.     $sth=$dbh->do("update bench1 set id3= 0-id3 where id3 >= 0 and id3 <= $i") or die $DBI::errstr;
  698.   }
  699.   if ($server->small_rollback_segment())
  700.   {
  701.     $dbh->disconnect; # close connection
  702.     $dbh = $server->connect();
  703.   }
  704.   $count++;
  705.   $sth=$dbh->do("update bench1 set id3= 0-id3 where id3 >= 0 and id3 < $opt_loop_count") or die $DBI::errstr;
  706.   if ($server->small_rollback_segment())
  707.   {
  708.     $dbh->disconnect; # close connection
  709.     $dbh = $server->connect();
  710.   }
  711.   $count++;
  712.   $sth=$dbh->do("update bench1 set id3= 0-id3 where id3 >= $opt_loop_count and id3 < ". ($opt_loop_count*2)) or die $DBI::errstr;
  713.   #
  714.   # Check that everything was updated
  715.   # In principle we shouldn't time this in the update loop..
  716.   #
  717.   if ($server->small_rollback_segment())
  718.   {
  719.     $dbh->disconnect; # close connection
  720.     $dbh = $server->connect();
  721.   }
  722.   $row_count=0;
  723.   if (($sth=$dbh->prepare("select count(*) from bench1 where id3>=0"))
  724.       && $sth->execute)
  725.   {
  726.     ($row_count)=$sth->fetchrow;
  727.   }
  728.   $result=1 + $opt_loop_count-$update_loop_count;
  729.   if ($row_count != $result)
  730.   {
  731.     print "Warning: Update check returned $row_count instead of $resultn";
  732.   }
  733.   $sth->finish;
  734.   if ($server->small_rollback_segment())
  735.   {
  736.     $dbh->disconnect; # close connection
  737.     $dbh = $server->connect();
  738.   }
  739.   #restore id3 to 0 <= id3 < $total_rows/10 or 0<= id3 < $total_rows
  740.   my $func=($limits->{'func_odbc_floor'}) ? "floor((0-id3)/20)" : "0-id3";
  741.   $count++;
  742.   $sth=$dbh->do($query="update bench1 set id3=$func where id3<0") or die $DBI::errstr;
  743.   $end_time=new Benchmark;
  744.   print "Time for update_of_key_big ($count): " .
  745.     timestr(timediff($end_time, $loop_time),"all") . "nn";
  746. }
  747. else
  748. {
  749.   print "nTesting update of keys in loopsn";
  750.   #
  751.   # This is for mSQL that doesn't have functions. Do we really need this ????
  752.   #
  753.   $sth=$dbh->prepare("select id3 from bench1 where id3 >= 0") or die $DBI::errstr;
  754.   $sth->execute or die $DBI::errstr;
  755.   $count=0;
  756.   while (@tmp = $sth->fetchrow_array)
  757.   {
  758.     my $tmp1 = "-$tmp[0]";
  759.     my $sth1 = $dbh->do("update bench1 set id3 = $tmp1 where id3 = $tmp[0]");
  760.     $count++;
  761.     $end_time=new Benchmark;
  762.     if (($end_time->[0] - $loop_time->[0]) > $opt_time_limit)
  763.     {
  764.       print "note: Aborting update loop because of timeoutn";
  765.       last;
  766.     }
  767.   }
  768.   $sth->finish;
  769.   # Check that everything except id3=0 was updated
  770.   # In principle we shouldn't time this in the update loop..
  771.   #
  772.   if (fetch_all_rows($dbh,$query="select * from bench1 where id3>=0") != 1)
  773.   {
  774.     if ($count == $total_rows)
  775.     {
  776.       print "Warning: Wrong information after update: Found '$row_count' rows, but should have been: 1n";
  777.     }
  778.   }
  779.   #restore id3 to 0 <= id3 < $total_rows
  780.   $sth=$dbh->prepare("select id3 from bench1 where id3 < 0") or die $DBI::errstr;
  781.   $sth->execute or die $DBI::errstr;
  782.   while (@tmp = $sth->fetchrow_array)
  783.   {
  784.     $count++;
  785.     my $tmp1 = floor((0-$tmp[0])/10);
  786.     my $sth1 = $dbh->do("update bench1 set id3 = $tmp1 where id3 = $tmp[0]");
  787.   }
  788.   $sth->finish;
  789.   $end_time=new Benchmark;
  790.   $estimated=predict_query_time($loop_time,$end_time,$count,$count,
  791. $opt_loop_count*6);
  792.   if ($estimated)
  793.   { print "Estimated time"; }
  794.   else
  795.   { print "Time"; }
  796.   print " for update_of_key ($count): " .
  797.     timestr(timediff($end_time, $loop_time),"all") . "nn";
  798. }
  799. if ($opt_fast && defined($server->{vacuum}))
  800. {
  801.   if ($opt_lock_tables)
  802.   {
  803.     do_query($dbh,"UNLOCK TABLES");
  804.   }
  805.   $server->vacuum(1,$dbh,"bench1");
  806.   if ($opt_lock_tables)
  807.   {
  808.     $sth = $dbh->do("LOCK TABLES bench1 WRITE") || die $DBI::errstr;
  809.   }
  810. }
  811. #
  812. # Testing some simple updates
  813. #
  814. print "Testing update with keyn";
  815. $loop_time=new Benchmark;
  816. for ($i=0 ; $i < $opt_loop_count*3 ; $i++)
  817. {
  818.   $sth = $dbh->do("update bench1 set dummy1='updated' where id=$i and id2=$i") or die $DBI::errstr;
  819. }
  820. $end_time=new Benchmark;
  821. print "Time for update_with_key (" . ($opt_loop_count*3) . "):  " .
  822.   timestr(timediff($end_time, $loop_time),"all") . "n";
  823. $loop_time=new Benchmark;
  824. for ($i=0 ; $i < $opt_loop_count*3 ; $i+=3)
  825. {
  826.   $sth = $dbh->do("update bench1 set dummy1='updated' where id=$i") or die $DBI::errstr;
  827. }
  828. $end_time=new Benchmark;
  829. print "Time for update_with_key_prefix (" . ($opt_loop_count) . "):  " .
  830.   timestr(timediff($end_time, $loop_time),"all") . "n";
  831. print "nTesting update of all rowsn";
  832. $loop_time=new Benchmark;
  833. for ($i=0 ; $i < $small_loop_count ; $i++)
  834. {
  835.   $sth = $dbh->do("update bench1 set dummy1='updated $i'") or die $DBI::errstr;
  836. }
  837. $end_time=new Benchmark;
  838. print "Time for update_big ($small_loop_count):  " .
  839.   timestr(timediff($end_time, $loop_time),"all") . "n";
  840. #
  841. # Testing left outer join
  842. #
  843. if ($limits->{'func_odbc_floor'} && $limits->{'left_outer_join'})
  844. {
  845.   if ($opt_lock_tables)
  846.   {
  847.     $sth = $dbh->do("LOCK TABLES bench1 a READ, bench1 b READ") || die $DBI::errstr;
  848.   }
  849.   print "nTesting left outer joinn";
  850.   $loop_time=new Benchmark;
  851.   $count=0;
  852.   for ($i=0 ; $i < $small_loop_count ; $i++)
  853.   {
  854.     $count+=fetch_all_rows($dbh,"select count(*) from bench1 as a left outer join bench1 as b on (a.id2=b.id3)");
  855.   }
  856.   $end_time=new Benchmark;
  857.   print "Time for outer_join_on_key ($small_loop_count:$count):  " .
  858.     timestr(timediff($end_time, $loop_time),"all") . "n";
  859.   $loop_time=new Benchmark;
  860.   $count=0;
  861.   for ($i=0 ; $i < $small_loop_count ; $i++)
  862.   {
  863.     $count+=fetch_all_rows($dbh,"select count(a.dummy1),count(b.dummy1) from bench1 as a left outer join bench1 as b on (a.id2=b.id3)");
  864.   }
  865.   $end_time=new Benchmark;
  866.   print "Time for outer_join ($small_loop_count:$count):  " .
  867.     timestr(timediff($end_time, $loop_time),"all") . "n";
  868.   $count=0;
  869.   $loop_time=new Benchmark;
  870.   for ($i=0 ; $i < $small_loop_count ; $i++)
  871.   {
  872.     $count+=fetch_all_rows($dbh,"select count(a.dummy1),count(b.dummy1) from bench1 as a left outer join bench1 as b on (a.id2=b.id3) where b.id3 is not null");
  873.   }
  874.   $end_time=new Benchmark;
  875.   print "Time for outer_join_found ($small_loop_count:$count):  " .
  876.     timestr(timediff($end_time, $loop_time),"all") . "n";
  877.   $count=$estimated=0;
  878.   $loop_time=new Benchmark;
  879.   for ($i=1 ; $i <= $small_loop_count ; $i++)
  880.   {
  881.     $count+=fetch_all_rows($dbh,"select count(a.dummy1),count(b.dummy1) from bench1 as a left outer join bench1 as b on (a.id2=b.id3) where b.id3 is null");
  882.     $end_time=new Benchmark;
  883.     last if ($estimated=predict_query_time($loop_time,$end_time,
  884.    $count,$i,
  885.    $range_loop_count));
  886.   }
  887.   if ($estimated)
  888.   { print "Estimated time"; }
  889.   else
  890.   { print "Time"; }
  891.   print " for outer_join_not_found ($range_loop_count:$count):  " .
  892.     timestr(timediff($end_time, $loop_time),"all") . "n";
  893.   if ($opt_lock_tables)
  894.   {
  895.     $sth = $dbh->do("LOCK TABLES bench1 WRITE") || die $DBI::errstr;
  896.   }
  897. }
  898. if ($server->small_rollback_segment())
  899. {
  900.   $dbh->disconnect; # close connection
  901.   $dbh = $server->connect();
  902. }
  903. ###
  904. ### Test speed of IN( value list)
  905. ###
  906. if ($limits->{'left_outer_join'})
  907. {
  908.   if ($opt_lock_tables)
  909.   {
  910.     $sth = $dbh->do("UNLOCK TABLES") || die $DBI::errstr;
  911.   }
  912.   print "n";
  913.   do_many($dbh,$server->create("bench2",
  914.        ["id int NOT NULL"],
  915.        ["primary key (id)"]));
  916.   $max_tests=min(($limits->{'query_size'}-50)/6, $opt_loop_count);
  917.   if ($opt_lock_tables)
  918.   {
  919.     $sth = $dbh->do("LOCK TABLES bench1 READ, bench2 WRITE") ||
  920.       die $DBI::errstr;
  921.   }
  922.   test_where_in("bench1","bench2","id",1,10);
  923.   test_where_in("bench1","bench2","id",11,min(100,$max_tests));
  924.   test_where_in("bench1","bench2","id",101,min(1000,$max_tests));
  925.   if ($opt_lock_tables)
  926.   {
  927.     $sth = $dbh->do("UNLOCK TABLES") || die $DBI::errstr;
  928.   }
  929.   $sth = $dbh->do("DROP TABLE bench2" . $server->{'drop_attr'}) ||
  930.     die $DBI::errstr;
  931.   if ($opt_lock_tables)
  932.   {
  933.     $sth = $dbh->do("LOCK TABLES bench1 WRITE") || die $DBI::errstr;
  934.   }
  935. }
  936. ####
  937. #### Test INSERT INTO ... SELECT
  938. ####
  939. if ($limits->{'insert_select'})
  940. {
  941.   if ($opt_lock_tables)
  942.   {
  943.     $sth = $dbh->do("UNLOCK TABLES") || die $DBI::errstr;
  944.   }
  945.   print "nTesting INSERT INTO ... SELECTn";
  946.   do_many($dbh,$server->create("bench2",
  947.        ["id int NOT NULL",
  948. "id2 int NOT NULL",
  949. "id3 int NOT NULL",
  950. "dummy1 char(30)"],
  951.        ["primary key (id,id2)"]));
  952.   do_many($dbh,$server->create("bench3",
  953.        ["id int NOT NULL",
  954. "id2 int NOT NULL",
  955. "id3 int NOT NULL",
  956. "dummy1 char(30)"],
  957.        ["primary key (id,id2)",
  958. "index index_id3 (id3)"]));
  959.   $loop_time=new Benchmark;
  960.   $sth = $dbh->do("INSERT INTO bench2 SELECT * from bench1") ||
  961.     die $DBI::errstr;
  962.   $end_time=new Benchmark;
  963.   print "Time for insert_select_1_key (1):  " .
  964.     timestr(timediff($end_time, $loop_time),"all") . "n";
  965.   $loop_time=new Benchmark;
  966.   $sth = $dbh->do("INSERT INTO bench3 SELECT * from bench1") ||
  967.     die $DBI::errstr;
  968.   $end_time=new Benchmark;
  969.   print "Time for insert_select_2_keys (1):  " .
  970.     timestr(timediff($end_time, $loop_time),"all") . "n";
  971.   $loop_time=new Benchmark;
  972.   $sth = $dbh->do("DROP TABLE bench2" . $server->{'drop_attr'}) ||
  973.     die $DBI::errstr;
  974.   $sth = $dbh->do("DROP TABLE bench3" . $server->{'drop_attr'}) ||
  975.     die $DBI::errstr;
  976.   $end_time=new Benchmark;
  977.   print "Time for drop table(2): " .
  978.     timestr(timediff($end_time, $loop_time),"all") . "n";
  979.   if ($opt_fast && defined($server->{vacuum}))
  980.   {
  981.     $server->vacuum(1,$dbh);
  982.   }
  983.   if ($server->small_rollback_segment())
  984.   {
  985.     $dbh->disconnect; # close connection
  986.     $dbh = $server->connect();
  987.   }
  988.   if ($opt_lock_tables)
  989.   {
  990.     $sth = $dbh->do("LOCK TABLES bench1 WRITE") || die $DBI::errstr;
  991.   }
  992. }
  993. ####
  994. #### Do some deletes on the table
  995. ####
  996. if (!$opt_skip_delete)
  997. {
  998.   print "nTesting deleten";
  999.   $loop_time=new Benchmark;
  1000.   $count=0;
  1001.   for ($i=0 ; $i < $opt_loop_count ; $i+=10)
  1002.   {
  1003.     $count++;
  1004.     $tmp=$opt_loop_count+$random[$i]; # $opt_loop_count*2 <= $tmp < $total_rows
  1005.     $dbh->do("delete from bench1 where id3=$tmp") or die $DBI::errstr;
  1006.   }
  1007.   $end_time=new Benchmark;
  1008.   print "Time for delete_key ($count): " .
  1009.     timestr(timediff($end_time, $loop_time),"all") . "n";
  1010.   if ($server->small_rollback_segment())
  1011.   {
  1012.     $dbh->disconnect; # close connection
  1013.     $dbh = $server->connect();
  1014.   }
  1015.   $count=0;
  1016.   $loop_time=new Benchmark;
  1017.   for ($i= 0 ; $i < $opt_loop_count ; $i+=$opt_loop_count/10)
  1018.   {
  1019.     $sth=$dbh->do("delete from bench1 where id3 >= 0 and id3 <= $i") or die $DBI::errstr;
  1020.     $count++;
  1021.   }
  1022.   $count+=2;
  1023.   if ($server->small_rollback_segment())
  1024.   {
  1025.     $dbh->disconnect; # close connection
  1026.     $dbh = $server->connect();
  1027.   }
  1028.   $sth=$dbh->do("delete from bench1 where id3 >= 0 and id3 <= $opt_loop_count") or die $DBI::errstr;
  1029.   if ($server->small_rollback_segment())
  1030.   {
  1031.     $dbh->disconnect; # close connection
  1032.     $dbh = $server->connect();
  1033.   }
  1034.   $sth=$dbh->do("delete from bench1 where id >= $opt_loop_count and id <= " . ($opt_loop_count*2) ) or die $DBI::errstr;
  1035.   if ($server->small_rollback_segment())
  1036.   {
  1037.     $dbh->disconnect; # close connection
  1038.     $dbh = $server->connect();
  1039.   }
  1040.   if ($opt_fast)
  1041.   {
  1042.     $sth=$dbh->do("delete from bench1") or die $DBI::errstr;
  1043.   }
  1044.   else
  1045.   {
  1046.     $sth = $dbh->do("delete from bench1 where id3 < " . ($total_rows)) or die $DBI::errstr;
  1047.   }
  1048.   $end_time=new Benchmark;
  1049.   print "Time for delete_all ($count): " .
  1050.     timestr(timediff($end_time, $loop_time),"all") . "nn";
  1051.   if ($opt_lock_tables)
  1052.   {
  1053.     $sth = $dbh->do("UNLOCK TABLES") || die $DBI::errstr;
  1054.   }
  1055.   $sth = $dbh->do("drop table bench1" . $server->{'drop_attr'}) or die $DBI::errstr;
  1056. }
  1057. if ($server->small_rollback_segment())
  1058. {
  1059.   $dbh->disconnect; # close connection
  1060.   $dbh = $server->connect();
  1061. }
  1062. if ($opt_fast && defined($server->{vacuum}))
  1063. {
  1064.   $server->vacuum(1,$dbh);
  1065. }
  1066. keys_test:
  1067. #
  1068. # Test of insert in table with many keys
  1069. # This test assumes that the server really create the keys!
  1070. #
  1071. my @fields=(); my @keys=();
  1072. $keys=min($limits->{'max_index'},16);   # 16 is more than enough
  1073. $seg= min($limits->{'max_index_parts'},$keys,16); # 16 is more than enough
  1074. print "Insert into table with $keys keys and with a primary key with $seg partsn";
  1075. # Make keys on the most important types
  1076. @types=(0,0,0,1,0,0,0,1,1,1,1,1,1,1,1,1,1); # A 1 for each char field
  1077. push(@fields,"field1 tinyint not null");
  1078. push(@fields,"field2 mediumint not null");
  1079. push(@fields,"field3 smallint not null");
  1080. push(@fields,"field4 char(16) not null");
  1081. push(@fields,"field5 integer not null");
  1082. push(@fields,"field6 float not null");
  1083. push(@fields,"field7 double not null");
  1084. for ($i=8 ; $i <= $keys ; $i++)
  1085. {
  1086.   push(@fields,"field$i char(6) not null"); # Should be relatively fair
  1087. }
  1088. # First key contains many segments
  1089. $query="primary key (";
  1090. for ($i= 1 ; $i <= $seg ; $i++)
  1091. {
  1092.   $query.= "field$i,";
  1093. }
  1094. substr($query,-1)=")";
  1095. push (@keys,$query);
  1096. #Create other keys
  1097. for ($i=2 ; $i <= $keys ; $i++)
  1098. {
  1099.   push(@keys,"index index$i (field$i)");
  1100. }
  1101. do_many($dbh,$server->create("bench1",@fields,@keys));
  1102. if ($opt_lock_tables)
  1103. {
  1104.   $dbh->do("LOCK TABLES bench1 WRITE") || die $DBI::errstr;
  1105. }
  1106. if ($server->small_rollback_segment())
  1107. {
  1108.   $dbh->disconnect; # close connection
  1109.   $dbh = $server->connect();
  1110. }
  1111. $loop_time=new Benchmark;
  1112. $fields=$#fields;
  1113. if (($opt_fast || $opt_fast_insert) && $server->{'limits'}->{'insert_multi_value'})
  1114. {
  1115.   $query_size=$server->{'limits'}->{'query_size'};
  1116.   $query="insert into bench1 values ";
  1117.   $res=$query;
  1118.   for ($i=0; $i < $many_keys_loop_count; $i++)
  1119.   {
  1120.     $rand=$random[$i];
  1121.     $tmp="(" . ($i & 127) . ",$rand," . ($i & 32766) .
  1122.       ",'ABCDEF$rand',0,";
  1123.     for ($j=5; $j <= $fields ; $j++)
  1124.     {
  1125.       $tmp.= ($types[$j] == 0) ? "$rand," : "'$rand',";
  1126.     }
  1127.     substr($tmp,-1)=")";
  1128.     if (length($tmp)+length($res) < $query_size)
  1129.     {
  1130.       $res.= $tmp . ",";
  1131.     }
  1132.     else
  1133.     {
  1134.       $sth = $dbh->do(substr($res,0,length($res)-1)) or die $DBI::errstr;
  1135.       $res=$query . $tmp . ",";
  1136.     }
  1137.   }
  1138.   $sth = $dbh->do(substr($res,0,length($res)-1)) or die $DBI::errstr;
  1139. }
  1140. else
  1141. {
  1142.   for ($i=0; $i < $many_keys_loop_count; $i++)
  1143.   {
  1144.     $rand=$random[$i];
  1145.     $query="insert into bench1 values (" . ($i & 127) . ",$rand," . ($i & 32767) .
  1146.       ",'ABCDEF$rand',0,";
  1147.     for ($j=5; $j <= $fields ; $j++)
  1148.     {
  1149.       $query.= ($types[$j] == 0) ? "$rand," : "'$rand',";
  1150.     }
  1151.     substr($query,-1)=")";
  1152.     print "query1: $queryn" if ($opt_debug);
  1153.     $dbh->do($query) or die "Got error $DBI::errstr with query: $queryn";
  1154.   }
  1155. }
  1156. $end_time=new Benchmark;
  1157. print "Time for insert_key ($many_keys_loop_count): " .
  1158.   timestr(timediff($end_time, $loop_time),"all") . "nn";
  1159. if ($server->small_rollback_segment())
  1160. {
  1161.   $dbh->disconnect; # close connection
  1162.   $dbh = $server->connect();
  1163. }
  1164. if ($opt_fast && defined($server->{vacuum}))
  1165. {
  1166.   if ($opt_lock_tables)
  1167.   {
  1168.     do_query($dbh,"UNLOCK TABLES");
  1169.   }
  1170.   $server->vacuum(1,$dbh,"bench1");
  1171.   if ($opt_lock_tables)
  1172.   {
  1173.     $sth = $dbh->do("LOCK TABLES bench1 WRITE") || die $DBI::errstr;
  1174.   }
  1175. }
  1176. #
  1177. # update one key of the above
  1178. #
  1179. print "Testing update of keysn";
  1180. $loop_time=new Benchmark;
  1181. for ($i=0 ; $i< 256; $i++)
  1182. {
  1183.   $dbh->do("update bench1 set field5=1 where field1=$i")
  1184.     or die "Got error $DBI::errstr with query: update bench1 set field5=1 where field1=$in";
  1185. }
  1186. $end_time=new Benchmark;
  1187. print "Time for update_of_primary_key_many_keys (256): " .
  1188.   timestr(timediff($end_time, $loop_time),"all") . "nn";
  1189. if ($server->small_rollback_segment())
  1190. {
  1191.   $dbh->disconnect; # close connection
  1192.   $dbh = $server->connect();
  1193. }
  1194. if ($opt_fast && defined($server->{vacuum}))
  1195. {
  1196.   if ($opt_lock_tables)
  1197.   {
  1198.     do_query($dbh,"UNLOCK TABLES");
  1199.   }
  1200.   $server->vacuum(1,$dbh,"bench1");
  1201.   if ($opt_lock_tables)
  1202.   {
  1203.     $sth = $dbh->do("LOCK TABLES bench1 WRITE") || die $DBI::errstr;
  1204.   }
  1205. }
  1206. if ($server->small_rollback_segment())
  1207. {
  1208.   $dbh->disconnect; # close connection
  1209.   $dbh = $server->connect();
  1210. }
  1211. #
  1212. # Delete everything from table
  1213. #
  1214. print "Deleting rows from the tablen";
  1215. $loop_time=new Benchmark;
  1216. $count=0;
  1217. for ($i=0 ; $i < 128 ; $i++)
  1218. {
  1219.   $count++;
  1220.   $dbh->do("delete from bench1 where field1 = $i") or die $DBI::errstr;
  1221. }
  1222. $end_time=new Benchmark;
  1223. print "Time for delete_big_many_keys ($count): " .
  1224. timestr(timediff($end_time, $loop_time),"all") . "nn";
  1225. print "Deleting everything from tablen";
  1226. $count=1;
  1227. if ($opt_fast)
  1228. {
  1229.   $dbh->do("delete from bench1") or die $DBI::errstr;
  1230. }
  1231. else
  1232. {
  1233.   $dbh->do("delete from bench1 where field1 > 0") or die $DBI::errstr;
  1234. }
  1235. if ($opt_lock_tables)
  1236. {
  1237.   $sth = $dbh->do("UNLOCK TABLES") || die $DBI::errstr;
  1238. }
  1239. $end_time=new Benchmark;
  1240. print "Time for delete_all_many_keys ($count): " .
  1241.   timestr(timediff($end_time, $loop_time),"all") . "nn";
  1242. $sth = $dbh->do("drop table bench1" . $server->{'drop_attr'}) or die $DBI::errstr;
  1243. if ($opt_fast && defined($server->{vacuum}))
  1244. {
  1245.   $server->vacuum(1,$dbh);
  1246. }
  1247. #
  1248. # Test multi value inserts if the server supports it
  1249. #
  1250. if ($limits->{'insert_multi_value'})
  1251. {
  1252.   $query_size=$limits->{'query_size'}; # Same limit for all databases
  1253.   $sth = $dbh->do("drop table bench1" . $server->{'drop_attr'});
  1254.   do_many($dbh,$server->create("bench1",
  1255.        ["id int NOT NULL",
  1256. "id2 int NOT NULL",
  1257. "id3 int NOT NULL",
  1258. "dummy1 char(30)"],
  1259.        ["primary key (id,id2)",
  1260.        "index index_id3 (id3)"]));
  1261.   if ($opt_lock_tables)
  1262.   {
  1263.     $sth = $dbh->do("LOCK TABLES bench1 write") || die $DBI::errstr;
  1264.   }
  1265.   $loop_time=new Benchmark;
  1266.   print "Inserting $opt_loop_count rows with multiple valuesn";
  1267.   $query="insert into bench1 values ";
  1268.   $res=$query;
  1269.   for ($i=0 ; $i < $opt_loop_count ; $i++)
  1270.   {
  1271.     my $tmp= "($i,$i,$i,'EFGHIJKLM'),";
  1272.     if (length($i)+length($res) < $query_size)
  1273.     {
  1274.       $res.= $tmp;
  1275.     }
  1276.     else
  1277.     {
  1278.       do_query($dbh,substr($res,0,length($res)-1));
  1279.       $res=$query .$tmp;
  1280.     }
  1281.   }
  1282.   do_query($dbh,substr($res,0,length($res)-1));
  1283.   if ($opt_lock_tables)
  1284.   {
  1285.     $sth = $dbh->do("UNLOCK TABLES ") || die $DBI::errstr;
  1286.   }
  1287.   $end_time=new Benchmark;
  1288.   print "Time for multiple_value_insert (" . ($opt_loop_count) . "): " .
  1289.     timestr(timediff($end_time, $loop_time),"all") . "nn";
  1290.   if ($opt_lock_tables)
  1291.   {
  1292.     $sth = $dbh->do("UNLOCK TABLES ") || die $DBI::errstr;
  1293.   }
  1294.   # A big table may take a while to drop
  1295.   $loop_time=new Benchmark;
  1296.   $sth = $dbh->do("drop table bench1" . $server->{'drop_attr'}) or die $DBI::errstr;
  1297.   $end_time=new Benchmark;
  1298.   print "Time for drop table(1): " .
  1299.     timestr(timediff($end_time, $loop_time),"all") . "nn";
  1300. }
  1301. ####
  1302. #### End of benchmark
  1303. ####
  1304. $dbh->disconnect; # close connection
  1305. end_benchmark($start_time);
  1306. ###
  1307. ### Some help functions
  1308. ###
  1309. # Do some sample selects on direct key
  1310. # First select finds a row, the second one doesn't find.
  1311. sub check_select_key
  1312. {
  1313.   my ($sel_columns,$column,$check)= @_;
  1314.   my ($loop_time,$end_time,$i,$tmp_var,$tmp,$count,$row_count,$estimated);
  1315.   $estimated=0;
  1316.   $loop_time=new Benchmark;
  1317.   $count=0;
  1318.   for ($i=1 ; $i <= $opt_read_key_loop_count; $i++)
  1319.   {
  1320.     $count+=2;
  1321.     $tmpvar^= ((($tmpvar + 63) + $i)*3 % $opt_loop_count);
  1322.     $tmp=$tmpvar % ($total_rows);
  1323.     fetch_all_rows($dbh,"select $sel_columns from bench1 where $column=$tmp")
  1324.       or die $DBI::errstr;
  1325.     $tmp+=$total_rows;
  1326.     defined($row_count=fetch_all_rows($dbh,"select $sel_columns from bench1 where $column=$tmp")) or die $DBI::errstr;
  1327.     die "Found $row_count rows on impossible id: $tmpn" if ($row_count);
  1328.     $end_time=new Benchmark;
  1329.     last if ($estimated=predict_query_time($loop_time,$end_time,$count,$i,
  1330.    $opt_loop_count));
  1331.   }
  1332.   if ($estimated)
  1333.   { print "Estimated time"; }
  1334.   else
  1335.   { print "Time"; }
  1336.   print " for $check ($count): " .
  1337.     timestr(timediff($end_time, $loop_time),"all") . "n";
  1338. }
  1339. # Same as above, but select on 2 columns
  1340. sub check_select_key2
  1341. {
  1342.   my ($sel_columns,$column,$column2,$check)= @_;
  1343.   my ($loop_time,$end_time,$i,$tmp_var,$tmp,$count,$row_count,$estimated);
  1344.   $estimated=0;
  1345.   $loop_time=new Benchmark;
  1346.   $count=0;
  1347.   for ($i=1 ; $i <= $opt_read_key_loop_count; $i++)
  1348.   {
  1349.     $count+=2;
  1350.     $tmpvar^= ((($tmpvar + 63) + $i)*3 % $opt_loop_count);
  1351.     $tmp=$tmpvar % ($total_rows);
  1352.     fetch_all_rows($dbh,"select $sel_columns from bench1 where $column=$tmp and $column2=$tmp")
  1353.       or die $DBI::errstr;
  1354.     $tmp+=$total_rows;
  1355.     defined($row_count=fetch_all_rows($dbh,"select $sel_columns from bench1 where $column=$tmp and $column2=$tmp")) or die $DBI::errstr;
  1356.     die "Found $row_count rows on impossible id: $tmpn" if ($row_count);
  1357.     $end_time=new Benchmark;
  1358.     last if ($estimated=predict_query_time($loop_time,$end_time,$count,$i,
  1359.    $opt_loop_count));
  1360.   }
  1361.   if ($estimated)
  1362.   { print "Estimated time"; }
  1363.   else
  1364.   { print "Time"; }
  1365.   print " for $check ($count): " .
  1366.     timestr(timediff($end_time, $loop_time),"all") . "n";
  1367. }
  1368. #
  1369. # Search using some very simple queries
  1370. #
  1371. sub check_select_range
  1372. {
  1373.   my ($column,$check)= @_;
  1374.   my ($loop_time,$end_time,$i,$tmp_var,$tmp,$query,$rows,$estimated);
  1375.   $estimated=0;
  1376.   $loop_time=new Benchmark;
  1377.   $found=$count=0;
  1378.   for ($test=1 ; $test <= $range_loop_count; $test++)
  1379.   {
  1380.     $count+=$#Q+1;
  1381.     for ($i=0 ; $i < $#Q ; $i+=2)
  1382.     {
  1383.       $query=$Q[$i];
  1384.       $rows=$Q[$i+1];
  1385.       $query =~ s/!id!/$column/g;
  1386.       if (($row_count=fetch_all_rows($dbh,$query)) != $rows)
  1387.       {
  1388. if ($row_count == undef())
  1389. {
  1390.   die "Got error: $DBI::errstr when executing $queryn";
  1391. }
  1392. die "'$query' returned wrong number of rows: $row_count instead of $rowsn";
  1393.       }
  1394.       $found+=$row_count;
  1395.     }
  1396.     $end_time=new Benchmark;
  1397.     last if ($estimated=predict_query_time($loop_time,$end_time,$count,$test,
  1398.    $range_loop_count));
  1399.   }
  1400.   if ($estimated)
  1401.   { print "Estimated time"; }
  1402.   else
  1403.   { print "Time"; }
  1404.   print " for $check ($count:$found): " .
  1405.     timestr(timediff($end_time, $loop_time),"all") . "n";
  1406. }
  1407. #
  1408. # SELECT * from bench where col=x or col=x or col=x ...
  1409. sub check_or_range
  1410. {
  1411.   my ($column,$check)= @_;
  1412.   my ($loop_time,$end_time,$i,$tmp_var,$tmp,$columns,$estimated,$found,
  1413.       $or_part,$count,$loop_count);
  1414.   $columns=min($limits->{'max_columns'},50,($limits->{'query_size'}-50)/13);
  1415.   $columns=$columns- ($columns % 4); # Make Divisible by 4
  1416.   $estimated=0;
  1417.   $loop_time=new Benchmark;
  1418.   $found=0;
  1419.   # The number of tests must be divisible by the following
  1420.   $tmp= $limits->{'func_extra_in_num'} ? 15 : 10; 
  1421.   # We need to calculate the exact number of test to make 'Estimated' right
  1422.   $loop_count=$range_loop_count*10+$tmp-1;
  1423.   $loop_count=$loop_count- ($loop_count % $tmp);
  1424.   
  1425.   for ($count=0 ; $count < $loop_count ; )
  1426.   {
  1427.     for ($rowcnt=0; $rowcnt <= $columns; $rowcnt+= $columns/4)
  1428.     {
  1429.       my $query="select * from bench1 where ";
  1430.       my $or_part= "$column = 1";
  1431.       $count+=2;
  1432.       for ($i=1 ; $i < $rowcnt ; $i++)
  1433.       {
  1434. $tmpvar^= ((($tmpvar + 63) + $i)*3 % $opt_loop_count);
  1435. $tmp=$tmpvar % ($opt_loop_count*4);
  1436. $or_part.=" or $column=$tmp";
  1437.       }
  1438.       print $query . $or_part . "n" if ($opt_debug);
  1439.       ($rows=fetch_all_rows($dbh,$query . $or_part)) or die $DBI::errstr;
  1440.       $found+=$rows;
  1441.       if ($limits->{'func_extra_in_num'})
  1442.       {
  1443. my $in_part=$or_part; # Same query, but use 'func_extra_in_num' instead.
  1444. $in_part=~ s/ = / IN (/;
  1445. $in_part=~ s/ or $column=/,/g;
  1446. $in_part.= ")";
  1447. fetch_all_rows($dbh,$query . $in_part) or die $DBI::errstr;
  1448. $count++;
  1449.       }
  1450.       # Do it a little harder by setting a extra range
  1451.       defined(($rows=fetch_all_rows($dbh,"$query($or_part) and $column < 10"))) or die $DBI::errstr;
  1452.       $found+=$rows;
  1453.     }
  1454.     $end_time=new Benchmark;
  1455.     last if ($estimated=predict_query_time($loop_time,$end_time,$count,$count,
  1456.    $loop_count));
  1457.   }
  1458.   if ($estimated)
  1459.   { print "Estimated time"; }
  1460.   else
  1461.   { print "Time"; }
  1462.   print " for $check ($count:$found): " .
  1463.     timestr(timediff($end_time, $loop_time),"all") . "n";
  1464. }
  1465. #
  1466. # General test of SELECT ... WHERE id in(value-list)
  1467. #
  1468. sub test_where_in
  1469. {
  1470.   my ($t1,$t2,$id,$from,$to)= @_;
  1471.   return if ($from >= $to);
  1472.   $query="SELECT $t1.* FROM $t1 WHERE $id IN (";
  1473.   for ($i=1 ; $i <= $to ; $i++)
  1474.   {
  1475.     $query.="$i,";
  1476.   }
  1477.   $query=substr($query,0,length($query)-1) . ")";
  1478.   # Fill join table to have the same id's as 'query'
  1479.   for ($i= $from ; $i <= $to ; $i++)
  1480.   {
  1481.     $dbh->do("insert into $t2 values($i)") or die $DBI::errstr;
  1482.   }
  1483.   if ($opt_fast && defined($server->{vacuum}))
  1484.   {
  1485.     $server->vacuum(1,$dbh,"bench1");
  1486.   }
  1487.   time_fetch_all_rows("Testing SELECT ... WHERE id in ($to values)",
  1488.       "select_in", $query, $dbh,
  1489.       $range_loop_count);
  1490.   time_fetch_all_rows(undef, "select_join_in",
  1491.       "SELECT $t1.* FROM $t2 left outer join $t1 on ($t1.$id=$t2.$id)",
  1492.        $dbh, $range_loop_count);
  1493. }