mi_write.c
上传用户:romrleung
上传日期:2022-05-23
资源大小:18897k
文件大小:31k
源码类别:

MySQL数据库

开发平台:

Visual C++

  1. /* Copyright (C) 2000 MySQL AB & MySQL Finland AB & TCX DataKonsult AB
  2.    This program is free software; you can redistribute it and/or modify
  3.    it under the terms of the GNU General Public License as published by
  4.    the Free Software Foundation; either version 2 of the License, or
  5.    (at your option) any later version.
  6.    This program is distributed in the hope that it will be useful,
  7.    but WITHOUT ANY WARRANTY; without even the implied warranty of
  8.    MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the
  9.    GNU General Public License for more details.
  10.    You should have received a copy of the GNU General Public License
  11.    along with this program; if not, write to the Free Software
  12.    Foundation, Inc., 59 Temple Place, Suite 330, Boston, MA  02111-1307  USA */
  13. /* Write a row to a MyISAM table */
  14. #include "fulltext.h"
  15. #include "rt_index.h"
  16. #define MAX_POINTER_LENGTH 8
  17. /* Functions declared in this file */
  18. static int w_search(MI_INFO *info,MI_KEYDEF *keyinfo,
  19.     uint comp_flag, uchar *key,
  20.     uint key_length, my_off_t pos, uchar *father_buff,
  21.     uchar *father_keypos, my_off_t father_page,
  22.     my_bool insert_last);
  23. static int _mi_balance_page(MI_INFO *info,MI_KEYDEF *keyinfo,uchar *key,
  24.     uchar *curr_buff,uchar *father_buff,
  25.     uchar *father_keypos,my_off_t father_page);
  26. static uchar *_mi_find_last_pos(MI_KEYDEF *keyinfo, uchar *page,
  27. uchar *key, uint *return_key_length,
  28. uchar **after_key);
  29. int _mi_ck_write_tree(register MI_INFO *info, uint keynr,uchar *key,
  30.       uint key_length);
  31. int _mi_ck_write_btree(register MI_INFO *info, uint keynr,uchar *key,
  32.        uint key_length);
  33. /* Write new record to database */
  34. int mi_write(MI_INFO *info, byte *record)
  35. {
  36.   MYISAM_SHARE *share=info->s;
  37.   uint i;
  38.   int save_errno;
  39.   my_off_t filepos;
  40.   uchar *buff;
  41.   my_bool lock_tree= share->concurrent_insert;
  42.   DBUG_ENTER("mi_write");
  43.   DBUG_PRINT("enter",("isam: %d  data: %d",info->s->kfile,info->dfile));
  44.   if (share->options & HA_OPTION_READ_ONLY_DATA)
  45.   {
  46.     DBUG_RETURN(my_errno=EACCES);
  47.   }
  48.   if (_mi_readinfo(info,F_WRLCK,1))
  49.     DBUG_RETURN(my_errno);
  50.   dont_break(); /* Dont allow SIGHUP or SIGINT */
  51. #if !defined(NO_LOCKING) && defined(USE_RECORD_LOCK)
  52.   if (!info->locked && my_lock(info->dfile,F_WRLCK,0L,F_TO_EOF,
  53.        MYF(MY_SEEK_NOT_DONE) | info->lock_wait))
  54.     goto err;
  55. #endif
  56.   filepos= ((share->state.dellink != HA_OFFSET_ERROR) ?
  57.     share->state.dellink :
  58.     info->state->data_file_length);
  59.   if (share->base.reloc == (ha_rows) 1 &&
  60.       share->base.records == (ha_rows) 1 &&
  61.       info->state->records == (ha_rows) 1)
  62.   { /* System file */
  63.     my_errno=HA_ERR_RECORD_FILE_FULL;
  64.     goto err2;
  65.   }
  66.   if (info->state->key_file_length >= share->base.margin_key_file_length)
  67.   {
  68.     my_errno=HA_ERR_INDEX_FILE_FULL;
  69.     goto err2;
  70.   }
  71.   if (_mi_mark_file_changed(info))
  72.     goto err2;
  73.   /* Calculate and check all unique constraints */
  74.   for (i=0 ; i < share->state.header.uniques ; i++)
  75.   {
  76.     if (mi_check_unique(info,share->uniqueinfo+i,record,
  77.      mi_unique_hash(share->uniqueinfo+i,record),
  78.      HA_OFFSET_ERROR))
  79.       goto err2;
  80.   }
  81. /* Write all keys to indextree */
  82.   buff=info->lastkey2;
  83.   for (i=0 ; i < share->base.keys ; i++)
  84.   {
  85.     if (((ulonglong) 1 << i) & share->state.key_map)
  86.     {
  87.       bool local_lock_tree= (lock_tree &&
  88.      !(info->bulk_insert &&
  89.        is_tree_inited(&info->bulk_insert[i])));
  90.       if (local_lock_tree)
  91.       {
  92. rw_wrlock(&share->key_root_lock[i]);
  93. share->keyinfo[i].version++;
  94.       }
  95.       if (share->keyinfo[i].flag & HA_FULLTEXT )
  96.       {
  97.         if (_mi_ft_add(info,i,(char*) buff,record,filepos))
  98.         {
  99.   if (local_lock_tree)
  100.     rw_unlock(&share->key_root_lock[i]);
  101.           DBUG_PRINT("error",("Got error: %d on write",my_errno));
  102.           goto err;
  103.         }
  104.       }
  105.       else
  106.       {
  107.         if (share->keyinfo[i].ck_insert(info,i,buff,
  108. _mi_make_key(info,i,buff,record,filepos)))
  109.         {
  110.           if (local_lock_tree)
  111.             rw_unlock(&share->key_root_lock[i]);
  112.           DBUG_PRINT("error",("Got error: %d on write",my_errno));
  113.           goto err;
  114.         }
  115.       }
  116.       if (local_lock_tree)
  117.         rw_unlock(&share->key_root_lock[i]);
  118.     }
  119.   }
  120.   if (share->calc_checksum)
  121.     info->checksum=(*share->calc_checksum)(info,record);
  122.   if (!(info->opt_flag & OPT_NO_ROWS))
  123.   {
  124.     if ((*share->write_record)(info,record))
  125.       goto err;
  126.     share->state.checksum+=info->checksum;
  127.   }
  128.   if (share->base.auto_key)
  129.     update_auto_increment(info,record);
  130.   info->update= (HA_STATE_CHANGED | HA_STATE_AKTIV | HA_STATE_WRITTEN |
  131.  HA_STATE_ROW_CHANGED);
  132.   info->state->records++;
  133.   info->lastpos=filepos;
  134.   myisam_log_record(MI_LOG_WRITE,info,record,filepos,0);
  135.   VOID(_mi_writeinfo(info, WRITEINFO_UPDATE_KEYFILE));
  136.   if (info->invalidator != 0)
  137.   {
  138.     DBUG_PRINT("info", ("invalidator... '%s' (update)", info->filename));
  139.     (*info->invalidator)(info->filename);
  140.     info->invalidator=0;
  141.   }
  142.   allow_break(); /* Allow SIGHUP & SIGINT */
  143.   DBUG_RETURN(0);
  144. err:
  145.   save_errno=my_errno;
  146.   if (my_errno == HA_ERR_FOUND_DUPP_KEY || my_errno == HA_ERR_RECORD_FILE_FULL ||
  147.       my_errno == HA_ERR_NULL_IN_SPATIAL)
  148.   {
  149.     if (info->bulk_insert)
  150.     {
  151.       uint j;
  152.       for (j=0 ; j < share->base.keys ; j++)
  153.         mi_flush_bulk_insert(info, j);
  154.     }
  155.     info->errkey= (int) i;
  156.     while ( i-- > 0)
  157.     {
  158.       if (((ulonglong) 1 << i) & share->state.key_map)
  159.       {
  160. bool local_lock_tree= (lock_tree &&
  161.        !(info->bulk_insert &&
  162.  is_tree_inited(&info->bulk_insert[i])));
  163. if (local_lock_tree)
  164.   rw_wrlock(&share->key_root_lock[i]);
  165. if (share->keyinfo[i].flag & HA_FULLTEXT)
  166.         {
  167.           if (_mi_ft_del(info,i,(char*) buff,record,filepos))
  168.   {
  169.     if (local_lock_tree)
  170.       rw_unlock(&share->key_root_lock[i]);
  171.             break;
  172.   }
  173.         }
  174.         else
  175. {
  176.   uint key_length=_mi_make_key(info,i,buff,record,filepos);
  177.   if (_mi_ck_delete(info,i,buff,key_length))
  178.   {
  179.     if (local_lock_tree)
  180.       rw_unlock(&share->key_root_lock[i]);
  181.     break;
  182.   }
  183. }
  184. if (local_lock_tree)
  185.   rw_unlock(&share->key_root_lock[i]);
  186.       }
  187.     }
  188.   }
  189.   else
  190.     mi_mark_crashed(info);
  191.   info->update= (HA_STATE_CHANGED | HA_STATE_WRITTEN | HA_STATE_ROW_CHANGED);
  192.   my_errno=save_errno;
  193. err2:
  194.   save_errno=my_errno;
  195.   myisam_log_record(MI_LOG_WRITE,info,record,filepos,my_errno);
  196.   VOID(_mi_writeinfo(info,WRITEINFO_UPDATE_KEYFILE));
  197.   allow_break(); /* Allow SIGHUP & SIGINT */
  198.   DBUG_RETURN(my_errno=save_errno);
  199. } /* mi_write */
  200. /* Write one key to btree */
  201. int _mi_ck_write(MI_INFO *info, uint keynr, uchar *key, uint key_length)
  202. {
  203.   DBUG_ENTER("_mi_ck_write");
  204.   if (info->bulk_insert && is_tree_inited(&info->bulk_insert[keynr]))
  205.   {
  206.     DBUG_RETURN(_mi_ck_write_tree(info, keynr, key, key_length));
  207.   }
  208.   else
  209.   {
  210.     DBUG_RETURN(_mi_ck_write_btree(info, keynr, key, key_length));
  211.   }
  212. } /* _mi_ck_write */
  213. /**********************************************************************
  214.  *                Normal insert code                                  *
  215.  **********************************************************************/
  216. int _mi_ck_write_btree(register MI_INFO *info, uint keynr, uchar *key,
  217.        uint key_length)
  218. {
  219.   int error;
  220.   uint comp_flag;
  221.   MI_KEYDEF *keyinfo=info->s->keyinfo+keynr;
  222.   my_off_t  *root=&info->s->state.key_root[keynr];
  223.   DBUG_ENTER("_mi_ck_write_btree");
  224.   if (keyinfo->flag & HA_SORT_ALLOWS_SAME)
  225.     comp_flag=SEARCH_BIGGER; /* Put after same key */
  226.   else if (keyinfo->flag & (HA_NOSAME|HA_FULLTEXT))
  227.   {
  228.     comp_flag=SEARCH_FIND | SEARCH_UPDATE; /* No dupplicates */
  229.     if (keyinfo->flag & HA_NULL_ARE_EQUAL)
  230.       comp_flag|= SEARCH_NULL_ARE_EQUAL;
  231.   }
  232.   else
  233.     comp_flag=SEARCH_SAME; /* Keys in rec-pos order */
  234.   error=_mi_ck_real_write_btree(info, keyinfo, key, key_length,
  235.                                 root, comp_flag);
  236.   if (info->ft1_to_ft2)
  237.   {
  238.     if (!error)
  239.       error= _mi_ft_convert_to_ft2(info, keynr, key);
  240.     delete_dynamic(info->ft1_to_ft2);
  241.     my_free((gptr)info->ft1_to_ft2, MYF(0));
  242.     info->ft1_to_ft2=0;
  243.   }
  244.   DBUG_RETURN(error);
  245. } /* _mi_ck_write_btree */
  246. int _mi_ck_real_write_btree(MI_INFO *info, MI_KEYDEF *keyinfo,
  247.     uchar *key, uint key_length, my_off_t *root, uint comp_flag)
  248. {
  249.   int error;
  250.   DBUG_ENTER("_mi_ck_real_write_btree");
  251.   /* key_length parameter is used only if comp_flag is SEARCH_FIND */
  252.   if (*root == HA_OFFSET_ERROR ||
  253.       (error=w_search(info, keyinfo, comp_flag, key, key_length,
  254.       *root, (uchar *) 0, (uchar*) 0,
  255.       (my_off_t) 0, 1)) > 0)
  256.     error=_mi_enlarge_root(info,keyinfo,key,root);
  257.   DBUG_RETURN(error);
  258. } /* _mi_ck_real_write_btree */
  259. /* Make a new root with key as only pointer */
  260. int _mi_enlarge_root(MI_INFO *info, MI_KEYDEF *keyinfo, uchar *key,
  261.                      my_off_t *root)
  262. {
  263.   uint t_length,nod_flag;
  264.   MI_KEY_PARAM s_temp;
  265.   MYISAM_SHARE *share=info->s;
  266.   DBUG_ENTER("_mi_enlarge_root");
  267.   nod_flag= (*root != HA_OFFSET_ERROR) ?  share->base.key_reflength : 0;
  268.   _mi_kpointer(info,info->buff+2,*root); /* if nod */
  269.   t_length=(*keyinfo->pack_key)(keyinfo,nod_flag,(uchar*) 0,
  270. (uchar*) 0, (uchar*) 0, key,&s_temp);
  271.   mi_putint(info->buff,t_length+2+nod_flag,nod_flag);
  272.   (*keyinfo->store_key)(keyinfo,info->buff+2+nod_flag,&s_temp);
  273.   info->buff_used=info->page_changed=1; /* info->buff is used */
  274.   if ((*root= _mi_new(info,keyinfo,DFLT_INIT_HITS)) == HA_OFFSET_ERROR ||
  275.       _mi_write_keypage(info,keyinfo,*root,DFLT_INIT_HITS,info->buff))
  276.     DBUG_RETURN(-1);
  277.   DBUG_RETURN(0);
  278. } /* _mi_enlarge_root */
  279. /*
  280.   Search after a position for a key and store it there
  281.   Returns -1 = error
  282.    0  = ok
  283.    1  = key should be stored in higher tree
  284. */
  285. static int w_search(register MI_INFO *info, register MI_KEYDEF *keyinfo,
  286.     uint comp_flag, uchar *key, uint key_length, my_off_t page,
  287.     uchar *father_buff, uchar *father_keypos,
  288.     my_off_t father_page, my_bool insert_last)
  289. {
  290.   int error,flag;
  291.   uint nod_flag, search_key_length;
  292.   uchar *temp_buff,*keypos;
  293.   uchar keybuff[MI_MAX_KEY_BUFF];
  294.   my_bool was_last_key;
  295.   my_off_t next_page, dupp_key_pos;
  296.   DBUG_ENTER("w_search");
  297.   DBUG_PRINT("enter",("page: %ld",page));
  298.   search_key_length= (comp_flag & SEARCH_FIND) ? key_length : USE_WHOLE_KEY;
  299.   if (!(temp_buff= (uchar*) my_alloca((uint) keyinfo->block_length+
  300.       MI_MAX_KEY_BUFF*2)))
  301.     DBUG_RETURN(-1);
  302.   if (!_mi_fetch_keypage(info,keyinfo,page,DFLT_INIT_HITS,temp_buff,0))
  303.     goto err;
  304.   flag=(*keyinfo->bin_search)(info,keyinfo,temp_buff,key,search_key_length,
  305.       comp_flag, &keypos, keybuff, &was_last_key);
  306.   nod_flag=mi_test_if_nod(temp_buff);
  307.   if (flag == 0)
  308.   {
  309.     uint tmp_key_length;
  310. /* get position to record with duplicated key */
  311.     tmp_key_length=(*keyinfo->get_key)(keyinfo,nod_flag,&keypos,keybuff);
  312.     if (tmp_key_length)
  313.       dupp_key_pos=_mi_dpos(info,0,keybuff+tmp_key_length);
  314.     else
  315.       dupp_key_pos= HA_OFFSET_ERROR;
  316.     if (keyinfo->flag & HA_FULLTEXT)
  317.     {
  318.       uint off;
  319.       int  subkeys;
  320.       get_key_full_length_rdonly(off, keybuff);
  321.       subkeys=ft_sintXkorr(keybuff+off);
  322.       comp_flag=SEARCH_SAME;
  323.       if (subkeys >= 0)
  324.       {
  325.         /* normal word, one-level tree structure */
  326.         flag=(*keyinfo->bin_search)(info, keyinfo, temp_buff, key,
  327.                                     USE_WHOLE_KEY, comp_flag,
  328.                                     &keypos, keybuff, &was_last_key);
  329.       }
  330.       else
  331.       {
  332.         /* popular word. two-level tree. going down */
  333.         my_off_t root=dupp_key_pos;
  334.         keyinfo=&info->s->ft2_keyinfo;
  335.         get_key_full_length_rdonly(off, key);
  336.         key+=off;
  337.         keypos-=keyinfo->keylength+nod_flag; /* we'll modify key entry 'in vivo' */
  338.         error=_mi_ck_real_write_btree(info, keyinfo, key, 0,
  339.                                       &root, comp_flag);
  340.         _mi_dpointer(info, keypos+HA_FT_WLEN, root);
  341.         subkeys--; /* should there be underflow protection ? */
  342.         DBUG_ASSERT(subkeys < 0);
  343.         ft_intXstore(keypos, subkeys);
  344.         if (!error)
  345.           error=_mi_write_keypage(info,keyinfo,page,DFLT_INIT_HITS,temp_buff);
  346.         my_afree((byte*) temp_buff);
  347.         DBUG_RETURN(error);
  348.       }
  349.     }
  350.     else /* not HA_FULLTEXT, normal HA_NOSAME key */
  351.     {
  352.       info->dupp_key_pos= dupp_key_pos;
  353.       my_afree((byte*) temp_buff);
  354.       my_errno=HA_ERR_FOUND_DUPP_KEY;
  355.       DBUG_RETURN(-1);
  356.     }
  357.   }
  358.   if (flag == MI_FOUND_WRONG_KEY)
  359.     DBUG_RETURN(-1);
  360.   if (!was_last_key)
  361.     insert_last=0;
  362.   next_page=_mi_kpos(nod_flag,keypos);
  363.   if (next_page == HA_OFFSET_ERROR ||
  364.       (error=w_search(info, keyinfo, comp_flag, key, key_length, next_page,
  365.       temp_buff, keypos, page, insert_last)) >0)
  366.   {
  367.     error=_mi_insert(info,keyinfo,key,temp_buff,keypos,keybuff,father_buff,
  368.      father_keypos,father_page, insert_last);
  369.     if (_mi_write_keypage(info,keyinfo,page,DFLT_INIT_HITS,temp_buff))
  370.       goto err;
  371.   }
  372.   my_afree((byte*) temp_buff);
  373.   DBUG_RETURN(error);
  374. err:
  375.   my_afree((byte*) temp_buff);
  376.   DBUG_PRINT("exit",("Error: %d",my_errno));
  377.   DBUG_RETURN (-1);
  378. } /* w_search */
  379. /*
  380.   Insert new key.
  381.   SYNOPSIS
  382.     _mi_insert()
  383.     info                        Open table information.
  384.     keyinfo                     Key definition information.
  385.     key                         New key.
  386.     anc_buff                    Key page (beginning).
  387.     key_pos                     Position in key page where to insert.
  388.     key_buff                    Copy of previous key.
  389.     father_buff                 parent key page for balancing.
  390.     father_key_pos              position in parent key page for balancing.
  391.     father_page                 position of parent key page in file.
  392.     insert_last                 If to append at end of page.
  393.   DESCRIPTION
  394.     Insert new key at right of key_pos.
  395.   RETURN
  396.     2           if key contains key to upper level.
  397.     0           OK.
  398.     < 0         Error.
  399. */
  400. int _mi_insert(register MI_INFO *info, register MI_KEYDEF *keyinfo,
  401.        uchar *key, uchar *anc_buff, uchar *key_pos, uchar *key_buff,
  402.                uchar *father_buff, uchar *father_key_pos, my_off_t father_page,
  403.        my_bool insert_last)
  404. {
  405.   uint a_length,nod_flag;
  406.   int t_length;
  407.   uchar *endpos, *prev_key;
  408.   MI_KEY_PARAM s_temp;
  409.   DBUG_ENTER("_mi_insert");
  410.   DBUG_PRINT("enter",("key_pos: %lx",key_pos));
  411.   DBUG_EXECUTE("key",_mi_print_key(DBUG_FILE,keyinfo->seg,key,USE_WHOLE_KEY););
  412.   nod_flag=mi_test_if_nod(anc_buff);
  413.   a_length=mi_getint(anc_buff);
  414.   endpos= anc_buff+ a_length;
  415.   prev_key=(key_pos == anc_buff+2+nod_flag ? (uchar*) 0 : key_buff);
  416.   t_length=(*keyinfo->pack_key)(keyinfo,nod_flag,
  417. (key_pos == endpos ? (uchar*) 0 : key_pos),
  418. prev_key, prev_key,
  419. key,&s_temp);
  420. #ifndef DBUG_OFF
  421.   if (key_pos != anc_buff+2+nod_flag && (keyinfo->flag &
  422.  (HA_BINARY_PACK_KEY | HA_PACK_KEY)))
  423.   {
  424.     DBUG_DUMP("prev_key",(byte*) key_buff,_mi_keylength(keyinfo,key_buff));
  425.   }
  426.   if (keyinfo->flag & HA_PACK_KEY)
  427.   {
  428.     DBUG_PRINT("test",("t_length: %d  ref_len: %d",
  429.        t_length,s_temp.ref_length));
  430.     DBUG_PRINT("test",("n_ref_len: %d  n_length: %d  key_pos: %lx",
  431.        s_temp.n_ref_length,s_temp.n_length,s_temp.key));
  432.   }
  433. #endif
  434.   if (t_length > 0)
  435.   {
  436.     if (t_length >= keyinfo->maxlength*2+MAX_POINTER_LENGTH)
  437.     {
  438.       my_errno=HA_ERR_CRASHED;
  439.       DBUG_RETURN(-1);
  440.     }
  441.     bmove_upp((byte*) endpos+t_length,(byte*) endpos,(uint) (endpos-key_pos));
  442.   }
  443.   else
  444.   {
  445.     if (-t_length >= keyinfo->maxlength*2+MAX_POINTER_LENGTH)
  446.     {
  447.       my_errno=HA_ERR_CRASHED;
  448.       DBUG_RETURN(-1);
  449.     }
  450.     bmove(key_pos,key_pos-t_length,(uint) (endpos-key_pos)+t_length);
  451.   }
  452.   (*keyinfo->store_key)(keyinfo,key_pos,&s_temp);
  453.   a_length+=t_length;
  454.   mi_putint(anc_buff,a_length,nod_flag);
  455.   if (a_length <= keyinfo->block_length)
  456.   {
  457.     if (keyinfo->block_length - a_length < 32 &&
  458.         keyinfo->flag & HA_FULLTEXT && key_pos == endpos &&
  459.         info->s->base.key_reflength <= info->s->base.rec_reflength &&
  460.         info->s->options & (HA_OPTION_PACK_RECORD | HA_OPTION_COMPRESS_RECORD))
  461.     {
  462.       /*
  463.         Normal word. One-level tree. Page is almost full.
  464.         Let's consider converting.
  465.         We'll compare 'key' and the first key at anc_buff
  466.        */
  467.       uchar *a=key, *b=anc_buff+2+nod_flag;
  468.       uint alen, blen, ft2len=info->s->ft2_keyinfo.keylength;
  469.       /* the very first key on the page is always unpacked */
  470.       DBUG_ASSERT((*b & 128) == 0);
  471. #if HA_FT_MAXLEN >= 127
  472.       blen= mi_uint2korr(b); b+=2;
  473. #else
  474.       blen= *b++;
  475. #endif
  476.       get_key_length(alen,a);
  477.       DBUG_ASSERT(info->ft1_to_ft2==0);
  478.       if (alen == blen &&
  479.           mi_compare_text(keyinfo->seg->charset, a, alen, b, blen, 0, 0)==0)
  480.       {
  481.         /* yup. converting */
  482.         info->ft1_to_ft2=(DYNAMIC_ARRAY *)
  483.           my_malloc(sizeof(DYNAMIC_ARRAY), MYF(MY_WME));
  484.         my_init_dynamic_array(info->ft1_to_ft2, ft2len, 300, 50);
  485.         /*
  486.           now, adding all keys from the page to dynarray
  487.           if the page is a leaf (if not keys will be deleted later)
  488.         */
  489.         if (!nod_flag)
  490.         {
  491.           /* let's leave the first key on the page, though, because
  492.              we cannot easily dispatch an empty page here */
  493.           b+=blen+ft2len+2;
  494.           for (a=anc_buff+a_length ; b < a ; b+=ft2len+2)
  495.             insert_dynamic(info->ft1_to_ft2, (char*) b);
  496.           /* fixing the page's length - it contains only one key now */
  497.           mi_putint(anc_buff,2+blen+ft2len+2,0);
  498.         }
  499.         /* the rest will be done when we're back from recursion */
  500.       }
  501.     }
  502.     DBUG_RETURN(0); /* There is room on page */
  503.   }
  504.   /* Page is full */
  505.   if (nod_flag)
  506.     insert_last=0;
  507.   if (!(keyinfo->flag & (HA_VAR_LENGTH_KEY | HA_BINARY_PACK_KEY)) &&
  508.       father_buff && !insert_last)
  509.     DBUG_RETURN(_mi_balance_page(info,keyinfo,key,anc_buff,father_buff,
  510.  father_key_pos,father_page));
  511.   DBUG_RETURN(_mi_split_page(info,keyinfo,key,anc_buff,key_buff, insert_last));
  512. } /* _mi_insert */
  513. /* split a full page in two and assign emerging item to key */
  514. int _mi_split_page(register MI_INFO *info, register MI_KEYDEF *keyinfo,
  515.    uchar *key, uchar *buff, uchar *key_buff,
  516.    my_bool insert_last_key)
  517. {
  518.   uint length,a_length,key_ref_length,t_length,nod_flag,key_length;
  519.   uchar *key_pos,*pos, *after_key;
  520.   my_off_t new_pos;
  521.   MI_KEY_PARAM s_temp;
  522.   DBUG_ENTER("mi_split_page");
  523.   DBUG_DUMP("buff",(byte*) buff,mi_getint(buff));
  524.   if (info->s->keyinfo+info->lastinx == keyinfo)
  525.     info->page_changed=1; /* Info->buff is used */
  526.   info->buff_used=1;
  527.   nod_flag=mi_test_if_nod(buff);
  528.   key_ref_length=2+nod_flag;
  529.   if (insert_last_key)
  530.     key_pos=_mi_find_last_pos(keyinfo,buff,key_buff, &key_length, &after_key);
  531.   else
  532.     key_pos=_mi_find_half_pos(nod_flag,keyinfo,buff,key_buff, &key_length,
  533.       &after_key);
  534.   if (!key_pos)
  535.     DBUG_RETURN(-1);
  536.   length=(uint) (key_pos-buff);
  537.   a_length=mi_getint(buff);
  538.   mi_putint(buff,length,nod_flag);
  539.   key_pos=after_key;
  540.   if (nod_flag)
  541.   {
  542.     DBUG_PRINT("test",("Splitting nod"));
  543.     pos=key_pos-nod_flag;
  544.     memcpy((byte*) info->buff+2,(byte*) pos,(size_t) nod_flag);
  545.   }
  546. /* Move middle item to key and pointer to new page */
  547.   if ((new_pos=_mi_new(info,keyinfo,DFLT_INIT_HITS)) == HA_OFFSET_ERROR)
  548.     DBUG_RETURN(-1);
  549.   _mi_kpointer(info,_mi_move_key(keyinfo,key,key_buff),new_pos);
  550. /* Store new page */
  551.   if (!(*keyinfo->get_key)(keyinfo,nod_flag,&key_pos,key_buff))
  552.     DBUG_RETURN(-1);
  553.   t_length=(*keyinfo->pack_key)(keyinfo,nod_flag,(uchar *) 0,
  554. (uchar*) 0, (uchar*) 0,
  555. key_buff, &s_temp);
  556.   length=(uint) ((buff+a_length)-key_pos);
  557.   memcpy((byte*) info->buff+key_ref_length+t_length,(byte*) key_pos,
  558.  (size_t) length);
  559.   (*keyinfo->store_key)(keyinfo,info->buff+key_ref_length,&s_temp);
  560.   mi_putint(info->buff,length+t_length+key_ref_length,nod_flag);
  561.   if (_mi_write_keypage(info,keyinfo,new_pos,DFLT_INIT_HITS,info->buff))
  562.     DBUG_RETURN(-1);
  563.   DBUG_DUMP("key",(byte*) key,_mi_keylength(keyinfo,key));
  564.   DBUG_RETURN(2); /* Middle key up */
  565. } /* _mi_split_page */
  566. /*
  567.   Calculate how to much to move to split a page in two
  568.   Returns pointer to start of key.
  569.   key will contain the key.
  570.   return_key_length will contain the length of key
  571.   after_key will contain the position to where the next key starts
  572. */
  573. uchar *_mi_find_half_pos(uint nod_flag, MI_KEYDEF *keyinfo, uchar *page,
  574.  uchar *key, uint *return_key_length,
  575.  uchar **after_key)
  576. {
  577.   uint keys,length,key_ref_length;
  578.   uchar *end,*lastpos;
  579.   DBUG_ENTER("_mi_find_half_pos");
  580.   key_ref_length=2+nod_flag;
  581.   length=mi_getint(page)-key_ref_length;
  582.   page+=key_ref_length;
  583.   if (!(keyinfo->flag &
  584. (HA_PACK_KEY | HA_SPACE_PACK_USED | HA_VAR_LENGTH_KEY |
  585.  HA_BINARY_PACK_KEY)))
  586.   {
  587.     key_ref_length=keyinfo->keylength+nod_flag;
  588.     keys=length/(key_ref_length*2);
  589.     *return_key_length=keyinfo->keylength;
  590.     end=page+keys*key_ref_length;
  591.     *after_key=end+key_ref_length;
  592.     memcpy(key,end,key_ref_length);
  593.     DBUG_RETURN(end);
  594.   }
  595.   end=page+length/2-key_ref_length; /* This is aprox. half */
  596.   *key='';
  597.   do
  598.   {
  599.     lastpos=page;
  600.     if (!(length=(*keyinfo->get_key)(keyinfo,nod_flag,&page,key)))
  601.       DBUG_RETURN(0);
  602.   } while (page < end);
  603.   *return_key_length=length;
  604.   *after_key=page;
  605.   DBUG_PRINT("exit",("returns: %lx  page: %lx  half: %lx",lastpos,page,end));
  606.   DBUG_RETURN(lastpos);
  607. } /* _mi_find_half_pos */
  608. /*
  609.   Split buffer at last key
  610.   Returns pointer to the start of the key before the last key
  611.   key will contain the last key
  612. */
  613. static uchar *_mi_find_last_pos(MI_KEYDEF *keyinfo, uchar *page,
  614. uchar *key, uint *return_key_length,
  615. uchar **after_key)
  616. {
  617.   uint keys,length,last_length,key_ref_length;
  618.   uchar *end,*lastpos,*prevpos;
  619.   uchar key_buff[MI_MAX_KEY_BUFF];
  620.   DBUG_ENTER("_mi_find_last_pos");
  621.   key_ref_length=2;
  622.   length=mi_getint(page)-key_ref_length;
  623.   page+=key_ref_length;
  624.   if (!(keyinfo->flag &
  625. (HA_PACK_KEY | HA_SPACE_PACK_USED | HA_VAR_LENGTH_KEY |
  626.  HA_BINARY_PACK_KEY)))
  627.   {
  628.     keys=length/keyinfo->keylength-2;
  629.     *return_key_length=length=keyinfo->keylength;
  630.     end=page+keys*length;
  631.     *after_key=end+length;
  632.     memcpy(key,end,length);
  633.     DBUG_RETURN(end);
  634.   }
  635.   LINT_INIT(prevpos);
  636.   LINT_INIT(last_length);
  637.   end=page+length-key_ref_length;
  638.   *key='';
  639.   length=0;
  640.   lastpos=page;
  641.   while (page < end)
  642.   {
  643.     prevpos=lastpos; lastpos=page;
  644.     last_length=length;
  645.     memcpy(key, key_buff, length); /* previous key */
  646.     if (!(length=(*keyinfo->get_key)(keyinfo,0,&page,key_buff)))
  647.     {
  648.       my_errno=HA_ERR_CRASHED;
  649.       DBUG_RETURN(0);
  650.     }
  651.   }
  652.   *return_key_length=last_length;
  653.   *after_key=lastpos;
  654.   DBUG_PRINT("exit",("returns: %lx  page: %lx  end: %lx",prevpos,page,end));
  655.   DBUG_RETURN(prevpos);
  656. } /* _mi_find_last_pos */
  657. /* Balance page with not packed keys with page on right/left */
  658. /* returns 0 if balance was done */
  659. static int _mi_balance_page(register MI_INFO *info, MI_KEYDEF *keyinfo,
  660.     uchar *key, uchar *curr_buff, uchar *father_buff,
  661.     uchar *father_key_pos, my_off_t father_page)
  662. {
  663.   my_bool right;
  664.   uint k_length,father_length,father_keylength,nod_flag,curr_keylength,
  665.        right_length,left_length,new_right_length,new_left_length,extra_length,
  666.        length,keys;
  667.   uchar *pos,*buff,*extra_buff;
  668.   my_off_t next_page,new_pos;
  669.   byte tmp_part_key[MI_MAX_KEY_BUFF];
  670.   DBUG_ENTER("_mi_balance_page");
  671.   k_length=keyinfo->keylength;
  672.   father_length=mi_getint(father_buff);
  673.   father_keylength=k_length+info->s->base.key_reflength;
  674.   nod_flag=mi_test_if_nod(curr_buff);
  675.   curr_keylength=k_length+nod_flag;
  676.   info->page_changed=1;
  677.   if ((father_key_pos != father_buff+father_length &&
  678.        (info->state->records & 1)) ||
  679.       father_key_pos == father_buff+2+info->s->base.key_reflength)
  680.   {
  681.     right=1;
  682.     next_page= _mi_kpos(info->s->base.key_reflength,
  683. father_key_pos+father_keylength);
  684.     buff=info->buff;
  685.     DBUG_PRINT("test",("use right page: %lu",next_page));
  686.   }
  687.   else
  688.   {
  689.     right=0;
  690.     father_key_pos-=father_keylength;
  691.     next_page= _mi_kpos(info->s->base.key_reflength,father_key_pos);
  692. /* Fix that curr_buff is to left */
  693.     buff=curr_buff; curr_buff=info->buff;
  694.     DBUG_PRINT("test",("use left page: %lu",next_page));
  695.   } /* father_key_pos ptr to parting key */
  696.   if (!_mi_fetch_keypage(info,keyinfo,next_page,DFLT_INIT_HITS,info->buff,0))
  697.     goto err;
  698.   DBUG_DUMP("next",(byte*) info->buff,mi_getint(info->buff));
  699. /* Test if there is room to share keys */
  700.   left_length=mi_getint(curr_buff);
  701.   right_length=mi_getint(buff);
  702.   keys=(left_length+right_length-4-nod_flag*2)/curr_keylength;
  703.   if ((right ? right_length : left_length) + curr_keylength <=
  704.       keyinfo->block_length)
  705.   { /* Merge buffs */
  706.     new_left_length=2+nod_flag+(keys/2)*curr_keylength;
  707.     new_right_length=2+nod_flag+((keys+1)/2)*curr_keylength;
  708.     mi_putint(curr_buff,new_left_length,nod_flag);
  709.     mi_putint(buff,new_right_length,nod_flag);
  710.     if (left_length < new_left_length)
  711.     { /* Move keys buff -> leaf */
  712.       pos=curr_buff+left_length;
  713.       memcpy((byte*) pos,(byte*) father_key_pos, (size_t) k_length);
  714.       memcpy((byte*) pos+k_length, (byte*) buff+2,
  715.      (size_t) (length=new_left_length - left_length - k_length));
  716.       pos=buff+2+length;
  717.       memcpy((byte*) father_key_pos,(byte*) pos,(size_t) k_length);
  718.       bmove((byte*) buff+2,(byte*) pos+k_length,new_right_length);
  719.     }
  720.     else
  721.     { /* Move keys -> buff */
  722.       bmove_upp((byte*) buff+new_right_length,(byte*) buff+right_length,
  723. right_length-2);
  724.       length=new_right_length-right_length-k_length;
  725.       memcpy((byte*) buff+2+length,father_key_pos,(size_t) k_length);
  726.       pos=curr_buff+new_left_length;
  727.       memcpy((byte*) father_key_pos,(byte*) pos,(size_t) k_length);
  728.       memcpy((byte*) buff+2,(byte*) pos+k_length,(size_t) length);
  729.     }
  730.     if (_mi_write_keypage(info,keyinfo,next_page,DFLT_INIT_HITS,info->buff) ||
  731. _mi_write_keypage(info,keyinfo,father_page,DFLT_INIT_HITS,father_buff))
  732.       goto err;
  733.     DBUG_RETURN(0);
  734.   }
  735. /* curr_buff[] and buff[] are full, lets split and make new nod */
  736.   extra_buff=info->buff+info->s->base.max_key_block_length;
  737.   new_left_length=new_right_length=2+nod_flag+(keys+1)/3*curr_keylength;
  738.   if (keys == 5) /* Too few keys to balance */
  739.     new_left_length-=curr_keylength;
  740.   extra_length=nod_flag+left_length+right_length-
  741.     new_left_length-new_right_length-curr_keylength;
  742.   DBUG_PRINT("info",("left_length: %d  right_length: %d  new_left_length: %d  new_right_length: %d  extra_length: %d",
  743.      left_length, right_length,
  744.      new_left_length, new_right_length,
  745.      extra_length));
  746.   mi_putint(curr_buff,new_left_length,nod_flag);
  747.   mi_putint(buff,new_right_length,nod_flag);
  748.   mi_putint(extra_buff,extra_length+2,nod_flag);
  749.   /* move first largest keys to new page  */
  750.   pos=buff+right_length-extra_length;
  751.   memcpy((byte*) extra_buff+2,pos,(size_t) extra_length);
  752.   /* Save new parting key */
  753.   memcpy(tmp_part_key, pos-k_length,k_length);
  754.   /* Make place for new keys */
  755.   bmove_upp((byte*) buff+new_right_length,(byte*) pos-k_length,
  756.     right_length-extra_length-k_length-2);
  757.   /* Copy keys from left page */
  758.   pos= curr_buff+new_left_length;
  759.   memcpy((byte*) buff+2,(byte*) pos+k_length,
  760.  (size_t) (length=left_length-new_left_length-k_length));
  761.   /* Copy old parting key */
  762.   memcpy((byte*) buff+2+length,father_key_pos,(size_t) k_length);
  763.   /* Move new parting keys up to caller */
  764.   memcpy((byte*) (right ? key : father_key_pos),pos,(size_t) k_length);
  765.   memcpy((byte*) (right ? father_key_pos : key),tmp_part_key, k_length);
  766.   if ((new_pos=_mi_new(info,keyinfo,DFLT_INIT_HITS)) == HA_OFFSET_ERROR)
  767.     goto err;
  768.   _mi_kpointer(info,key+k_length,new_pos);
  769.   if (_mi_write_keypage(info,keyinfo,(right ? new_pos : next_page),
  770. DFLT_INIT_HITS,info->buff) ||
  771.       _mi_write_keypage(info,keyinfo,(right ? next_page : new_pos),
  772.                         DFLT_INIT_HITS,extra_buff))
  773.     goto err;
  774.   DBUG_RETURN(1); /* Middle key up */
  775. err:
  776.   DBUG_RETURN(-1);
  777. } /* _mi_balance_page */
  778. /**********************************************************************
  779.  *                Bulk insert code                                    *
  780.  **********************************************************************/
  781. typedef struct {
  782.   MI_INFO *info;
  783.   uint keynr;
  784. } bulk_insert_param;
  785. int _mi_ck_write_tree(register MI_INFO *info, uint keynr, uchar *key,
  786.       uint key_length)
  787. {
  788.   int error;
  789.   DBUG_ENTER("_mi_ck_write_tree");
  790.   error= tree_insert(&info->bulk_insert[keynr], key,
  791.          key_length + info->s->rec_reflength,
  792.          info->bulk_insert[keynr].custom_arg) ? 0 : HA_ERR_OUT_OF_MEM ;
  793.   DBUG_RETURN(error);
  794. } /* _mi_ck_write_tree */
  795. /* typeof(_mi_keys_compare)=qsort_cmp2 */
  796. static int keys_compare(bulk_insert_param *param, uchar *key1, uchar *key2)
  797. {
  798.   uint not_used[2];
  799.   return ha_key_cmp(param->info->s->keyinfo[param->keynr].seg,
  800.                     key1, key2, USE_WHOLE_KEY, SEARCH_SAME,
  801.                     not_used);
  802. }
  803. static int keys_free(uchar *key, TREE_FREE mode, bulk_insert_param *param)
  804. {
  805.   /*
  806.     Probably I can use info->lastkey here, but I'm not sure,
  807.     and to be safe I'd better use local lastkey.
  808.   */
  809.   uchar lastkey[MI_MAX_KEY_BUFF];
  810.   uint keylen;
  811.   MI_KEYDEF *keyinfo;
  812.   switch (mode) {
  813.   case free_init:
  814.     if (param->info->s->concurrent_insert)
  815.     {
  816.       rw_wrlock(&param->info->s->key_root_lock[param->keynr]);
  817.       param->info->s->keyinfo[param->keynr].version++;
  818.     }
  819.     return 0;
  820.   case free_free:
  821.     keyinfo=param->info->s->keyinfo+param->keynr;
  822.     keylen=_mi_keylength(keyinfo, key);
  823.     memcpy(lastkey, key, keylen);
  824.     return _mi_ck_write_btree(param->info,param->keynr,lastkey,
  825.       keylen - param->info->s->rec_reflength);
  826.   case free_end:
  827.     if (param->info->s->concurrent_insert)
  828.       rw_unlock(&param->info->s->key_root_lock[param->keynr]);
  829.     return 0;
  830.   }
  831.   return -1;
  832. }
  833. int mi_init_bulk_insert(MI_INFO *info, ulong cache_size, ha_rows rows)
  834. {
  835.   MYISAM_SHARE *share=info->s;
  836.   MI_KEYDEF *key=share->keyinfo;
  837.   bulk_insert_param *params;
  838.   uint i, num_keys, total_keylength;
  839.   ulonglong key_map=0;
  840.   DBUG_ENTER("_mi_init_bulk_insert");
  841.   DBUG_PRINT("enter",("cache_size: %lu", cache_size));
  842.   DBUG_ASSERT(!info->bulk_insert &&
  843.       (!rows || rows >= MI_MIN_ROWS_TO_USE_BULK_INSERT));
  844.   for (i=total_keylength=num_keys=0 ; i < share->base.keys ; i++)
  845.   {
  846.     if (!(key[i].flag & HA_NOSAME) && share->base.auto_key != i+1
  847.         && test(share->state.key_map & ((ulonglong) 1 << i)))
  848.     {
  849.       num_keys++;
  850.       key_map |=((ulonglong) 1 << i);
  851.       total_keylength+=key[i].maxlength+TREE_ELEMENT_EXTRA_SIZE;
  852.     }
  853.   }
  854.   if (num_keys==0 ||
  855.       num_keys * MI_MIN_SIZE_BULK_INSERT_TREE > cache_size)
  856.     DBUG_RETURN(0);
  857.   if (rows && rows*total_keylength < cache_size)
  858.     cache_size=rows;
  859.   else
  860.     cache_size/=total_keylength*16;
  861.   info->bulk_insert=(TREE *)
  862.     my_malloc((sizeof(TREE)*share->base.keys+
  863.                sizeof(bulk_insert_param)*num_keys),MYF(0));
  864.   if (!info->bulk_insert)
  865.     DBUG_RETURN(HA_ERR_OUT_OF_MEM);
  866.   params=(bulk_insert_param *)(info->bulk_insert+share->base.keys);
  867.   for (i=0 ; i < share->base.keys ; i++)
  868.   {
  869.     if (test(key_map & ((ulonglong) 1 << i)))
  870.     {
  871.       params->info=info;
  872.       params->keynr=i;
  873.       /* Only allocate a 16'th of the buffer at a time */
  874.       init_tree(&info->bulk_insert[i],
  875.                 cache_size * key[i].maxlength,
  876.                 cache_size * key[i].maxlength, 0,
  877. (qsort_cmp2)keys_compare, 0,
  878. (tree_element_free) keys_free, (void *)params++);
  879.     }
  880.     else
  881.      info->bulk_insert[i].root=0;
  882.   }
  883.   DBUG_RETURN(0);
  884. }
  885. void mi_flush_bulk_insert(MI_INFO *info, uint inx)
  886. {
  887.   if (info->bulk_insert)
  888.   {
  889.     if (is_tree_inited(&info->bulk_insert[inx]))
  890.       reset_tree(&info->bulk_insert[inx]);
  891.   }
  892. }
  893. void mi_end_bulk_insert(MI_INFO *info)
  894. {
  895.   if (info->bulk_insert)
  896.   {
  897.     uint i;
  898.     for (i=0 ; i < info->s->base.keys ; i++)
  899.     {
  900.       if (is_tree_inited(& info->bulk_insert[i]))
  901.       {
  902.         delete_tree(& info->bulk_insert[i]);
  903.       }
  904.     }
  905.     my_free((void *)info->bulk_insert, MYF(0));
  906.     info->bulk_insert=0;
  907.   }
  908. }