README.mb
上传用户:blenddy
上传日期:2007-01-07
资源大小:6495k
文件大小:9k
源码类别:

数据库系统

开发平台:

Unix_Linux

  1. postgresql 6.5.1 multi-byte (MB) support README   July 11 1999
  2. Tatsuo Ishii
  3. t-ishii@sra.co.jp
  4.   http://www.sra.co.jp/people/t-ishii/PostgreSQL/
  5. 0. Introduction
  6. The MB support is intended for allowing PostgreSQL to handle
  7. multi-byte character sets such as EUC(Extended Unix Code), Unicode and
  8. Mule internal code. With the MB enabled you can use multi-byte
  9. character sets in regexp ,LIKE and some functions. The default
  10. encoding system chosen is determined while initializing your
  11. PostgreSQL installation using initdb(1). Note that this can be
  12. overridden when you create a database using createdb(1) or create
  13. database SQL command. So you could have multiple databases with
  14. different encoding systems.
  15. MB also fixes some problems concerning with 8-bit single byte
  16. character sets including ISO8859. (I would not say all of problems
  17. have been fixed. I just confirmed that the regression test ran fine
  18. and a few French characters could be used with the patch. Please let
  19. me know if you find any problem while using 8-bit characters)
  20. 1. How to use
  21. run configure with the mb option:
  22. % configure --with-mb=encoding_system
  23. where encoding_system is one of:
  24. SQL_ASCII ASCII
  25. EUC_JP Japanese EUC
  26. EUC_CN Chinese EUC
  27. EUC_KR Korean EUC
  28. EUC_TW Taiwan EUC
  29. UNICODE Unicode(UTF-8)
  30. MULE_INTERNAL Mule internal
  31. LATIN1 ISO 8859-1 English and some European languages
  32. LATIN2 ISO 8859-2 English and some European languages
  33. LATIN3 ISO 8859-3 English and some European languages
  34. LATIN4 ISO 8859-4 English and some European languages
  35. LATIN5 ISO 8859-5 English and some European languages
  36. KOI8 KOI8-R
  37. WIN Windows CP1251
  38. ALT Windows CP866
  39. Example:
  40. % configure --with-mb=EUC_JP
  41. If MB is disabled, nothing is changed except better supporting for
  42. 8-bit single byte character sets.
  43. 2. How to set encoding
  44. initdb command defines the default encoding for a PostgreSQL
  45. installation. For example:
  46. % initdb -e EUC_JP
  47. sets the default encoding to EUC_JP(Extended Unix Code for Japanese).
  48. Note that you can use "-pgencoding" instead of "-e" if you like longer
  49. option string:-) If no -e or -pgencoding option is given, the encoding
  50. specified at the compile time is used.
  51. You can create a database with a different encoding.
  52. % createdb -E EUC_KR korean
  53. will create a database named "korean" with EUC_KR encoding. The
  54. another way to accomplish this is to use a SQL command:
  55. CREATE DATABASE korean WITH ENCODING = 'EUC_KR';
  56. The encoding for a database is represented as "encoding" column in the
  57. pg_database system catalog.
  58. datname      |datdba|encoding|datpath      
  59. -------------+------+--------+-------------
  60. template1    |  1739|       1|template1    
  61. postgres     |  1739|       0|postgres     
  62. euc_jp       |  1739|       1|euc_jp       
  63. euc_kr       |  1739|       3|euc_kr       
  64. euc_cn       |  1739|       2|euc_cn       
  65. unicode      |  1739|       5|unicode      
  66. mule_internal|  1739|       6|mule_internal
  67. A number in the encoding column is "encoding id" and can be translated
  68. to the encoding name using pg_encoding command.
  69. $ pg_encoding 1
  70. EUC_JP
  71. If an argument to pg_encoding is not a number, then it is regarded as
  72. an encoding name and pg_encoding will return the encoding id.
  73. $ pg_encoding EUC_JP
  74. 1
  75. 3. PGCLIENTENCODING
  76. If an environment variable PGCLIENTENCODING is defined on the
  77. frontend, automatic encoding translation is done by the backend. For
  78. example, if the backend has been compiled with MB=EUC_JP and
  79. PGCLIENTENCODING=SJIS(Shift JIS: yet another Japanese encoding
  80. system), then any SJIS strings coming from the frontend would be
  81. translated to EUC_JP before going into the parser. Outputs from the
  82. backend would be translated to SJIS of course.
  83. Supported encodings for PGCLIENTENCODING are:
  84. SQL_ASCII ASCII
  85. EUC_JP Japanese EUC
  86. SJIS Yet another Japanese encoding
  87. EUC_CN Chinese EUC
  88. EUC_KR Korean EUC
  89. EUC_TW Taiwan EUC
  90. BIG5 Traditional Chinese
  91. MULE_INTERNAL Mule internal
  92. LATIN1 ISO 8859-1 English and some European languages
  93. LATIN2 ISO 8859-2 English and some European languages
  94. LATIN3 ISO 8859-3 English and some European languages
  95. LATIN4 ISO 8859-4 English and some European languages
  96. LATIN5 ISO 8859-5 English and some European languages
  97. KOI8 KOI8-R
  98. WIN Windows CP1251
  99. ALT Windows CP866
  100. WIN1250 Windows CP1250 (Czech)
  101. Note that UNICODE is not supported(yet). Also note that the
  102. translation is not always possible. Suppose you choose EUC_JP for the
  103. backend, LATIN1 for the frontend, then some Japanese characters cannot
  104. be translated into latin. In this case, a letter cannot be represented
  105. in the Latin character set, would be transformed as:
  106. (HEXA DECIMAL)
  107. 3. SET CLIENT_ENCODING TO command
  108. Actually setting the frontend side encoding information is done by a
  109. new command:
  110. SET CLIENT_ENCODING TO 'encoding';
  111. where encoding is one of the encodings those can be set to
  112. PGCLIENTENCODING. Also you can use SQL92 syntax "SET NAMES" for this
  113. purpose:
  114. SET NAMES 'encoding';
  115. To query the current the frontend encoding:
  116. SHOW CLIENT_ENCODING;
  117. To return to the default encoding:
  118. RESET CLIENT_ENCODING;
  119. This would reset the frontend encoding to same as the backend
  120. encoding, thus no encoding translation would be performed.
  121. 4. References
  122. These are good sources to start learning various kind of encoding
  123. systems.
  124. ftp://ftp.ora.com/pub/examples/nutshell/ujip/doc/cjk.inf
  125. Detailed explanations of EUC_JP, EUC_CN, EUC_KR, EUC_TW
  126. appear in section 3.2.
  127. Unicode: http://www.unicode.org/
  128. The homepage of UNICODE.
  129. RFC 2044
  130. UTF-8 is defined here.
  131. 5. History
  132. July 11, 1999
  133. * Add support for WIN1250 (Windows Czech) as a client encoding
  134.   (contributed by Pavel Behal)
  135. * fix some compiler warnings (contributed by Tomoaki Nishiyama)
  136. Mar 23, 1999
  137. * Add support for KOI8(KOI8-R), WIN(CP1251), ALT(CP866)
  138.   (thanks Oleg Broytmann for testing)
  139. * Fix problem with MB and locale
  140. Jan 26, 1999
  141. * Add support for Big5 for fronend encoding
  142.   (you need to create a database with EUC_TW to use Big5)
  143. * Add regression test case for EUC_TW
  144.   (contributed by Jonah Kuo <jonahkuo@mail.ttn.com.tw>)
  145. Dec 15, 1998
  146. * Bugs related to SQL_ASCII support fixed
  147. Nov 5, 1998
  148. * 6.4 release. In this version, pg_database has "encoding"
  149.   column that represents the database encoding
  150. Jul 22, 1998
  151. * determine encoding at initdb/createdb rather than compile time
  152. * support for PGCLIENTENCODING when issuing COPY command
  153. * support for SQL92 syntax "SET NAMES"
  154. * support for LATIN2-5
  155. * add UNICODE regression test case
  156. * new test suite for MB
  157. * clean up source files
  158. Jun 5, 1998
  159. * add support for the encoding translation between the backend
  160.   and the frontend
  161. * new command SET CLIENT_ENCODING etc. added
  162. * add support for LATIN1 character set
  163. * enhance 8 bit cleaness
  164. April 21, 1998 some enhancements/fixes
  165. * character_length(), position(), substring() are now aware of 
  166.   multi-byte characters
  167. * add octet_length()
  168. * add --with-mb option to configure
  169. * new regression tests for EUC_KR
  170.      (contributed by "Soonmyung. Hong" <hong@lunaris.hanmesoft.co.kr>)
  171. * add some test cases to the EUC_JP regression test
  172. * fix problem in regress/regress.sh in case of System V
  173. * fix toupper(), tolower() to handle 8bit chars
  174. Mar 25, 1998 MB PL2 is incorporated into PostgreSQL 6.3.1
  175. Mar 10, 1998 PL2 released
  176. * add regression test for EUC_JP, EUC_CN and MULE_INTERNAL
  177. * add an English document (this file)
  178. * fix problems concerning 8-bit single byte characters
  179. Mar 1, 1998 PL1 released
  180. Appendix:
  181. [Here is a good documentation explaining how to use WIN1250 on
  182. Windows/ODBC from Pavel Behal. Please note that Installation step 1)
  183. is not necceary in 6.5.1 -- Tatsuo]
  184. Version: 0.91 for PgSQL 6.5
  185. Author: Pavel Behal
  186. Revised by: Tatsuo Ishii
  187. Email: behal@opf.slu.cz
  188. Licence: The Same as PostgreSQL
  189. Sorry for my Eglish and C code, I'm not native :-)
  190. !!!!!!!!!!!!!!!!!!!!!!!!! NO WARRANTY !!!!!!!!!!!!!!!!!!!!!!!!!!!!!!
  191. Instalation:
  192. ------------
  193. 1) Change three affected files in source directories 
  194.     (I don't have time to create proper patch diffs, I don't know how)
  195. 2) Compile with enabled locale and multibyte set to LATIN2
  196. 3) Setup properly your instalation, do not forget to create locale
  197.    variables in your profile (environment). Ex. (may not be exactly true):
  198. LC_ALL=cs_CZ.ISO8859-2
  199. LC_COLLATE=cs_CZ.ISO8859-2
  200. LC_CTYPE=cs_CZ.ISO8859-2
  201. LC_MONETARY=cs_CZ.ISO8859-2
  202. LC_NUMERIC=cs_CZ.ISO8859-2
  203. LC_TIME=cs_CZ.ISO8859-2
  204. 4) You have to start the postmaster with locales set!
  205. 5) Try it with Czech language, it have to sort
  206. 5) Install ODBC driver for PgSQL into your M$ Windows
  207. 6) Setup properly your data source. Include this line in your ODBC
  208.    configuration dialog in field "Connect Settings:" :
  209. SET CLIENT_ENCODING = 'WIN1250';
  210. 7) Now try it again, but in Windows with ODBC.
  211. Description:
  212. ------------
  213. - Depends on proper system locales, tested with RH6.0 and Slackware 3.6,
  214.   with cs_CZ.iso8859-2 loacle
  215. - Never try to set-up server multibyte database encoding to WIN1250,
  216.   always use LATIN2 instead. There is not WIN1250 locale in Unix
  217. - WIN1250 encoding is useable only for M$W ODBC clients. The characters are
  218.   on thy fly re-coded, to be displayed and stored back properly
  219.  
  220. Important:
  221. ----------
  222. - it reorders your sort order depending on your LC_... setting, so don't be
  223.   confused with regression tests, they don't use locale
  224. - "ch" is corectly sorted only in some newer locales (Ex. RH6.0)
  225. - you have to insert money as '162,50' (with comma in aphostrophes!)
  226. - not tested properly