dct.c
上传用户:hjq518
上传日期:2021-12-09
资源大小:5084k
文件大小:18k
源码类别:

Audio

开发平台:

Visual C++

  1. /*****************************************************************************
  2.  * dct.c: h264 encoder library
  3.  *****************************************************************************
  4.  * Copyright (C) 2003-2008 x264 project
  5.  *
  6.  * Authors: Loren Merritt <lorenm@u.washington.edu>
  7.  *          Laurent Aimar <fenrir@via.ecp.fr>
  8.  *
  9.  * This program is free software; you can redistribute it and/or modify
  10.  * it under the terms of the GNU General Public License as published by
  11.  * the Free Software Foundation; either version 2 of the License, or
  12.  * (at your option) any later version.
  13.  *
  14.  * This program is distributed in the hope that it will be useful,
  15.  * but WITHOUT ANY WARRANTY; without even the implied warranty of
  16.  * MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the
  17.  * GNU General Public License for more details.
  18.  *
  19.  * You should have received a copy of the GNU General Public License
  20.  * along with this program; if not, write to the Free Software
  21.  * Foundation, Inc., 51 Franklin Street, Fifth Floor, Boston, MA  02111, USA.
  22.  *****************************************************************************/
  23. #include "common.h"
  24. #ifdef HAVE_MMX
  25. #   include "x86/dct.h"
  26. #endif
  27. #ifdef ARCH_PPC
  28. #   include "ppc/dct.h"
  29. #endif
  30. int x264_dct4_weight2_zigzag[2][16];
  31. int x264_dct8_weight2_zigzag[2][64];
  32. /*
  33.  * XXX For all dct dc : input could be equal to output so ...
  34.  */
  35. static void dct2x2dc( int16_t d[2][2] )
  36. {
  37.     int tmp[2][2];
  38.     tmp[0][0] = d[0][0] + d[0][1];
  39.     tmp[1][0] = d[0][0] - d[0][1];
  40.     tmp[0][1] = d[1][0] + d[1][1];
  41.     tmp[1][1] = d[1][0] - d[1][1];
  42.     d[0][0] = tmp[0][0] + tmp[0][1];
  43.     d[1][0] = tmp[1][0] + tmp[1][1];
  44.     d[0][1] = tmp[0][0] - tmp[0][1];
  45.     d[1][1] = tmp[1][0] - tmp[1][1];
  46. }
  47. static void dct4x4dc( int16_t d[4][4] )
  48. {
  49.     int16_t tmp[4][4];
  50.     int s01, s23;
  51.     int d01, d23;
  52.     int i;
  53.     for( i = 0; i < 4; i++ )
  54.     {
  55.         s01 = d[i][0] + d[i][1];
  56.         d01 = d[i][0] - d[i][1];
  57.         s23 = d[i][2] + d[i][3];
  58.         d23 = d[i][2] - d[i][3];
  59.         tmp[0][i] = s01 + s23;
  60.         tmp[1][i] = s01 - s23;
  61.         tmp[2][i] = d01 - d23;
  62.         tmp[3][i] = d01 + d23;
  63.     }
  64.     for( i = 0; i < 4; i++ )
  65.     {
  66.         s01 = tmp[i][0] + tmp[i][1];
  67.         d01 = tmp[i][0] - tmp[i][1];
  68.         s23 = tmp[i][2] + tmp[i][3];
  69.         d23 = tmp[i][2] - tmp[i][3];
  70.         d[i][0] = ( s01 + s23 + 1 ) >> 1;
  71.         d[i][1] = ( s01 - s23 + 1 ) >> 1;
  72.         d[i][2] = ( d01 - d23 + 1 ) >> 1;
  73.         d[i][3] = ( d01 + d23 + 1 ) >> 1;
  74.     }
  75. }
  76. static void idct4x4dc( int16_t d[4][4] )
  77. {
  78.     int16_t tmp[4][4];
  79.     int s01, s23;
  80.     int d01, d23;
  81.     int i;
  82.     for( i = 0; i < 4; i++ )
  83.     {
  84.         s01 = d[i][0] + d[i][1];
  85.         d01 = d[i][0] - d[i][1];
  86.         s23 = d[i][2] + d[i][3];
  87.         d23 = d[i][2] - d[i][3];
  88.         tmp[0][i] = s01 + s23;
  89.         tmp[1][i] = s01 - s23;
  90.         tmp[2][i] = d01 - d23;
  91.         tmp[3][i] = d01 + d23;
  92.     }
  93.     for( i = 0; i < 4; i++ )
  94.     {
  95.         s01 = tmp[i][0] + tmp[i][1];
  96.         d01 = tmp[i][0] - tmp[i][1];
  97.         s23 = tmp[i][2] + tmp[i][3];
  98.         d23 = tmp[i][2] - tmp[i][3];
  99.         d[i][0] = s01 + s23;
  100.         d[i][1] = s01 - s23;
  101.         d[i][2] = d01 - d23;
  102.         d[i][3] = d01 + d23;
  103.     }
  104. }
  105. static inline void pixel_sub_wxh( int16_t *diff, int i_size,
  106.                                   uint8_t *pix1, int i_pix1, uint8_t *pix2, int i_pix2 )
  107. {
  108.     int y, x;
  109.     for( y = 0; y < i_size; y++ )
  110.     {
  111.         for( x = 0; x < i_size; x++ )
  112.         {
  113.             diff[x + y*i_size] = pix1[x] - pix2[x];
  114.         }
  115.         pix1 += i_pix1;
  116.         pix2 += i_pix2;
  117.     }
  118. }
  119. static void sub4x4_dct( int16_t dct[4][4], uint8_t *pix1, uint8_t *pix2 )
  120. {
  121.     int16_t d[4][4];
  122.     int16_t tmp[4][4];
  123.     int i;
  124.     pixel_sub_wxh( (int16_t*)d, 4, pix1, FENC_STRIDE, pix2, FDEC_STRIDE );
  125.     for( i = 0; i < 4; i++ )
  126.     {
  127.         const int s03 = d[i][0] + d[i][3];
  128.         const int s12 = d[i][1] + d[i][2];
  129.         const int d03 = d[i][0] - d[i][3];
  130.         const int d12 = d[i][1] - d[i][2];
  131.         tmp[0][i] =   s03 +   s12;
  132.         tmp[1][i] = 2*d03 +   d12;
  133.         tmp[2][i] =   s03 -   s12;
  134.         tmp[3][i] =   d03 - 2*d12;
  135.     }
  136.     for( i = 0; i < 4; i++ )
  137.     {
  138.         const int s03 = tmp[i][0] + tmp[i][3];
  139.         const int s12 = tmp[i][1] + tmp[i][2];
  140.         const int d03 = tmp[i][0] - tmp[i][3];
  141.         const int d12 = tmp[i][1] - tmp[i][2];
  142.         dct[i][0] =   s03 +   s12;
  143.         dct[i][1] = 2*d03 +   d12;
  144.         dct[i][2] =   s03 -   s12;
  145.         dct[i][3] =   d03 - 2*d12;
  146.     }
  147. }
  148. static void sub8x8_dct( int16_t dct[4][4][4], uint8_t *pix1, uint8_t *pix2 )
  149. {
  150.     sub4x4_dct( dct[0], &pix1[0], &pix2[0] );
  151.     sub4x4_dct( dct[1], &pix1[4], &pix2[4] );
  152.     sub4x4_dct( dct[2], &pix1[4*FENC_STRIDE+0], &pix2[4*FDEC_STRIDE+0] );
  153.     sub4x4_dct( dct[3], &pix1[4*FENC_STRIDE+4], &pix2[4*FDEC_STRIDE+4] );
  154. }
  155. static void sub16x16_dct( int16_t dct[16][4][4], uint8_t *pix1, uint8_t *pix2 )
  156. {
  157.     sub8x8_dct( &dct[ 0], &pix1[0], &pix2[0] );
  158.     sub8x8_dct( &dct[ 4], &pix1[8], &pix2[8] );
  159.     sub8x8_dct( &dct[ 8], &pix1[8*FENC_STRIDE+0], &pix2[8*FDEC_STRIDE+0] );
  160.     sub8x8_dct( &dct[12], &pix1[8*FENC_STRIDE+8], &pix2[8*FDEC_STRIDE+8] );
  161. }
  162. static void add4x4_idct( uint8_t *p_dst, int16_t dct[4][4] )
  163. {
  164.     int16_t d[4][4];
  165.     int16_t tmp[4][4];
  166.     int x, y;
  167.     int i;
  168.     for( i = 0; i < 4; i++ )
  169.     {
  170.         const int s02 =  dct[0][i]     +  dct[2][i];
  171.         const int d02 =  dct[0][i]     -  dct[2][i];
  172.         const int s13 =  dct[1][i]     + (dct[3][i]>>1);
  173.         const int d13 = (dct[1][i]>>1) -  dct[3][i];
  174.         tmp[i][0] = s02 + s13;
  175.         tmp[i][1] = d02 + d13;
  176.         tmp[i][2] = d02 - d13;
  177.         tmp[i][3] = s02 - s13;
  178.     }
  179.     for( i = 0; i < 4; i++ )
  180.     {
  181.         const int s02 =  tmp[0][i]     +  tmp[2][i];
  182.         const int d02 =  tmp[0][i]     -  tmp[2][i];
  183.         const int s13 =  tmp[1][i]     + (tmp[3][i]>>1);
  184.         const int d13 = (tmp[1][i]>>1) -  tmp[3][i];
  185.         d[0][i] = ( s02 + s13 + 32 ) >> 6;
  186.         d[1][i] = ( d02 + d13 + 32 ) >> 6;
  187.         d[2][i] = ( d02 - d13 + 32 ) >> 6;
  188.         d[3][i] = ( s02 - s13 + 32 ) >> 6;
  189.     }
  190.     for( y = 0; y < 4; y++ )
  191.     {
  192.         for( x = 0; x < 4; x++ )
  193.         {
  194.             p_dst[x] = x264_clip_uint8( p_dst[x] + d[y][x] );
  195.         }
  196.         p_dst += FDEC_STRIDE;
  197.     }
  198. }
  199. static void add8x8_idct( uint8_t *p_dst, int16_t dct[4][4][4] )
  200. {
  201.     add4x4_idct( &p_dst[0],               dct[0] );
  202.     add4x4_idct( &p_dst[4],               dct[1] );
  203.     add4x4_idct( &p_dst[4*FDEC_STRIDE+0], dct[2] );
  204.     add4x4_idct( &p_dst[4*FDEC_STRIDE+4], dct[3] );
  205. }
  206. static void add16x16_idct( uint8_t *p_dst, int16_t dct[16][4][4] )
  207. {
  208.     add8x8_idct( &p_dst[0],               &dct[0] );
  209.     add8x8_idct( &p_dst[8],               &dct[4] );
  210.     add8x8_idct( &p_dst[8*FDEC_STRIDE+0], &dct[8] );
  211.     add8x8_idct( &p_dst[8*FDEC_STRIDE+8], &dct[12] );
  212. }
  213. /****************************************************************************
  214.  * 8x8 transform:
  215.  ****************************************************************************/
  216. #define DCT8_1D {
  217.     const int s07 = SRC(0) + SRC(7);
  218.     const int s16 = SRC(1) + SRC(6);
  219.     const int s25 = SRC(2) + SRC(5);
  220.     const int s34 = SRC(3) + SRC(4);
  221.     const int a0 = s07 + s34;
  222.     const int a1 = s16 + s25;
  223.     const int a2 = s07 - s34;
  224.     const int a3 = s16 - s25;
  225.     const int d07 = SRC(0) - SRC(7);
  226.     const int d16 = SRC(1) - SRC(6);
  227.     const int d25 = SRC(2) - SRC(5);
  228.     const int d34 = SRC(3) - SRC(4);
  229.     const int a4 = d16 + d25 + (d07 + (d07>>1));
  230.     const int a5 = d07 - d34 - (d25 + (d25>>1));
  231.     const int a6 = d07 + d34 - (d16 + (d16>>1));
  232.     const int a7 = d16 - d25 + (d34 + (d34>>1));
  233.     DST(0) =  a0 + a1     ;
  234.     DST(1) =  a4 + (a7>>2);
  235.     DST(2) =  a2 + (a3>>1);
  236.     DST(3) =  a5 + (a6>>2);
  237.     DST(4) =  a0 - a1     ;
  238.     DST(5) =  a6 - (a5>>2);
  239.     DST(6) = (a2>>1) - a3 ;
  240.     DST(7) = (a4>>2) - a7 ;
  241. }
  242. static void sub8x8_dct8( int16_t dct[8][8], uint8_t *pix1, uint8_t *pix2 )
  243. {
  244.     int i;
  245.     int16_t tmp[8][8];
  246.     pixel_sub_wxh( (int16_t*)tmp, 8, pix1, FENC_STRIDE, pix2, FDEC_STRIDE );
  247. #define SRC(x) tmp[x][i]
  248. #define DST(x) tmp[x][i]
  249.     for( i = 0; i < 8; i++ )
  250.         DCT8_1D
  251. #undef SRC
  252. #undef DST
  253. #define SRC(x) tmp[i][x]
  254. #define DST(x) dct[x][i]
  255.     for( i = 0; i < 8; i++ )
  256.         DCT8_1D
  257. #undef SRC
  258. #undef DST
  259. }
  260. static void sub16x16_dct8( int16_t dct[4][8][8], uint8_t *pix1, uint8_t *pix2 )
  261. {
  262.     sub8x8_dct8( dct[0], &pix1[0],               &pix2[0] );
  263.     sub8x8_dct8( dct[1], &pix1[8],               &pix2[8] );
  264.     sub8x8_dct8( dct[2], &pix1[8*FENC_STRIDE+0], &pix2[8*FDEC_STRIDE+0] );
  265.     sub8x8_dct8( dct[3], &pix1[8*FENC_STRIDE+8], &pix2[8*FDEC_STRIDE+8] );
  266. }
  267. #define IDCT8_1D {
  268.     const int a0 =  SRC(0) + SRC(4);
  269.     const int a2 =  SRC(0) - SRC(4);
  270.     const int a4 = (SRC(2)>>1) - SRC(6);
  271.     const int a6 = (SRC(6)>>1) + SRC(2);
  272.     const int b0 = a0 + a6;
  273.     const int b2 = a2 + a4;
  274.     const int b4 = a2 - a4;
  275.     const int b6 = a0 - a6;
  276.     const int a1 = -SRC(3) + SRC(5) - SRC(7) - (SRC(7)>>1);
  277.     const int a3 =  SRC(1) + SRC(7) - SRC(3) - (SRC(3)>>1);
  278.     const int a5 = -SRC(1) + SRC(7) + SRC(5) + (SRC(5)>>1);
  279.     const int a7 =  SRC(3) + SRC(5) + SRC(1) + (SRC(1)>>1);
  280.     const int b1 = (a7>>2) + a1;
  281.     const int b3 =  a3 + (a5>>2);
  282.     const int b5 = (a3>>2) - a5;
  283.     const int b7 =  a7 - (a1>>2);
  284.     DST(0, b0 + b7);
  285.     DST(1, b2 + b5);
  286.     DST(2, b4 + b3);
  287.     DST(3, b6 + b1);
  288.     DST(4, b6 - b1);
  289.     DST(5, b4 - b3);
  290.     DST(6, b2 - b5);
  291.     DST(7, b0 - b7);
  292. }
  293. static void add8x8_idct8( uint8_t *dst, int16_t dct[8][8] )
  294. {
  295.     int i;
  296.     dct[0][0] += 32; // rounding for the >>6 at the end
  297. #define SRC(x)     dct[x][i]
  298. #define DST(x,rhs) dct[x][i] = (rhs)
  299.     for( i = 0; i < 8; i++ )
  300.         IDCT8_1D
  301. #undef SRC
  302. #undef DST
  303. #define SRC(x)     dct[i][x]
  304. #define DST(x,rhs) dst[i + x*FDEC_STRIDE] = x264_clip_uint8( dst[i + x*FDEC_STRIDE] + ((rhs) >> 6) );
  305.     for( i = 0; i < 8; i++ )
  306.         IDCT8_1D
  307. #undef SRC
  308. #undef DST
  309. }
  310. static void add16x16_idct8( uint8_t *dst, int16_t dct[4][8][8] )
  311. {
  312.     add8x8_idct8( &dst[0],               dct[0] );
  313.     add8x8_idct8( &dst[8],               dct[1] );
  314.     add8x8_idct8( &dst[8*FDEC_STRIDE+0], dct[2] );
  315.     add8x8_idct8( &dst[8*FDEC_STRIDE+8], dct[3] );
  316. }
  317. /****************************************************************************
  318.  * x264_dct_init:
  319.  ****************************************************************************/
  320. void x264_dct_init( int cpu, x264_dct_function_t *dctf )
  321. {
  322.     dctf->sub4x4_dct    = sub4x4_dct;
  323.     dctf->add4x4_idct   = add4x4_idct;
  324.     dctf->sub8x8_dct    = sub8x8_dct;
  325.     dctf->add8x8_idct   = add8x8_idct;
  326.     dctf->sub16x16_dct  = sub16x16_dct;
  327.     dctf->add16x16_idct = add16x16_idct;
  328.     dctf->sub8x8_dct8   = sub8x8_dct8;
  329.     dctf->add8x8_idct8  = add8x8_idct8;
  330.     dctf->sub16x16_dct8  = sub16x16_dct8;
  331.     dctf->add16x16_idct8 = add16x16_idct8;
  332.     dctf->dct4x4dc  = dct4x4dc;
  333.     dctf->idct4x4dc = idct4x4dc;
  334.     dctf->dct2x2dc  = dct2x2dc;
  335.     dctf->idct2x2dc = dct2x2dc;
  336. #ifdef HAVE_MMX
  337.     if( cpu&X264_CPU_MMX )
  338.     {
  339.         dctf->sub4x4_dct    = x264_sub4x4_dct_mmx;
  340.         dctf->add4x4_idct   = x264_add4x4_idct_mmx;
  341.         dctf->dct4x4dc      = x264_dct4x4dc_mmx;
  342.         dctf->idct4x4dc     = x264_idct4x4dc_mmx;
  343. #ifndef ARCH_X86_64
  344.         dctf->sub8x8_dct    = x264_sub8x8_dct_mmx;
  345.         dctf->sub16x16_dct  = x264_sub16x16_dct_mmx;
  346.         dctf->add8x8_idct   = x264_add8x8_idct_mmx;
  347.         dctf->add16x16_idct = x264_add16x16_idct_mmx;
  348.         dctf->sub8x8_dct8   = x264_sub8x8_dct8_mmx;
  349.         dctf->sub16x16_dct8 = x264_sub16x16_dct8_mmx;
  350.         dctf->add8x8_idct8  = x264_add8x8_idct8_mmx;
  351.         dctf->add16x16_idct8= x264_add16x16_idct8_mmx;
  352. #endif
  353.     }
  354.     if( cpu&X264_CPU_SSE2 )
  355.     {
  356.         dctf->sub8x8_dct8   = x264_sub8x8_dct8_sse2;
  357.         dctf->sub16x16_dct8 = x264_sub16x16_dct8_sse2;
  358.         dctf->add8x8_idct8  = x264_add8x8_idct8_sse2;
  359.         dctf->add16x16_idct8= x264_add16x16_idct8_sse2;
  360.         dctf->sub8x8_dct    = x264_sub8x8_dct_sse2;
  361.         dctf->sub16x16_dct  = x264_sub16x16_dct_sse2;
  362.         dctf->add8x8_idct   = x264_add8x8_idct_sse2;
  363.         dctf->add16x16_idct = x264_add16x16_idct_sse2;
  364.     }
  365. #endif //HAVE_MMX
  366. #ifdef ARCH_PPC
  367.     if( cpu&X264_CPU_ALTIVEC )
  368.     {
  369.         dctf->sub4x4_dct    = x264_sub4x4_dct_altivec;
  370.         dctf->sub8x8_dct    = x264_sub8x8_dct_altivec;
  371.         dctf->sub16x16_dct  = x264_sub16x16_dct_altivec;
  372.         dctf->add4x4_idct   = x264_add4x4_idct_altivec;
  373.         dctf->add8x8_idct   = x264_add8x8_idct_altivec;
  374.         dctf->add16x16_idct = x264_add16x16_idct_altivec;
  375.         dctf->sub8x8_dct8   = x264_sub8x8_dct8_altivec;
  376.         dctf->sub16x16_dct8 = x264_sub16x16_dct8_altivec;
  377.         dctf->add8x8_idct8  = x264_add8x8_idct8_altivec;
  378.         dctf->add16x16_idct8= x264_add16x16_idct8_altivec;
  379.     }
  380. #endif
  381. }
  382. void x264_dct_init_weights( void )
  383. {
  384.     int i, j;
  385.     for( j=0; j<2; j++ )
  386.     {
  387.         for( i=0; i<16; i++ )
  388.             x264_dct4_weight2_zigzag[j][i] = x264_dct4_weight2_tab[ x264_zigzag_scan4[j][i] ];
  389.         for( i=0; i<64; i++ )
  390.             x264_dct8_weight2_zigzag[j][i] = x264_dct8_weight2_tab[ x264_zigzag_scan8[j][i] ];
  391.     }
  392. }
  393. // gcc pessimizes multi-dimensional arrays here, even with constant indices
  394. #define ZIG(i,y,x) level[i] = dct[0][x*8+y];
  395. static void zigzag_scan_8x8_frame( int16_t level[64], int16_t dct[8][8] )
  396. {
  397.     ZIG( 0,0,0) ZIG( 1,0,1) ZIG( 2,1,0) ZIG( 3,2,0)
  398.     ZIG( 4,1,1) ZIG( 5,0,2) ZIG( 6,0,3) ZIG( 7,1,2)
  399.     ZIG( 8,2,1) ZIG( 9,3,0) ZIG(10,4,0) ZIG(11,3,1)
  400.     ZIG(12,2,2) ZIG(13,1,3) ZIG(14,0,4) ZIG(15,0,5)
  401.     ZIG(16,1,4) ZIG(17,2,3) ZIG(18,3,2) ZIG(19,4,1)
  402.     ZIG(20,5,0) ZIG(21,6,0) ZIG(22,5,1) ZIG(23,4,2)
  403.     ZIG(24,3,3) ZIG(25,2,4) ZIG(26,1,5) ZIG(27,0,6)
  404.     ZIG(28,0,7) ZIG(29,1,6) ZIG(30,2,5) ZIG(31,3,4)
  405.     ZIG(32,4,3) ZIG(33,5,2) ZIG(34,6,1) ZIG(35,7,0)
  406.     ZIG(36,7,1) ZIG(37,6,2) ZIG(38,5,3) ZIG(39,4,4)
  407.     ZIG(40,3,5) ZIG(41,2,6) ZIG(42,1,7) ZIG(43,2,7)
  408.     ZIG(44,3,6) ZIG(45,4,5) ZIG(46,5,4) ZIG(47,6,3)
  409.     ZIG(48,7,2) ZIG(49,7,3) ZIG(50,6,4) ZIG(51,5,5)
  410.     ZIG(52,4,6) ZIG(53,3,7) ZIG(54,4,7) ZIG(55,5,6)
  411.     ZIG(56,6,5) ZIG(57,7,4) ZIG(58,7,5) ZIG(59,6,6)
  412.     ZIG(60,5,7) ZIG(61,6,7) ZIG(62,7,6) ZIG(63,7,7)
  413. }
  414. static void zigzag_scan_8x8_field( int16_t level[64], int16_t dct[8][8] )
  415. {
  416.     ZIG( 0,0,0) ZIG( 1,1,0) ZIG( 2,2,0) ZIG( 3,0,1)
  417.     ZIG( 4,1,1) ZIG( 5,3,0) ZIG( 6,4,0) ZIG( 7,2,1)
  418.     ZIG( 8,0,2) ZIG( 9,3,1) ZIG(10,5,0) ZIG(11,6,0)
  419.     ZIG(12,7,0) ZIG(13,4,1) ZIG(14,1,2) ZIG(15,0,3)
  420.     ZIG(16,2,2) ZIG(17,5,1) ZIG(18,6,1) ZIG(19,7,1)
  421.     ZIG(20,3,2) ZIG(21,1,3) ZIG(22,0,4) ZIG(23,2,3)
  422.     ZIG(24,4,2) ZIG(25,5,2) ZIG(26,6,2) ZIG(27,7,2)
  423.     ZIG(28,3,3) ZIG(29,1,4) ZIG(30,0,5) ZIG(31,2,4)
  424.     ZIG(32,4,3) ZIG(33,5,3) ZIG(34,6,3) ZIG(35,7,3)
  425.     ZIG(36,3,4) ZIG(37,1,5) ZIG(38,0,6) ZIG(39,2,5)
  426.     ZIG(40,4,4) ZIG(41,5,4) ZIG(42,6,4) ZIG(43,7,4)
  427.     ZIG(44,3,5) ZIG(45,1,6) ZIG(46,2,6) ZIG(47,4,5)
  428.     ZIG(48,5,5) ZIG(49,6,5) ZIG(50,7,5) ZIG(51,3,6)
  429.     ZIG(52,0,7) ZIG(53,1,7) ZIG(54,4,6) ZIG(55,5,6)
  430.     ZIG(56,6,6) ZIG(57,7,6) ZIG(58,2,7) ZIG(59,3,7)
  431.     ZIG(60,4,7) ZIG(61,5,7) ZIG(62,6,7) ZIG(63,7,7)
  432. }
  433. #undef ZIG
  434. #define ZIG(i,y,x) level[i] = dct[0][x*4+y];
  435. static void zigzag_scan_4x4_frame( int16_t level[16], int16_t dct[4][4] )
  436. {
  437.     ZIG( 0,0,0) ZIG( 1,0,1) ZIG( 2,1,0) ZIG( 3,2,0)
  438.     ZIG( 4,1,1) ZIG( 5,0,2) ZIG( 6,0,3) ZIG( 7,1,2)
  439.     ZIG( 8,2,1) ZIG( 9,3,0) ZIG(10,3,1) ZIG(11,2,2)
  440.     ZIG(12,1,3) ZIG(13,2,3) ZIG(14,3,2) ZIG(15,3,3)
  441. }
  442. static void zigzag_scan_4x4_field( int16_t level[16], int16_t dct[4][4] )
  443. {
  444.     *(uint32_t*)level = *(uint32_t*)dct;
  445.     ZIG(2,0,1) ZIG(3,2,0) ZIG(4,3,0) ZIG(5,1,1)
  446.     *(uint32_t*)(level+6) = *(uint32_t*)(*dct+6);
  447.     *(uint64_t*)(level+8) = *(uint64_t*)(*dct+8);
  448.     *(uint64_t*)(level+12) = *(uint64_t*)(*dct+12);
  449. }
  450. #undef ZIG
  451. #define ZIG(i,y,x) {
  452.     int oe = x+y*FENC_STRIDE;
  453.     int od = x+y*FDEC_STRIDE;
  454.     level[i] = p_src[oe] - p_dst[od];
  455. }
  456. #define COPY4x4
  457.     *(uint32_t*)(p_dst+0*FDEC_STRIDE) = *(uint32_t*)(p_src+0*FENC_STRIDE);
  458.     *(uint32_t*)(p_dst+1*FDEC_STRIDE) = *(uint32_t*)(p_src+1*FENC_STRIDE);
  459.     *(uint32_t*)(p_dst+2*FDEC_STRIDE) = *(uint32_t*)(p_src+2*FENC_STRIDE);
  460.     *(uint32_t*)(p_dst+3*FDEC_STRIDE) = *(uint32_t*)(p_src+3*FENC_STRIDE);
  461. static void zigzag_sub_4x4_frame( int16_t level[16], const uint8_t *p_src, uint8_t *p_dst )
  462. {
  463.     ZIG( 0,0,0) ZIG( 1,0,1) ZIG( 2,1,0) ZIG( 3,2,0)
  464.     ZIG( 4,1,1) ZIG( 5,0,2) ZIG( 6,0,3) ZIG( 7,1,2)
  465.     ZIG( 8,2,1) ZIG( 9,3,0) ZIG(10,3,1) ZIG(11,2,2)
  466.     ZIG(12,1,3) ZIG(13,2,3) ZIG(14,3,2) ZIG(15,3,3)
  467.     COPY4x4
  468. }
  469. static void zigzag_sub_4x4_field( int16_t level[16], const uint8_t *p_src, uint8_t *p_dst )
  470. {
  471.     ZIG( 0,0,0) ZIG( 1,1,0) ZIG( 2,0,1) ZIG( 3,2,0)
  472.     ZIG( 4,3,0) ZIG( 5,1,1) ZIG( 6,2,1) ZIG( 7,3,1)
  473.     ZIG( 8,0,2) ZIG( 9,1,2) ZIG(10,2,2) ZIG(11,3,2)
  474.     ZIG(12,0,3) ZIG(13,1,3) ZIG(14,2,3) ZIG(15,3,3)
  475.     COPY4x4
  476. }
  477. #undef ZIG
  478. #undef COPY4x4
  479. void x264_zigzag_init( int cpu, x264_zigzag_function_t *pf, int b_interlaced )
  480. {
  481.     if( b_interlaced )
  482.     {
  483.         pf->scan_8x8   = zigzag_scan_8x8_field;
  484.         pf->scan_4x4   = zigzag_scan_4x4_field;
  485.         pf->sub_4x4    = zigzag_sub_4x4_field;
  486. #ifdef HAVE_MMX
  487.         if( cpu&X264_CPU_MMXEXT )
  488.             pf->scan_4x4 = x264_zigzag_scan_4x4_field_mmxext;
  489. #endif
  490. #ifdef ARCH_PPC
  491.         if( cpu&X264_CPU_ALTIVEC )
  492.             pf->scan_4x4   = x264_zigzag_scan_4x4_field_altivec;
  493. #endif
  494.     }
  495.     else
  496.     {
  497.         pf->scan_8x8   = zigzag_scan_8x8_frame;
  498.         pf->scan_4x4   = zigzag_scan_4x4_frame;
  499.         pf->sub_4x4    = zigzag_sub_4x4_frame;
  500. #ifdef HAVE_MMX
  501.         if( cpu&X264_CPU_MMX )
  502.             pf->scan_4x4 = x264_zigzag_scan_4x4_frame_mmx;
  503.         if( cpu&X264_CPU_MMXEXT )
  504.             pf->scan_8x8 = x264_zigzag_scan_8x8_frame_mmxext;
  505.         if( cpu&X264_CPU_SSE2_IS_FAST )
  506.             pf->scan_8x8 = x264_zigzag_scan_8x8_frame_sse2;
  507.         if( cpu&X264_CPU_SSSE3 )
  508.         {
  509.             pf->sub_4x4  = x264_zigzag_sub_4x4_frame_ssse3;
  510.             pf->scan_8x8 = x264_zigzag_scan_8x8_frame_ssse3;
  511.         }
  512.         if( cpu&X264_CPU_PHADD_IS_FAST )
  513.             pf->scan_4x4 = x264_zigzag_scan_4x4_frame_ssse3;
  514. #endif
  515. #ifdef ARCH_PPC
  516.         if( cpu&X264_CPU_ALTIVEC )
  517.             pf->scan_4x4   = x264_zigzag_scan_4x4_frame_altivec;
  518. #endif
  519.     }
  520. }