postprocess.c
上传用户:wstnjxml
上传日期:2014-04-03
资源大小:7248k
文件大小:32k
源码类别:

Windows CE

开发平台:

C/C++

  1. /*
  2.     Copyright (C) 2001-2003 Michael Niedermayer (michaelni@gmx.at)
  3.     AltiVec optimizations (C) 2004 Romain Dolbeau <romain@dolbeau.org>
  4.     This program is free software; you can redistribute it and/or modify
  5.     it under the terms of the GNU General Public License as published by
  6.     the Free Software Foundation; either version 2 of the License, or
  7.     (at your option) any later version.
  8.     This program is distributed in the hope that it will be useful,
  9.     but WITHOUT ANY WARRANTY; without even the implied warranty of
  10.     MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the
  11.     GNU General Public License for more details.
  12.     You should have received a copy of the GNU General Public License
  13.     along with this program; if not, write to the Free Software
  14.     Foundation, Inc., 59 Temple Place, Suite 330, Boston, MA  02111-1307  USA
  15. */
  16. /**
  17.  * @file postprocess.c
  18.  * postprocessing.
  19.  */
  20.  
  21. /*
  22. C MMX MMX2 3DNow AltiVec
  23. isVertDC Ec Ec Ec
  24. isVertMinMaxOk Ec Ec Ec
  25. doVertLowPass E e e Ec
  26. doVertDefFilter Ec Ec e e Ec
  27. isHorizDC Ec Ec Ec
  28. isHorizMinMaxOk a E Ec
  29. doHorizLowPass E e e Ec
  30. doHorizDefFilter Ec Ec e e Ec
  31. do_a_deblock Ec E Ec E
  32. deRing E e e* Ecp
  33. Vertical RKAlgo1 E a a
  34. Horizontal RKAlgo1 a a
  35. Vertical X1# a E E
  36. Horizontal X1# a E E
  37. LinIpolDeinterlace e E E*
  38. CubicIpolDeinterlace a e e*
  39. LinBlendDeinterlace e E E*
  40. MedianDeinterlace# E Ec Ec
  41. TempDeNoiser# E e e Ec
  42. * i dont have a 3dnow CPU -> its untested, but noone said it doesnt work so it seems to work
  43. # more or less selfinvented filters so the exactness isnt too meaningfull
  44. E = Exact implementation
  45. e = allmost exact implementation (slightly different rounding,...)
  46. a = alternative / approximate impl
  47. c = checked against the other implementations (-vo md5)
  48. p = partially optimized, still some work to do
  49. */
  50. /*
  51. TODO:
  52. reduce the time wasted on the mem transfer
  53. unroll stuff if instructions depend too much on the prior one
  54. move YScale thing to the end instead of fixing QP
  55. write a faster and higher quality deblocking filter :)
  56. make the mainloop more flexible (variable number of blocks at once
  57. (the if/else stuff per block is slowing things down)
  58. compare the quality & speed of all filters
  59. split this huge file
  60. optimize c versions
  61. try to unroll inner for(x=0 ... loop to avoid these damn if(x ... checks
  62. ...
  63. */
  64. //Changelog: use the CVS log
  65. #include "config.h"
  66. #include <inttypes.h>
  67. #include <stdio.h>
  68. #include <stdlib.h>
  69. #include <string.h>
  70. #ifdef HAVE_MALLOC_H
  71. #include <malloc.h>
  72. #endif
  73. //#undef HAVE_MMX2
  74. //#define HAVE_3DNOW
  75. //#undef HAVE_MMX
  76. //#undef ARCH_X86
  77. //#define DEBUG_BRIGHTNESS
  78. #ifdef USE_FASTMEMCPY
  79. #include "fastmemcpy.h"
  80. #endif
  81. #include "postprocess.h"
  82. #include "postprocess_internal.h"
  83. #include "mangle.h" //FIXME should be supressed
  84. #ifdef HAVE_ALTIVEC_H
  85. #include <altivec.h>
  86. #endif
  87. #ifndef HAVE_MEMALIGN
  88. #define memalign(a,b) malloc(b)
  89. #endif
  90. #define MIN(a,b) ((a) > (b) ? (b) : (a))
  91. #define MAX(a,b) ((a) < (b) ? (b) : (a))
  92. #define ABS(a) ((a) > 0 ? (a) : (-(a)))
  93. #define SIGN(a) ((a) > 0 ? 1 : -1)
  94. #define GET_MODE_BUFFER_SIZE 500
  95. #define OPTIONS_ARRAY_SIZE 10
  96. #define BLOCK_SIZE 8
  97. #define TEMP_STRIDE 8
  98. //#define NUM_BLOCKS_AT_ONCE 16 //not used yet
  99. #if defined(__GNUC__) && (__GNUC__ > 3 || __GNUC__ == 3 && __GNUC_MINOR__ > 0)
  100. #    define attribute_used __attribute__((used))
  101. #    define always_inline __attribute__((always_inline)) inline
  102. #else
  103. #    define attribute_used
  104. #    define always_inline inline
  105. #endif
  106. #if defined(ARCH_X86) || defined(ARCH_X86_64)
  107. static uint64_t __attribute__((aligned(8))) attribute_used w05= 0x0005000500050005LL;
  108. static uint64_t __attribute__((aligned(8))) attribute_used w04= 0x0004000400040004LL;
  109. static uint64_t __attribute__((aligned(8))) attribute_used w20= 0x0020002000200020LL;
  110. static uint64_t __attribute__((aligned(8))) attribute_used b00=  0x0000000000000000LL;
  111. static uint64_t __attribute__((aligned(8))) attribute_used b01=  0x0101010101010101LL;
  112. static uint64_t __attribute__((aligned(8))) attribute_used b02=  0x0202020202020202LL;
  113. static uint64_t __attribute__((aligned(8))) attribute_used b08=  0x0808080808080808LL;
  114. static uint64_t __attribute__((aligned(8))) attribute_used b80=  0x8080808080808080LL;
  115. #endif
  116. static uint8_t clip_table[3*256];
  117. static uint8_t * const clip_tab= clip_table + 256;
  118. static const int verbose= 0;
  119. static const int attribute_used deringThreshold= 20;
  120. static struct PPFilter filters[]=
  121. {
  122. {"hb", "hdeblock",  1, 1, 3, H_DEBLOCK},
  123. {"vb", "vdeblock",  1, 2, 4, V_DEBLOCK},
  124. /* {"hr", "rkhdeblock",  1, 1, 3, H_RK1_FILTER},
  125. {"vr", "rkvdeblock",  1, 2, 4, V_RK1_FILTER},*/
  126. {"h1", "x1hdeblock",  1, 1, 3, H_X1_FILTER},
  127. {"v1", "x1vdeblock",  1, 2, 4, V_X1_FILTER},
  128. {"ha", "ahdeblock",  1, 1, 3, H_A_DEBLOCK},
  129. {"va", "avdeblock",  1, 2, 4, V_A_DEBLOCK},
  130. {"dr", "dering",  1, 5, 6, DERING},
  131. {"al", "autolevels",  0, 1, 2, LEVEL_FIX},
  132. {"lb", "linblenddeint",  1, 1, 4, LINEAR_BLEND_DEINT_FILTER},
  133. {"li", "linipoldeint",  1, 1, 4, LINEAR_IPOL_DEINT_FILTER},
  134. {"ci", "cubicipoldeint", 1, 1, 4, CUBIC_IPOL_DEINT_FILTER},
  135. {"md", "mediandeint",  1, 1, 4, MEDIAN_DEINT_FILTER},
  136. {"fd", "ffmpegdeint",  1, 1, 4, FFMPEG_DEINT_FILTER},
  137. {"l5", "lowpass5",  1, 1, 4, LOWPASS5_DEINT_FILTER},
  138. {"tn", "tmpnoise",  1, 7, 8, TEMP_NOISE_FILTER},
  139. {"fq", "forcequant",  1, 0, 0, FORCE_QUANT},
  140. {NULL, NULL,0,0,0,0} //End Marker
  141. };
  142. static char *replaceTable[]=
  143. {
  144. "default",  "hdeblock:a,vdeblock:a,dering:a",
  145. "de",  "hdeblock:a,vdeblock:a,dering:a",
  146. "fast",  "x1hdeblock:a,x1vdeblock:a,dering:a",
  147. "fa",  "x1hdeblock:a,x1vdeblock:a,dering:a",
  148. "ac",  "ha:a:128:7,va:a,dering:a",
  149. NULL //End Marker
  150. };
  151. #if defined(ARCH_X86) || defined(ARCH_X86_64)
  152. static inline void prefetchnta(void *p)
  153. {
  154. asm volatile( "prefetchnta (%0)nt"
  155. : : "r" (p)
  156. );
  157. }
  158. static inline void prefetcht0(void *p)
  159. {
  160. asm volatile( "prefetcht0 (%0)nt"
  161. : : "r" (p)
  162. );
  163. }
  164. static inline void prefetcht1(void *p)
  165. {
  166. asm volatile( "prefetcht1 (%0)nt"
  167. : : "r" (p)
  168. );
  169. }
  170. static inline void prefetcht2(void *p)
  171. {
  172. asm volatile( "prefetcht2 (%0)nt"
  173. : : "r" (p)
  174. );
  175. }
  176. #endif
  177. // The horizontal Functions exist only in C cuz the MMX code is faster with vertical filters and transposing
  178. /**
  179.  * Check if the given 8x8 Block is mostly "flat"
  180.  */
  181. static inline int isHorizDC_C(uint8_t src[], int stride, PPContext *c)
  182. {
  183. int numEq= 0;
  184. int y;
  185. const int dcOffset= ((c->nonBQP*c->ppMode.baseDcDiff)>>8) + 1;
  186. const int dcThreshold= dcOffset*2 + 1;
  187. for(y=0; y<BLOCK_SIZE; y++)
  188. {
  189. if(((unsigned)(src[0] - src[1] + dcOffset)) < dcThreshold) numEq++;
  190. if(((unsigned)(src[1] - src[2] + dcOffset)) < dcThreshold) numEq++;
  191. if(((unsigned)(src[2] - src[3] + dcOffset)) < dcThreshold) numEq++;
  192. if(((unsigned)(src[3] - src[4] + dcOffset)) < dcThreshold) numEq++;
  193. if(((unsigned)(src[4] - src[5] + dcOffset)) < dcThreshold) numEq++;
  194. if(((unsigned)(src[5] - src[6] + dcOffset)) < dcThreshold) numEq++;
  195. if(((unsigned)(src[6] - src[7] + dcOffset)) < dcThreshold) numEq++;
  196. src+= stride;
  197. }
  198. return numEq > c->ppMode.flatnessThreshold;
  199. }
  200. /**
  201.  * Check if the middle 8x8 Block in the given 8x16 block is flat
  202.  */
  203. static inline int isVertDC_C(uint8_t src[], int stride, PPContext *c){
  204. int numEq= 0;
  205. int y;
  206. const int dcOffset= ((c->nonBQP*c->ppMode.baseDcDiff)>>8) + 1;
  207. const int dcThreshold= dcOffset*2 + 1;
  208. src+= stride*4; // src points to begin of the 8x8 Block
  209. for(y=0; y<BLOCK_SIZE-1; y++)
  210. {
  211. if(((unsigned)(src[0] - src[0+stride] + dcOffset)) < dcThreshold) numEq++;
  212. if(((unsigned)(src[1] - src[1+stride] + dcOffset)) < dcThreshold) numEq++;
  213. if(((unsigned)(src[2] - src[2+stride] + dcOffset)) < dcThreshold) numEq++;
  214. if(((unsigned)(src[3] - src[3+stride] + dcOffset)) < dcThreshold) numEq++;
  215. if(((unsigned)(src[4] - src[4+stride] + dcOffset)) < dcThreshold) numEq++;
  216. if(((unsigned)(src[5] - src[5+stride] + dcOffset)) < dcThreshold) numEq++;
  217. if(((unsigned)(src[6] - src[6+stride] + dcOffset)) < dcThreshold) numEq++;
  218. if(((unsigned)(src[7] - src[7+stride] + dcOffset)) < dcThreshold) numEq++;
  219. src+= stride;
  220. }
  221. return numEq > c->ppMode.flatnessThreshold;
  222. }
  223. static inline int isHorizMinMaxOk_C(uint8_t src[], int stride, int QP)
  224. {
  225. int i;
  226. #if 1
  227. for(i=0; i<2; i++){
  228. if((unsigned)(src[0] - src[5] + 2*QP) > 4*QP) return 0;
  229. src += stride;
  230. if((unsigned)(src[2] - src[7] + 2*QP) > 4*QP) return 0;
  231. src += stride;
  232. if((unsigned)(src[4] - src[1] + 2*QP) > 4*QP) return 0;
  233. src += stride;
  234. if((unsigned)(src[6] - src[3] + 2*QP) > 4*QP) return 0;
  235. src += stride;
  236. }
  237. #else        
  238. for(i=0; i<8; i++){
  239. if((unsigned)(src[0] - src[7] + 2*QP) > 4*QP) return 0;
  240. src += stride;
  241. }
  242. #endif
  243. return 1;
  244. }
  245. static inline int isVertMinMaxOk_C(uint8_t src[], int stride, int QP)
  246. {
  247. #if 1
  248. #if 1
  249. int x;
  250. src+= stride*4;
  251. for(x=0; x<BLOCK_SIZE; x+=4)
  252. {
  253. if((unsigned)(src[  x + 0*stride] - src[  x + 5*stride] + 2*QP) > 4*QP) return 0;
  254. if((unsigned)(src[1+x + 2*stride] - src[1+x + 7*stride] + 2*QP) > 4*QP) return 0;
  255. if((unsigned)(src[2+x + 4*stride] - src[2+x + 1*stride] + 2*QP) > 4*QP) return 0;
  256. if((unsigned)(src[3+x + 6*stride] - src[3+x + 3*stride] + 2*QP) > 4*QP) return 0;
  257. }
  258. #else
  259. int x;
  260. src+= stride*3;
  261. for(x=0; x<BLOCK_SIZE; x++)
  262. {
  263. if((unsigned)(src[x + stride] - src[x + (stride<<3)] + 2*QP) > 4*QP) return 0;
  264. }
  265. #endif
  266. return 1;
  267. #else
  268. int x;
  269. src+= stride*4;
  270. for(x=0; x<BLOCK_SIZE; x++)
  271. {
  272. int min=255;
  273. int max=0;
  274. int y;
  275. for(y=0; y<8; y++){
  276. int v= src[x + y*stride];
  277. if(v>max) max=v;
  278. if(v<min) min=v;
  279. }
  280. if(max-min > 2*QP) return 0;
  281. }
  282. return 1;
  283. #endif
  284. }
  285. static inline int horizClassify_C(uint8_t src[], int stride, PPContext *c){
  286. if( isHorizDC_C(src, stride, c) ){
  287. if( isHorizMinMaxOk_C(src, stride, c->QP) )
  288. return 1;
  289. else
  290. return 0;
  291. }else{
  292. return 2;
  293. }
  294. }
  295. static inline int vertClassify_C(uint8_t src[], int stride, PPContext *c){
  296. if( isVertDC_C(src, stride, c) ){
  297. if( isVertMinMaxOk_C(src, stride, c->QP) )
  298. return 1;
  299. else
  300. return 0;
  301. }else{
  302. return 2;
  303. }
  304. }
  305. static inline void doHorizDefFilter_C(uint8_t dst[], int stride, PPContext *c)
  306. {
  307. int y;
  308. for(y=0; y<BLOCK_SIZE; y++)
  309. {
  310. const int middleEnergy= 5*(dst[4] - dst[3]) + 2*(dst[2] - dst[5]);
  311. if(ABS(middleEnergy) < 8*c->QP)
  312. {
  313. const int q=(dst[3] - dst[4])/2;
  314. const int leftEnergy=  5*(dst[2] - dst[1]) + 2*(dst[0] - dst[3]);
  315. const int rightEnergy= 5*(dst[6] - dst[5]) + 2*(dst[4] - dst[7]);
  316. int d= ABS(middleEnergy) - MIN( ABS(leftEnergy), ABS(rightEnergy) );
  317. d= MAX(d, 0);
  318. d= (5*d + 32) >> 6;
  319. d*= SIGN(-middleEnergy);
  320. if(q>0)
  321. {
  322. d= d<0 ? 0 : d;
  323. d= d>q ? q : d;
  324. }
  325. else
  326. {
  327. d= d>0 ? 0 : d;
  328. d= d<q ? q : d;
  329. }
  330.          dst[3]-= d;
  331.          dst[4]+= d;
  332. }
  333. dst+= stride;
  334. }
  335. }
  336. /**
  337.  * Do a horizontal low pass filter on the 10x8 block (dst points to middle 8x8 Block)
  338.  * using the 9-Tap Filter (1,1,2,2,4,2,2,1,1)/16 (C version)
  339.  */
  340. static inline void doHorizLowPass_C(uint8_t dst[], int stride, PPContext *c)
  341. {
  342. int y;
  343. for(y=0; y<BLOCK_SIZE; y++)
  344. {
  345. const int first= ABS(dst[-1] - dst[0]) < c->QP ? dst[-1] : dst[0];
  346. const int last= ABS(dst[8] - dst[7]) < c->QP ? dst[8] : dst[7];
  347. int sums[10];
  348. sums[0] = 4*first + dst[0] + dst[1] + dst[2] + 4;
  349. sums[1] = sums[0] - first  + dst[3];
  350. sums[2] = sums[1] - first  + dst[4];
  351. sums[3] = sums[2] - first  + dst[5];
  352. sums[4] = sums[3] - first  + dst[6];
  353. sums[5] = sums[4] - dst[0] + dst[7];
  354. sums[6] = sums[5] - dst[1] + last;
  355. sums[7] = sums[6] - dst[2] + last;
  356. sums[8] = sums[7] - dst[3] + last;
  357. sums[9] = sums[8] - dst[4] + last;
  358. dst[0]= (sums[0] + sums[2] + 2*dst[0])>>4;
  359. dst[1]= (sums[1] + sums[3] + 2*dst[1])>>4;
  360. dst[2]= (sums[2] + sums[4] + 2*dst[2])>>4;
  361. dst[3]= (sums[3] + sums[5] + 2*dst[3])>>4;
  362. dst[4]= (sums[4] + sums[6] + 2*dst[4])>>4;
  363. dst[5]= (sums[5] + sums[7] + 2*dst[5])>>4;
  364. dst[6]= (sums[6] + sums[8] + 2*dst[6])>>4;
  365. dst[7]= (sums[7] + sums[9] + 2*dst[7])>>4;
  366. dst+= stride;
  367. }
  368. }
  369. /**
  370.  * Experimental Filter 1 (Horizontal)
  371.  * will not damage linear gradients
  372.  * Flat blocks should look like they where passed through the (1,1,2,2,4,2,2,1,1) 9-Tap filter
  373.  * can only smooth blocks at the expected locations (it cant smooth them if they did move)
  374.  * MMX2 version does correct clipping C version doesnt
  375.  * not identical with the vertical one
  376.  */
  377. static inline void horizX1Filter(uint8_t *src, int stride, int QP)
  378. {
  379. int y;
  380. static uint64_t *lut= NULL;
  381. if(lut==NULL)
  382. {
  383. int i;
  384. lut= (uint64_t*)memalign(8, 256*8);
  385. for(i=0; i<256; i++)
  386. {
  387. int v= i < 128 ? 2*i : 2*(i-256);
  388. /*
  389. //Simulate 112242211 9-Tap filter
  390. uint64_t a= (v/16) & 0xFF;
  391. uint64_t b= (v/8) & 0xFF;
  392. uint64_t c= (v/4) & 0xFF;
  393. uint64_t d= (3*v/8) & 0xFF;
  394. */
  395. //Simulate piecewise linear interpolation
  396. uint64_t a= (v/16) & 0xFF;
  397. uint64_t b= (v*3/16) & 0xFF;
  398. uint64_t c= (v*5/16) & 0xFF;
  399. uint64_t d= (7*v/16) & 0xFF;
  400. uint64_t A= (0x100 - a)&0xFF;
  401. uint64_t B= (0x100 - b)&0xFF;
  402. uint64_t C= (0x100 - c)&0xFF;
  403. uint64_t D= (0x100 - c)&0xFF;
  404. lut[i]   = (a<<56) | (b<<48) | (c<<40) | (d<<32) |
  405. (D<<24) | (C<<16) | (B<<8) | (A);
  406. //lut[i] = (v<<32) | (v<<24);
  407. }
  408. }
  409. for(y=0; y<BLOCK_SIZE; y++)
  410. {
  411. int a= src[1] - src[2];
  412. int b= src[3] - src[4];
  413. int c= src[5] - src[6];
  414. int d= MAX(ABS(b) - (ABS(a) + ABS(c))/2, 0);
  415. if(d < QP)
  416. {
  417. int v = d * SIGN(-b);
  418. src[1] +=v/8;
  419. src[2] +=v/4;
  420. src[3] +=3*v/8;
  421. src[4] -=3*v/8;
  422. src[5] -=v/4;
  423. src[6] -=v/8;
  424. }
  425. src+=stride;
  426. }
  427. }
  428. /**
  429.  * accurate deblock filter
  430.  */
  431. static always_inline void do_a_deblock_C(uint8_t *src, int step, int stride, PPContext *c){
  432. int y;
  433. const int QP= c->QP;
  434. const int dcOffset= ((c->nonBQP*c->ppMode.baseDcDiff)>>8) + 1;
  435. const int dcThreshold= dcOffset*2 + 1;
  436. //START_TIMER
  437. src+= step*4; // src points to begin of the 8x8 Block
  438. for(y=0; y<8; y++){
  439. int numEq= 0;
  440. if(((unsigned)(src[-1*step] - src[0*step] + dcOffset)) < dcThreshold) numEq++;
  441. if(((unsigned)(src[ 0*step] - src[1*step] + dcOffset)) < dcThreshold) numEq++;
  442. if(((unsigned)(src[ 1*step] - src[2*step] + dcOffset)) < dcThreshold) numEq++;
  443. if(((unsigned)(src[ 2*step] - src[3*step] + dcOffset)) < dcThreshold) numEq++;
  444. if(((unsigned)(src[ 3*step] - src[4*step] + dcOffset)) < dcThreshold) numEq++;
  445. if(((unsigned)(src[ 4*step] - src[5*step] + dcOffset)) < dcThreshold) numEq++;
  446. if(((unsigned)(src[ 5*step] - src[6*step] + dcOffset)) < dcThreshold) numEq++;
  447. if(((unsigned)(src[ 6*step] - src[7*step] + dcOffset)) < dcThreshold) numEq++;
  448. if(((unsigned)(src[ 7*step] - src[8*step] + dcOffset)) < dcThreshold) numEq++;
  449. if(numEq > c->ppMode.flatnessThreshold){
  450. int min, max, x;
  451. if(src[0] > src[step]){
  452.     max= src[0];
  453.     min= src[step];
  454. }else{
  455.     max= src[step];
  456.     min= src[0];
  457. }
  458. for(x=2; x<8; x+=2){
  459. if(src[x*step] > src[(x+1)*step]){
  460. if(src[x    *step] > max) max= src[ x   *step];
  461. if(src[(x+1)*step] < min) min= src[(x+1)*step];
  462. }else{
  463. if(src[(x+1)*step] > max) max= src[(x+1)*step];
  464. if(src[ x   *step] < min) min= src[ x   *step];
  465. }
  466. }
  467. if(max-min < 2*QP){
  468. const int first= ABS(src[-1*step] - src[0]) < QP ? src[-1*step] : src[0];
  469. const int last= ABS(src[8*step] - src[7*step]) < QP ? src[8*step] : src[7*step];
  470. int sums[10];
  471. sums[0] = 4*first + src[0*step] + src[1*step] + src[2*step] + 4;
  472. sums[1] = sums[0] - first       + src[3*step];
  473. sums[2] = sums[1] - first       + src[4*step];
  474. sums[3] = sums[2] - first       + src[5*step];
  475. sums[4] = sums[3] - first       + src[6*step];
  476. sums[5] = sums[4] - src[0*step] + src[7*step];
  477. sums[6] = sums[5] - src[1*step] + last;
  478. sums[7] = sums[6] - src[2*step] + last;
  479. sums[8] = sums[7] - src[3*step] + last;
  480. sums[9] = sums[8] - src[4*step] + last;
  481. src[0*step]= (sums[0] + sums[2] + 2*src[0*step])>>4;
  482. src[1*step]= (sums[1] + sums[3] + 2*src[1*step])>>4;
  483. src[2*step]= (sums[2] + sums[4] + 2*src[2*step])>>4;
  484. src[3*step]= (sums[3] + sums[5] + 2*src[3*step])>>4;
  485. src[4*step]= (sums[4] + sums[6] + 2*src[4*step])>>4;
  486. src[5*step]= (sums[5] + sums[7] + 2*src[5*step])>>4;
  487. src[6*step]= (sums[6] + sums[8] + 2*src[6*step])>>4;
  488. src[7*step]= (sums[7] + sums[9] + 2*src[7*step])>>4;
  489. }
  490. }else{
  491. const int middleEnergy= 5*(src[4*step] - src[3*step]) + 2*(src[2*step] - src[5*step]);
  492. if(ABS(middleEnergy) < 8*QP)
  493. {
  494. const int q=(src[3*step] - src[4*step])/2;
  495. const int leftEnergy=  5*(src[2*step] - src[1*step]) + 2*(src[0*step] - src[3*step]);
  496. const int rightEnergy= 5*(src[6*step] - src[5*step]) + 2*(src[4*step] - src[7*step]);
  497. int d= ABS(middleEnergy) - MIN( ABS(leftEnergy), ABS(rightEnergy) );
  498. d= MAX(d, 0);
  499. d= (5*d + 32) >> 6;
  500. d*= SIGN(-middleEnergy);
  501. if(q>0)
  502. {
  503. d= d<0 ? 0 : d;
  504. d= d>q ? q : d;
  505. }
  506. else
  507. {
  508. d= d>0 ? 0 : d;
  509. d= d<q ? q : d;
  510. }
  511. src[3*step]-= d;
  512. src[4*step]+= d;
  513. }
  514. }
  515. src += stride;
  516. }
  517. /*if(step==16){
  518.     STOP_TIMER("step16")
  519. }else{
  520.     STOP_TIMER("stepX")
  521. }*/
  522. }
  523. //Note: we have C, MMX, MMX2, 3DNOW version there is no 3DNOW+MMX2 one
  524. //Plain C versions
  525. #if !defined (HAVE_MMX) || defined (RUNTIME_CPUDETECT)
  526. #define COMPILE_C
  527. #endif
  528. #ifdef ARCH_POWERPC
  529. #ifdef HAVE_ALTIVEC
  530. #define COMPILE_ALTIVEC
  531. #endif //HAVE_ALTIVEC
  532. #endif //ARCH_POWERPC
  533. #if defined(ARCH_X86) || defined(ARCH_X86_64)
  534. #if (defined (HAVE_MMX) && !defined (HAVE_3DNOW) && !defined (HAVE_MMX2)) || defined (RUNTIME_CPUDETECT)
  535. #define COMPILE_MMX
  536. #endif
  537. #if defined (HAVE_MMX2) || defined (RUNTIME_CPUDETECT)
  538. #define COMPILE_MMX2
  539. #endif
  540. #if (defined (HAVE_3DNOW) && !defined (HAVE_MMX2)) || defined (RUNTIME_CPUDETECT)
  541. #define COMPILE_3DNOW
  542. #endif
  543. #endif //ARCH_X86
  544. #undef HAVE_MMX
  545. #undef HAVE_MMX2
  546. #undef HAVE_3DNOW
  547. #undef HAVE_ALTIVEC
  548. #ifdef COMPILE_C
  549. #undef HAVE_MMX
  550. #undef HAVE_MMX2
  551. #undef HAVE_3DNOW
  552. #define RENAME(a) a ## _C
  553. #include "postprocess_template.c"
  554. #endif
  555. #ifdef ARCH_POWERPC
  556. #ifdef COMPILE_ALTIVEC
  557. #undef RENAME
  558. #define HAVE_ALTIVEC
  559. #define RENAME(a) a ## _altivec
  560. #include "postprocess_altivec_template.c"
  561. #include "postprocess_template.c"
  562. #endif
  563. #endif //ARCH_POWERPC
  564. //MMX versions
  565. #ifdef COMPILE_MMX
  566. #undef RENAME
  567. #define HAVE_MMX
  568. #undef HAVE_MMX2
  569. #undef HAVE_3DNOW
  570. #define RENAME(a) a ## _MMX
  571. #include "postprocess_template.c"
  572. #endif
  573. //MMX2 versions
  574. #ifdef COMPILE_MMX2
  575. #undef RENAME
  576. #define HAVE_MMX
  577. #define HAVE_MMX2
  578. #undef HAVE_3DNOW
  579. #define RENAME(a) a ## _MMX2
  580. #include "postprocess_template.c"
  581. #endif
  582. //3DNOW versions
  583. #ifdef COMPILE_3DNOW
  584. #undef RENAME
  585. #define HAVE_MMX
  586. #undef HAVE_MMX2
  587. #define HAVE_3DNOW
  588. #define RENAME(a) a ## _3DNow
  589. #include "postprocess_template.c"
  590. #endif
  591. // minor note: the HAVE_xyz is messed up after that line so dont use it
  592. static inline void postProcess(uint8_t src[], int srcStride, uint8_t dst[], int dstStride, int width, int height,
  593. QP_STORE_T QPs[], int QPStride, int isColor, pp_mode_t *vm, pp_context_t *vc)
  594. {
  595. PPContext *c= (PPContext *)vc;
  596. PPMode *ppMode= (PPMode *)vm;
  597. c->ppMode= *ppMode; //FIXME
  598. // useing ifs here as they are faster than function pointers allthough the
  599. // difference wouldnt be messureable here but its much better because
  600. // someone might exchange the cpu whithout restarting mplayer ;)
  601. #ifdef RUNTIME_CPUDETECT
  602. #if defined(ARCH_X86) || defined(ARCH_X86_64)
  603. // ordered per speed fasterst first
  604. if(c->cpuCaps & PP_CPU_CAPS_MMX2)
  605. postProcess_MMX2(src, srcStride, dst, dstStride, width, height, QPs, QPStride, isColor, c);
  606. else if(c->cpuCaps & PP_CPU_CAPS_3DNOW)
  607. postProcess_3DNow(src, srcStride, dst, dstStride, width, height, QPs, QPStride, isColor, c);
  608. else if(c->cpuCaps & PP_CPU_CAPS_MMX)
  609. postProcess_MMX(src, srcStride, dst, dstStride, width, height, QPs, QPStride, isColor, c);
  610. else
  611. postProcess_C(src, srcStride, dst, dstStride, width, height, QPs, QPStride, isColor, c);
  612. #else
  613. #ifdef ARCH_POWERPC
  614. #ifdef HAVE_ALTIVEC
  615.         if(c->cpuCaps & PP_CPU_CAPS_ALTIVEC)
  616. postProcess_altivec(src, srcStride, dst, dstStride, width, height, QPs, QPStride, isColor, c);
  617.         else
  618. #endif
  619. #endif
  620. postProcess_C(src, srcStride, dst, dstStride, width, height, QPs, QPStride, isColor, c);
  621. #endif
  622. #else //RUNTIME_CPUDETECT
  623. #ifdef HAVE_MMX2
  624. postProcess_MMX2(src, srcStride, dst, dstStride, width, height, QPs, QPStride, isColor, c);
  625. #elif defined (HAVE_3DNOW)
  626. postProcess_3DNow(src, srcStride, dst, dstStride, width, height, QPs, QPStride, isColor, c);
  627. #elif defined (HAVE_MMX)
  628. postProcess_MMX(src, srcStride, dst, dstStride, width, height, QPs, QPStride, isColor, c);
  629. #elif defined (HAVE_ALTIVEC)
  630. postProcess_altivec(src, srcStride, dst, dstStride, width, height, QPs, QPStride, isColor, c);
  631. #else
  632. postProcess_C(src, srcStride, dst, dstStride, width, height, QPs, QPStride, isColor, c);
  633. #endif
  634. #endif //!RUNTIME_CPUDETECT
  635. }
  636. //static void postProcess(uint8_t src[], int srcStride, uint8_t dst[], int dstStride, int width, int height,
  637. // QP_STORE_T QPs[], int QPStride, int isColor, struct PPMode *ppMode);
  638. /* -pp Command line Help
  639. */
  640. char *pp_help=
  641. "Available postprocessing filters:n"
  642. "Filters Optionsn"
  643. "short long name short long option Descriptionn"
  644. "* * a autoq CPU power dependent enablern"
  645. " c chrom chrominance filtering enabledn"
  646. " y nochrom chrominance filtering disabledn"
  647. " n noluma luma filtering disabledn"
  648. "hb hdeblock (2 threshold) horizontal deblocking filtern"
  649. " 1. difference factor: default=32, higher -> more deblockingn"
  650. " 2. flatness threshold: default=39, lower -> more deblockingn"
  651. " the h & v deblocking filters share thesen"
  652. " so you can't set different thresholds for h / vn"
  653. "vb vdeblock (2 threshold) vertical deblocking filtern"
  654. "ha hadeblock (2 threshold) horizontal deblocking filtern"
  655. "va vadeblock (2 threshold) vertical deblocking filtern"
  656. "h1 x1hdeblock experimental h deblock filter 1n"
  657. "v1 x1vdeblock experimental v deblock filter 1n"
  658. "dr dering deringing filtern"
  659. "al autolevels automatic brightness / contrastn"
  660. " f fullyrange stretch luminance to (0..255)n"
  661. "lb linblenddeint linear blend deinterlacern"
  662. "li linipoldeint linear interpolating deinterlacen"
  663. "ci cubicipoldeint cubic interpolating deinterlacern"
  664. "md mediandeint median deinterlacern"
  665. "fd ffmpegdeint ffmpeg deinterlacern"
  666. "l5 lowpass5 FIR lowpass deinterlacern"
  667. "de default hb:a,vb:a,dr:an"
  668. "fa fast h1:a,v1:a,dr:an"
  669. "ac ha:a:128:7,va:a,dr:an"
  670. "tn tmpnoise (3 threshold) temporal noise reducern"
  671. " 1. <= 2. <= 3. larger -> stronger filteringn"
  672. "fq forceQuant <quantizer> force quantizern"
  673. "Usage:n"
  674. "<filterName>[:<option>[:<option>...]][[,|/][-]<filterName>[:<option>...]]...n"
  675. "long form example:n"
  676. "vdeblock:autoq/hdeblock:autoq/linblenddeint default,-vdeblockn"
  677. "short form example:n"
  678. "vb:a/hb:a/lb de,-vbn"
  679. "more examples:n"
  680. "tn:64:128:256n"
  681. ;
  682. pp_mode_t *pp_get_mode_by_name_and_quality(char *name, int quality)
  683. {
  684. char temp[GET_MODE_BUFFER_SIZE];
  685. char *p= temp;
  686. char *filterDelimiters= ",/";
  687. char *optionDelimiters= ":";
  688. struct PPMode *ppMode;
  689. char *filterToken;
  690. ppMode= memalign(8, sizeof(PPMode));
  691. ppMode->lumMode= 0;
  692. ppMode->chromMode= 0;
  693. ppMode->maxTmpNoise[0]= 700;
  694. ppMode->maxTmpNoise[1]= 1500;
  695. ppMode->maxTmpNoise[2]= 3000;
  696. ppMode->maxAllowedY= 234;
  697. ppMode->minAllowedY= 16;
  698. ppMode->baseDcDiff= 256/8;
  699. ppMode->flatnessThreshold= 56-16-1;
  700. ppMode->maxClippedThreshold= 0.01;
  701. ppMode->error=0;
  702. strncpy(temp, name, GET_MODE_BUFFER_SIZE);
  703. if(verbose>1) printf("pp: %sn", name);
  704. for(;;){
  705. char *filterName;
  706. int q= 1000000; //PP_QUALITY_MAX;
  707. int chrom=-1;
  708. int luma=-1;
  709. char *option;
  710. char *options[OPTIONS_ARRAY_SIZE];
  711. int i;
  712. int filterNameOk=0;
  713. int numOfUnknownOptions=0;
  714. int enable=1; //does the user want us to enabled or disabled the filter
  715. filterToken= strtok(p, filterDelimiters);
  716. if(filterToken == NULL) break;
  717. p+= strlen(filterToken) + 1; // p points to next filterToken
  718. filterName= strtok(filterToken, optionDelimiters);
  719. if(verbose>1) printf("pp: %s::%sn", filterToken, filterName);
  720. if(*filterName == '-')
  721. {
  722. enable=0;
  723. filterName++;
  724. }
  725. for(;;){ //for all options
  726. option= strtok(NULL, optionDelimiters);
  727. if(option == NULL) break;
  728. if(verbose>1) printf("pp: option: %sn", option);
  729. if(!strcmp("autoq", option) || !strcmp("a", option)) q= quality;
  730. else if(!strcmp("nochrom", option) || !strcmp("y", option)) chrom=0;
  731. else if(!strcmp("chrom", option) || !strcmp("c", option)) chrom=1;
  732. else if(!strcmp("noluma", option) || !strcmp("n", option)) luma=0;
  733. else
  734. {
  735. options[numOfUnknownOptions] = option;
  736. numOfUnknownOptions++;
  737. }
  738. if(numOfUnknownOptions >= OPTIONS_ARRAY_SIZE-1) break;
  739. }
  740. options[numOfUnknownOptions] = NULL;
  741. /* replace stuff from the replace Table */
  742. for(i=0; replaceTable[2*i]!=NULL; i++)
  743. {
  744. if(!strcmp(replaceTable[2*i], filterName))
  745. {
  746. int newlen= strlen(replaceTable[2*i + 1]);
  747. int plen;
  748. int spaceLeft;
  749. if(p==NULL) p= temp, *p=0;  //last filter
  750. else p--, *p=','; //not last filter
  751. plen= strlen(p);
  752. spaceLeft= p - temp + plen;
  753. if(spaceLeft + newlen  >= GET_MODE_BUFFER_SIZE)
  754. {
  755. ppMode->error++;
  756. break;
  757. }
  758. memmove(p + newlen, p, plen+1);
  759. memcpy(p, replaceTable[2*i + 1], newlen);
  760. filterNameOk=1;
  761. }
  762. }
  763. for(i=0; filters[i].shortName!=NULL; i++)
  764. {
  765. // printf("Compareing %s, %s, %sn", filters[i].shortName,filters[i].longName, filterName);
  766. if(   !strcmp(filters[i].longName, filterName)
  767.    || !strcmp(filters[i].shortName, filterName))
  768. {
  769. ppMode->lumMode &= ~filters[i].mask;
  770. ppMode->chromMode &= ~filters[i].mask;
  771. filterNameOk=1;
  772. if(!enable) break; // user wants to disable it
  773. if(q >= filters[i].minLumQuality && luma)
  774. ppMode->lumMode|= filters[i].mask;
  775. if(chrom==1 || (chrom==-1 && filters[i].chromDefault))
  776. if(q >= filters[i].minChromQuality)
  777. ppMode->chromMode|= filters[i].mask;
  778. if(filters[i].mask == LEVEL_FIX)
  779. {
  780. int o;
  781. ppMode->minAllowedY= 16;
  782. ppMode->maxAllowedY= 234;
  783. for(o=0; options[o]!=NULL; o++)
  784. {
  785. if(  !strcmp(options[o],"fullyrange")
  786.    ||!strcmp(options[o],"f"))
  787. {
  788. ppMode->minAllowedY= 0;
  789. ppMode->maxAllowedY= 255;
  790. numOfUnknownOptions--;
  791. }
  792. }
  793. }
  794. else if(filters[i].mask == TEMP_NOISE_FILTER)
  795. {
  796. int o;
  797. int numOfNoises=0;
  798. for(o=0; options[o]!=NULL; o++)
  799. {
  800. char *tail;
  801. ppMode->maxTmpNoise[numOfNoises]=
  802. strtol(options[o], &tail, 0);
  803. if(tail!=options[o])
  804. {
  805. numOfNoises++;
  806. numOfUnknownOptions--;
  807. if(numOfNoises >= 3) break;
  808. }
  809. }
  810. }
  811. else if(filters[i].mask == V_DEBLOCK   || filters[i].mask == H_DEBLOCK 
  812.      || filters[i].mask == V_A_DEBLOCK || filters[i].mask == H_A_DEBLOCK)
  813. {
  814. int o;
  815. for(o=0; options[o]!=NULL && o<2; o++)
  816. {
  817. char *tail;
  818. int val= strtol(options[o], &tail, 0);
  819. if(tail==options[o]) break;
  820. numOfUnknownOptions--;
  821. if(o==0) ppMode->baseDcDiff= val;
  822. else ppMode->flatnessThreshold= val;
  823. }
  824. }
  825. else if(filters[i].mask == FORCE_QUANT)
  826. {
  827. int o;
  828. ppMode->forcedQuant= 15;
  829. for(o=0; options[o]!=NULL && o<1; o++)
  830. {
  831. char *tail;
  832. int val= strtol(options[o], &tail, 0);
  833. if(tail==options[o]) break;
  834. numOfUnknownOptions--;
  835. ppMode->forcedQuant= val;
  836. }
  837. }
  838. }
  839. }
  840. if(!filterNameOk) ppMode->error++;
  841. ppMode->error += numOfUnknownOptions;
  842. }
  843. if(verbose>1) printf("pp: lumMode=%X, chromMode=%Xn", ppMode->lumMode, ppMode->chromMode);
  844. if(ppMode->error)
  845. {
  846. fprintf(stderr, "%d errors in postprocess string "%s"n", ppMode->error, name);
  847. free(ppMode);
  848. return NULL;
  849. }
  850. return ppMode;
  851. }
  852. void pp_free_mode(pp_mode_t *mode){
  853.     if(mode) free(mode);
  854. }
  855. static void reallocAlign(void **p, int alignment, int size){
  856. if(*p) free(*p);
  857. *p= memalign(alignment, size);
  858. memset(*p, 0, size);
  859. }
  860. static void reallocBuffers(PPContext *c, int width, int height, int stride, int qpStride){
  861. int mbWidth = (width+15)>>4;
  862. int mbHeight= (height+15)>>4;
  863. int i;
  864. c->stride= stride;
  865. c->qpStride= qpStride;
  866. reallocAlign((void **)&c->tempDst, 8, stride*24);
  867. reallocAlign((void **)&c->tempSrc, 8, stride*24);
  868. reallocAlign((void **)&c->tempBlocks, 8, 2*16*8);
  869. reallocAlign((void **)&c->yHistogram, 8, 256*sizeof(uint64_t));
  870. for(i=0; i<256; i++)
  871. c->yHistogram[i]= width*height/64*15/256;
  872. for(i=0; i<3; i++)
  873. {
  874. //Note:the +17*1024 is just there so i dont have to worry about r/w over te end
  875. reallocAlign((void **)&c->tempBlured[i], 8, stride*mbHeight*16 + 17*1024);
  876. reallocAlign((void **)&c->tempBluredPast[i], 8, 256*((height+7)&(~7))/2 + 17*1024);//FIXME size
  877. }
  878. reallocAlign((void **)&c->deintTemp, 8, 2*width+32);
  879. reallocAlign((void **)&c->nonBQPTable, 8, qpStride*mbHeight*sizeof(QP_STORE_T));
  880. reallocAlign((void **)&c->stdQPTable, 8, qpStride*mbHeight*sizeof(QP_STORE_T));
  881. reallocAlign((void **)&c->forcedQPTable, 8, mbWidth*sizeof(QP_STORE_T));
  882. }
  883. static void global_init(void){
  884. int i;
  885. memset(clip_table, 0, 256);
  886. for(i=256; i<512; i++)
  887. clip_table[i]= i;
  888. memset(clip_table+512, 0, 256);
  889. }
  890. pp_context_t *pp_get_context(int width, int height, int cpuCaps){
  891. PPContext *c= memalign(32, sizeof(PPContext));
  892. int stride= (width+15)&(~15); //assumed / will realloc if needed
  893. int qpStride= (width+15)/16 + 2; //assumed / will realloc if needed
  894.         
  895. global_init();
  896. memset(c, 0, sizeof(PPContext));
  897. c->cpuCaps= cpuCaps;
  898. if(cpuCaps&PP_FORMAT){
  899. c->hChromaSubSample= cpuCaps&0x3;
  900. c->vChromaSubSample= (cpuCaps>>4)&0x3;
  901. }else{
  902. c->hChromaSubSample= 1;
  903. c->vChromaSubSample= 1;
  904. }
  905. reallocBuffers(c, width, height, stride, qpStride);
  906.         
  907. c->frameNum=-1;
  908. return c;
  909. }
  910. void pp_free_context(void *vc){
  911. PPContext *c = (PPContext*)vc;
  912. int i;
  913. for(i=0; i<3; i++) free(c->tempBlured[i]);
  914. for(i=0; i<3; i++) free(c->tempBluredPast[i]);
  915. free(c->tempBlocks);
  916. free(c->yHistogram);
  917. free(c->tempDst);
  918. free(c->tempSrc);
  919. free(c->deintTemp);
  920. free(c->stdQPTable);
  921. free(c->nonBQPTable);
  922. free(c->forcedQPTable);
  923.         
  924. memset(c, 0, sizeof(PPContext));
  925. free(c);
  926. }
  927. void  pp_postprocess(uint8_t * src[3], int srcStride[3],
  928.                  uint8_t * dst[3], int dstStride[3],
  929.                  int width, int height,
  930.                  QP_STORE_T *QP_store,  int QPStride,
  931.  pp_mode_t *vm,  void *vc, int pict_type)
  932. {
  933. int mbWidth = (width+15)>>4;
  934. int mbHeight= (height+15)>>4;
  935. PPMode *mode = (PPMode*)vm;
  936. PPContext *c = (PPContext*)vc;
  937. int minStride= MAX(ABS(srcStride[0]), ABS(dstStride[0]));
  938. int absQPStride = ABS(QPStride);
  939. // c->stride and c->QPStride are always positive
  940. if(c->stride < minStride || c->qpStride < absQPStride)
  941. reallocBuffers(c, width, height, 
  942. MAX(minStride, c->stride), 
  943. MAX(c->qpStride, absQPStride));
  944. if(QP_store==NULL || (mode->lumMode & FORCE_QUANT)) 
  945. {
  946. int i;
  947. QP_store= c->forcedQPTable;
  948. absQPStride = QPStride = 0;
  949. if(mode->lumMode & FORCE_QUANT)
  950. for(i=0; i<mbWidth; i++) QP_store[i]= mode->forcedQuant;
  951. else
  952. for(i=0; i<mbWidth; i++) QP_store[i]= 1;
  953. }
  954. //printf("pict_type:%dn", pict_type);
  955. if(pict_type & PP_PICT_TYPE_QP2){
  956. int i;
  957. const int count= mbHeight * absQPStride;
  958. for(i=0; i<(count>>2); i++){
  959. ((uint32_t*)c->stdQPTable)[i] = (((uint32_t*)QP_store)[i]>>1) & 0x7F7F7F7F;
  960. }
  961. for(i<<=2; i<count; i++){
  962. c->stdQPTable[i] = QP_store[i]>>1;
  963. }
  964.                 QP_store= c->stdQPTable;
  965. QPStride= absQPStride;
  966. }
  967. if(0){
  968. int x,y;
  969. for(y=0; y<mbHeight; y++){
  970. for(x=0; x<mbWidth; x++){
  971. printf("%2d ", QP_store[x + y*QPStride]);
  972. }
  973. printf("n");
  974. }
  975. printf("n");
  976. }
  977. if((pict_type&7)!=3)
  978. {
  979. if (QPStride >= 0) {
  980. int i;
  981. const int count= mbHeight * QPStride;
  982. for(i=0; i<(count>>2); i++){
  983. ((uint32_t*)c->nonBQPTable)[i] = ((uint32_t*)QP_store)[i] & 0x3F3F3F3F;
  984. }
  985. for(i<<=2; i<count; i++){
  986. c->nonBQPTable[i] = QP_store[i] & 0x3F;
  987. }
  988. } else {
  989. int i,j;
  990. for(i=0; i<mbHeight; i++) {
  991.      for(j=0; j<absQPStride; j++) {
  992. c->nonBQPTable[i*absQPStride+j] = QP_store[i*QPStride+j] & 0x3F;
  993. }
  994. }
  995. }
  996. }
  997. if(verbose>2)
  998. {
  999. printf("using npp filters 0x%X/0x%Xn", mode->lumMode, mode->chromMode);
  1000. }
  1001. postProcess(src[0], srcStride[0], dst[0], dstStride[0],
  1002. width, height, QP_store, QPStride, 0, mode, c);
  1003. width  = (width )>>c->hChromaSubSample;
  1004. height = (height)>>c->vChromaSubSample;
  1005. if(mode->chromMode)
  1006. {
  1007. postProcess(src[1], srcStride[1], dst[1], dstStride[1],
  1008. width, height, QP_store, QPStride, 1, mode, c);
  1009. postProcess(src[2], srcStride[2], dst[2], dstStride[2],
  1010. width, height, QP_store, QPStride, 2, mode, c);
  1011. }
  1012. else if(srcStride[1] == dstStride[1] && srcStride[2] == dstStride[2])
  1013. {
  1014. linecpy(dst[1], src[1], height, srcStride[1]);
  1015. linecpy(dst[2], src[2], height, srcStride[2]);
  1016. }
  1017. else
  1018. {
  1019. int y;
  1020. for(y=0; y<height; y++)
  1021. {
  1022. memcpy(&(dst[1][y*dstStride[1]]), &(src[1][y*srcStride[1]]), width);
  1023. memcpy(&(dst[2][y*dstStride[2]]), &(src[2][y*srcStride[2]]), width);
  1024. }
  1025. }
  1026. }