source: trunk/FFusionCodec.c @ 1042

Revision 1042, 59.2 KB checked in by astrange, 6 years ago (diff)

MovieImport?:

  • allow importing AVI with no video track (fixes a file I generated while testing)
  • improve audio sample descriptions (MP3 should work better, don't know how to test it)
  • pass magic cookies through to all API that supports them, minus AAC since that breaks

FFusion:

  • fix memory leak if update checker isn't found
Line 
1//---------------------------------------------------------------------------
2//FFusion
3//Alternative DivX Codec for MacOS X
4//version 2.2 (build 72)
5//by Jerome Cornet
6//Copyright 2002-2003 Jerome Cornet
7//parts by Dan Christiansen
8//Copyright 2003 Dan Christiansen
9//from DivOSX by Jamby
10//Copyright 2001-2002 Jamby
11//uses libavcodec from ffmpeg 0.4.6
12//
13//This library is free software; you can redistribute it and/or
14//modify it under the terms of the GNU Lesser General Public
15//License as published by the Free Software Foundation; either
16//version 2.1 of the License, or (at your option) any later version.
17//
18//This library is distributed in the hope that it will be useful,
19//but WITHOUT ANY WARRANTY; without even the implied warranty of
20//MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the GNU
21//Lesser General Public License for more details.
22//
23//You should have received a copy of the GNU Lesser General Public
24//License along with this library; if not, write to the Free Software
25//Foundation, Inc., 51 Franklin Street, Fifth Floor, Boston, MA  02110-1301  USA
26//
27//---------------------------------------------------------------------------
28// Source Code
29//---------------------------------------------------------------------------
30
31#include <Carbon/Carbon.h>
32#include <QuickTime/QuickTime.h>
33#include <Accelerate/Accelerate.h>
34
35#include "FFusionCodec.h"
36#include "EI_Image.h"
37#include "avcodec.h"
38#include "Codecprintf.h"
39#include "ColorConversions.h"
40#include "bitstream_info.h"
41#include "FrameBuffer.h"
42#include "CommonUtils.h"
43#include "pthread.h"
44
45void inline swapFrame(AVFrame * *a, AVFrame * *b)
46{
47        AVFrame *t = *a;
48        *a = *b;
49        *b = t;
50}
51
52//---------------------------------------------------------------------------
53// Types
54//---------------------------------------------------------------------------
55
56// 32 because that's ffmpeg's INTERNAL_BUFFER_SIZE
57#define FFUSION_MAX_BUFFERS 32
58
59typedef struct
60{
61        AVFrame         *frame;
62        short           retainCount;
63        short           ffmpegUsing;
64        long            frameNumber;
65        AVFrame         returnedFrame;
66} FFusionBuffer;
67
68typedef enum
69{
70        PACKED_QUICKTIME_KNOWS_ORDER, /* This is for non-stupid container formats which actually know the difference between decode and display order */
71        PACKED_ALL_IN_FIRST_FRAME, /* This is for the divx hack which contains a P frame and all subsequent B frames in a single frame. Ex: I, PB, -, PB, -, I...*/
72        PACKED_DELAY_BY_ONE_FRAME /* This is for stupid containers where frames are soley writen in decode order.  Ex: I, P, B, P, B, P, I.... */
73} FFusionPacked;
74
75/* Why do these small structs?  It makes the usage of these variables clearer, no other reason */
76
77/* globs used by the BeginBand routine */
78struct begin_glob
79{
80        FFusionParserContext    *parser;
81        long                    lastFrame;
82        long                    lastIFrame;
83        int                             lastFrameType;
84        int                             futureType;
85        FrameData               *lastPFrameData;
86};
87
88/* globs used by the DecodeBand routine */
89struct decode_glob
90{
91        long                    lastFrame;
92        FFusionBuffer   *futureBuffer;
93};
94
95struct per_frame_decode_stats
96{
97        unsigned                begin_calls;
98        unsigned                decode_calls;
99        unsigned                draw_calls;
100        unsigned                end_calls;
101};
102
103struct decode_stats
104{
105        struct per_frame_decode_stats type[4];
106        int             max_frames_begun;
107        int             max_frames_decoded;
108};
109
110typedef struct
111{
112    ComponentInstance           self;
113    ComponentInstance           delegateComponent;
114    ComponentInstance           target;
115    ImageCodecMPDrawBandUPP     drawBandUPP;
116    Handle                      pixelTypes;
117    AVCodec                     *avCodec;
118    AVCodecContext      *avContext;
119    OSType                      componentType;
120        FILE                    *fileLog;
121        AVFrame                 lastDisplayedFrame;
122        FFusionPacked   packedType;
123        FFusionBuffer   buffers[FFUSION_MAX_BUFFERS];   // the buffers which the codec has retained
124        int                             lastAllocatedBuffer;            // the index of the buffer which was last allocated
125                                                                                                // by the codec (and is the latest in decode order)     
126        int                             shouldUseReturnedFrame;
127        struct begin_glob       begin;
128        FFusionData             data;
129        struct decode_glob      decode;
130        struct decode_stats stats;
131        ColorConversionFuncs colorConv;
132} FFusionGlobalsRecord, *FFusionGlobals;
133
134typedef struct
135{
136    long                        width;
137    long                        height;
138    long                        depth;
139    OSType                      pixelFormat;
140        int                             decoded;
141        long                    frameNumber;
142        long                    GOPStartFrameNumber;
143        long                    bufferSize;
144        FFusionBuffer   *buffer;
145        FrameData               *frameData;
146} FFusionDecompressRecord;
147
148
149//---------------------------------------------------------------------------
150// Prototypes of private subroutines
151//---------------------------------------------------------------------------
152
153static OSErr FFusionDecompress(FFusionGlobals glob, AVCodecContext *context, UInt8 *dataPtr, long width, long height, AVFrame *picture, long length);
154static int FFusionGetBuffer(AVCodecContext *s, AVFrame *pic);
155static void FFusionReleaseBuffer(AVCodecContext *s, AVFrame *pic);
156static void releaseBuffer(AVCodecContext *s, FFusionBuffer *buf);
157static FFusionBuffer *retainBuffer(FFusionGlobals glob, FFusionBuffer *buf);
158static void SetupMultithreadedDecoding(AVCodecContext *s, enum CodecID codecID);
159
160int GetPPUserPreference();
161void SetPPUserPreference(int value);
162pascal OSStatus HandlePPDialogWindowEvent(EventHandlerCallRef  nextHandler, EventRef theEvent, void* userData);
163pascal OSStatus HandlePPDialogControlEvent(EventHandlerCallRef  nextHandler, EventRef theEvent, void* userData);
164void ChangeHintText(int value, ControlRef staticTextField);
165
166extern void init_FFmpeg();
167extern CFMutableStringRef CopyHomeDirectory();
168
169#define FFusionDebugPrint(x...) if (glob->fileLog) Codecprintf(glob->fileLog, x);
170#define not(x) ((x) ? "" : "not ")
171
172//---------------------------------------------------------------------------
173// Component Dispatcher
174//---------------------------------------------------------------------------
175
176#define IMAGECODEC_BASENAME()           FFusionCodec
177#define IMAGECODEC_GLOBALS()            FFusionGlobals storage
178
179#define CALLCOMPONENT_BASENAME()        IMAGECODEC_BASENAME()
180#define CALLCOMPONENT_GLOBALS()         IMAGECODEC_GLOBALS()
181
182#define COMPONENT_UPP_PREFIX()          uppImageCodec
183#define COMPONENT_DISPATCH_FILE         "FFusionCodecDispatch.h"
184#define COMPONENT_SELECT_PREFIX()       kImageCodec
185
186#define GET_DELEGATE_COMPONENT()        (storage->delegateComponent)
187
188#include <QuickTime/ImageCodec.k.h>
189#include <QuickTime/ComponentDispatchHelper.c>
190
191static void *launchUpdateChecker(void *args)
192{
193        FSRef *ref = (FSRef *)args;
194    LSOpenFSRef(ref, NULL);
195        free(ref);
196        return NULL;
197}
198
199Boolean FFusionAlreadyRanUpdateCheck = 0;
200
201void FFusionRunUpdateCheck()
202{
203        if (FFusionAlreadyRanUpdateCheck) return;
204
205    CFDateRef lastRunDate = CopyPreferencesValueTyped(CFSTR("NextRunDate"), CFDateGetTypeID());
206    CFAbsoluteTime now = CFAbsoluteTimeGetCurrent();
207   
208        FFusionAlreadyRanUpdateCheck = 1;
209       
210        if (lastRunDate) {
211                Boolean exit = CFDateGetAbsoluteTime(lastRunDate) > now;
212                CFRelease(lastRunDate);
213                if (exit) return;
214        }
215   
216    //Two places to check, home dir and /
217   
218    CFMutableStringRef location = CopyHomeDirectory();
219    CFStringAppend(location, CFSTR("/Library/PreferencePanes/Perian.prefPane/Contents/Resources/PerianUpdateChecker.app"));
220   
221    char fileRep[1024];
222    FSRef *updateCheckRef = malloc(sizeof(FSRef));
223    Boolean doCheck = FALSE;
224   
225    if(CFStringGetFileSystemRepresentation(location, fileRep, 1024))
226        if(FSPathMakeRef((UInt8 *)fileRep, updateCheckRef, NULL) == noErr)
227            doCheck = TRUE;
228   
229    CFRelease(location);
230    if(doCheck == FALSE)
231    {
232        CFStringRef absLocation = CFSTR("/Library/PreferencePanes/Perian.prefPane/Contents/Resources/PerianUpdateChecker.app");
233        if(CFStringGetFileSystemRepresentation(absLocation, fileRep, 1024))
234            if(FSPathMakeRef((UInt8 *)fileRep, updateCheckRef, NULL) != noErr)
235                goto err;  //We have failed
236    }
237        pthread_t thread;
238        pthread_create(&thread, NULL, launchUpdateChecker, updateCheckRef);
239       
240        return;
241err:
242        free(updateCheckRef);
243}
244
245static void RecomputeMaxCounts(FFusionGlobals glob)
246{
247        int i;
248        unsigned begun = 0, decoded = 0, ended = 0, drawn = 0;
249       
250        for (i = 0; i < 4; i++) {
251                struct per_frame_decode_stats *f = &glob->stats.type[i];
252               
253                begun += f->begin_calls;
254                decoded += f->decode_calls;
255                drawn += f->draw_calls;
256                ended += f->end_calls;
257        }
258       
259        signed begin_diff = begun - ended, decode_diff = decoded - drawn;
260       
261        if (abs(begin_diff) > glob->stats.max_frames_begun) glob->stats.max_frames_begun = begin_diff;
262        if (abs(decode_diff) > glob->stats.max_frames_decoded) glob->stats.max_frames_decoded = decode_diff;
263}
264
265static void DumpFrameDropStats(FFusionGlobals glob)
266{
267        static const char types[4] = {'?', 'I', 'P', 'B'};
268        int i;
269       
270        if (!glob->fileLog || glob->decode.lastFrame == 0) return;
271       
272        Codecprintf(glob->fileLog, "%p frame drop stats\nType\t| BeginBand\t| DecodeBand\t| DrawBand\t| dropped before decode\t| dropped before draw\n", glob);
273       
274        for (i = 0; i < 4; i++) {
275                struct per_frame_decode_stats *f = &glob->stats.type[i];
276                               
277                Codecprintf(glob->fileLog, "%c\t| %d\t\t| %d\t\t| %d\t\t| %d/%f%%\t\t| %d/%f%%\n", types[i], f->begin_calls, f->decode_calls, f->draw_calls,
278                                        f->begin_calls - f->decode_calls,(f->begin_calls > f->decode_calls) ? ((float)(f->begin_calls - f->decode_calls)/(float)f->begin_calls) * 100. : 0.,
279                                        f->decode_calls - f->draw_calls,(f->decode_calls > f->draw_calls) ? ((float)(f->decode_calls - f->draw_calls)/(float)f->decode_calls) * 100. : 0.);
280        }
281}
282
283static enum PixelFormat FindPixFmtFromVideo(AVCodec *codec, AVCodecContext *avctx, Ptr data, int bufferSize)
284{
285    AVCodecContext tmpContext;
286    AVFrame tmpFrame;
287    int got_picture;
288    enum PixelFormat pix_fmt;
289   
290    avcodec_get_context_defaults2(&tmpContext, CODEC_TYPE_VIDEO);
291    tmpContext.width = avctx->width;
292    tmpContext.height = avctx->height;
293    tmpContext.codec_tag = avctx->codec_tag;
294   
295    avcodec_open(&tmpContext, codec);
296    avcodec_decode_video(&tmpContext, &tmpFrame, &got_picture, (UInt8*)data, bufferSize);
297    pix_fmt = tmpContext.pix_fmt;
298    avcodec_close(&tmpContext);
299   
300    return pix_fmt;
301}
302
303//---------------------------------------------------------------------------
304// Component Routines
305//---------------------------------------------------------------------------
306
307// -- This Image Decompressor Use the Base Image Decompressor Component --
308//      The base image decompressor is an Apple-supplied component
309//      that makes it easier for developers to create new decompressors.
310//      The base image decompressor does most of the housekeeping and
311//      interface functions required for a QuickTime decompressor component,
312//      including scheduling for asynchronous decompression.
313
314//-----------------------------------------------------------------
315// Component Open Request - Required
316//-----------------------------------------------------------------
317
318pascal ComponentResult FFusionCodecOpen(FFusionGlobals glob, ComponentInstance self)
319{
320    ComponentResult err;
321    ComponentDescription descout;
322   
323    GetComponentInfo((Component)self, &descout, 0, 0, 0);
324       
325  //  FourCCprintf("Opening component for type ", descout.componentSubType);
326    // Allocate memory for our globals, set them up and inform the component manager that we've done so
327       
328    glob = (FFusionGlobals)NewPtrClear(sizeof(FFusionGlobalsRecord));
329   
330    if (err = MemError())
331    {
332        Codecprintf(NULL, "Unable to allocate globals! Exiting.\n");           
333    }
334    else
335    {
336                CFStringRef pathToLogFile = CopyPreferencesValueTyped(CFSTR("DebugLogFile"), CFStringGetTypeID());
337                char path[PATH_MAX];
338        SetComponentInstanceStorage(self, (Handle)glob);
339
340        glob->self = self;
341        glob->target = self;
342        glob->drawBandUPP = NULL;
343        glob->pixelTypes = NewHandle(10 * sizeof(OSType));
344        glob->avCodec = 0;
345        glob->componentType = descout.componentSubType;
346                glob->packedType = PACKED_ALL_IN_FIRST_FRAME;  //Unless we have reason to believe otherwise.
347                glob->data.frames = NULL;
348                glob->begin.parser = NULL;
349                if (pathToLogFile) {
350                        CFStringGetCString(pathToLogFile, path, PATH_MAX, kCFStringEncodingUTF8);
351                        CFRelease(pathToLogFile);
352                        glob->fileLog = fopen(path, "a");
353                }
354                glob->shouldUseReturnedFrame = 0;
355               
356        // Open and target an instance of the base decompressor as we delegate
357        // most of our calls to the base decompressor instance
358       
359        err = OpenADefaultComponent(decompressorComponentType, kBaseCodecType, &glob->delegateComponent);
360        if (!err)
361        {
362            ComponentSetTarget(glob->delegateComponent, self);
363        }
364        else
365        {
366            Codecprintf(glob->fileLog, "Error opening the base image decompressor! Exiting.\n");
367        }
368               
369                // we allocate some space for copying the frame data since we need some padding at the end
370                // for ffmpeg's optimized bitstream readers. Size doesn't really matter, it'll grow if need be
371                FFusionDataSetup(&(glob->data), 256, 1024*1024);
372        FFusionRunUpdateCheck();
373    }
374   
375    FFusionDebugPrint("%p opened for '%s'\n", glob, FourCCString(glob->componentType));
376    return err;
377}
378
379//-----------------------------------------------------------------
380// Component Close Request - Required
381//-----------------------------------------------------------------
382
383pascal ComponentResult FFusionCodecClose(FFusionGlobals glob, ComponentInstance self)
384{
385    FFusionDebugPrint("%p closed.\n", glob);
386        DumpFrameDropStats(glob);
387
388    // Make sure to close the base component and deallocate our storage
389    if (glob) 
390    {
391        if (glob->delegateComponent) 
392        {
393            CloseComponent(glob->delegateComponent);
394        }
395       
396        if (glob->drawBandUPP) 
397        {
398            DisposeImageCodecMPDrawBandUPP(glob->drawBandUPP);
399        }
400                               
401        if (glob->avContext)
402        {
403                        if (glob->avContext->extradata)
404                                free(glob->avContext->extradata);
405                                               
406                        if (glob->avContext->codec) avcodec_close(glob->avContext);
407            av_free(glob->avContext);
408        }
409               
410                if (glob->begin.parser)
411                {
412                        freeFFusionParser(glob->begin.parser);
413                }
414               
415                if (glob->pixelTypes)
416                {
417                        DisposeHandle(glob->pixelTypes);
418                }
419               
420                FFusionDataFree(&(glob->data));
421       
422                if(glob->fileLog)
423                        fclose(glob->fileLog);
424               
425        memset(glob, 0, sizeof(FFusionGlobalsRecord));
426        DisposePtr((Ptr)glob);
427    }
428       
429    return noErr;
430}
431
432//-----------------------------------------------------------------
433// Component Version Request - Required
434//-----------------------------------------------------------------
435
436pascal ComponentResult FFusionCodecVersion(FFusionGlobals glob)
437{
438    return kFFusionCodecVersion;
439}
440
441//-----------------------------------------------------------------
442// Component Target Request
443//-----------------------------------------------------------------
444// Allows another component to "target" you i.e., you call
445// another component whenever you would call yourself (as a result
446// of your component being used by another component)
447//-----------------------------------------------------------------
448
449pascal ComponentResult FFusionCodecTarget(FFusionGlobals glob, ComponentInstance target)
450{
451    glob->target = target;
452       
453    return noErr;
454}
455
456//-----------------------------------------------------------------
457// Component GetMPWorkFunction Request
458//-----------------------------------------------------------------
459// Allows your image decompressor component to perform asynchronous
460// decompression in a single MP task by taking advantage of the
461// Base Decompressor. If you implement this selector, your DrawBand
462// function must be MP-safe. MP safety means not calling routines
463// that may move or purge memory and not calling any routines which
464// might cause 68K code to be executed. Ideally, your DrawBand
465// function should not make any API calls whatsoever. Obviously
466// don't implement this if you're building a 68k component.
467//-----------------------------------------------------------------
468
469pascal ComponentResult FFusionCodecGetMPWorkFunction(FFusionGlobals glob, ComponentMPWorkFunctionUPP *workFunction, void **refCon)
470{
471        if (glob->drawBandUPP == NULL)
472                glob->drawBandUPP = NewImageCodecMPDrawBandUPP((ImageCodecMPDrawBandProcPtr)FFusionCodecDrawBand);
473       
474        return ImageCodecGetBaseMPWorkFunction(glob->delegateComponent, workFunction, refCon, glob->drawBandUPP, glob);
475}
476
477//-----------------------------------------------------------------
478// ImageCodecInitialize
479//-----------------------------------------------------------------
480// The first function call that your image decompressor component
481// receives from the base image decompressor is always a call to
482// ImageCodecInitialize . In response to this call, your image
483// decompressor component returns an ImageSubCodecDecompressCapabilities
484// structure that specifies its capabilities.
485//-----------------------------------------------------------------
486
487pascal ComponentResult FFusionCodecInitialize(FFusionGlobals glob, ImageSubCodecDecompressCapabilities *cap)
488{
489        Boolean doExperimentalFlags = CFPreferencesGetAppBooleanValue(CFSTR("ExperimentalQTFlags"), PERIAN_PREF_DOMAIN, NULL);
490       
491    // Secifies the size of the ImageSubCodecDecompressRecord structure
492    // and say we can support asyncronous decompression
493    // With the help of the base image decompressor, any image decompressor
494    // that uses only interrupt-safe calls for decompression operations can
495    // support asynchronous decompression.
496       
497    cap->decompressRecordSize = sizeof(FFusionDecompressRecord) + 12;
498    cap->canAsync = true;
499       
500        // QT 7
501        if(cap->recordSize > offsetof(ImageSubCodecDecompressCapabilities, baseCodecShouldCallDecodeBandForAllFrames))
502        {
503                cap->subCodecIsMultiBufferAware = true;
504                cap->subCodecSupportsOutOfOrderDisplayTimes = true;
505                cap->baseCodecShouldCallDecodeBandForAllFrames = true;
506                cap->subCodecSupportsScheduledBackwardsPlaybackWithDifferenceFrames = !doExperimentalFlags;
507                cap->subCodecSupportsDrawInDecodeOrder = doExperimentalFlags; 
508                cap->subCodecSupportsDecodeSmoothing = true; 
509        }
510       
511    return noErr;
512}
513
514static inline int shouldDecode(FFusionGlobals glob, enum CodecID codecID)
515{
516        FFusionDecodeAbilities decode = FFUSION_PREFER_DECODE;
517        if (glob->componentType == 'avc1')
518                decode = ffusionIsParsedVideoDecodable(glob->begin.parser);
519        if(decode > FFUSION_CANNOT_DECODE && 
520           (codecID == CODEC_ID_H264 || codecID == CODEC_ID_MPEG4) && CFPreferencesGetAppBooleanValue(CFSTR("PreferAppleCodecs"), PERIAN_PREF_DOMAIN, NULL))
521                decode = FFUSION_PREFER_NOT_DECODE;
522        if(decode > FFUSION_CANNOT_DECODE)
523                if(forcePerianToDecode())
524                        decode = FFUSION_PREFER_DECODE;
525        return decode > FFUSION_PREFER_NOT_DECODE;
526}
527
528//-----------------------------------------------------------------
529// ImageCodecPreflight
530//-----------------------------------------------------------------
531// The base image decompressor gets additional information about the
532// capabilities of your image decompressor component by calling
533// ImageCodecPreflight. The base image decompressor uses this
534// information when responding to a call to the ImageCodecPredecompress
535// function, which the ICM makes before decompressing an image. You
536// are required only to provide values for the wantedDestinationPixelSize
537// and wantedDestinationPixelTypes fields and can also modify other
538// fields if necessary.
539//-----------------------------------------------------------------
540
541pascal ComponentResult FFusionCodecPreflight(FFusionGlobals glob, CodecDecompressParams *p)
542{
543    OSType *pos;
544    int index;
545    CodecCapabilities *capabilities = p->capabilities;
546        long count = 0;
547        Handle imgDescExt;
548        OSErr err = noErr;
549       
550    // We first open libavcodec library and the codec corresponding
551    // to the fourCC if it has not been done before
552   
553        FFusionDebugPrint("%p Preflight called.\n", glob);
554        FFusionDebugPrint("%p Frame dropping is %senabled\n", glob, not(IsFrameDroppingEnabled()));
555       
556    if (!glob->avCodec)
557    {
558                enum CodecID codecID = CODEC_ID_MPEG4;
559               
560                init_FFmpeg();
561                initFFusionParsers();
562               
563        switch (glob->componentType)
564        {
565            case 'MPG4':        // MS-MPEG4 v1
566            case 'mpg4':
567            case 'DIV1':
568            case 'div1':
569                codecID = CODEC_ID_MSMPEG4V1;
570                                break;
571                               
572            case 'MP42':        // MS-MPEG4 v2
573            case 'mp42':
574            case 'DIV2':
575            case 'div2':
576                codecID = CODEC_ID_MSMPEG4V2;
577                                break;
578                               
579            case 'div6':        // DivX 3
580            case 'DIV6':
581            case 'div5':
582            case 'DIV5':
583            case 'div4':
584            case 'DIV4':
585            case 'div3':
586            case 'DIV3':
587            case 'MP43':
588            case 'mp43':
589            case 'MPG3':
590            case 'mpg3':
591            case 'AP41':
592            case 'COL0':
593            case 'col0':
594            case 'COL1':
595            case 'col1':
596            case '3IVD':        // 3ivx
597            case '3ivd':
598                codecID = CODEC_ID_MSMPEG4V3;
599                                break;
600                               
601                        case 'mp4v':    // MPEG4 part 2 in mov/mp4
602                                glob->packedType = PACKED_QUICKTIME_KNOWS_ORDER;
603            case 'divx':        // DivX 4
604            case 'DIVX':
605            case 'mp4s':
606            case 'MP4S':
607            case 'm4s2':
608            case 'M4S2':
609            case 0x04000000:
610            case 'UMP4':
611            case 'DX50':        // DivX 5
612            case 'XVID':        // XVID
613            case 'xvid':
614            case 'XviD':
615            case 'XVIX':
616            case 'BLZ0':
617            case '3IV2':        // 3ivx
618            case '3iv2':
619                        case 'RMP4':    // Miscellaneous
620                        case 'SEDG':
621                        case 'WV1F':
622                        case 'FMP4':
623                        case 'SMP4':
624                codecID = CODEC_ID_MPEG4;
625                                break;
626
627                        case 'avc1':    // H.264 in mov/mp4/mkv
628                                glob->packedType = PACKED_QUICKTIME_KNOWS_ORDER;
629                        case 'H264':    // H.264 in AVI
630                        case 'h264':
631                        case 'X264':
632                        case 'x264':
633                        case 'AVC1':
634                        case 'DAVC':
635                        case 'VSSH':
636                                codecID = CODEC_ID_H264;
637                                break;
638
639                        case 'FLV1':
640                                codecID = CODEC_ID_FLV1;
641                                break;
642
643                        case 'FSV1':
644                                codecID = CODEC_ID_FLASHSV;
645                                break;
646
647                        case 'VP60':
648                        case 'VP61':
649                        case 'VP62':
650                                codecID = CODEC_ID_VP6;
651                                break;
652
653                        case 'VP6F':
654                        case 'FLV4':
655                                codecID = CODEC_ID_VP6F;
656                                break;
657
658                        case 'I263':
659                        case 'i263':
660                                codecID = CODEC_ID_H263I;
661                                break;
662
663                        case 'VP30':
664                        case 'VP31':
665                                glob->shouldUseReturnedFrame = TRUE;
666                                codecID = CODEC_ID_VP3;
667                                break;
668                               
669                        case 'HFYU':
670                                codecID = CODEC_ID_HUFFYUV;
671                                break;
672
673                        case 'FFVH':
674                                codecID = CODEC_ID_FFVHUFF;
675                                break;
676                               
677                        case 'MPEG':
678                        case 'mpg1':
679                        case 'mp1v':
680                                codecID = CODEC_ID_MPEG1VIDEO;
681                                break;
682                               
683                        case 'MPG2':
684                        case 'mpg2':
685                        case 'mp2v':
686                                codecID = CODEC_ID_MPEG2VIDEO;
687                                break;
688                               
689                        case 'FPS1':
690                                codecID = CODEC_ID_FRAPS;
691                                break;
692                               
693                        case 'SNOW':
694                                codecID = CODEC_ID_SNOW;
695                                break;
696
697            case 'RJPG':
698            case 'NUV1':
699                codecID = CODEC_ID_NUV;
700                break;
701                        case 'tscc':
702                                codecID = CODEC_ID_TSCC;
703                                break;
704                               
705                        case 'ZMBV':
706                                codecID = CODEC_ID_ZMBV;
707                                break;
708                               
709                        case 'VP6A':
710                                codecID = CODEC_ID_VP6A;
711                                break;
712                               
713            default:
714                                Codecprintf(glob->fileLog, "Warning! Unknown codec type! Using MPEG4 by default.\n");
715        }
716               
717                glob->avCodec = avcodec_find_decoder(codecID);
718//              if(glob->packedType != PACKED_QUICKTIME_KNOWS_ORDER)
719                        glob->begin.parser = ffusionParserInit(codecID);
720               
721                if ((codecID == CODEC_ID_MPEG4 || codecID == CODEC_ID_H264) && !glob->begin.parser)
722                        Codecprintf(glob->fileLog, "This is a parseable format, but we couldn't open a parser!\n");
723               
724        // we do the same for the AVCodecContext since all context values are
725        // correctly initialized when calling the alloc function
726       
727        glob->avContext = avcodec_alloc_context();
728               
729                // Use low delay
730                glob->avContext->flags |= CODEC_FLAG_LOW_DELAY;
731               
732        // Image size is mandatory for DivX-like codecs
733       
734        glob->avContext->width = (**p->imageDescription).width;
735        glob->avContext->height = (**p->imageDescription).height;
736                glob->avContext->bits_per_coded_sample = (**p->imageDescription).depth;
737               
738        // We also pass the FourCC since it allows the H263 hybrid decoder
739        // to make the difference between the various flavours of DivX
740        glob->avContext->codec_tag = Endian32_Swap(glob->componentType);
741       
742                // avc1 requires the avcC extension
743                if (glob->componentType == 'avc1') {
744                        count = isImageDescriptionExtensionPresent(p->imageDescription, 'avcC');
745                       
746                        if (count >= 1) {
747                                imgDescExt = NewHandle(0);
748                                GetImageDescriptionExtension(p->imageDescription, &imgDescExt, 'avcC', 1);
749                               
750                                glob->avContext->extradata = calloc(1, GetHandleSize(imgDescExt) + FF_INPUT_BUFFER_PADDING_SIZE);
751                                memcpy(glob->avContext->extradata, *imgDescExt, GetHandleSize(imgDescExt));
752                                glob->avContext->extradata_size = GetHandleSize(imgDescExt);
753                               
754                                DisposeHandle(imgDescExt);
755                        } else {
756                                count = isImageDescriptionExtensionPresent(p->imageDescription, 'strf');
757                               
758                                // avc1 in AVI, need to reorder frames
759                                if (count >= 1)
760                                        glob->packedType = PACKED_ALL_IN_FIRST_FRAME;
761                        }
762                } else if (glob->componentType == 'mp4v') {
763                        count = isImageDescriptionExtensionPresent(p->imageDescription, 'esds');
764                       
765                        if (count >= 1) {
766                                imgDescExt = NewHandle(0);
767                                GetImageDescriptionExtension(p->imageDescription, &imgDescExt, 'esds', 1);
768                               
769                                ReadESDSDescExt(imgDescExt, &glob->avContext->extradata, &glob->avContext->extradata_size);
770                               
771                                DisposeHandle(imgDescExt);
772                        }
773                } else {
774                        count = isImageDescriptionExtensionPresent(p->imageDescription, 'strf');
775                       
776                        if (count >= 1) {
777                                imgDescExt = NewHandle(0);
778                                GetImageDescriptionExtension(p->imageDescription, &imgDescExt, 'strf', 1);
779                               
780                                if (GetHandleSize(imgDescExt) - 40 > 0) {
781                                        glob->avContext->extradata = calloc(1, GetHandleSize(imgDescExt) - 40 + FF_INPUT_BUFFER_PADDING_SIZE);
782                                        memcpy(glob->avContext->extradata, *imgDescExt + 40, GetHandleSize(imgDescExt) - 40);
783                                        glob->avContext->extradata_size = GetHandleSize(imgDescExt) - 40;
784                                }
785                                DisposeHandle(imgDescExt);
786                        }
787                }
788               
789                FFusionDebugPrint("%p preflighted for %dx%d '%s'. (%d bytes of extradata)\n", glob, (**p->imageDescription).width, (**p->imageDescription).height, FourCCString(glob->componentType), glob->avContext->extradata_size);
790       
791                if(glob->avContext->extradata_size != 0 && glob->begin.parser != NULL)
792                        ffusionParseExtraData(glob->begin.parser, glob->avContext->extradata, glob->avContext->extradata_size);
793               
794                if (glob->fileLog)
795                        ffusionLogDebugInfo(glob->begin.parser, glob->fileLog);
796               
797                if (!shouldDecode(glob, codecID))
798                        err = featureUnsupported;
799               
800                // some hooks into ffmpeg's buffer allocation to get frames in
801                // decode order without delay more easily
802                glob->avContext->opaque = glob;
803                glob->avContext->get_buffer = FFusionGetBuffer;
804                glob->avContext->release_buffer = FFusionReleaseBuffer;
805               
806                // multi-slice decoding
807                SetupMultithreadedDecoding(glob->avContext, codecID);
808               
809                //fast flag
810                if (CFPreferencesGetAppBooleanValue(CFSTR("UseFastDecode"), PERIAN_PREF_DOMAIN, NULL))
811                        glob->avContext->flags2 |= CODEC_FLAG2_FAST;
812               
813        // Finally we open the avcodec
814       
815        if (avcodec_open(glob->avContext, glob->avCodec))
816        {
817            Codecprintf(glob->fileLog, "Error opening avcodec!\n");
818           
819                        err = paramErr;
820        }
821               
822        // this format doesn't have enough information in its headers
823                // we have to decode the first frame
824                if (glob->avContext->pix_fmt == PIX_FMT_NONE && p->bufferSize && p->data)
825            glob->avContext->pix_fmt = FindPixFmtFromVideo(glob->avCodec, glob->avContext, p->data, p->bufferSize);
826    }
827   
828    // Specify the minimum image band height supported by the component
829    // bandInc specifies a common factor of supported image band heights -
830    // if your component supports only image bands that are an even
831    // multiple of some number of pixels high report this common factor in bandInc
832   
833    capabilities->bandMin = (**p->imageDescription).height;
834    capabilities->bandInc = capabilities->bandMin;
835       
836    // libavcodec 0.4.x is no longer stream based i.e. you cannot pass just
837    // an arbitrary amount of data to the library.
838    // Instead we have to tell QT to just pass the data corresponding
839    // to one frame
840       
841    capabilities->flags |= codecWantsSpecialScaling;
842   
843    p->requestedBufferWidth = (**p->imageDescription).width;
844    p->requestedBufferHeight = (**p->imageDescription).height;
845   
846    // Indicate the pixel depth the component can use with the specified image
847    // normally should be capabilities->wantedPixelSize = (**p->imageDescription).depth;
848    // but we don't care since some DivX are so bugged that the depth information
849    // is not correct
850   
851    capabilities->wantedPixelSize = 0;
852   
853    HLock(glob->pixelTypes);
854    pos = *((OSType **)glob->pixelTypes);
855   
856    index = 0;
857       
858        if (!err) {
859                OSType qtPixFmt = ColorConversionDstForPixFmt(glob->avContext->pix_fmt);
860               
861                /*
862                 an error here means either
863                 1) a color converter for this format isn't implemented
864                 2) we know QT doesn't like this format and will give us argb 32bit instead
865                 
866                 in the case of 2 we have to special-case bail right here, since errors
867                 in BeginBand are ignored
868                 */
869                if (qtPixFmt)
870                        pos[index++] = qtPixFmt;
871                else
872                        err = featureUnsupported;
873        }
874   
875    pos[index++] = 0;
876    HUnlock(glob->pixelTypes);
877       
878    p->wantedDestinationPixelTypes = (OSType **)glob->pixelTypes;
879   
880    // Specify the number of pixels the image must be extended in width and height if
881    // the component cannot accommodate the image at its given width and height
882    // It is not the case here
883   
884    capabilities->extendWidth = 0;
885    capabilities->extendHeight = 0;
886   
887        capabilities->flags |= codecCanAsync | codecCanAsyncWhen;
888       
889        FFusionDebugPrint("%p Preflight requesting colorspace '%s'. (error %d)\n", glob, FourCCString(pos[0]), err);
890       
891        Boolean keyExists = FALSE;
892        int loopFilterSkip = CFPreferencesGetAppIntegerValue(CFSTR("SkipLoopFilter"), PERIAN_PREF_DOMAIN, &keyExists);
893        if(keyExists)
894        {
895                enum AVDiscard loopFilterValue = AVDISCARD_DEFAULT;
896                switch (loopFilterSkip) {
897                        case 1:
898                                loopFilterValue = AVDISCARD_NONREF;
899                                break;
900                        case 2:
901                                loopFilterValue = AVDISCARD_BIDIR;
902                                break;
903                        case 3:
904                                loopFilterValue = AVDISCARD_NONKEY;
905                                break;
906                        case 4:
907                                loopFilterValue = AVDISCARD_ALL;
908                                break;
909                        default:
910                                break;
911                }
912                glob->avContext->skip_loop_filter = loopFilterValue;
913                FFusionDebugPrint("%p Preflight set skip loop filter to %d", glob, loopFilterValue);
914        }
915       
916    return err;
917}
918
919static int qtTypeForFrameInfo(int original, int fftype, int skippable)
920{
921        if(fftype == FF_I_TYPE)
922        {
923                if(!skippable)
924                        return kCodecFrameTypeKey;
925        }
926        else if(skippable && IsFrameDroppingEnabled())
927                return kCodecFrameTypeDroppableDifference;
928        else if(fftype != 0)
929                return kCodecFrameTypeDifference;       
930        return original;
931}
932
933//-----------------------------------------------------------------
934// ImageCodecBeginBand
935//-----------------------------------------------------------------
936// The ImageCodecBeginBand function allows your image decompressor
937// component to save information about a band before decompressing
938// it. This function is never called at interrupt time. The base
939// image decompressor preserves any changes your component makes to
940// any of the fields in the ImageSubCodecDecompressRecord or
941// CodecDecompressParams structures. If your component supports
942// asynchronous scheduled decompression, it may receive more than
943// one ImageCodecBeginBand call before receiving an ImageCodecDrawBand
944// call.
945//-----------------------------------------------------------------
946
947pascal ComponentResult FFusionCodecBeginBand(FFusionGlobals glob, CodecDecompressParams *p, ImageSubCodecDecompressRecord *drp, long flags)
948{       
949    FFusionDecompressRecord *myDrp = (FFusionDecompressRecord *)drp->userDecompressRecord;
950        int redisplayFirstFrame = 0;
951        int type = 0;
952        int skippable = 0;
953       
954    //////
955  /*  IBNibRef          nibRef;
956    WindowRef           window;
957    OSStatus            err;
958    CFBundleRef         bundleRef;
959    EventHandlerUPP     handlerUPP, handlerUPP2;
960    EventTypeSpec       eventType;
961    ControlID           controlID;
962    ControlRef          theControl;
963    KeyMap              currentKeyMap;
964    int                 userPreference; */
965    ///////
966
967    myDrp->width = (**p->imageDescription).width;
968    myDrp->height = (**p->imageDescription).height;
969    myDrp->depth = (**p->imageDescription).depth;
970       
971    myDrp->pixelFormat = p->dstPixMap.pixelFormat;
972        myDrp->decoded = p->frameTime ? (0 != (p->frameTime->flags & icmFrameAlreadyDecoded)) : false;
973        myDrp->frameData = NULL;
974        myDrp->buffer = NULL;
975       
976        FFusionDebugPrint("%p BeginBand #%d. (%sdecoded, packed %d)\n", glob, p->frameNumber, not(myDrp->decoded), glob->packedType);
977       
978        if (!glob->avContext) {
979                Codecprintf(glob->fileLog, "Perian: QT tried to call BeginBand without preflighting!\n");
980                return internalComponentErr;
981        }
982       
983        if (p->frameNumber == 0 && myDrp->pixelFormat != ColorConversionDstForPixFmt(glob->avContext->pix_fmt)) {
984                Codecprintf(glob->fileLog, "QT gave us unwanted pixelFormat %s (%08x), this will not work\n", FourCCString(myDrp->pixelFormat), myDrp->pixelFormat);
985        }
986       
987        if(myDrp->decoded)
988        {
989                int i;
990                myDrp->frameNumber = p->frameNumber;
991                for (i = 0; i < FFUSION_MAX_BUFFERS; i++) {
992                        if (glob->buffers[i].retainCount && glob->buffers[i].frameNumber == myDrp->frameNumber) {
993                                myDrp->buffer = retainBuffer(glob, &glob->buffers[i]);
994                                break;
995                        }
996                }
997                return noErr;
998        }
999       
1000        if(glob->packedType != PACKED_QUICKTIME_KNOWS_ORDER && p->frameNumber != glob->begin.lastFrame + 1)
1001        {
1002                if(glob->decode.lastFrame < p->frameNumber && p->frameNumber < glob->begin.lastFrame + 1)
1003                {
1004                        /* We already began this sucker, but haven't decoded it yet, find the data */
1005                        FrameData *frameData = NULL;
1006                        frameData = FFusionDataFind(&glob->data, p->frameNumber);
1007                        if(frameData != NULL)
1008                        {
1009                                myDrp->frameData = frameData;
1010                                drp->frameType = qtTypeForFrameInfo(drp->frameType, myDrp->frameData->type, myDrp->frameData->skippabble);
1011                                myDrp->frameNumber = p->frameNumber;
1012                                myDrp->GOPStartFrameNumber = glob->begin.lastIFrame;
1013                                return noErr;
1014                        }
1015                }
1016                else
1017                {
1018                        /* Reset context, safe marking in such a case */
1019                        glob->begin.lastFrameType = FF_I_TYPE;
1020                        FFusionDataReadUnparsed(&(glob->data));
1021                        glob->begin.lastPFrameData = NULL;
1022                        redisplayFirstFrame = 1;
1023                }
1024        }
1025       
1026        if(glob->begin.parser != NULL)
1027        {
1028                int parsedBufSize;
1029                uint8_t *buffer = (uint8_t *)drp->codecData;
1030                int bufferSize = p->bufferSize;
1031               
1032                if(glob->data.unparsedFrames.dataSize != 0)
1033                {
1034                        buffer = glob->data.unparsedFrames.buffer;
1035                        bufferSize = glob->data.unparsedFrames.dataSize;
1036                }
1037               
1038                if(ffusionParse(glob->begin.parser, buffer, bufferSize, &parsedBufSize, &type, &skippable) == 0)
1039                {
1040                        /* parse failed */
1041                        myDrp->bufferSize = bufferSize;
1042                        if(glob->begin.futureType != 0)
1043                        {
1044                                /* Assume our previously decoded P frame */
1045                                type = glob->begin.futureType;
1046                                glob->begin.futureType = 0;
1047                                myDrp->frameData = glob->begin.lastPFrameData;
1048                        }
1049                        else
1050                        {
1051                                Codecprintf(glob->fileLog, "parse failed frame %d with size %d\n", p->frameNumber, bufferSize);
1052                                if(glob->data.unparsedFrames.dataSize != 0)
1053                                        Codecprintf(glob->fileLog, ", parser had extra data\n");                               
1054                        }
1055                }
1056                else if(glob->packedType != PACKED_QUICKTIME_KNOWS_ORDER)
1057                {
1058                        if(type == FF_B_TYPE && glob->packedType == PACKED_ALL_IN_FIRST_FRAME && glob->begin.futureType == 0)
1059                                /* Badly framed.  We hit a B frame after it was supposed to be displayed, switch to delaying by a frame */
1060                                glob->packedType = PACKED_DELAY_BY_ONE_FRAME;
1061                        else if(glob->packedType == PACKED_DELAY_BY_ONE_FRAME && parsedBufSize < bufferSize - 16)
1062                                /* Seems to be switching back to packed in one frame; switch back*/
1063                                glob->packedType = PACKED_ALL_IN_FIRST_FRAME;
1064                       
1065                        myDrp->frameData = FFusionDataAppend(&(glob->data), buffer, parsedBufSize, type);
1066                        if(type != FF_I_TYPE)
1067                                myDrp->frameData->prereqFrame = glob->begin.lastPFrameData;
1068                        if(glob->packedType == PACKED_DELAY_BY_ONE_FRAME)
1069                        {
1070                                if(type != FF_B_TYPE)
1071                                {
1072                                        FrameData *nextPFrame = myDrp->frameData;
1073                                        FrameData *lastPFrame = glob->begin.lastPFrameData;
1074                                        if(lastPFrame != NULL)
1075                                                /* Mark the next P or I frame, predictive decoding */
1076                                                lastPFrame->nextFrame = nextPFrame;
1077                                        myDrp->frameData = lastPFrame;
1078                                        glob->begin.lastPFrameData = nextPFrame;
1079
1080                                        if(redisplayFirstFrame)
1081                                                myDrp->frameData = nextPFrame;
1082                                }
1083                               
1084                                int displayType = glob->begin.lastFrameType;
1085                                glob->begin.lastFrameType = type;
1086                                type = displayType;
1087                        }
1088                        else if(type != FF_B_TYPE)
1089                                glob->begin.lastPFrameData = myDrp->frameData;
1090
1091                        if(type == FF_I_TYPE && glob->packedType == PACKED_ALL_IN_FIRST_FRAME)
1092                                /* Wipe memory of past P frames */
1093                                glob->begin.futureType = 0;
1094                       
1095                        if(parsedBufSize < p->bufferSize)
1096                        {
1097                                int oldType = type;
1098                               
1099                                buffer += parsedBufSize;
1100                                bufferSize -= parsedBufSize;
1101                                int success = ffusionParse(glob->begin.parser, buffer, bufferSize, &parsedBufSize, &type, &skippable);
1102                                if(success && type == FF_B_TYPE)
1103                                {
1104                                        /* A B frame follows us, so setup the P frame for the future and set dependencies */
1105                                        glob->begin.futureType = oldType;
1106                                        if(glob->begin.lastPFrameData != NULL)
1107                                                /* Mark the next P or I frame, predictive decoding */
1108                                                glob->begin.lastPFrameData->nextFrame = myDrp->frameData;
1109                                        glob->begin.lastPFrameData = myDrp->frameData;
1110                                        myDrp->frameData = FFusionDataAppend(&(glob->data), buffer, parsedBufSize, type);
1111                                        myDrp->frameData->prereqFrame = glob->begin.lastPFrameData;
1112                                        buffer += parsedBufSize;
1113                                        bufferSize -= parsedBufSize;
1114                                }
1115                                if(bufferSize > 0)
1116                                        FFusionDataSetUnparsed(&(glob->data), buffer, bufferSize);
1117                                else
1118                                        FFusionDataReadUnparsed(&(glob->data));
1119                        }
1120                        else
1121                                FFusionDataReadUnparsed(&(glob->data));
1122                        myDrp->bufferSize = 0;
1123                }
1124                else
1125                {
1126                        myDrp->bufferSize = bufferSize;
1127                }
1128               
1129                drp->frameType = qtTypeForFrameInfo(drp->frameType, type, skippable);
1130                if(myDrp->frameData != NULL)
1131                {
1132                        myDrp->frameData->frameNumber = p->frameNumber;
1133                        myDrp->frameData->skippabble = skippable;
1134                }
1135        }
1136        else
1137                myDrp->bufferSize = p->bufferSize;
1138        glob->begin.lastFrame = p->frameNumber;
1139        if(drp->frameType == kCodecFrameTypeKey)
1140                glob->begin.lastIFrame = p->frameNumber;
1141        myDrp->frameNumber = p->frameNumber;
1142        myDrp->GOPStartFrameNumber = glob->begin.lastIFrame;
1143       
1144        glob->stats.type[drp->frameType].begin_calls++;
1145        RecomputeMaxCounts(glob);
1146        FFusionDebugPrint("%p BeginBand: frame #%d type %d. (%sskippable)\n", glob, myDrp->frameNumber, type, not(skippable));
1147       
1148    return noErr;
1149}
1150
1151static OSErr PrereqDecompress(FFusionGlobals glob, FrameData *prereq, AVCodecContext *context, long width, long height, AVFrame *picture)
1152{
1153        FFusionDebugPrint("%p prereq-decompressing frame #%d.\n", glob, prereq->frameNumber);
1154       
1155        FrameData *preprereq = FrameDataCheckPrereq(prereq);
1156        if(preprereq)
1157                PrereqDecompress(glob, preprereq, context, width, height, picture);
1158       
1159        unsigned char *dataPtr = (unsigned char *)prereq->buffer;
1160        int dataSize = prereq->dataSize;
1161       
1162        OSErr err = FFusionDecompress(glob, context, dataPtr, width, height, picture, dataSize);
1163       
1164        return err;
1165}
1166
1167pascal ComponentResult FFusionCodecDecodeBand(FFusionGlobals glob, ImageSubCodecDecompressRecord *drp, unsigned long flags)
1168{
1169        OSErr err = noErr;
1170        AVFrame tempFrame;
1171
1172    FFusionDecompressRecord *myDrp = (FFusionDecompressRecord *)drp->userDecompressRecord;
1173       
1174        glob->stats.type[drp->frameType].decode_calls++;
1175        RecomputeMaxCounts(glob);
1176        FFusionDebugPrint("%p DecodeBand #%d qtType %d. (packed %d)\n", glob, myDrp->frameNumber, drp->frameType, glob->packedType);
1177       
1178        // QuickTime will drop H.264 frames when necessary if a sample dependency table exists
1179        // we don't want to flush buffers in that case.
1180        if(glob->packedType != PACKED_QUICKTIME_KNOWS_ORDER && myDrp->frameNumber != glob->decode.lastFrame + 1)
1181        {
1182                /* Skipped some frames in here */
1183                FFusionDebugPrint("%p - frames skipped.\n", glob);
1184                if(drp->frameType == kCodecFrameTypeKey || myDrp->GOPStartFrameNumber > glob->decode.lastFrame || myDrp->frameNumber < glob->decode.lastFrame)
1185                {
1186                        /* If this is a key frame or the P frame before us is after the last frame (skip ahead), or we are before the last decoded frame (skip back) *
1187                         * then we are in a whole new GOP */
1188                        avcodec_flush_buffers(glob->avContext);
1189                }
1190        }
1191       
1192        if(myDrp->frameData && myDrp->frameData->decoded && glob->decode.futureBuffer != NULL)
1193        {
1194                myDrp->buffer = retainBuffer(glob, glob->decode.futureBuffer);
1195                myDrp->decoded = true;
1196#if 0   /* Need to make sure this frame's data is not eradicated during the decompress */
1197                FrameData *nextFrame = myDrp->frameData->nextFrame;
1198                if(nextFrame != NULL)
1199                {
1200                        FFusionDecompress(glob, glob->avContext, nextFrame->buffer, NULL, myDrp->width, myDrp->height, &tempFrame, nextFrame->dataSize);
1201                        if(tempFrame.data[0] != NULL)
1202                        {
1203                                glob->decode.futureBuffer = (FFusionBuffer *)tempFrame.opaque;
1204                                nextFrame->decoded = TRUE;
1205                        }
1206                }
1207                else
1208#endif
1209                        glob->decode.futureBuffer = NULL;
1210                FFusionDataMarkRead(myDrp->frameData);
1211                glob->decode.lastFrame = myDrp->frameNumber;
1212                return err;
1213        }
1214                       
1215        FrameData *frameData = NULL;
1216        unsigned char *dataPtr = NULL;
1217        unsigned int dataSize;
1218        if(glob->packedType != PACKED_QUICKTIME_KNOWS_ORDER && myDrp->frameData != NULL && myDrp->frameData->decoded == 0)
1219        {
1220                /* Pull from our buffer */
1221                frameData = myDrp->frameData;
1222                FrameData *prereq = FrameDataCheckPrereq(frameData);
1223               
1224                if(prereq)
1225                {
1226                        PrereqDecompress(glob, prereq, glob->avContext, myDrp->width, myDrp->height, &tempFrame);
1227                        if(tempFrame.data[0] != NULL)
1228                        {
1229                                glob->decode.futureBuffer = (FFusionBuffer *)tempFrame.opaque;
1230                                prereq->decoded = TRUE;
1231                        }
1232                }
1233                dataPtr = (unsigned char *)frameData->buffer;
1234                dataSize = frameData->dataSize;
1235                frameData->decoded = TRUE;
1236        }
1237        else
1238        {
1239                /* data is already set up properly for us */
1240                dataSize = myDrp->bufferSize;
1241                dataPtr = FFusionCreateEntireDataBuffer(&(glob->data), (uint8_t *)drp->codecData, dataSize);
1242        }
1243               
1244        err = FFusionDecompress(glob, glob->avContext, dataPtr, myDrp->width, myDrp->height, &tempFrame, dataSize);
1245                       
1246        if (glob->packedType == PACKED_QUICKTIME_KNOWS_ORDER) {
1247                myDrp->buffer = &glob->buffers[glob->lastAllocatedBuffer];
1248                myDrp->buffer->frameNumber = myDrp->frameNumber;
1249                retainBuffer(glob, myDrp->buffer);
1250                myDrp->buffer->returnedFrame = tempFrame;
1251                myDrp->decoded = true;
1252                glob->decode.lastFrame = myDrp->frameNumber;
1253                return err;
1254        }
1255        if(tempFrame.data[0] == NULL)
1256                myDrp->buffer = NULL;
1257        else
1258                myDrp->buffer = retainBuffer(glob, (FFusionBuffer *)tempFrame.opaque);
1259       
1260        if(tempFrame.pict_type == FF_I_TYPE)
1261                /* Wipe memory of past P frames */
1262                glob->decode.futureBuffer = NULL;
1263        glob->decode.lastFrame = myDrp->frameNumber;
1264        myDrp->decoded = true;
1265        if (myDrp->buffer) myDrp->buffer->returnedFrame = tempFrame;
1266       
1267        FFusionDataMarkRead(frameData);
1268       
1269        return err;
1270}
1271
1272//-----------------------------------------------------------------
1273// ImageCodecDrawBand
1274//-----------------------------------------------------------------
1275// The base image decompressor calls your image decompressor
1276// component's ImageCodecDrawBand function to decompress a band or
1277// frame. Your component must implement this function. If the
1278// ImageSubCodecDecompressRecord structure specifies a progress function
1279// or data-loading function, the base image decompressor will never call
1280// ImageCodecDrawBand at interrupt time. If the ImageSubCodecDecompressRecord
1281// structure specifies a progress function, the base image decompressor
1282// handles codecProgressOpen and codecProgressClose calls, and your image
1283// decompressor component must not implement these functions.
1284// If not, the base image decompressor may call the ImageCodecDrawBand
1285// function at interrupt time. When the base image decompressor calls your
1286// ImageCodecDrawBand function, your component must perform the decompression
1287// specified by the fields of the ImageSubCodecDecompressRecord structure.
1288// The structure includes any changes your component made to it when
1289// performing the ImageCodecBeginBand function. If your component supports
1290// asynchronous scheduled decompression, it may receive more than one
1291// ImageCodecBeginBand call before receiving an ImageCodecDrawBand call.
1292//-----------------------------------------------------------------
1293
1294pascal ComponentResult FFusionCodecDrawBand(FFusionGlobals glob, ImageSubCodecDecompressRecord *drp)
1295{
1296    OSErr err = noErr;
1297    FFusionDecompressRecord *myDrp = (FFusionDecompressRecord *)drp->userDecompressRecord;
1298        AVFrame *picture;
1299       
1300        glob->stats.type[drp->frameType].draw_calls++;
1301        RecomputeMaxCounts(glob);
1302        FFusionDebugPrint("%p DrawBand #%d. (%sdecoded)\n", glob, myDrp->frameNumber, not(myDrp->decoded));
1303       
1304        if(!myDrp->decoded) {
1305                err = FFusionCodecDecodeBand(glob, drp, 0);
1306
1307                if (err) goto err;
1308        }
1309       
1310        if (myDrp->buffer)
1311        {
1312                picture = myDrp->buffer->frame;
1313        }
1314        else
1315                picture = &glob->lastDisplayedFrame;
1316       
1317        if(!picture || picture->data[0] == 0)
1318        {
1319                if(glob->shouldUseReturnedFrame && myDrp->buffer->returnedFrame.data[0])
1320                        //Some decoders (vp3) keep their internal buffers in an unusable state
1321                        picture = &myDrp->buffer->returnedFrame;
1322                else if(glob->lastDisplayedFrame.data[0] != NULL)
1323                        //Display last frame
1324                        picture = &glob->lastDisplayedFrame;
1325                else {
1326                        //Display black (no frame decoded yet)
1327
1328                        if (!glob->colorConv.clear) {
1329                                err = ColorConversionFindFor(&glob->colorConv, glob->avContext->pix_fmt, NULL, myDrp->pixelFormat);
1330                                if (err) goto err;
1331                        }
1332                       
1333                        glob->colorConv.clear((UInt8*)drp->baseAddr, drp->rowBytes, myDrp->width, myDrp->height);
1334                        return noErr;
1335                }
1336        }
1337        else
1338        {
1339                if (myDrp->buffer)
1340                        glob->lastDisplayedFrame = *picture;
1341        }
1342       
1343        if (!glob->colorConv.convert) {
1344                err = ColorConversionFindFor(&glob->colorConv, glob->avContext->pix_fmt, picture, myDrp->pixelFormat);
1345                if (err) goto err;
1346        }
1347       
1348        glob->colorConv.convert(picture, (UInt8*)drp->baseAddr, drp->rowBytes, myDrp->width, myDrp->height);
1349       
1350err:
1351    return err;
1352}
1353
1354//-----------------------------------------------------------------
1355// ImageCodecEndBand
1356//-----------------------------------------------------------------
1357// The ImageCodecEndBand function notifies your image decompressor
1358// component that decompression of a band has finished or
1359// that it was terminated by the Image Compression Manager. Your
1360// image decompressor component is not required to implement the
1361// ImageCodecEndBand function. The base image decompressor may call
1362// the ImageCodecEndBand function at interrupt time.
1363// After your image decompressor component handles an ImageCodecEndBand
1364// call, it can perform any tasks that are required when decompression
1365// is finished, such as disposing of data structures that are no longer
1366// needed. Because this function can be called at interrupt time, your
1367// component cannot use this function to dispose of data structures;
1368// this must occur after handling the function. The value of the result
1369// parameter should be set to noErr if the band or frame was
1370// drawn successfully.
1371// If it is any other value, the band or frame was not drawn.
1372//-----------------------------------------------------------------
1373
1374pascal ComponentResult FFusionCodecEndBand(FFusionGlobals glob, ImageSubCodecDecompressRecord *drp, OSErr result, long flags)
1375{
1376        FFusionDecompressRecord *myDrp = (FFusionDecompressRecord *)drp->userDecompressRecord;
1377        glob->stats.type[drp->frameType].end_calls++;
1378        FFusionBuffer *buf = myDrp->buffer;
1379        if(buf)
1380                releaseBuffer(glob->avContext, buf);
1381       
1382        FFusionDebugPrint("%p EndBand #%d.\n", glob, myDrp->frameNumber);
1383       
1384    return noErr;
1385}
1386
1387//-----------------------------------------------------------------
1388// ImageCodecQueueStarting
1389//-----------------------------------------------------------------
1390// If your component supports asynchronous scheduled decompression,
1391// the base image decompressor calls your image decompressor
1392// component's ImageCodecQueueStarting function before decompressing
1393// the frames in the queue. Your component is not required to implement
1394// this function. It can implement the function if it needs to perform
1395// any tasks at this time, such as locking data structures.
1396// The base image decompressor never calls the ImageCodecQueueStarting
1397// function at interrupt time.
1398//-----------------------------------------------------------------
1399
1400pascal ComponentResult FFusionCodecQueueStarting(FFusionGlobals glob)
1401{       
1402    return noErr;
1403}
1404
1405//-----------------------------------------------------------------
1406// ImageCodecQueueStopping
1407//-----------------------------------------------------------------
1408// If your image decompressor component supports asynchronous scheduled
1409// decompression, the ImageCodecQueueStopping function notifies your
1410// component that the frames in the queue have been decompressed.
1411// Your component is not required to implement this function.
1412// After your image decompressor component handles an ImageCodecQueueStopping
1413// call, it can perform any tasks that are required when decompression
1414// of the frames is finished, such as disposing of data structures that
1415// are no longer needed.
1416// The base image decompressor never calls the ImageCodecQueueStopping
1417// function at interrupt time.
1418//-----------------------------------------------------------------
1419
1420pascal ComponentResult FFusionCodecQueueStopping(FFusionGlobals glob)
1421{       
1422    return noErr;
1423}
1424
1425//-----------------------------------------------------------------
1426// ImageCodecGetCompressedImageSize
1427//-----------------------------------------------------------------
1428// Your component receives the ImageCodecGetCompressedImageSize request
1429// whenever an application calls the ICM's GetCompressedImageSize function.
1430// You can use the ImageCodecGetCompressedImageSize function when you
1431// are extracting a single image from a sequence; therefore, you don't have
1432// an image description structure and don't know the exact size of one frame.
1433// In this case, the Image Compression Manager calls the component to determine
1434// the size of the data. Your component should return a long integer indicating
1435// the number of bytes of data in the compressed image. You may want to store
1436// the image size somewhere in the image description structure, so that you can
1437// respond to this request quickly. Only decompressors receive this request.
1438//-----------------------------------------------------------------
1439
1440pascal ComponentResult FFusionCodecGetCompressedImageSize(FFusionGlobals glob, ImageDescriptionHandle desc, Ptr data, long dataSize, ICMDataProcRecordPtr dataProc, long *size)
1441{
1442    ImageFramePtr framePtr = (ImageFramePtr)data;
1443       
1444    if (size == NULL) 
1445                return paramErr;
1446       
1447    *size = EndianU32_BtoN(framePtr->frameSize) + sizeof(ImageFrame);
1448       
1449    return noErr;
1450}
1451
1452//-----------------------------------------------------------------
1453// ImageCodecGetCodecInfo
1454//-----------------------------------------------------------------
1455// Your component receives the ImageCodecGetCodecInfo request whenever
1456// an application calls the Image Compression Manager's GetCodecInfo
1457// function.
1458// Your component should return a formatted compressor information
1459// structure defining its capabilities.
1460// Both compressors and decompressors may receive this request.
1461//-----------------------------------------------------------------
1462
1463pascal ComponentResult FFusionCodecGetCodecInfo(FFusionGlobals glob, CodecInfo *info)
1464{
1465    OSErr err = noErr;
1466       
1467    if (info == NULL) 
1468    {
1469        err = paramErr;
1470    }
1471    else 
1472    {
1473        CodecInfo **tempCodecInfo;
1474               
1475        switch (glob->componentType)
1476        {
1477            case 'MPG4':        // MS-MPEG4 v1
1478            case 'mpg4':
1479            case 'DIV1':
1480            case 'div1':
1481                err = GetComponentResource((Component)glob->self, codecInfoResourceType, kDivX1CodecInfoResID, (Handle *)&tempCodecInfo);
1482                break;
1483               
1484            case 'MP42':        // MS-MPEG4 v2
1485            case 'mp42':
1486            case 'DIV2':
1487            case 'div2':
1488                err = GetComponentResource((Component)glob->self, codecInfoResourceType, kDivX2CodecInfoResID, (Handle *)&tempCodecInfo);
1489                break;
1490               
1491            case 'div6':        // DivX 3
1492            case 'DIV6':
1493            case 'div5':
1494            case 'DIV5':
1495            case 'div4':
1496            case 'DIV4':
1497            case 'div3':
1498            case 'DIV3':
1499            case 'MP43':
1500            case 'mp43':
1501            case 'MPG3':
1502            case 'mpg3':
1503            case 'AP41':
1504            case 'COL0':
1505            case 'col0':
1506            case 'COL1':
1507            case 'col1':
1508                err = GetComponentResource((Component)glob->self, codecInfoResourceType, kDivX3CodecInfoResID, (Handle *)&tempCodecInfo);
1509                break;
1510                               
1511            case 'divx':        // DivX 4
1512            case 'DIVX':
1513            case 'mp4s':
1514            case 'MP4S':
1515            case 'm4s2':
1516            case 'M4S2':
1517            case 0x04000000:
1518            case 'UMP4':
1519                err = GetComponentResource((Component)glob->self, codecInfoResourceType, kDivX4CodecInfoResID, (Handle *)&tempCodecInfo);
1520                break;
1521                               
1522                        case 'IV31':    // Indeo 3
1523            case 'IV32':
1524                        case 'iv31':
1525            case 'iv32':
1526                err = GetComponentResource((Component)glob->self, codecInfoResourceType, kIndeo3CodecInfoResID, (Handle *)&tempCodecInfo);
1527                break;
1528                               
1529                        case 'RT21':    // Indeo 2
1530                err = GetComponentResource((Component)glob->self, codecInfoResourceType, kIndeo2CodecInfoResID, (Handle *)&tempCodecInfo);
1531                break;
1532               
1533            case 'DX50':
1534                err = GetComponentResource((Component)glob->self, codecInfoResourceType, kDivX5CodecInfoResID, (Handle *)&tempCodecInfo);
1535                break;
1536               
1537            case 'XVID':        // XVID
1538            case 'xvid':
1539            case 'XviD':
1540            case 'XVIX':
1541            case 'BLZ0':
1542                err = GetComponentResource((Component)glob->self, codecInfoResourceType, kXVIDCodecInfoResID, (Handle *)&tempCodecInfo);
1543                break;
1544               
1545            case '3IVD':        // 3ivx
1546            case '3ivd':
1547            case '3IV2':
1548            case '3iv2':
1549                err = GetComponentResource((Component)glob->self, codecInfoResourceType, k3ivxCodecInfoResID, (Handle *)&tempCodecInfo);
1550                break;
1551                               
1552                        case 'RMP4':    // Miscellaneous
1553                        case 'SEDG':
1554                        case 'WV1F':
1555                        case 'FMP4':
1556                        case 'SMP4':
1557                        case 'mp4v':
1558                                err = GetComponentResource((Component)glob->self, codecInfoResourceType, kMPEG4CodecInfoResID, (Handle *)&tempCodecInfo);
1559                                break;
1560                               
1561                        case 'H264':    // H.264
1562                        case 'h264':
1563                        case 'X264':
1564                        case 'x264':
1565                        case 'AVC1':
1566                        case 'avc1':
1567                        case 'DAVC':
1568                        case 'VSSH':
1569                                err = GetComponentResource((Component)glob->self, codecInfoResourceType, kH264CodecInfoResID, (Handle *)&tempCodecInfo);
1570                                break;
1571                               
1572                        case 'FLV1':
1573                                err = GetComponentResource((Component)glob->self, codecInfoResourceType, kFLV1CodecInfoResID, (Handle *)&tempCodecInfo);
1574                                break;
1575                               
1576                        case 'FSV1':
1577                                err = GetComponentResource((Component)glob->self, codecInfoResourceType, kFlashSVCodecInfoResID, (Handle *)&tempCodecInfo);
1578                                break;
1579                       
1580                        case 'VP60':
1581                        case 'VP61':
1582                        case 'VP62':
1583                        case 'VP6F':
1584                        case 'FLV4':
1585                                err = GetComponentResource((Component)glob->self, codecInfoResourceType, kVP6CodecInfoResID, (Handle *)&tempCodecInfo);
1586                                break;
1587                               
1588                        case 'I263':
1589                        case 'i263':
1590                                err = GetComponentResource((Component)glob->self, codecInfoResourceType, kI263CodecInfoResID, (Handle *)&tempCodecInfo);
1591                                break;
1592                               
1593                        case 'VP30':
1594                        case 'VP31':
1595                                err = GetComponentResource((Component)glob->self, codecInfoResourceType, kVP3CodecInfoResID, (Handle *)&tempCodecInfo);
1596                                break;
1597                               
1598                        case 'FFVH':
1599                        case 'HFYU':
1600                                err = GetComponentResource((Component)glob->self, codecInfoResourceType, kHuffYUVCodecInfoResID, (Handle *)&tempCodecInfo);
1601                                break;
1602                               
1603                        case 'MPEG':
1604                        case 'mpg1':
1605                        case 'mp1v':
1606                                err = GetComponentResource((Component)glob->self, codecInfoResourceType, kMPEG1CodecInfoResID, (Handle *)&tempCodecInfo);
1607                                break;
1608                               
1609                        case 'MPG2':
1610                        case 'mpg2':
1611                        case 'mp2v':
1612                                err = GetComponentResource((Component)glob->self, codecInfoResourceType, kMPEG2CodecInfoResID, (Handle *)&tempCodecInfo);
1613                                break;
1614                               
1615                        case 'FPS1':
1616                                err = GetComponentResource((Component)glob->self, codecInfoResourceType, kFRAPSCodecInfoResID, (Handle *)&tempCodecInfo);
1617                                break;
1618                               
1619                        case 'SNOW':
1620                                err = GetComponentResource((Component)glob->self, codecInfoResourceType, kSnowCodecInfoResID, (Handle *)&tempCodecInfo);
1621                                break;
1622
1623            case 'RJPG':
1624                err = GetComponentResource((Component)glob->self, codecInfoResourceType, kNuvCodecInfoResID, (Handle *)&tempCodecInfo);
1625                break;
1626
1627            case 'tscc':
1628                err = GetComponentResource((Component)glob->self, codecInfoResourceType, kTSCCCodecInfoResID, (Handle *)&tempCodecInfo);
1629                break;
1630                               
1631                        case 'ZMBV':
1632                                err = GetComponentResource((Component)glob->self, codecInfoResourceType, kZMBVCodecInfoResID, (Handle *)&tempCodecInfo);
1633                                break;
1634                               
1635                        case 'VP6A':
1636                                err = GetComponentResource((Component)glob->self, codecInfoResourceType, kVP6ACodecInfoResID, (Handle *)&tempCodecInfo);
1637                                break;
1638                               
1639            default:    // should never happen but we have to handle the case
1640                err = GetComponentResource((Component)glob->self, codecInfoResourceType, kDivX4CodecInfoResID, (Handle *)&tempCodecInfo);
1641                               
1642        }
1643       
1644        if (err == noErr) 
1645        {
1646            *info = **tempCodecInfo;
1647           
1648            DisposeHandle((Handle)tempCodecInfo);
1649        }
1650    }
1651       
1652    return err;
1653}
1654
1655static int FFusionGetBuffer(AVCodecContext *s, AVFrame *pic)
1656{
1657        FFusionGlobals glob = s->opaque;
1658        int ret = avcodec_default_get_buffer(s, pic);
1659        int i;
1660       
1661        if (ret >= 0) {
1662                for (i = 0; i < FFUSION_MAX_BUFFERS; i++) {
1663                        if (!glob->buffers[i].retainCount) {
1664//                              FFusionDebugPrint("%p Starting Buffer %p.\n", glob, &glob->buffers[i]);
1665                                pic->opaque = &glob->buffers[i];
1666                                glob->buffers[i].frame = pic;
1667                                glob->buffers[i].retainCount = 1;
1668                                glob->buffers[i].ffmpegUsing = 1;
1669                                glob->lastAllocatedBuffer = i;
1670                                break;
1671                        }
1672                }
1673        }
1674       
1675        return ret;
1676}
1677
1678static void FFusionReleaseBuffer(AVCodecContext *s, AVFrame *pic)
1679{
1680//      FFusionGlobals glob = s->opaque;
1681        FFusionBuffer *buf = pic->opaque;
1682       
1683        if(buf->ffmpegUsing)
1684        {
1685                buf->ffmpegUsing = 0;
1686                releaseBuffer(s, buf);
1687        }
1688}
1689
1690static FFusionBuffer *retainBuffer(FFusionGlobals glob, FFusionBuffer *buf)
1691{
1692        buf->retainCount++;
1693//      FFusionDebugPrint("%p Retained Buffer %p #%d to %d.\n", glob, buf, buf->frameNumber, buf->retainCount);
1694        return buf;
1695}
1696
1697static void releaseBuffer(AVCodecContext *s, FFusionBuffer *buf)
1698{
1699        buf->retainCount--;
1700//      FFusionGlobals glob = (FFusionGlobals)s->opaque;
1701//      FFusionDebugPrint("%p Released Buffer %p #%d to %d.\n", glob, buf, buf->frameNumber, buf->retainCount);
1702        if(!buf->retainCount)
1703        {
1704                buf->returnedFrame.data[0] = NULL;
1705                avcodec_default_release_buffer(s, buf->frame);
1706        }
1707}
1708
1709//-----------------------------------------------------------------
1710// FFusionDecompress
1711//-----------------------------------------------------------------
1712// This function calls libavcodec to decompress one frame.
1713//-----------------------------------------------------------------
1714
1715OSErr FFusionDecompress(FFusionGlobals glob, AVCodecContext *context, UInt8 *dataPtr, long width, long height, AVFrame *picture, long length)
1716{
1717    OSErr err = noErr;
1718    int got_picture = false;
1719    int len = 0;
1720       
1721        FFusionDebugPrint("%p Decompress %d bytes.\n", glob, length);
1722    avcodec_get_frame_defaults(picture);
1723       
1724        len = avcodec_decode_video(context, picture, &got_picture, dataPtr, length);
1725       
1726        if (len < 0)
1727        {           
1728                Codecprintf(glob->fileLog, "Error while decoding frame\n");
1729        } 
1730       
1731        return err;
1732}
1733
1734static void SetupMultithreadedDecoding(AVCodecContext *s, enum CodecID codecID)
1735{
1736        int nthreads = 1;
1737        size_t len = 4;
1738       
1739    // multithreading is only effective for mpeg1/2 and h.264 with slices
1740    if (codecID != CODEC_ID_MPEG1VIDEO && codecID != CODEC_ID_MPEG2VIDEO && codecID != CODEC_ID_H264) return;
1741   
1742        // two threads on multicore, otherwise 1
1743        if (sysctlbyname("hw.activecpu", &nthreads, &len, NULL, 0) == -1) nthreads = 1;
1744        else nthreads = FFMIN(nthreads, 2);
1745       
1746        avcodec_thread_init(s, nthreads);
1747}
Note: See TracBrowser for help on using the repository browser.