4809de3eacfc3c95bf0e23e14a4eb0132a1fa148
[WebKit-https.git] / Source / WebCore / platform / graphics / MediaPlayer.h
1 /*
2  * Copyright (C) 2007-2018 Apple Inc. All rights reserved.
3  *
4  * Redistribution and use in source and binary forms, with or without
5  * modification, are permitted provided that the following conditions
6  * are met:
7  * 1. Redistributions of source code must retain the above copyright
8  *    notice, this list of conditions and the following disclaimer.
9  * 2. Redistributions in binary form must reproduce the above copyright
10  *    notice, this list of conditions and the following disclaimer in the
11  *    documentation and/or other materials provided with the distribution.
12  *
13  * THIS SOFTWARE IS PROVIDED BY APPLE INC. ``AS IS'' AND ANY
14  * EXPRESS OR IMPLIED WARRANTIES, INCLUDING, BUT NOT LIMITED TO, THE
15  * IMPLIED WARRANTIES OF MERCHANTABILITY AND FITNESS FOR A PARTICULAR
16  * PURPOSE ARE DISCLAIMED.  IN NO EVENT SHALL APPLE INC. OR
17  * CONTRIBUTORS BE LIABLE FOR ANY DIRECT, INDIRECT, INCIDENTAL, SPECIAL,
18  * EXEMPLARY, OR CONSEQUENTIAL DAMAGES (INCLUDING, BUT NOT LIMITED TO,
19  * PROCUREMENT OF SUBSTITUTE GOODS OR SERVICES; LOSS OF USE, DATA, OR
20  * PROFITS; OR BUSINESS INTERRUPTION) HOWEVER CAUSED AND ON ANY THEORY
21  * OF LIABILITY, WHETHER IN CONTRACT, STRICT LIABILITY, OR TORT
22  * (INCLUDING NEGLIGENCE OR OTHERWISE) ARISING IN ANY WAY OUT OF THE USE
23  * OF THIS SOFTWARE, EVEN IF ADVISED OF THE POSSIBILITY OF SUCH DAMAGE. 
24  */
25
26 #pragma once
27
28 #if ENABLE(VIDEO)
29
30 #include "AudioTrackPrivate.h"
31 #include "ContentType.h"
32 #include "GraphicsTypes3D.h"
33 #include "InbandTextTrackPrivate.h"
34 #include "LayoutRect.h"
35 #include "LegacyCDMSession.h"
36 #include "MediaPlayerEnums.h"
37 #include "NativeImage.h"
38 #include "PlatformLayer.h"
39 #include "PlatformMediaResourceLoader.h"
40 #include "PlatformMediaSession.h"
41 #include "SecurityOriginHash.h"
42 #include "Timer.h"
43 #include "URL.h"
44 #include "VideoTrackPrivate.h"
45 #include <JavaScriptCore/Uint8Array.h>
46 #include <wtf/Function.h>
47 #include <wtf/HashSet.h>
48 #include <wtf/Logger.h>
49 #include <wtf/MediaTime.h>
50 #include <wtf/WallTime.h>
51 #include <wtf/text/StringHash.h>
52
53 #if ENABLE(AVF_CAPTIONS)
54 #include "PlatformTextTrack.h"
55 #endif
56
57 OBJC_CLASS AVPlayer;
58 OBJC_CLASS NSArray;
59
60 namespace WebCore {
61
62 class AudioSourceProvider;
63 class CDMInstance;
64 class CachedResourceLoader;
65 class GraphicsContext3D;
66 class GraphicsContext;
67 class LegacyCDMSessionClient;
68 class MediaPlaybackTarget;
69 class MediaPlayer;
70 class MediaPlayerPrivateInterface;
71 class MediaPlayerRequestInstallMissingPluginsCallback;
72 class MediaSourcePrivateClient;
73 class MediaStreamPrivate;
74 class PlatformTimeRanges;
75 class TextTrackRepresentation;
76
77 struct Cookie;
78 struct GraphicsDeviceAdapter;
79 struct MediaPlayerFactory;
80
81 struct MediaEngineSupportParameters {
82     ContentType type;
83     URL url;
84     bool isMediaSource { false };
85     bool isMediaStream { false };
86     Vector<ContentType> contentTypesRequiringHardwareSupport;
87 };
88
89 struct VideoPlaybackQualityMetrics {
90     uint32_t totalVideoFrames { 0 };
91     uint32_t droppedVideoFrames { 0 };
92     uint32_t corruptedVideoFrames { 0 };
93     double totalFrameDelay { 0 };
94     uint32_t displayCompositedVideoFrames { 0 };
95 };
96
97 class MediaPlayerClient {
98 public:
99     virtual ~MediaPlayerClient() = default;
100
101     // the network state has changed
102     virtual void mediaPlayerNetworkStateChanged(MediaPlayer*) { }
103
104     // the ready state has changed
105     virtual void mediaPlayerReadyStateChanged(MediaPlayer*) { }
106
107     // the volume state has changed
108     virtual void mediaPlayerVolumeChanged(MediaPlayer*) { }
109
110     // the mute state has changed
111     virtual void mediaPlayerMuteChanged(MediaPlayer*) { }
112
113     // time has jumped, eg. not as a result of normal playback
114     virtual void mediaPlayerTimeChanged(MediaPlayer*) { }
115
116     // the media file duration has changed, or is now known
117     virtual void mediaPlayerDurationChanged(MediaPlayer*) { }
118
119     // the playback rate has changed
120     virtual void mediaPlayerRateChanged(MediaPlayer*) { }
121
122     // the play/pause status changed
123     virtual void mediaPlayerPlaybackStateChanged(MediaPlayer*) { }
124
125     // The MediaPlayer has found potentially problematic media content.
126     // This is used internally to trigger swapping from a <video>
127     // element to an <embed> in standalone documents
128     virtual void mediaPlayerSawUnsupportedTracks(MediaPlayer*) { }
129
130     // The MediaPlayer could not discover an engine which supports the requested resource.
131     virtual void mediaPlayerResourceNotSupported(MediaPlayer*) { }
132
133 // Presentation-related methods
134     // a new frame of video is available
135     virtual void mediaPlayerRepaint(MediaPlayer*) { }
136
137     // the movie size has changed
138     virtual void mediaPlayerSizeChanged(MediaPlayer*) { }
139
140     virtual void mediaPlayerEngineUpdated(MediaPlayer*) { }
141
142     // The first frame of video is available to render. A media engine need only make this callback if the
143     // first frame is not available immediately when prepareForRendering is called.
144     virtual void mediaPlayerFirstVideoFrameAvailable(MediaPlayer*) { }
145
146     // A characteristic of the media file, eg. video, audio, closed captions, etc, has changed.
147     virtual void mediaPlayerCharacteristicChanged(MediaPlayer*) { }
148     
149     // whether the rendering system can accelerate the display of this MediaPlayer.
150     virtual bool mediaPlayerRenderingCanBeAccelerated(MediaPlayer*) { return false; }
151
152     // called when the media player's rendering mode changed, which indicates a change in the
153     // availability of the platformLayer().
154     virtual void mediaPlayerRenderingModeChanged(MediaPlayer*) { }
155
156     // whether accelerated compositing is enabled for video rendering
157     virtual bool mediaPlayerAcceleratedCompositingEnabled() { return false; }
158
159     virtual void mediaPlayerActiveSourceBuffersChanged(const MediaPlayer*) { }
160
161 #if PLATFORM(WIN) && USE(AVFOUNDATION)
162     virtual GraphicsDeviceAdapter* mediaPlayerGraphicsDeviceAdapter(const MediaPlayer*) const { return nullptr; }
163 #endif
164
165 #if ENABLE(LEGACY_ENCRYPTED_MEDIA)
166     virtual RefPtr<ArrayBuffer> mediaPlayerCachedKeyForKeyId(const String&) const { return nullptr; }
167     virtual bool mediaPlayerKeyNeeded(MediaPlayer*, Uint8Array*) { return false; }
168     virtual String mediaPlayerMediaKeysStorageDirectory() const { return emptyString(); }
169 #endif
170
171 #if ENABLE(ENCRYPTED_MEDIA)
172     virtual void mediaPlayerInitializationDataEncountered(const String&, RefPtr<ArrayBuffer>&&) { }
173     virtual void mediaPlayerWaitingForKeyChanged() { }
174 #endif
175     
176 #if ENABLE(WIRELESS_PLAYBACK_TARGET)
177     virtual void mediaPlayerCurrentPlaybackTargetIsWirelessChanged(MediaPlayer*) { };
178 #endif
179
180     virtual String mediaPlayerReferrer() const { return String(); }
181     virtual String mediaPlayerUserAgent() const { return String(); }
182     virtual void mediaPlayerEnterFullscreen() { }
183     virtual void mediaPlayerExitFullscreen() { }
184     virtual bool mediaPlayerIsFullscreen() const { return false; }
185     virtual bool mediaPlayerIsFullscreenPermitted() const { return false; }
186     virtual bool mediaPlayerIsVideo() const { return false; }
187     virtual LayoutRect mediaPlayerContentBoxRect() const { return LayoutRect(); }
188     virtual float mediaPlayerContentsScale() const { return 1; }
189     virtual void mediaPlayerSetSize(const IntSize&) { }
190     virtual void mediaPlayerPause() { }
191     virtual void mediaPlayerPlay() { }
192     virtual bool mediaPlayerPlatformVolumeConfigurationRequired() const { return false; }
193     virtual bool mediaPlayerIsPaused() const { return true; }
194     virtual bool mediaPlayerIsLooping() const { return false; }
195     virtual CachedResourceLoader* mediaPlayerCachedResourceLoader() { return nullptr; }
196     virtual RefPtr<PlatformMediaResourceLoader> mediaPlayerCreateResourceLoader() { return nullptr; }
197     virtual bool doesHaveAttribute(const AtomicString&, AtomicString* = nullptr) const { return false; }
198     virtual bool mediaPlayerShouldUsePersistentCache() const { return true; }
199     virtual const String& mediaPlayerMediaCacheDirectory() const { return emptyString(); }
200
201 #if ENABLE(VIDEO_TRACK)
202     virtual void mediaPlayerDidAddAudioTrack(AudioTrackPrivate&) { }
203     virtual void mediaPlayerDidAddTextTrack(InbandTextTrackPrivate&) { }
204     virtual void mediaPlayerDidAddVideoTrack(VideoTrackPrivate&) { }
205     virtual void mediaPlayerDidRemoveAudioTrack(AudioTrackPrivate&) { }
206     virtual void mediaPlayerDidRemoveTextTrack(InbandTextTrackPrivate&) { }
207     virtual void mediaPlayerDidRemoveVideoTrack(VideoTrackPrivate&) { }
208
209     virtual void textTrackRepresentationBoundsChanged(const IntRect&) { }
210 #endif
211
212 #if ENABLE(VIDEO_TRACK) && ENABLE(AVF_CAPTIONS)
213     virtual Vector<RefPtr<PlatformTextTrack>> outOfBandTrackSources() { return { }; }
214 #endif
215
216 #if PLATFORM(IOS)
217     virtual String mediaPlayerNetworkInterfaceName() const { return String(); }
218     virtual bool mediaPlayerGetRawCookies(const URL&, Vector<Cookie>&) const { return false; }
219 #endif
220
221     virtual void mediaPlayerHandlePlaybackCommand(PlatformMediaSession::RemoteControlCommandType) { }
222
223     virtual String mediaPlayerSourceApplicationIdentifier() const { return emptyString(); }
224
225     virtual bool mediaPlayerIsInMediaDocument() const { return false; }
226     virtual void mediaPlayerEngineFailedToLoad() const { }
227
228     virtual double mediaPlayerRequestedPlaybackRate() const { return 0; }
229     virtual MediaPlayerEnums::VideoFullscreenMode mediaPlayerFullscreenMode() const { return MediaPlayerEnums::VideoFullscreenModeNone; }
230     virtual Vector<String> mediaPlayerPreferredAudioCharacteristics() const { return Vector<String>(); }
231
232 #if USE(GSTREAMER)
233     virtual void requestInstallMissingPlugins(const String&, const String&, MediaPlayerRequestInstallMissingPluginsCallback&) { };
234 #endif
235
236     virtual bool mediaPlayerShouldDisableSleep() const { return false; }
237     virtual const Vector<ContentType>& mediaContentTypesRequiringHardwareSupport() const;
238     virtual bool mediaPlayerShouldCheckHardwareSupport() const { return false; }
239
240 #if !RELEASE_LOG_DISABLED
241     virtual const void* mediaPlayerLogIdentifier() { return nullptr; }
242     virtual const Logger& mediaPlayerLogger() = 0;
243 #endif
244 };
245
246 class MediaPlayer : public MediaPlayerEnums, public RefCounted<MediaPlayer> {
247     WTF_MAKE_NONCOPYABLE(MediaPlayer); WTF_MAKE_FAST_ALLOCATED;
248 public:
249     static Ref<MediaPlayer> create(MediaPlayerClient&);
250     virtual ~MediaPlayer();
251
252     void invalidate();
253
254     // Media engine support.
255     enum SupportsType { IsNotSupported, IsSupported, MayBeSupported };
256     static MediaPlayer::SupportsType supportsType(const MediaEngineSupportParameters&);
257     static void getSupportedTypes(HashSet<String, ASCIICaseInsensitiveHash>&);
258     static bool isAvailable();
259     static HashSet<RefPtr<SecurityOrigin>> originsInMediaCache(const String& path);
260     static void clearMediaCache(const String& path, WallTime modifiedSince);
261     static void clearMediaCacheForOrigins(const String& path, const HashSet<RefPtr<SecurityOrigin>>&);
262     static bool supportsKeySystem(const String& keySystem, const String& mimeType);
263
264     bool supportsPictureInPicture() const;
265     bool supportsFullscreen() const;
266     bool supportsScanning() const;
267     bool canSaveMediaData() const;
268     bool requiresImmediateCompositing() const;
269     bool doesHaveAttribute(const AtomicString&, AtomicString* value = nullptr) const;
270     PlatformLayer* platformLayer() const;
271
272 #if PLATFORM(IOS) || (PLATFORM(MAC) && ENABLE(VIDEO_PRESENTATION_MODE))
273     void setVideoFullscreenLayer(PlatformLayer*, WTF::Function<void()>&& completionHandler = [] { });
274     void setVideoFullscreenFrame(FloatRect);
275     void updateVideoFullscreenInlineImage();
276     using MediaPlayerEnums::VideoGravity;
277     void setVideoFullscreenGravity(VideoGravity);
278     void setVideoFullscreenMode(VideoFullscreenMode);
279     VideoFullscreenMode fullscreenMode() const;
280 #endif
281
282 #if PLATFORM(IOS)
283     NSArray *timedMetadata() const;
284     String accessLog() const;
285     String errorLog() const;
286 #endif
287
288     FloatSize naturalSize();
289     bool hasVideo() const;
290     bool hasAudio() const;
291
292     bool inMediaDocument() const;
293
294     IntSize size() const { return m_size; }
295     void setSize(const IntSize& size);
296
297     bool load(const URL&, const ContentType&, const String& keySystem);
298 #if ENABLE(MEDIA_SOURCE)
299     bool load(const URL&, const ContentType&, MediaSourcePrivateClient*);
300 #endif
301 #if ENABLE(MEDIA_STREAM)
302     bool load(MediaStreamPrivate&);
303 #endif
304     void cancelLoad();
305
306     bool visible() const;
307     void setVisible(bool);
308
309     void prepareToPlay();
310     void play();
311     void pause();
312     void setShouldBufferData(bool);
313
314 #if ENABLE(LEGACY_ENCRYPTED_MEDIA)
315     // Represents synchronous exceptions that can be thrown from the Encrypted Media methods.
316     // This is different from the asynchronous MediaKeyError.
317     enum MediaKeyException { NoError, InvalidPlayerState, KeySystemNotSupported };
318
319     std::unique_ptr<LegacyCDMSession> createSession(const String& keySystem, LegacyCDMSessionClient*);
320     void setCDMSession(LegacyCDMSession*);
321     void keyAdded();
322 #endif
323
324 #if ENABLE(ENCRYPTED_MEDIA)
325     void cdmInstanceAttached(CDMInstance&);
326     void cdmInstanceDetached(CDMInstance&);
327     void attemptToDecryptWithInstance(CDMInstance&);
328 #endif
329
330     bool paused() const;
331     bool seeking() const;
332
333     static double invalidTime() { return -1.0;}
334     MediaTime duration() const;
335     MediaTime currentTime() const;
336     void seek(const MediaTime&);
337     void seekWithTolerance(const MediaTime&, const MediaTime& negativeTolerance, const MediaTime& positiveTolerance);
338
339     MediaTime startTime() const;
340     MediaTime initialTime() const;
341
342     MediaTime getStartDate() const;
343
344     double rate() const;
345     void setRate(double);
346     double requestedRate() const;
347
348     bool preservesPitch() const;
349     void setPreservesPitch(bool);
350
351     std::unique_ptr<PlatformTimeRanges> buffered();
352     std::unique_ptr<PlatformTimeRanges> seekable();
353     MediaTime minTimeSeekable();
354     MediaTime maxTimeSeekable();
355
356     double seekableTimeRangesLastModifiedTime();
357     double liveUpdateInterval();
358
359     bool didLoadingProgress();
360
361     double volume() const;
362     void setVolume(double);
363     bool platformVolumeConfigurationRequired() const { return client().mediaPlayerPlatformVolumeConfigurationRequired(); }
364
365     bool muted() const;
366     void setMuted(bool);
367
368     bool hasClosedCaptions() const;
369     void setClosedCaptionsVisible(bool closedCaptionsVisible);
370
371     void paint(GraphicsContext&, const FloatRect&);
372     void paintCurrentFrameInContext(GraphicsContext&, const FloatRect&);
373
374     // copyVideoTextureToPlatformTexture() is used to do the GPU-GPU textures copy without a readback to system memory.
375     // The first five parameters denote the corresponding GraphicsContext, destination texture, requested level, requested type and the required internalFormat for destination texture.
376     // The last two parameters premultiplyAlpha and flipY denote whether addtional premultiplyAlpha and flip operation are required during the copy.
377     // It returns true on success and false on failure.
378
379     // In the GPU-GPU textures copy, the source texture(Video texture) should have valid target, internalFormat and size, etc.
380     // The destination texture may need to be resized to to the dimensions of the source texture or re-defined to the required internalFormat.
381     // The current restrictions require that format shoud be RGB or RGBA, type should be UNSIGNED_BYTE and level should be 0. It may be lifted in the future.
382
383     bool copyVideoTextureToPlatformTexture(GraphicsContext3D*, Platform3DObject texture, GC3Denum target, GC3Dint level, GC3Denum internalFormat, GC3Denum format, GC3Denum type, bool premultiplyAlpha, bool flipY);
384
385     NativeImagePtr nativeImageForCurrentTime();
386
387     using MediaPlayerEnums::NetworkState;
388     NetworkState networkState();
389
390     using MediaPlayerEnums::ReadyState;
391     ReadyState readyState();
392
393     using MediaPlayerEnums::MovieLoadType;
394     MovieLoadType movieLoadType() const;
395
396     using MediaPlayerEnums::Preload;
397     Preload preload() const;
398     void setPreload(Preload);
399
400     void networkStateChanged();
401     void readyStateChanged();
402     void volumeChanged(double);
403     void muteChanged(bool);
404     void timeChanged();
405     void sizeChanged();
406     void rateChanged();
407     void playbackStateChanged();
408     void durationChanged();
409     void firstVideoFrameAvailable();
410     void characteristicChanged();
411
412     void repaint();
413
414     MediaPlayerClient& client() const { return *m_client; }
415
416     bool hasAvailableVideoFrame() const;
417     void prepareForRendering();
418
419     bool canLoadPoster() const;
420     void setPoster(const String&);
421
422 #if USE(NATIVE_FULLSCREEN_VIDEO)
423     void enterFullscreen();
424     void exitFullscreen();
425 #endif
426
427 #if ENABLE(WIRELESS_PLAYBACK_TARGET)
428     enum WirelessPlaybackTargetType { TargetTypeNone, TargetTypeAirPlay, TargetTypeTVOut };
429     WirelessPlaybackTargetType wirelessPlaybackTargetType() const;
430
431     String wirelessPlaybackTargetName() const;
432
433     bool wirelessVideoPlaybackDisabled() const;
434     void setWirelessVideoPlaybackDisabled(bool);
435
436     void currentPlaybackTargetIsWirelessChanged();
437     void playbackTargetAvailabilityChanged();
438
439     bool isCurrentPlaybackTargetWireless() const;
440     bool canPlayToWirelessPlaybackTarget() const;
441     void setWirelessPlaybackTarget(Ref<MediaPlaybackTarget>&&);
442
443     void setShouldPlayToPlaybackTarget(bool);
444 #endif
445
446     double minFastReverseRate() const;
447     double maxFastForwardRate() const;
448
449 #if USE(NATIVE_FULLSCREEN_VIDEO)
450     bool canEnterFullscreen() const;
451 #endif
452
453     // whether accelerated rendering is supported by the media engine for the current media.
454     bool supportsAcceleratedRendering() const;
455     // called when the rendering system flips the into or out of accelerated rendering mode.
456     void acceleratedRenderingStateChanged();
457
458     bool shouldMaintainAspectRatio() const;
459     void setShouldMaintainAspectRatio(bool);
460
461 #if PLATFORM(WIN) && USE(AVFOUNDATION)
462     GraphicsDeviceAdapter* graphicsDeviceAdapter() const;
463 #endif
464
465     bool hasSingleSecurityOrigin() const;
466     bool didPassCORSAccessCheck() const;
467     bool wouldTaintOrigin(const SecurityOrigin&) const;
468
469     MediaTime mediaTimeForTimeValue(const MediaTime&) const;
470
471     double maximumDurationToCacheMediaTime() const;
472
473     unsigned decodedFrameCount() const;
474     unsigned droppedFrameCount() const;
475     unsigned audioDecodedByteCount() const;
476     unsigned videoDecodedByteCount() const;
477
478     void setPrivateBrowsingMode(bool);
479
480 #if ENABLE(WEB_AUDIO)
481     AudioSourceProvider* audioSourceProvider();
482 #endif
483
484 #if ENABLE(LEGACY_ENCRYPTED_MEDIA)
485     RefPtr<ArrayBuffer> cachedKeyForKeyId(const String& keyId) const;
486     bool keyNeeded(Uint8Array* initData);
487     String mediaKeysStorageDirectory() const;
488 #endif
489
490 #if ENABLE(ENCRYPTED_MEDIA)
491     void initializationDataEncountered(const String&, RefPtr<ArrayBuffer>&&);
492     void waitingForKeyChanged();
493     bool waitingForKey() const;
494 #endif
495
496     String referrer() const;
497     String userAgent() const;
498
499     String engineDescription() const;
500     long platformErrorCode() const;
501
502     CachedResourceLoader* cachedResourceLoader();
503     RefPtr<PlatformMediaResourceLoader> createResourceLoader();
504
505 #if ENABLE(VIDEO_TRACK)
506     void addAudioTrack(AudioTrackPrivate&);
507     void addTextTrack(InbandTextTrackPrivate&);
508     void addVideoTrack(VideoTrackPrivate&);
509     void removeAudioTrack(AudioTrackPrivate&);
510     void removeTextTrack(InbandTextTrackPrivate&);
511     void removeVideoTrack(VideoTrackPrivate&);
512
513     bool requiresTextTrackRepresentation() const;
514     void setTextTrackRepresentation(TextTrackRepresentation*);
515     void syncTextTrackBounds();
516     void tracksChanged();
517 #endif
518
519 #if ENABLE(VIDEO_TRACK) && ENABLE(AVF_CAPTIONS)
520     void notifyTrackModeChanged();
521     Vector<RefPtr<PlatformTextTrack>> outOfBandTrackSources();
522 #endif
523
524 #if PLATFORM(IOS)
525     String mediaPlayerNetworkInterfaceName() const;
526     bool getRawCookies(const URL&, Vector<Cookie>&) const;
527 #endif
528
529     static void resetMediaEngines();
530
531 #if USE(GSTREAMER)
532     WEBCORE_EXPORT void simulateAudioInterruption();
533 #endif
534
535     WEBCORE_EXPORT void beginSimulatedHDCPError();
536     WEBCORE_EXPORT void endSimulatedHDCPError();
537
538     String languageOfPrimaryAudioTrack() const;
539
540     size_t extraMemoryCost() const;
541
542     unsigned long long fileSize() const;
543
544     std::optional<VideoPlaybackQualityMetrics> videoPlaybackQualityMetrics();
545
546     void handlePlaybackCommand(PlatformMediaSession::RemoteControlCommandType);
547     String sourceApplicationIdentifier() const;
548     Vector<String> preferredAudioCharacteristics() const;
549
550     bool ended() const;
551
552     void setShouldDisableSleep(bool);
553     bool shouldDisableSleep() const;
554
555     String contentMIMEType() const { return m_contentType.containerType(); }
556     String contentTypeCodecs() const { return m_contentType.parameter(ContentType::codecsParameter()); }
557     bool contentMIMETypeWasInferredFromExtension() const { return m_contentMIMETypeWasInferredFromExtension; }
558
559     const Vector<ContentType>& mediaContentTypesRequiringHardwareSupport() const;
560     bool shouldCheckHardwareSupport() const;
561
562 #if !RELEASE_LOG_DISABLED
563     const Logger& mediaPlayerLogger();
564     const void* mediaPlayerLogIdentifier() { return client().mediaPlayerLogIdentifier(); }
565 #endif
566
567     void applicationWillResignActive();
568     void applicationDidBecomeActive();
569
570 #if ENABLE(VIDEO) && USE(AVFOUNDATION)
571     WEBCORE_EXPORT AVPlayer *objCAVFoundationAVPlayer() const;
572 #endif
573
574 private:
575     MediaPlayer(MediaPlayerClient&);
576
577     const MediaPlayerFactory* nextBestMediaEngine(const MediaPlayerFactory*) const;
578     void loadWithNextMediaEngine(const MediaPlayerFactory*);
579     void reloadTimerFired();
580
581     MediaPlayerClient* m_client;
582     Timer m_reloadTimer;
583     std::unique_ptr<MediaPlayerPrivateInterface> m_private;
584     const MediaPlayerFactory* m_currentMediaEngine { nullptr };
585     URL m_url;
586     ContentType m_contentType;
587     String m_keySystem;
588     IntSize m_size;
589     Preload m_preload { Auto };
590     double m_volume { 1 };
591     bool m_visible { false };
592     bool m_muted { false };
593     bool m_preservesPitch { true };
594     bool m_privateBrowsing { false };
595     bool m_shouldPrepareToRender { false };
596     bool m_contentMIMETypeWasInferredFromExtension { false };
597     bool m_initializingMediaEngine { false };
598
599 #if ENABLE(MEDIA_SOURCE)
600     RefPtr<MediaSourcePrivateClient> m_mediaSource;
601 #endif
602 #if ENABLE(MEDIA_STREAM)
603     RefPtr<MediaStreamPrivate> m_mediaStream;
604 #endif
605 };
606
607 using CreateMediaEnginePlayer = WTF::Function<std::unique_ptr<MediaPlayerPrivateInterface> (MediaPlayer*)>;
608 typedef void (*MediaEngineSupportedTypes)(HashSet<String, ASCIICaseInsensitiveHash>& types);
609 typedef MediaPlayer::SupportsType (*MediaEngineSupportsType)(const MediaEngineSupportParameters& parameters);
610 typedef HashSet<RefPtr<SecurityOrigin>> (*MediaEngineOriginsInMediaCache)(const String& path);
611 typedef void (*MediaEngineClearMediaCache)(const String& path, WallTime modifiedSince);
612 typedef void (*MediaEngineClearMediaCacheForOrigins)(const String& path, const HashSet<RefPtr<SecurityOrigin>>&);
613 typedef bool (*MediaEngineSupportsKeySystem)(const String& keySystem, const String& mimeType);
614
615 typedef void (*MediaEngineRegistrar)(CreateMediaEnginePlayer&&, MediaEngineSupportedTypes, MediaEngineSupportsType,
616     MediaEngineOriginsInMediaCache, MediaEngineClearMediaCache, MediaEngineClearMediaCacheForOrigins, MediaEngineSupportsKeySystem);
617 typedef void (*MediaEngineRegister)(MediaEngineRegistrar);
618
619 class MediaPlayerFactorySupport {
620 public:
621     WEBCORE_EXPORT static void callRegisterMediaEngine(MediaEngineRegister);
622 };
623
624 } // namespace WebCore
625
626 namespace WTF {
627
628 template<typename Type>
629 struct LogArgument;
630
631 template <>
632 struct LogArgument<MediaTime> {
633     static String toString(const MediaTime& time)
634     {
635         return time.toJSONString();
636     }
637 };
638
639 template <>
640 struct LogArgument<MediaTimeRange> {
641     static String toString(const MediaTimeRange& range)
642     {
643         return range.toJSONString();
644     }
645 };
646
647 }
648
649 #endif // ENABLE(VIDEO)