Web Inspector: provide a way to edit page settings on a remote target
[WebKit-https.git] / Source / WebCore / loader / DocumentLoader.h
1 /*
2  * Copyright (C) 2006-2017 Apple Inc. All rights reserved.
3  * Copyright (C) 2011 Google Inc. All rights reserved.
4  *
5  * Redistribution and use in source and binary forms, with or without
6  * modification, are permitted provided that the following conditions
7  * are met:
8  *
9  * 1.  Redistributions of source code must retain the above copyright
10  *     notice, this list of conditions and the following disclaimer. 
11  * 2.  Redistributions in binary form must reproduce the above copyright
12  *     notice, this list of conditions and the following disclaimer in the
13  *     documentation and/or other materials provided with the distribution. 
14  * 3.  Neither the name of Apple Inc. ("Apple") nor the names of
15  *     its contributors may be used to endorse or promote products derived
16  *     from this software without specific prior written permission. 
17  *
18  * THIS SOFTWARE IS PROVIDED BY APPLE AND ITS CONTRIBUTORS "AS IS" AND ANY
19  * EXPRESS OR IMPLIED WARRANTIES, INCLUDING, BUT NOT LIMITED TO, THE IMPLIED
20  * WARRANTIES OF MERCHANTABILITY AND FITNESS FOR A PARTICULAR PURPOSE ARE
21  * DISCLAIMED. IN NO EVENT SHALL APPLE OR ITS CONTRIBUTORS BE LIABLE FOR ANY
22  * DIRECT, INDIRECT, INCIDENTAL, SPECIAL, EXEMPLARY, OR CONSEQUENTIAL DAMAGES
23  * (INCLUDING, BUT NOT LIMITED TO, PROCUREMENT OF SUBSTITUTE GOODS OR SERVICES;
24  * LOSS OF USE, DATA, OR PROFITS; OR BUSINESS INTERRUPTION) HOWEVER CAUSED AND
25  * ON ANY THEORY OF LIABILITY, WHETHER IN CONTRACT, STRICT LIABILITY, OR TORT
26  * (INCLUDING NEGLIGENCE OR OTHERWISE) ARISING IN ANY WAY OUT OF THE USE OF
27  * THIS SOFTWARE, EVEN IF ADVISED OF THE POSSIBILITY OF SUCH DAMAGE.
28  */
29
30 #pragma once
31
32 #include "CachedRawResourceClient.h"
33 #include "CachedResourceHandle.h"
34 #include "ContentSecurityPolicyClient.h"
35 #include "DocumentIdentifier.h"
36 #include "DocumentWriter.h"
37 #include "FrameDestructionObserver.h"
38 #include "LinkIcon.h"
39 #include "LoadTiming.h"
40 #include "NavigationAction.h"
41 #include "ResourceError.h"
42 #include "ResourceLoaderOptions.h"
43 #include "ResourceRequest.h"
44 #include "ResourceResponse.h"
45 #include "SecurityPolicyViolationEvent.h"
46 #include "ServiceWorkerRegistrationData.h"
47 #include "StringWithDirection.h"
48 #include "StyleSheetContents.h"
49 #include "SubstituteData.h"
50 #include "Timer.h"
51 #include <wtf/HashSet.h>
52 #include <wtf/OptionSet.h>
53 #include <wtf/RefPtr.h>
54 #include <wtf/Vector.h>
55
56 #if ENABLE(APPLICATION_MANIFEST)
57 #include "ApplicationManifest.h"
58 #endif
59
60 #if HAVE(RUNLOOP_TIMER)
61 #include <wtf/RunLoopTimer.h>
62 #endif
63
64 #if PLATFORM(COCOA)
65 #include <wtf/SchedulePair.h>
66 #endif
67
68 namespace WebCore {
69
70 class ApplicationCacheHost;
71 class ApplicationManifestLoader;
72 class Archive;
73 class ArchiveResource;
74 class ArchiveResourceCollection;
75 class CachedRawResource;
76 class CachedResourceLoader;
77 class ContentFilter;
78 class FormState;
79 class Frame;
80 class FrameLoader;
81 class HTTPHeaderField;
82 class IconLoader;
83 class Page;
84 class PreviewConverter;
85 class ResourceLoader;
86 class SharedBuffer;
87 class SWClientConnection;
88 class SubresourceLoader;
89 class SubstituteResource;
90
91 enum class ShouldContinue;
92
93 using ResourceLoaderMap = HashMap<unsigned long, RefPtr<ResourceLoader>>;
94
95 enum class AutoplayPolicy {
96     Default, // Uses policies specified in document settings.
97     Allow,
98     AllowWithoutSound,
99     Deny,
100 };
101
102 enum class AutoplayQuirk {
103     SynthesizedPauseEvents = 1 << 0,
104     InheritedUserGestures = 1 << 1,
105     ArbitraryUserGestures = 1 << 2,
106     PerDocumentAutoplayBehavior = 1 << 3,
107 };
108
109 enum class PopUpPolicy {
110     Default, // Uses policies specified in frame settings.
111     Allow,
112     Block,
113 };
114
115 class DocumentLoader
116     : public RefCounted<DocumentLoader>
117     , public FrameDestructionObserver
118     , public ContentSecurityPolicyClient
119     , private CachedRawResourceClient {
120     WTF_MAKE_FAST_ALLOCATED;
121     friend class ContentFilter;
122 public:
123     static Ref<DocumentLoader> create(const ResourceRequest& request, const SubstituteData& data)
124     {
125         return adoptRef(*new DocumentLoader(request, data));
126     }
127     WEBCORE_EXPORT virtual ~DocumentLoader();
128
129     void attachToFrame(Frame&);
130
131     WEBCORE_EXPORT virtual void detachFromFrame();
132
133     WEBCORE_EXPORT FrameLoader* frameLoader() const;
134     WEBCORE_EXPORT SubresourceLoader* mainResourceLoader() const;
135     WEBCORE_EXPORT RefPtr<SharedBuffer> mainResourceData() const;
136     
137     DocumentWriter& writer() const { return m_writer; }
138
139     const ResourceRequest& originalRequest() const;
140     const ResourceRequest& originalRequestCopy() const;
141
142     const ResourceRequest& request() const;
143     ResourceRequest& request();
144
145     CachedResourceLoader& cachedResourceLoader() { return m_cachedResourceLoader; }
146
147     const SubstituteData& substituteData() const { return m_substituteData; }
148
149     const URL& url() const;
150     const URL& unreachableURL() const;
151
152     const URL& originalURL() const;
153     const URL& responseURL() const;
154     const String& responseMIMEType() const;
155 #if PLATFORM(IOS_FAMILY)
156     // FIXME: This method seems to violate the encapsulation of this class.
157     WEBCORE_EXPORT void setResponseMIMEType(const String&);
158 #endif
159     const String& currentContentType() const;
160     void replaceRequestURLForSameDocumentNavigation(const URL&);
161     bool isStopping() const { return m_isStopping; }
162     void stopLoading();
163     void setCommitted(bool committed) { m_committed = committed; }
164     bool isCommitted() const { return m_committed; }
165     WEBCORE_EXPORT bool isLoading() const;
166
167     const ResourceError& mainDocumentError() const { return m_mainDocumentError; }
168
169     const ResourceResponse& response() const { return m_response; }
170
171     // FIXME: This method seems to violate the encapsulation of this class.
172     void setResponse(const ResourceResponse& response) { m_response = response; }
173
174     bool isClientRedirect() const { return m_isClientRedirect; }
175     void setIsClientRedirect(bool isClientRedirect) { m_isClientRedirect = isClientRedirect; }
176     void dispatchOnloadEvents();
177     bool wasOnloadDispatched() { return m_wasOnloadDispatched; }
178     WEBCORE_EXPORT bool isLoadingInAPISense() const;
179     WEBCORE_EXPORT void setTitle(const StringWithDirection&);
180     const String& overrideEncoding() const { return m_overrideEncoding; }
181
182 #if PLATFORM(COCOA)
183     void schedule(SchedulePair&);
184     void unschedule(SchedulePair&);
185 #endif
186
187 #if ENABLE(WEB_ARCHIVE) || ENABLE(MHTML)
188     void setArchive(Ref<Archive>&&);
189     WEBCORE_EXPORT void addAllArchiveResources(Archive&);
190     WEBCORE_EXPORT void addArchiveResource(Ref<ArchiveResource>&&);
191     RefPtr<Archive> popArchiveForSubframe(const String& frameName, const URL&);
192     WEBCORE_EXPORT SharedBuffer* parsedArchiveData() const;
193
194     WEBCORE_EXPORT bool scheduleArchiveLoad(ResourceLoader&, const ResourceRequest&);
195 #endif
196
197     void scheduleSubstituteResourceLoad(ResourceLoader&, SubstituteResource&);
198     void scheduleCannotShowURLError(ResourceLoader&);
199
200     // Return the ArchiveResource for the URL only when loading an Archive
201     WEBCORE_EXPORT ArchiveResource* archiveResourceForURL(const URL&) const;
202
203     WEBCORE_EXPORT RefPtr<ArchiveResource> mainResource() const;
204
205     // Return an ArchiveResource for the URL, either creating from live data or
206     // pulling from the ArchiveResourceCollection.
207     WEBCORE_EXPORT RefPtr<ArchiveResource> subresource(const URL&) const;
208
209     WEBCORE_EXPORT Vector<Ref<ArchiveResource>> subresources() const;
210
211 #ifndef NDEBUG
212     bool isSubstituteLoadPending(ResourceLoader*) const;
213 #endif
214     void cancelPendingSubstituteLoad(ResourceLoader*);   
215     
216     void addResponse(const ResourceResponse&);
217     const Vector<ResourceResponse>& responses() const { return m_responses; }
218
219     const NavigationAction& triggeringAction() const { return m_triggeringAction; }
220     void setTriggeringAction(NavigationAction&&);
221     void setOverrideEncoding(const String& encoding) { m_overrideEncoding = encoding; }
222     void setLastCheckedRequest(ResourceRequest&& request) { m_lastCheckedRequest = WTFMove(request); }
223     const ResourceRequest& lastCheckedRequest()  { return m_lastCheckedRequest; }
224
225     void stopRecordingResponses();
226     const StringWithDirection& title() const { return m_pageTitle; }
227
228     WEBCORE_EXPORT URL urlForHistory() const;
229     WEBCORE_EXPORT bool urlForHistoryReflectsFailure() const;
230
231     // These accessors accommodate WebCore's somewhat fickle custom of creating history
232     // items for redirects, but only sometimes. For "source" and "destination",
233     // these accessors return the URL that would have been used if a history
234     // item were created. This allows WebKit to link history items reflecting
235     // redirects into a chain from start to finish.
236     String clientRedirectSourceForHistory() const { return m_clientRedirectSourceForHistory; } // null if no client redirect occurred.
237     String clientRedirectDestinationForHistory() const { return urlForHistory(); }
238     void setClientRedirectSourceForHistory(const String& clientRedirectSourceForHistory) { m_clientRedirectSourceForHistory = clientRedirectSourceForHistory; }
239     
240     String serverRedirectSourceForHistory() const { return (urlForHistory() == url() || url() == WTF::blankURL()) ? String() : urlForHistory().string(); } // null if no server redirect occurred.
241     String serverRedirectDestinationForHistory() const { return url(); }
242
243     bool didCreateGlobalHistoryEntry() const { return m_didCreateGlobalHistoryEntry; }
244     void setDidCreateGlobalHistoryEntry(bool didCreateGlobalHistoryEntry) { m_didCreateGlobalHistoryEntry = didCreateGlobalHistoryEntry; }
245
246     bool subresourceLoadersArePageCacheAcceptable() const { return m_subresourceLoadersArePageCacheAcceptable; }
247
248     void setDefersLoading(bool);
249     void setMainResourceDataBufferingPolicy(DataBufferingPolicy);
250
251     void startLoadingMainResource();
252     WEBCORE_EXPORT void cancelMainResourceLoad(const ResourceError&);
253     void willContinueMainResourceLoadAfterRedirect(const ResourceRequest&);
254
255     bool isLoadingMainResource() const { return m_loadingMainResource; }
256     bool isLoadingMultipartContent() const { return m_isLoadingMultipartContent; }
257
258     void stopLoadingPlugIns();
259     void stopLoadingSubresources();
260     WEBCORE_EXPORT void stopLoadingAfterXFrameOptionsOrContentSecurityPolicyDenied(unsigned long identifier, const ResourceResponse&);
261
262     bool userContentExtensionsEnabled() const { return m_userContentExtensionsEnabled; }
263     void setUserContentExtensionsEnabled(bool enabled) { m_userContentExtensionsEnabled = enabled; }
264
265     bool deviceOrientationEventEnabled() const { return m_deviceOrientationEventEnabled; }
266     void setDeviceOrientationEventEnabled(bool enabled) { m_deviceOrientationEventEnabled = enabled; }
267
268     AutoplayPolicy autoplayPolicy() const { return m_autoplayPolicy; }
269     void setAutoplayPolicy(AutoplayPolicy policy) { m_autoplayPolicy = policy; }
270
271     void setCustomUserAgent(const String& customUserAgent) { m_customUserAgent = customUserAgent; }
272     const String& customUserAgent() const { return m_customUserAgent; }
273         
274     void setCustomNavigatorPlatform(const String& customNavigatorPlatform) { m_customNavigatorPlatform = customNavigatorPlatform; }
275     const String& customNavigatorPlatform() const { return m_customNavigatorPlatform; }
276
277     OptionSet<AutoplayQuirk> allowedAutoplayQuirks() const { return m_allowedAutoplayQuirks; }
278     void setAllowedAutoplayQuirks(OptionSet<AutoplayQuirk> allowedQuirks) { m_allowedAutoplayQuirks = allowedQuirks; }
279
280     PopUpPolicy popUpPolicy() const { return m_popUpPolicy; }
281     void setPopUpPolicy(PopUpPolicy popUpPolicy) { m_popUpPolicy = popUpPolicy; }
282
283     void addSubresourceLoader(ResourceLoader*);
284     void removeSubresourceLoader(LoadCompletionType, ResourceLoader*);
285     void addPlugInStreamLoader(ResourceLoader&);
286     void removePlugInStreamLoader(ResourceLoader&);
287
288     void subresourceLoaderFinishedLoadingOnePart(ResourceLoader*);
289
290     void setDeferMainResourceDataLoad(bool defer) { m_deferMainResourceDataLoad = defer; }
291     
292     void didTellClientAboutLoad(const String& url);
293     bool haveToldClientAboutLoad(const String& url) { return m_resourcesClientKnowsAbout.contains(url); }
294     void recordMemoryCacheLoadForFutureClientNotification(const ResourceRequest&);
295     void takeMemoryCacheLoadsForClientNotification(Vector<ResourceRequest>& loads);
296
297     LoadTiming& timing() { return m_loadTiming; }
298     void resetTiming() { m_loadTiming = LoadTiming(); }
299
300     // The WebKit layer calls this function when it's ready for the data to actually be added to the document.
301     WEBCORE_EXPORT void commitData(const char* bytes, size_t length);
302
303     ApplicationCacheHost& applicationCacheHost() const;
304     ApplicationCacheHost* applicationCacheHostUnlessBeingDestroyed() const;
305
306     void checkLoadComplete();
307
308     // The URL of the document resulting from this DocumentLoader.
309     URL documentURL() const;
310
311 #if USE(QUICK_LOOK)
312     void setPreviewConverter(std::unique_ptr<PreviewConverter>&&);
313     PreviewConverter* previewConverter() const;
314 #endif
315
316 #if ENABLE(CONTENT_EXTENSIONS)
317     void addPendingContentExtensionSheet(const String& identifier, StyleSheetContents&);
318     void addPendingContentExtensionDisplayNoneSelector(const String& identifier, const String& selector, uint32_t selectorID);
319 #endif
320
321     void setShouldOpenExternalURLsPolicy(ShouldOpenExternalURLsPolicy shouldOpenExternalURLsPolicy) { m_shouldOpenExternalURLsPolicy = shouldOpenExternalURLsPolicy; }
322     ShouldOpenExternalURLsPolicy shouldOpenExternalURLsPolicyToPropagate() const;
323
324 #if ENABLE(CONTENT_FILTERING)
325     ContentFilter* contentFilter() const;
326 #endif
327
328     bool isAlwaysOnLoggingAllowed() const;
329
330     void startIconLoading();
331     WEBCORE_EXPORT void didGetLoadDecisionForIcon(bool decision, uint64_t loadIdentifier, uint64_t newCallbackID);
332     void finishedLoadingIcon(IconLoader&, SharedBuffer*);
333
334     const Vector<LinkIcon>& linkIcons() const { return m_linkIcons; }
335
336 #if ENABLE(APPLICATION_MANIFEST)
337     WEBCORE_EXPORT uint64_t loadApplicationManifest();
338     void finishedLoadingApplicationManifest(ApplicationManifestLoader&);
339 #endif
340
341     WEBCORE_EXPORT void setCustomHeaderFields(Vector<HTTPHeaderField>&& fields);
342     const Vector<HTTPHeaderField>& customHeaderFields() { return m_customHeaderFields; }
343     
344 protected:
345     WEBCORE_EXPORT DocumentLoader(const ResourceRequest&, const SubstituteData&);
346
347     WEBCORE_EXPORT virtual void attachToFrame();
348
349     bool m_deferMainResourceDataLoad { true };
350
351 private:
352     Document* document() const;
353
354 #if ENABLE(SERVICE_WORKER)
355     void matchRegistration(const URL&, CompletionHandler<void(Optional<ServiceWorkerRegistrationData>&&)>&&);
356 #endif
357     void registerTemporaryServiceWorkerClient(const URL&);
358     void unregisterTemporaryServiceWorkerClient();
359
360     void loadMainResource(ResourceRequest&&);
361
362     void setRequest(const ResourceRequest&);
363
364     void commitIfReady();
365     void setMainDocumentError(const ResourceError&);
366     void commitLoad(const char*, int);
367     void clearMainResourceLoader();
368
369     void setupForReplace();
370     void maybeFinishLoadingMultipartContent();
371     
372     bool maybeCreateArchive();
373 #if ENABLE(WEB_ARCHIVE) || ENABLE(MHTML)
374     void clearArchiveResources();
375 #endif
376
377     void willSendRequest(ResourceRequest&&, const ResourceResponse&, CompletionHandler<void(ResourceRequest&&)>&&);
378     void finishedLoading();
379     void mainReceivedError(const ResourceError&);
380     WEBCORE_EXPORT void redirectReceived(CachedResource&, ResourceRequest&&, const ResourceResponse&, CompletionHandler<void(ResourceRequest&&)>&&) override;
381     WEBCORE_EXPORT void responseReceived(CachedResource&, const ResourceResponse&, CompletionHandler<void()>&&) override;
382     WEBCORE_EXPORT void dataReceived(CachedResource&, const char* data, int length) override;
383     WEBCORE_EXPORT void notifyFinished(CachedResource&) override;
384
385     void responseReceived(const ResourceResponse&, CompletionHandler<void()>&&);
386     void dataReceived(const char* data, int length);
387
388     bool maybeLoadEmpty();
389
390     bool isMultipartReplacingLoad() const;
391     bool isPostOrRedirectAfterPost(const ResourceRequest&, const ResourceResponse&);
392
393     bool tryLoadingRequestFromApplicationCache();
394     bool tryLoadingSubstituteData();
395     bool tryLoadingRedirectRequestFromApplicationCache(const ResourceRequest&);
396 #if ENABLE(SERVICE_WORKER)
397     void restartLoadingDueToServiceWorkerRegistrationChange(ResourceRequest&&, Optional<ServiceWorkerRegistrationData>&&);
398 #endif
399     void continueAfterContentPolicy(PolicyAction);
400
401     void stopLoadingForPolicyChange();
402     ResourceError interruptedForPolicyChangeError() const;
403
404 #if HAVE(RUNLOOP_TIMER)
405     typedef RunLoopTimer<DocumentLoader> DocumentLoaderTimer;
406 #else
407     typedef Timer DocumentLoaderTimer;
408 #endif
409     void handleSubstituteDataLoadNow();
410     void startDataLoadTimer();
411
412     void deliverSubstituteResourcesAfterDelay();
413     void substituteResourceDeliveryTimerFired();
414
415     void clearMainResource();
416
417     void cancelPolicyCheckIfNeeded();
418     void becomeMainResourceClient();
419
420     void notifyFinishedLoadingIcon(uint64_t callbackIdentifier, SharedBuffer*);
421
422 #if ENABLE(APPLICATION_MANIFEST)
423     void notifyFinishedLoadingApplicationManifest(uint64_t callbackIdentifier, Optional<ApplicationManifest>);
424 #endif
425
426     // ContentSecurityPolicyClient
427     WEBCORE_EXPORT void addConsoleMessage(MessageSource, MessageLevel, const String&, unsigned long requestIdentifier) final;
428     WEBCORE_EXPORT void sendCSPViolationReport(URL&&, Ref<FormData>&&) final;
429     WEBCORE_EXPORT void enqueueSecurityPolicyViolationEvent(SecurityPolicyViolationEvent::Init&&) final;
430
431     bool disallowWebArchive() const;
432
433     Ref<CachedResourceLoader> m_cachedResourceLoader;
434
435     CachedResourceHandle<CachedRawResource> m_mainResource;
436     ResourceLoaderMap m_subresourceLoaders;
437     ResourceLoaderMap m_multipartSubresourceLoaders;
438     ResourceLoaderMap m_plugInStreamLoaders;
439     
440     mutable DocumentWriter m_writer;
441
442     // A reference to actual request used to create the data source.
443     // This should only be used by the resourceLoadDelegate's
444     // identifierForInitialRequest:fromDatasource: method. It is
445     // not guaranteed to remain unchanged, as requests are mutable.
446     ResourceRequest m_originalRequest;   
447
448     SubstituteData m_substituteData;
449
450     // A copy of the original request used to create the data source.
451     // We have to copy the request because requests are mutable.
452     ResourceRequest m_originalRequestCopy;
453     
454     // The 'working' request. It may be mutated
455     // several times from the original request to include additional
456     // headers, cookie information, canonicalization and redirects.
457     ResourceRequest m_request;
458
459     ResourceResponse m_response;
460
461     ResourceError m_mainDocumentError;    
462
463     bool m_originalSubstituteDataWasValid;
464     bool m_committed { false };
465     bool m_isStopping { false };
466     bool m_gotFirstByte { false };
467     bool m_isClientRedirect { false };
468     bool m_isLoadingMultipartContent { false };
469
470     // FIXME: Document::m_processingLoadEvent and DocumentLoader::m_wasOnloadDispatched are roughly the same
471     // and should be merged.
472     bool m_wasOnloadDispatched { false };
473
474     StringWithDirection m_pageTitle;
475
476     String m_overrideEncoding;
477
478     // The action that triggered loading - we keep this around for the
479     // benefit of the various policy handlers.
480     NavigationAction m_triggeringAction;
481
482     // The last request that we checked click policy for - kept around
483     // so we can avoid asking again needlessly.
484     ResourceRequest m_lastCheckedRequest;
485
486     // We retain all the received responses so we can play back the
487     // WebResourceLoadDelegate messages if the item is loaded from the
488     // page cache.
489     Vector<ResourceResponse> m_responses;
490     bool m_stopRecordingResponses { false };
491     
492     typedef HashMap<RefPtr<ResourceLoader>, RefPtr<SubstituteResource>> SubstituteResourceMap;
493     SubstituteResourceMap m_pendingSubstituteResources;
494     Timer m_substituteResourceDeliveryTimer;
495
496     std::unique_ptr<ArchiveResourceCollection> m_archiveResourceCollection;
497 #if ENABLE(WEB_ARCHIVE) || ENABLE(MHTML)
498     RefPtr<Archive> m_archive;
499     RefPtr<SharedBuffer> m_parsedArchiveData;
500 #endif
501
502     HashSet<String> m_resourcesClientKnowsAbout;
503     Vector<ResourceRequest> m_resourcesLoadedFromMemoryCacheForClientNotification;
504     
505     String m_clientRedirectSourceForHistory;
506     bool m_didCreateGlobalHistoryEntry { false };
507
508     bool m_loadingMainResource { false };
509     LoadTiming m_loadTiming;
510
511     MonotonicTime m_timeOfLastDataReceived;
512     unsigned long m_identifierForLoadWithoutResourceLoader { 0 };
513
514     DocumentLoaderTimer m_dataLoadTimer;
515     bool m_waitingForContentPolicy { false };
516     bool m_waitingForNavigationPolicy { false };
517
518     HashMap<uint64_t, LinkIcon> m_iconsPendingLoadDecision;
519     HashMap<std::unique_ptr<IconLoader>, uint64_t> m_iconLoaders;
520     Vector<LinkIcon> m_linkIcons;
521
522 #if ENABLE(APPLICATION_MANIFEST)
523     HashMap<std::unique_ptr<ApplicationManifestLoader>, uint64_t> m_applicationManifestLoaders;
524 #endif
525
526     Vector<HTTPHeaderField> m_customHeaderFields;
527     
528     bool m_subresourceLoadersArePageCacheAcceptable { false };
529     ShouldOpenExternalURLsPolicy m_shouldOpenExternalURLsPolicy { ShouldOpenExternalURLsPolicy::ShouldNotAllow };
530
531     std::unique_ptr<ApplicationCacheHost> m_applicationCacheHost;
532
533 #if ENABLE(CONTENT_FILTERING)
534     std::unique_ptr<ContentFilter> m_contentFilter;
535 #endif
536
537 #if USE(QUICK_LOOK)
538     std::unique_ptr<PreviewConverter> m_previewConverter;
539 #endif
540
541 #if ENABLE(CONTENT_EXTENSIONS)
542     HashMap<String, RefPtr<StyleSheetContents>> m_pendingNamedContentExtensionStyleSheets;
543     HashMap<String, Vector<std::pair<String, uint32_t>>> m_pendingContentExtensionDisplayNoneSelectors;
544 #endif
545     String m_customUserAgent;
546     String m_customNavigatorPlatform;
547     bool m_userContentExtensionsEnabled { true };
548     bool m_deviceOrientationEventEnabled { true };
549     AutoplayPolicy m_autoplayPolicy { AutoplayPolicy::Default };
550     OptionSet<AutoplayQuirk> m_allowedAutoplayQuirks;
551     PopUpPolicy m_popUpPolicy { PopUpPolicy::Default };
552
553 #if ENABLE(SERVICE_WORKER)
554     Optional<ServiceWorkerRegistrationData> m_serviceWorkerRegistrationData;
555     struct TemporaryServiceWorkerClient {
556         DocumentIdentifier documentIdentifier;
557         Ref<SWClientConnection> serviceWorkerConnection;
558     };
559     Optional<TemporaryServiceWorkerClient> m_temporaryServiceWorkerClient;
560 #endif
561
562 #ifndef NDEBUG
563     bool m_hasEverBeenAttached { false };
564 #endif
565 };
566
567 inline void DocumentLoader::recordMemoryCacheLoadForFutureClientNotification(const ResourceRequest& request)
568 {
569     m_resourcesLoadedFromMemoryCacheForClientNotification.append(request);
570 }
571
572 inline void DocumentLoader::takeMemoryCacheLoadsForClientNotification(Vector<ResourceRequest>& loadsSet)
573 {
574     loadsSet.swap(m_resourcesLoadedFromMemoryCacheForClientNotification);
575     m_resourcesLoadedFromMemoryCacheForClientNotification.clear();
576 }
577
578 inline const ResourceRequest& DocumentLoader::originalRequest() const
579 {
580     return m_originalRequest;
581 }
582
583 inline const ResourceRequest& DocumentLoader::originalRequestCopy() const
584 {
585     return m_originalRequestCopy;
586 }
587
588 inline const ResourceRequest& DocumentLoader::request() const
589 {
590     return m_request;
591 }
592
593 inline ResourceRequest& DocumentLoader::request()
594 {
595     return m_request;
596 }
597
598 inline const URL& DocumentLoader::url() const
599 {
600     return m_request.url();
601 }
602
603 inline const URL& DocumentLoader::originalURL() const
604 {
605     return m_originalRequestCopy.url();
606 }
607
608 inline const URL& DocumentLoader::responseURL() const
609 {
610     return m_response.url();
611 }
612
613 inline const String& DocumentLoader::responseMIMEType() const
614 {
615     return m_response.mimeType();
616 }
617
618 inline const String& DocumentLoader::currentContentType() const
619 {
620     return m_writer.mimeType();
621 }
622
623 inline const URL& DocumentLoader::unreachableURL() const
624 {
625     return m_substituteData.failingURL();
626 }
627
628 inline ApplicationCacheHost& DocumentLoader::applicationCacheHost() const
629 {
630     // For a short time while the document loader is being destroyed, m_applicationCacheHost is null.
631     // It's not acceptable to call this function during that time.
632     ASSERT(m_applicationCacheHost);
633     return *m_applicationCacheHost;
634 }
635
636 inline ApplicationCacheHost* DocumentLoader::applicationCacheHostUnlessBeingDestroyed() const
637 {
638     return m_applicationCacheHost.get();
639 }
640
641 #if ENABLE(CONTENT_FILTERING)
642
643 inline ContentFilter* DocumentLoader::contentFilter() const
644 {
645     return m_contentFilter.get();
646 }
647
648 #endif
649
650 inline void DocumentLoader::didTellClientAboutLoad(const String& url)
651 {
652 #if !PLATFORM(COCOA)
653     // Don't include data URLs here, as if a lot of data is loaded that way, we hold on to the (large) URL string for too long.
654     if (protocolIs(url, "data"))
655         return;
656 #endif
657     if (!url.isEmpty())
658         m_resourcesClientKnowsAbout.add(url);
659 }
660
661 }