496e72d1c594657f0cbd8ebd756922ea625d327e
[WebKit-https.git] / Source / WebCore / loader / FrameLoader.cpp
1 /*
2  * Copyright (C) 2006-2016 Apple Inc. All rights reserved.
3  * Copyright (C) 2008 Nokia Corporation and/or its subsidiary(-ies)
4  * Copyright (C) 2008, 2009 Torch Mobile Inc. All rights reserved. (http://www.torchmobile.com/)
5  * Copyright (C) 2008 Alp Toker <alp@atoker.com>
6  * Copyright (C) Research In Motion Limited 2009. All rights reserved.
7  * Copyright (C) 2011 Kris Jordan <krisjordan@gmail.com>
8  * Copyright (C) 2011 Google Inc. All rights reserved.
9  *
10  * Redistribution and use in source and binary forms, with or without
11  * modification, are permitted provided that the following conditions
12  * are met:
13  *
14  * 1.  Redistributions of source code must retain the above copyright
15  *     notice, this list of conditions and the following disclaimer.
16  * 2.  Redistributions in binary form must reproduce the above copyright
17  *     notice, this list of conditions and the following disclaimer in the
18  *     documentation and/or other materials provided with the distribution.
19  * 3.  Neither the name of Apple Inc. ("Apple") nor the names of
20  *     its contributors may be used to endorse or promote products derived
21  *     from this software without specific prior written permission.
22  *
23  * THIS SOFTWARE IS PROVIDED BY APPLE AND ITS CONTRIBUTORS "AS IS" AND ANY
24  * EXPRESS OR IMPLIED WARRANTIES, INCLUDING, BUT NOT LIMITED TO, THE IMPLIED
25  * WARRANTIES OF MERCHANTABILITY AND FITNESS FOR A PARTICULAR PURPOSE ARE
26  * DISCLAIMED. IN NO EVENT SHALL APPLE OR ITS CONTRIBUTORS BE LIABLE FOR ANY
27  * DIRECT, INDIRECT, INCIDENTAL, SPECIAL, EXEMPLARY, OR CONSEQUENTIAL DAMAGES
28  * (INCLUDING, BUT NOT LIMITED TO, PROCUREMENT OF SUBSTITUTE GOODS OR SERVICES;
29  * LOSS OF USE, DATA, OR PROFITS; OR BUSINESS INTERRUPTION) HOWEVER CAUSED AND
30  * ON ANY THEORY OF LIABILITY, WHETHER IN CONTRACT, STRICT LIABILITY, OR TORT
31  * (INCLUDING NEGLIGENCE OR OTHERWISE) ARISING IN ANY WAY OUT OF THE USE OF
32  * THIS SOFTWARE, EVEN IF ADVISED OF THE POSSIBILITY OF SUCH DAMAGE.
33  */
34
35 #include "config.h"
36 #include "FrameLoader.h"
37
38 #include "AXObjectCache.h"
39 #include "ApplicationCacheHost.h"
40 #include "BackForwardController.h"
41 #include "BeforeUnloadEvent.h"
42 #include "CachedPage.h"
43 #include "CachedResourceLoader.h"
44 #include "Chrome.h"
45 #include "ChromeClient.h"
46 #include "ContentFilter.h"
47 #include "ContentSecurityPolicy.h"
48 #include "DOMWindow.h"
49 #include "DatabaseManager.h"
50 #include "DiagnosticLoggingClient.h"
51 #include "DiagnosticLoggingKeys.h"
52 #include "Document.h"
53 #include "DocumentLoader.h"
54 #include "Editor.h"
55 #include "EditorClient.h"
56 #include "Element.h"
57 #include "Event.h"
58 #include "EventHandler.h"
59 #include "EventNames.h"
60 #include "FloatRect.h"
61 #include "FormState.h"
62 #include "FormSubmission.h"
63 #include "FrameLoadRequest.h"
64 #include "FrameLoaderClient.h"
65 #include "FrameNetworkingContext.h"
66 #include "FrameTree.h"
67 #include "FrameView.h"
68 #include "GCController.h"
69 #include "HTMLFormElement.h"
70 #include "HTMLInputElement.h"
71 #include "HTMLNames.h"
72 #include "HTMLObjectElement.h"
73 #include "HTMLParserIdioms.h"
74 #include "HTTPHeaderNames.h"
75 #include "HTTPParsers.h"
76 #include "HistoryController.h"
77 #include "HistoryItem.h"
78 #include "IconController.h"
79 #include "IgnoreOpensDuringUnloadCountIncrementer.h"
80 #include "InspectorController.h"
81 #include "InspectorInstrumentation.h"
82 #include "LoadTiming.h"
83 #include "LoaderStrategy.h"
84 #include "Logging.h"
85 #include "MainFrame.h"
86 #include "MemoryCache.h"
87 #include "MemoryRelease.h"
88 #include "Page.h"
89 #include "PageCache.h"
90 #include "PageTransitionEvent.h"
91 #include "PerformanceLogging.h"
92 #include "PlatformStrategies.h"
93 #include "PluginData.h"
94 #include "PluginDocument.h"
95 #include "PolicyChecker.h"
96 #include "ProgressTracker.h"
97 #include "ResourceHandle.h"
98 #include "ResourceLoadInfo.h"
99 #include "ResourceLoadObserver.h"
100 #include "ResourceRequest.h"
101 #include "SVGDocument.h"
102 #include "SVGLocatable.h"
103 #include "SVGNames.h"
104 #include "SVGViewElement.h"
105 #include "SVGViewSpec.h"
106 #include "ScriptController.h"
107 #include "ScriptSourceCode.h"
108 #include "ScrollAnimator.h"
109 #include "SecurityOrigin.h"
110 #include "SecurityPolicy.h"
111 #include "SegmentedString.h"
112 #include "SerializedScriptValue.h"
113 #include "Settings.h"
114 #include "SubframeLoader.h"
115 #include "TextResourceDecoder.h"
116 #include "UserContentController.h"
117 #include "WindowFeatures.h"
118 #include "XMLDocumentParser.h"
119 #include <wtf/CurrentTime.h>
120 #include <wtf/Ref.h>
121 #include <wtf/StdLibExtras.h>
122 #include <wtf/text/CString.h>
123 #include <wtf/text/WTFString.h>
124
125 #if ENABLE(WEB_ARCHIVE) || ENABLE(MHTML)
126 #include "Archive.h"
127 #endif
128
129 #if ENABLE(DATA_DETECTION)
130 #include "DataDetection.h"
131 #endif
132
133 #if PLATFORM(IOS)
134 #include "DocumentType.h"
135 #include "ResourceLoader.h"
136 #include "RuntimeApplicationChecks.h"
137 #include "WKContentObservation.h"
138 #endif
139
140 #define RELEASE_LOG_IF_ALLOWED(fmt, ...) RELEASE_LOG_IF(isAlwaysOnLoggingAllowed(), Network, "%p - FrameLoader::" fmt, this, ##__VA_ARGS__)
141
142 namespace WebCore {
143
144 using namespace HTMLNames;
145 using namespace SVGNames;
146
147 static const char defaultAcceptHeader[] = "text/html,application/xhtml+xml,application/xml;q=0.9,*/*;q=0.8";
148
149 bool isBackForwardLoadType(FrameLoadType type)
150 {
151     switch (type) {
152     case FrameLoadType::Standard:
153     case FrameLoadType::Reload:
154     case FrameLoadType::ReloadFromOrigin:
155     case FrameLoadType::Same:
156     case FrameLoadType::RedirectWithLockedBackForwardList:
157     case FrameLoadType::Replace:
158         return false;
159     case FrameLoadType::Back:
160     case FrameLoadType::Forward:
161     case FrameLoadType::IndexedBackForward:
162         return true;
163     }
164     ASSERT_NOT_REACHED();
165     return false;
166 }
167
168 // This is not in the FrameLoader class to emphasize that it does not depend on
169 // private FrameLoader data, and to avoid increasing the number of public functions
170 // with access to private data.  Since only this .cpp file needs it, making it
171 // non-member lets us exclude it from the header file, thus keeping FrameLoader.h's
172 // API simpler.
173 //
174 static bool isDocumentSandboxed(Frame& frame, SandboxFlags mask)
175 {
176     return frame.document() && frame.document()->isSandboxed(mask);
177 }
178
179 struct ForbidPromptsScope {
180     ForbidPromptsScope(Page* page) : m_page(page)
181     {
182         if (!m_page)
183             return;
184         m_page->forbidPrompts();
185     }
186
187     ~ForbidPromptsScope()
188     {
189         if (!m_page)
190             return;
191         m_page->allowPrompts();
192     }
193
194     Page* m_page;
195 };
196
197 class FrameLoader::FrameProgressTracker {
198     WTF_MAKE_FAST_ALLOCATED;
199 public:
200     explicit FrameProgressTracker(Frame& frame)
201         : m_frame(frame)
202         , m_inProgress(false)
203     {
204     }
205
206     ~FrameProgressTracker()
207     {
208         if (m_inProgress && m_frame.page())
209             m_frame.page()->progress().progressCompleted(m_frame);
210     }
211
212     void progressStarted()
213     {
214         ASSERT(m_frame.page());
215         if (!m_inProgress)
216             m_frame.page()->progress().progressStarted(m_frame);
217         m_inProgress = true;
218     }
219
220     void progressCompleted()
221     {
222         ASSERT(m_inProgress);
223         ASSERT(m_frame.page());
224         m_inProgress = false;
225         m_frame.page()->progress().progressCompleted(m_frame);
226     }
227
228 private:
229     Frame& m_frame;
230     bool m_inProgress;
231 };
232
233 FrameLoader::FrameLoader(Frame& frame, FrameLoaderClient& client)
234     : m_frame(frame)
235     , m_client(client)
236     , m_policyChecker(std::make_unique<PolicyChecker>(frame))
237     , m_history(std::make_unique<HistoryController>(frame))
238     , m_notifier(frame)
239     , m_subframeLoader(std::make_unique<SubframeLoader>(frame))
240     , m_icon(std::make_unique<IconController>(frame))
241     , m_mixedContentChecker(frame)
242     , m_state(FrameStateProvisional)
243     , m_loadType(FrameLoadType::Standard)
244     , m_quickRedirectComing(false)
245     , m_sentRedirectNotification(false)
246     , m_inStopAllLoaders(false)
247     , m_isExecutingJavaScriptFormAction(false)
248     , m_didCallImplicitClose(true)
249     , m_wasUnloadEventEmitted(false)
250     , m_isComplete(false)
251     , m_needsClear(false)
252     , m_checkTimer(*this, &FrameLoader::checkTimerFired)
253     , m_shouldCallCheckCompleted(false)
254     , m_shouldCallCheckLoadComplete(false)
255     , m_opener(nullptr)
256     , m_loadingFromCachedPage(false)
257     , m_currentNavigationHasShownBeforeUnloadConfirmPanel(false)
258     , m_loadsSynchronously(false)
259     , m_forcedSandboxFlags(SandboxNone)
260 {
261 }
262
263 FrameLoader::~FrameLoader()
264 {
265     setOpener(nullptr);
266
267     for (auto& frame : m_openedFrames)
268         frame->loader().m_opener = nullptr;
269
270     m_client.frameLoaderDestroyed();
271
272     if (m_networkingContext)
273         m_networkingContext->invalidate();
274 }
275
276 void FrameLoader::init()
277 {
278     // This somewhat odd set of steps gives the frame an initial empty document.
279     setPolicyDocumentLoader(m_client.createDocumentLoader(ResourceRequest(URL(ParsedURLString, emptyString())), SubstituteData()).ptr());
280     setProvisionalDocumentLoader(m_policyDocumentLoader.get());
281     m_provisionalDocumentLoader->startLoadingMainResource();
282
283     Ref<Frame> protect(m_frame);
284     m_frame.document()->cancelParsing();
285     m_stateMachine.advanceTo(FrameLoaderStateMachine::DisplayingInitialEmptyDocument);
286
287     m_networkingContext = m_client.createNetworkingContext();
288     m_progressTracker = std::make_unique<FrameProgressTracker>(m_frame);
289 }
290
291 #if PLATFORM(IOS)
292 void FrameLoader::initForSynthesizedDocument(const URL&)
293 {
294     // FIXME: We need to initialize the document URL to the specified URL. Currently the URL is empty and hence
295     // FrameLoader::checkCompleted() will overwrite the URL of the document to be activeDocumentLoader()->documentURL().
296
297     RefPtr<DocumentLoader> loader = m_client.createDocumentLoader(ResourceRequest(URL(ParsedURLString, emptyString())), SubstituteData());
298     loader->attachToFrame(m_frame);
299     loader->setResponse(ResourceResponse(URL(), ASCIILiteral("text/html"), 0, String()));
300     loader->setCommitted(true);
301     setDocumentLoader(loader.get());
302
303     m_stateMachine.advanceTo(FrameLoaderStateMachine::DisplayingInitialEmptyDocument);
304     m_stateMachine.advanceTo(FrameLoaderStateMachine::DisplayingInitialEmptyDocumentPostCommit);
305     m_stateMachine.advanceTo(FrameLoaderStateMachine::CommittedFirstRealLoad);
306     m_client.transitionToCommittedForNewPage();
307
308     m_didCallImplicitClose = true;
309     m_isComplete = true;
310     m_state = FrameStateComplete;
311     m_needsClear = true;
312
313     m_networkingContext = m_client.createNetworkingContext();
314     m_progressTracker = std::make_unique<FrameProgressTracker>(m_frame);
315 }
316 #endif
317
318 void FrameLoader::setDefersLoading(bool defers)
319 {
320     if (m_documentLoader)
321         m_documentLoader->setDefersLoading(defers);
322     if (m_provisionalDocumentLoader)
323         m_provisionalDocumentLoader->setDefersLoading(defers);
324     if (m_policyDocumentLoader)
325         m_policyDocumentLoader->setDefersLoading(defers);
326     history().setDefersLoading(defers);
327
328     if (!defers) {
329         m_frame.navigationScheduler().startTimer();
330         startCheckCompleteTimer();
331     }
332 }
333
334 void FrameLoader::changeLocation(const FrameLoadRequest& request)
335 {
336     urlSelected(request, nullptr);
337 }
338
339 void FrameLoader::urlSelected(const URL& url, const String& passedTarget, Event* triggeringEvent, LockHistory lockHistory, LockBackForwardList lockBackForwardList, ShouldSendReferrer shouldSendReferrer, ShouldOpenExternalURLsPolicy shouldOpenExternalURLsPolicy, std::optional<NewFrameOpenerPolicy> openerPolicy, const AtomicString& downloadAttribute)
340 {
341     NewFrameOpenerPolicy newFrameOpenerPolicy = openerPolicy.value_or(shouldSendReferrer == NeverSendReferrer ? NewFrameOpenerPolicy::Suppress : NewFrameOpenerPolicy::Allow);
342     urlSelected(FrameLoadRequest(m_frame.document()->securityOrigin(), ResourceRequest(url), passedTarget, lockHistory, lockBackForwardList, shouldSendReferrer, AllowNavigationToInvalidURL::Yes, newFrameOpenerPolicy, DoNotReplaceDocumentIfJavaScriptURL, shouldOpenExternalURLsPolicy, downloadAttribute), triggeringEvent);
343 }
344
345 void FrameLoader::urlSelected(const FrameLoadRequest& passedRequest, Event* triggeringEvent)
346 {
347     ASSERT_WITH_SECURITY_IMPLICATION(!triggeringEvent || !triggeringEvent->target() || !triggeringEvent->target()->toNode()
348         || triggeringEvent->target()->toNode()->document().pageCacheState() == Document::NotInPageCache);
349
350     Ref<Frame> protect(m_frame);
351     FrameLoadRequest frameRequest(passedRequest);
352
353     if (m_frame.script().executeIfJavaScriptURL(frameRequest.resourceRequest().url(), frameRequest.shouldReplaceDocumentIfJavaScriptURL()))
354         return;
355
356     if (frameRequest.frameName().isEmpty())
357         frameRequest.setFrameName(m_frame.document()->baseTarget());
358
359     addHTTPOriginIfNeeded(frameRequest.resourceRequest(), outgoingOrigin());
360     m_frame.document()->contentSecurityPolicy()->upgradeInsecureRequestIfNeeded(frameRequest.resourceRequest(), ContentSecurityPolicy::InsecureRequestType::Navigation);
361
362     loadFrameRequest(frameRequest, triggeringEvent, nullptr);
363 }
364
365 void FrameLoader::submitForm(Ref<FormSubmission>&& submission)
366 {
367     ASSERT(submission->method() == FormSubmission::Method::Post || submission->method() == FormSubmission::Method::Get);
368
369     // FIXME: Find a good spot for these.
370     ASSERT(!submission->state().sourceDocument().frame() || submission->state().sourceDocument().frame() == &m_frame);
371
372     if (!m_frame.page())
373         return;
374
375     if (submission->state().sourceDocument().pageCacheState() != Document::NotInPageCache)
376         return;
377
378     if (submission->action().isEmpty())
379         return;
380
381     if (isDocumentSandboxed(m_frame, SandboxForms)) {
382         // FIXME: This message should be moved off the console once a solution to https://bugs.webkit.org/show_bug.cgi?id=103274 exists.
383         m_frame.document()->addConsoleMessage(MessageSource::Security, MessageLevel::Error, "Blocked form submission to '" + submission->action().stringCenterEllipsizedToLength() + "' because the form's frame is sandboxed and the 'allow-forms' permission is not set.");
384         return;
385     }
386
387     if (protocolIsJavaScript(submission->action())) {
388         if (!m_frame.document()->contentSecurityPolicy()->allowFormAction(URL(submission->action())))
389             return;
390         m_isExecutingJavaScriptFormAction = true;
391         Ref<Frame> protect(m_frame);
392         m_frame.script().executeIfJavaScriptURL(submission->action(), DoNotReplaceDocumentIfJavaScriptURL);
393         m_isExecutingJavaScriptFormAction = false;
394         return;
395     }
396
397     Frame* targetFrame = findFrameForNavigation(submission->target(), &submission->state().sourceDocument());
398     if (!targetFrame) {
399         if (!DOMWindow::allowPopUp(&m_frame) && !ScriptController::processingUserGesture())
400             return;
401
402         // FIXME: targetFrame can be null for two distinct reasons:
403         // 1. The frame was not found by name, so we should try opening a new window.
404         // 2. The frame was found, but navigating it was not allowed, e.g. by HTML5 sandbox or by origin checks.
405         // Continuing form submission makes no sense in the latter case.
406         // There is a repeat check after timer fires, so this is not a correctness issue.
407
408         targetFrame = &m_frame;
409     } else
410         submission->clearTarget();
411
412     if (!targetFrame->page())
413         return;
414
415     // FIXME: We'd like to remove this altogether and fix the multiple form submission issue another way.
416
417     // We do not want to submit more than one form from the same page, nor do we want to submit a single
418     // form more than once. This flag prevents these from happening; not sure how other browsers prevent this.
419     // The flag is reset in each time we start dispatching a new mouse or key down event, and
420     // also in setView since this part may get reused for a page from the back/forward cache.
421     // The form multi-submit logic here is only needed when we are submitting a form that affects this frame.
422
423     // FIXME: Frame targeting is only one of the ways the submission could end up doing something other
424     // than replacing this frame's content, so this check is flawed. On the other hand, the check is hardly
425     // needed any more now that we reset m_submittedFormURL on each mouse or key down event.
426
427     if (m_frame.tree().isDescendantOf(targetFrame)) {
428         if (m_submittedFormURL == submission->requestURL())
429             return;
430         m_submittedFormURL = submission->requestURL();
431     }
432
433     submission->data().generateFiles(m_frame.document());
434     submission->setReferrer(outgoingReferrer());
435     submission->setOrigin(outgoingOrigin());
436
437     targetFrame->navigationScheduler().scheduleFormSubmission(WTFMove(submission));
438 }
439
440 void FrameLoader::stopLoading(UnloadEventPolicy unloadEventPolicy)
441 {
442     if (m_frame.document() && m_frame.document()->parser())
443         m_frame.document()->parser()->stopParsing();
444
445     if (unloadEventPolicy != UnloadEventPolicyNone)
446         dispatchUnloadEvents(unloadEventPolicy);
447
448     m_isComplete = true; // to avoid calling completed() in finishedParsing()
449     m_didCallImplicitClose = true; // don't want that one either
450
451     if (m_frame.document() && m_frame.document()->parsing()) {
452         finishedParsing();
453         m_frame.document()->setParsing(false);
454     }
455
456     if (auto* document = m_frame.document()) {
457         // FIXME: HTML5 doesn't tell us to set the state to complete when aborting, but we do anyway to match legacy behavior.
458         // http://www.w3.org/Bugs/Public/show_bug.cgi?id=10537
459         document->setReadyState(Document::Complete);
460
461         // FIXME: Should the DatabaseManager watch for something like ActiveDOMObject::stop() rather than being special-cased here?
462         DatabaseManager::singleton().stopDatabases(*document, nullptr);
463     }
464
465     // FIXME: This will cancel redirection timer, which really needs to be restarted when restoring the frame from b/f cache.
466     m_frame.navigationScheduler().cancel();
467 }
468
469 void FrameLoader::stop()
470 {
471     // http://bugs.webkit.org/show_bug.cgi?id=10854
472     // The frame's last ref may be removed and it will be deleted by checkCompleted().
473     Ref<Frame> protect(m_frame);
474
475     if (DocumentParser* parser = m_frame.document()->parser()) {
476         parser->stopParsing();
477         parser->finish();
478     }
479     
480     icon().stopLoader();
481 }
482
483 void FrameLoader::willTransitionToCommitted()
484 {
485     // This function is called when a frame is still fully in place (not cached, not detached), but will be replaced.
486
487     if (m_frame.editor().hasComposition()) {
488         // The text was already present in DOM, so it's better to confirm than to cancel the composition.
489         m_frame.editor().confirmComposition();
490         if (EditorClient* editorClient = m_frame.editor().client()) {
491             editorClient->respondToChangedSelection(&m_frame);
492             editorClient->discardedComposition(&m_frame);
493         }
494     }
495 }
496
497 bool FrameLoader::closeURL()
498 {
499     history().saveDocumentState();
500
501     Document* currentDocument = m_frame.document();
502     UnloadEventPolicy unloadEventPolicy;
503     if (m_frame.page() && m_frame.page()->chrome().client().isSVGImageChromeClient()) {
504         // If this is the SVGDocument of an SVGImage, no need to dispatch events or recalcStyle.
505         unloadEventPolicy = UnloadEventPolicyNone;
506     } else {
507         // Should only send the pagehide event here if the current document exists and has not been placed in the page cache.
508         unloadEventPolicy = currentDocument && currentDocument->pageCacheState() == Document::NotInPageCache ? UnloadEventPolicyUnloadAndPageHide : UnloadEventPolicyUnloadOnly;
509     }
510
511     stopLoading(unloadEventPolicy);
512     
513     m_frame.editor().clearUndoRedoOperations();
514     return true;
515 }
516
517 bool FrameLoader::didOpenURL()
518 {
519     if (m_frame.navigationScheduler().redirectScheduledDuringLoad()) {
520         // A redirect was scheduled before the document was created.
521         // This can happen when one frame changes another frame's location.
522         return false;
523     }
524
525     m_frame.navigationScheduler().cancel();
526     m_frame.editor().clearLastEditCommand();
527
528     m_isComplete = false;
529     m_didCallImplicitClose = false;
530
531     // If we are still in the process of initializing an empty document then
532     // its frame is not in a consistent state for rendering, so avoid setJSStatusBarText
533     // since it may cause clients to attempt to render the frame.
534     if (!m_stateMachine.creatingInitialEmptyDocument()) {
535         DOMWindow* window = m_frame.document()->domWindow();
536         window->setStatus(String());
537         window->setDefaultStatus(String());
538     }
539
540     started();
541
542     return true;
543 }
544
545 void FrameLoader::didExplicitOpen()
546 {
547     m_isComplete = false;
548     m_didCallImplicitClose = false;
549
550     // Calling document.open counts as committing the first real document load.
551     if (!m_stateMachine.committedFirstRealDocumentLoad())
552         m_stateMachine.advanceTo(FrameLoaderStateMachine::DisplayingInitialEmptyDocumentPostCommit);
553     
554     // Prevent window.open(url) -- eg window.open("about:blank") -- from blowing away results
555     // from a subsequent window.document.open / window.document.write call. 
556     // Canceling redirection here works for all cases because document.open 
557     // implicitly precedes document.write.
558     m_frame.navigationScheduler().cancel();
559 }
560
561
562 void FrameLoader::cancelAndClear()
563 {
564     m_frame.navigationScheduler().cancel();
565
566     if (!m_isComplete)
567         closeURL();
568
569     clear(m_frame.document(), false);
570     m_frame.script().updatePlatformScriptObjects();
571 }
572
573 static inline bool shouldClearWindowName(const Frame& frame, const Document& newDocument)
574 {
575     if (!frame.isMainFrame())
576         return false;
577
578     if (frame.loader().opener())
579         return false;
580
581     return !newDocument.securityOrigin()->isSameOriginAs(frame.document()->securityOrigin());
582 }
583
584 void FrameLoader::clear(Document* newDocument, bool clearWindowProperties, bool clearScriptObjects, bool clearFrameView)
585 {
586     m_frame.editor().clear();
587
588     if (!m_needsClear)
589         return;
590     m_needsClear = false;
591     
592     if (m_frame.document()->pageCacheState() != Document::InPageCache) {
593         m_frame.document()->cancelParsing();
594         m_frame.document()->stopActiveDOMObjects();
595         bool hadLivingRenderTree = m_frame.document()->hasLivingRenderTree();
596         m_frame.document()->prepareForDestruction();
597         if (hadLivingRenderTree)
598             m_frame.document()->removeFocusedNodeOfSubtree(*m_frame.document());
599     }
600
601     // Do this after detaching the document so that the unload event works.
602     if (clearWindowProperties) {
603         InspectorInstrumentation::frameWindowDiscarded(m_frame, m_frame.document()->domWindow());
604         m_frame.document()->domWindow()->resetUnlessSuspendedForDocumentSuspension();
605         m_frame.script().clearWindowShellsNotMatchingDOMWindow(newDocument->domWindow(), m_frame.document()->pageCacheState() == Document::AboutToEnterPageCache);
606
607         if (shouldClearWindowName(m_frame, *newDocument))
608             m_frame.tree().setName(nullAtom);
609     }
610
611     m_frame.selection().prepareForDestruction();
612
613     // We may call this code during object destruction, so need to make sure eventHandler is present.
614     if (auto eventHandler = m_frame.eventHandlerPtr())
615         eventHandler->clear();
616
617     if (clearFrameView && m_frame.view())
618         m_frame.view()->clear();
619
620     // Do not drop the document before the ScriptController and view are cleared
621     // as some destructors might still try to access the document.
622     m_frame.setDocument(nullptr);
623
624     subframeLoader().clear();
625
626     if (clearWindowProperties)
627         m_frame.script().setDOMWindowForWindowShell(newDocument->domWindow());
628
629     if (clearScriptObjects)
630         m_frame.script().clearScriptObjects();
631
632     m_frame.script().enableEval();
633
634     m_frame.navigationScheduler().clear();
635
636     m_checkTimer.stop();
637     m_shouldCallCheckCompleted = false;
638     m_shouldCallCheckLoadComplete = false;
639
640     if (m_stateMachine.isDisplayingInitialEmptyDocument() && m_stateMachine.committedFirstRealDocumentLoad())
641         m_stateMachine.advanceTo(FrameLoaderStateMachine::CommittedFirstRealLoad);
642 }
643
644 void FrameLoader::receivedFirstData()
645 {
646     dispatchDidCommitLoad(std::nullopt);
647     dispatchDidClearWindowObjectsInAllWorlds();
648     dispatchGlobalObjectAvailableInAllWorlds();
649
650     if (m_documentLoader) {
651         auto& title = m_documentLoader->title();
652         if (!title.string.isNull())
653             m_client.dispatchDidReceiveTitle(title);
654     }
655
656     if (!m_documentLoader)
657         return;
658
659     ASSERT(m_frame.document());
660     auto& document = *m_frame.document();
661
662     double delay;
663     String urlString;
664     if (!parseHTTPRefresh(m_documentLoader->response().httpHeaderField(HTTPHeaderName::Refresh), delay, urlString))
665         return;
666     auto completedURL = urlString.isEmpty() ? document.url() : document.completeURL(urlString);
667     if (!protocolIsJavaScript(completedURL))
668         m_frame.navigationScheduler().scheduleRedirect(document, delay, completedURL);
669     else {
670         auto message = "Refused to refresh " + document.url().stringCenterEllipsizedToLength() + " to a javascript: URL";
671         m_frame.document()->addConsoleMessage(MessageSource::Security, MessageLevel::Error, message);
672     }
673 }
674
675 void FrameLoader::setOutgoingReferrer(const URL& url)
676 {
677     m_outgoingReferrer = url.strippedForUseAsReferrer();
678 }
679
680 void FrameLoader::didBeginDocument(bool dispatch)
681 {
682     m_needsClear = true;
683     m_isComplete = false;
684     m_didCallImplicitClose = false;
685     m_frame.document()->setReadyState(Document::Loading);
686
687     if (m_pendingStateObject) {
688         m_frame.document()->statePopped(*m_pendingStateObject);
689         m_pendingStateObject = nullptr;
690     }
691
692     if (dispatch)
693         dispatchDidClearWindowObjectsInAllWorlds();
694
695     updateFirstPartyForCookies();
696     m_frame.document()->initContentSecurityPolicy();
697
698     const Settings& settings = m_frame.settings();
699     m_frame.document()->cachedResourceLoader().setImagesEnabled(settings.areImagesEnabled());
700     m_frame.document()->cachedResourceLoader().setAutoLoadImages(settings.loadsImagesAutomatically());
701
702     if (m_documentLoader) {
703         String dnsPrefetchControl = m_documentLoader->response().httpHeaderField(HTTPHeaderName::XDNSPrefetchControl);
704         if (!dnsPrefetchControl.isEmpty())
705             m_frame.document()->parseDNSPrefetchControlHeader(dnsPrefetchControl);
706
707         m_frame.document()->contentSecurityPolicy()->didReceiveHeaders(ContentSecurityPolicyResponseHeaders(m_documentLoader->response()), ContentSecurityPolicy::ReportParsingErrors::No);
708
709         String headerContentLanguage = m_documentLoader->response().httpHeaderField(HTTPHeaderName::ContentLanguage);
710         if (!headerContentLanguage.isEmpty()) {
711             size_t commaIndex = headerContentLanguage.find(',');
712             headerContentLanguage.truncate(commaIndex); // notFound == -1 == don't truncate
713             headerContentLanguage = headerContentLanguage.stripWhiteSpace(isHTMLSpace);
714             if (!headerContentLanguage.isEmpty())
715                 m_frame.document()->setContentLanguage(headerContentLanguage);
716         }
717     }
718
719     history().restoreDocumentState();
720 }
721
722 void FrameLoader::finishedParsing()
723 {
724     m_frame.injectUserScripts(InjectAtDocumentEnd);
725
726     if (m_stateMachine.creatingInitialEmptyDocument())
727         return;
728
729     // This can be called from the Frame's destructor, in which case we shouldn't protect ourselves
730     // because doing so will cause us to re-enter the destructor when protector goes out of scope.
731     // Null-checking the FrameView indicates whether or not we're in the destructor.
732     RefPtr<Frame> protector = m_frame.view() ? &m_frame : 0;
733
734     m_client.dispatchDidFinishDocumentLoad();
735
736     scrollToFragmentWithParentBoundary(m_frame.document()->url());
737
738     checkCompleted();
739
740     if (!m_frame.view())
741         return; // We are being destroyed by something checkCompleted called.
742
743     // Check if the scrollbars are really needed for the content.
744     // If not, remove them, relayout, and repaint.
745     m_frame.view()->restoreScrollbar();
746 }
747
748 void FrameLoader::loadDone()
749 {
750     checkCompleted();
751 }
752
753 bool FrameLoader::allChildrenAreComplete() const
754 {
755     for (Frame* child = m_frame.tree().firstChild(); child; child = child->tree().nextSibling()) {
756         if (!child->loader().m_isComplete)
757             return false;
758     }
759     return true;
760 }
761
762 bool FrameLoader::allAncestorsAreComplete() const
763 {
764     for (Frame* ancestor = &m_frame; ancestor; ancestor = ancestor->tree().parent()) {
765         if (!ancestor->loader().m_isComplete)
766             return false;
767     }
768     return true;
769 }
770
771 void FrameLoader::checkCompleted()
772 {
773     m_shouldCallCheckCompleted = false;
774
775     // Have we completed before?
776     if (m_isComplete)
777         return;
778
779     // Are we still parsing?
780     if (m_frame.document()->parsing())
781         return;
782
783     // Still waiting for images/scripts?
784     if (m_frame.document()->cachedResourceLoader().requestCount())
785         return;
786
787     // Still waiting for elements that don't go through a FrameLoader?
788     if (m_frame.document()->isDelayingLoadEvent())
789         return;
790
791     // Any frame that hasn't completed yet?
792     if (!allChildrenAreComplete())
793         return;
794
795     // Important not to protect earlier in this function, because earlier parts
796     // of this function can be called in the frame's destructor, and it's not legal
797     // to ref an object while it's being destroyed.
798     Ref<Frame> protect(m_frame);
799
800     // OK, completed.
801     m_isComplete = true;
802     m_requestedHistoryItem = nullptr;
803     m_frame.document()->setReadyState(Document::Complete);
804
805 #if PLATFORM(IOS)
806     if (m_frame.document()->url().isEmpty()) {
807         // We need to update the document URL of a PDF document to be non-empty so that both back/forward history navigation
808         // between PDF pages and fragment navigation works. See <rdar://problem/9544769> for more details.
809         // FIXME: Is there a better place for this code, say DocumentLoader? Also, we should explicitly only update the URL
810         // of the document when it's a PDFDocument object instead of assuming that a Document object with an empty URL is a PDFDocument.
811         // FIXME: This code is incorrect for a synthesized document (which also has an empty URL). The URL for a synthesized
812         // document should be the URL specified to FrameLoader::initForSynthesizedDocument().
813         m_frame.document()->setURL(activeDocumentLoader()->documentURL());
814     }
815 #endif
816
817     checkCallImplicitClose(); // if we didn't do it before
818
819     m_frame.navigationScheduler().startTimer();
820
821     completed();
822     if (m_frame.page())
823         checkLoadComplete();
824 }
825
826 void FrameLoader::checkTimerFired()
827 {
828     Ref<Frame> protect(m_frame);
829
830     if (Page* page = m_frame.page()) {
831         if (page->defersLoading())
832             return;
833     }
834     if (m_shouldCallCheckCompleted)
835         checkCompleted();
836     if (m_shouldCallCheckLoadComplete)
837         checkLoadComplete();
838 }
839
840 void FrameLoader::startCheckCompleteTimer()
841 {
842     if (!(m_shouldCallCheckCompleted || m_shouldCallCheckLoadComplete))
843         return;
844     if (m_checkTimer.isActive())
845         return;
846     m_checkTimer.startOneShot(0);
847 }
848
849 void FrameLoader::scheduleCheckCompleted()
850 {
851     m_shouldCallCheckCompleted = true;
852     startCheckCompleteTimer();
853 }
854
855 void FrameLoader::scheduleCheckLoadComplete()
856 {
857     m_shouldCallCheckLoadComplete = true;
858     startCheckCompleteTimer();
859 }
860
861 void FrameLoader::checkCallImplicitClose()
862 {
863     if (m_didCallImplicitClose || m_frame.document()->parsing() || m_frame.document()->isDelayingLoadEvent())
864         return;
865
866     if (!allChildrenAreComplete())
867         return; // still got a frame running -> too early
868
869     m_didCallImplicitClose = true;
870     m_wasUnloadEventEmitted = false;
871     m_frame.document()->implicitClose();
872 }
873
874 void FrameLoader::loadURLIntoChildFrame(const URL& url, const String& referer, Frame* childFrame)
875 {
876     ASSERT(childFrame);
877
878 #if ENABLE(WEB_ARCHIVE) || ENABLE(MHTML)
879     if (auto activeLoader = activeDocumentLoader()) {
880         if (auto subframeArchive = activeLoader->popArchiveForSubframe(childFrame->tree().uniqueName(), url)) {
881             childFrame->loader().loadArchive(RefPtr<Archive> { subframeArchive }.releaseNonNull());
882             return;
883         }
884     }
885 #endif
886
887     // If we're moving in the back/forward list, we might want to replace the content
888     // of this child frame with whatever was there at that point.
889     auto* parentItem = history().currentItem();
890     if (parentItem && parentItem->children().size() && isBackForwardLoadType(loadType()) && !m_frame.document()->loadEventFinished()) {
891         if (auto* childItem = parentItem->childItemWithTarget(childFrame->tree().uniqueName())) {
892             childFrame->loader().m_requestedHistoryItem = childItem;
893             childFrame->loader().loadDifferentDocumentItem(*childItem, loadType(), MayAttemptCacheOnlyLoadForFormSubmissionItem);
894             return;
895         }
896     }
897
898     FrameLoadRequest frameLoadRequest(m_frame.document()->securityOrigin(), ResourceRequest(url), "_self", LockHistory::No, LockBackForwardList::Yes, ShouldSendReferrer::MaybeSendReferrer, AllowNavigationToInvalidURL::Yes, NewFrameOpenerPolicy::Suppress, ReplaceDocumentIfJavaScriptURL, ShouldOpenExternalURLsPolicy::ShouldNotAllow);
899     childFrame->loader().loadURL(frameLoadRequest, referer, FrameLoadType::RedirectWithLockedBackForwardList, 0, 0);
900 }
901
902 #if ENABLE(WEB_ARCHIVE) || ENABLE(MHTML)
903
904 void FrameLoader::loadArchive(Ref<Archive>&& archive)
905 {
906     ArchiveResource* mainResource = archive->mainResource();
907     ASSERT(mainResource);
908     if (!mainResource)
909         return;
910
911     ResourceResponse response(URL(), mainResource->mimeType(), mainResource->data().size(), mainResource->textEncoding());
912     SubstituteData substituteData(&mainResource->data(), URL(), response, SubstituteData::SessionHistoryVisibility::Hidden);
913     
914     ResourceRequest request(mainResource->url());
915
916     auto documentLoader = m_client.createDocumentLoader(request, substituteData);
917     documentLoader->setArchive(WTFMove(archive));
918     load(documentLoader.ptr());
919 }
920
921 #endif // ENABLE(WEB_ARCHIVE) || ENABLE(MHTML)
922
923 String FrameLoader::outgoingReferrer() const
924 {
925     // See http://www.whatwg.org/specs/web-apps/current-work/#fetching-resources
926     // for why we walk the parent chain for srcdoc documents.
927     Frame* frame = &m_frame;
928     while (frame && frame->document()->isSrcdocDocument()) {
929         frame = frame->tree().parent();
930         // Srcdoc documents cannot be top-level documents, by definition,
931         // because they need to be contained in iframes with the srcdoc.
932         ASSERT(frame);
933     }
934     if (!frame)
935         return emptyString();
936     return frame->loader().m_outgoingReferrer;
937 }
938
939 String FrameLoader::outgoingOrigin() const
940 {
941     return m_frame.document()->securityOrigin()->toString();
942 }
943
944 bool FrameLoader::checkIfFormActionAllowedByCSP(const URL& url, bool didReceiveRedirectResponse) const
945 {
946     if (m_submittedFormURL.isEmpty())
947         return true;
948
949     auto redirectResponseReceived = didReceiveRedirectResponse ? ContentSecurityPolicy::RedirectResponseReceived::Yes : ContentSecurityPolicy::RedirectResponseReceived::No;
950     return m_frame.document()->contentSecurityPolicy()->allowFormAction(url, redirectResponseReceived);
951 }
952
953 Frame* FrameLoader::opener()
954 {
955     return m_opener;
956 }
957
958 void FrameLoader::setOpener(Frame* opener)
959 {
960     if (m_opener && !opener)
961         m_client.didDisownOpener();
962
963     if (m_opener)
964         m_opener->loader().m_openedFrames.remove(&m_frame);
965     if (opener)
966         opener->loader().m_openedFrames.add(&m_frame);
967     m_opener = opener;
968
969     if (m_frame.document())
970         m_frame.document()->initSecurityContext();
971 }
972
973 // FIXME: This does not belong in FrameLoader!
974 void FrameLoader::handleFallbackContent()
975 {
976     HTMLFrameOwnerElement* owner = m_frame.ownerElement();
977     if (!is<HTMLObjectElement>(owner))
978         return;
979     downcast<HTMLObjectElement>(*owner).renderFallbackContent();
980 }
981
982 void FrameLoader::provisionalLoadStarted()
983 {
984     if (m_stateMachine.firstLayoutDone())
985         m_stateMachine.advanceTo(FrameLoaderStateMachine::CommittedFirstRealLoad);
986     m_frame.navigationScheduler().cancel(true);
987     m_client.provisionalLoadStarted();
988
989     if (m_frame.isMainFrame()) {
990         if (auto* page = m_frame.page())
991             page->didStartProvisionalLoad();
992     }
993 }
994
995 void FrameLoader::resetMultipleFormSubmissionProtection()
996 {
997     m_submittedFormURL = URL();
998 }
999
1000 void FrameLoader::updateFirstPartyForCookies()
1001 {
1002     if (m_frame.tree().parent())
1003         setFirstPartyForCookies(m_frame.tree().parent()->document()->firstPartyForCookies());
1004     else
1005         setFirstPartyForCookies(m_frame.document()->url());
1006 }
1007
1008 void FrameLoader::setFirstPartyForCookies(const URL& url)
1009 {
1010     for (Frame* frame = &m_frame; frame; frame = frame->tree().traverseNext(&m_frame))
1011         frame->document()->setFirstPartyForCookies(url);
1012 }
1013
1014 // This does the same kind of work that didOpenURL does, except it relies on the fact
1015 // that a higher level already checked that the URLs match and the scrolling is the right thing to do.
1016 void FrameLoader::loadInSameDocument(const URL& url, SerializedScriptValue* stateObject, bool isNewNavigation)
1017 {
1018     // If we have a state object, we cannot also be a new navigation.
1019     ASSERT(!stateObject || (stateObject && !isNewNavigation));
1020
1021     // Update the data source's request with the new URL to fake the URL change
1022     URL oldURL = m_frame.document()->url();
1023     m_frame.document()->setURL(url);
1024     setOutgoingReferrer(url);
1025     documentLoader()->replaceRequestURLForSameDocumentNavigation(url);
1026     if (isNewNavigation && !shouldTreatURLAsSameAsCurrent(url) && !stateObject) {
1027         // NB: must happen after replaceRequestURLForSameDocumentNavigation(), since we add 
1028         // based on the current request. Must also happen before we openURL and displace the 
1029         // scroll position, since adding the BF item will save away scroll state.
1030         
1031         // NB2: If we were loading a long, slow doc, and the user fragment navigated before
1032         // it was done, currItem is now set the that slow doc, and prevItem is whatever was
1033         // before it.  Adding the b/f item will bump the slow doc down to prevItem, even
1034         // though its load is not yet done.  I think this all works out OK, for one because
1035         // we have already saved away the scroll and doc state for the long slow load,
1036         // but it's not an obvious case.
1037
1038         history().updateBackForwardListForFragmentScroll();
1039     }
1040     
1041     bool hashChange = equalIgnoringFragmentIdentifier(url, oldURL) && url.fragmentIdentifier() != oldURL.fragmentIdentifier();
1042     
1043     history().updateForSameDocumentNavigation();
1044
1045     // If we were in the autoscroll/panScroll mode we want to stop it before following the link to the anchor
1046     if (hashChange)
1047         m_frame.eventHandler().stopAutoscrollTimer();
1048     
1049     // It's important to model this as a load that starts and immediately finishes.
1050     // Otherwise, the parent frame may think we never finished loading.
1051     started();
1052
1053     // We need to scroll to the fragment whether or not a hash change occurred, since
1054     // the user might have scrolled since the previous navigation.
1055     scrollToFragmentWithParentBoundary(url);
1056     
1057     m_isComplete = false;
1058     checkCompleted();
1059
1060     if (isNewNavigation) {
1061         // This will clear previousItem from the rest of the frame tree that didn't
1062         // doing any loading. We need to make a pass on this now, since for fragment
1063         // navigation we'll not go through a real load and reach Completed state.
1064         checkLoadComplete();
1065     }
1066
1067     m_client.dispatchDidNavigateWithinPage();
1068
1069     m_frame.document()->statePopped(stateObject ? Ref<SerializedScriptValue> { *stateObject } : SerializedScriptValue::nullValue());
1070     m_client.dispatchDidPopStateWithinPage();
1071     
1072     if (hashChange) {
1073         m_frame.document()->enqueueHashchangeEvent(oldURL, url);
1074         m_client.dispatchDidChangeLocationWithinPage();
1075     }
1076     
1077     // FrameLoaderClient::didFinishLoad() tells the internal load delegate the load finished with no error
1078     m_client.didFinishLoad();
1079 }
1080
1081 bool FrameLoader::isComplete() const
1082 {
1083     return m_isComplete;
1084 }
1085
1086 void FrameLoader::completed()
1087 {
1088     Ref<Frame> protect(m_frame);
1089
1090     for (Frame* descendant = m_frame.tree().traverseNext(&m_frame); descendant; descendant = descendant->tree().traverseNext(&m_frame))
1091         descendant->navigationScheduler().startTimer();
1092
1093     if (Frame* parent = m_frame.tree().parent())
1094         parent->loader().checkCompleted();
1095
1096     if (m_frame.view())
1097         m_frame.view()->maintainScrollPositionAtAnchor(nullptr);
1098 }
1099
1100 void FrameLoader::started()
1101 {
1102     for (Frame* frame = &m_frame; frame; frame = frame->tree().parent())
1103         frame->loader().m_isComplete = false;
1104 }
1105
1106 void FrameLoader::prepareForLoadStart()
1107 {
1108     RELEASE_LOG_IF_ALLOWED("prepareForLoadStart: Starting frame load (frame = %p, main = %d)", &m_frame, m_frame.isMainFrame());
1109
1110     m_progressTracker->progressStarted();
1111     m_client.dispatchDidStartProvisionalLoad();
1112
1113     if (AXObjectCache::accessibilityEnabled()) {
1114         if (AXObjectCache* cache = m_frame.document()->existingAXObjectCache()) {
1115             AXObjectCache::AXLoadingEvent loadingEvent = loadType() == FrameLoadType::Reload ? AXObjectCache::AXLoadingReloaded : AXObjectCache::AXLoadingStarted;
1116             cache->frameLoadingEventNotification(&m_frame, loadingEvent);
1117         }
1118     }
1119 }
1120
1121 void FrameLoader::setupForReplace()
1122 {
1123     m_client.revertToProvisionalState(m_documentLoader.get());
1124     setState(FrameStateProvisional);
1125     m_provisionalDocumentLoader = m_documentLoader;
1126     m_documentLoader = nullptr;
1127     detachChildren();
1128 }
1129
1130 void FrameLoader::loadFrameRequest(const FrameLoadRequest& request, Event* event, FormState* formState)
1131 {
1132     ASSERT_WITH_SECURITY_IMPLICATION(!event || !event->target() || !event->target()->toNode()
1133         || event->target()->toNode()->document().pageCacheState() == Document::NotInPageCache);
1134
1135     // Protect frame from getting blown away inside dispatchBeforeLoadEvent in loadWithDocumentLoader.
1136     auto protectFrame = makeRef(m_frame);
1137
1138     URL url = request.resourceRequest().url();
1139
1140     ASSERT(m_frame.document());
1141     if (!request.requester()->canDisplay(url)) {
1142         reportLocalLoadFailed(&m_frame, url.stringCenterEllipsizedToLength());
1143         return;
1144     }
1145
1146     String argsReferrer = request.resourceRequest().httpReferrer();
1147     if (argsReferrer.isEmpty())
1148         argsReferrer = outgoingReferrer();
1149
1150     String referrer = SecurityPolicy::generateReferrerHeader(m_frame.document()->referrerPolicy(), url, argsReferrer);
1151     if (request.shouldSendReferrer() == NeverSendReferrer)
1152         referrer = String();
1153
1154     FrameLoadType loadType;
1155     if (request.resourceRequest().cachePolicy() == ReloadIgnoringCacheData)
1156         loadType = FrameLoadType::Reload;
1157     else if (request.lockBackForwardList() == LockBackForwardList::Yes)
1158         loadType = FrameLoadType::RedirectWithLockedBackForwardList;
1159     else
1160         loadType = FrameLoadType::Standard;
1161
1162     if (request.resourceRequest().httpMethod() == "POST")
1163         loadPostRequest(request, referrer, loadType, event, formState);
1164     else
1165         loadURL(request, referrer, loadType, event, formState);
1166
1167     // FIXME: It's possible this targetFrame will not be the same frame that was targeted by the actual
1168     // load if frame names have changed.
1169     Frame* sourceFrame = formState ? formState->sourceDocument().frame() : &m_frame;
1170     if (!sourceFrame)
1171         sourceFrame = &m_frame;
1172     Frame* targetFrame = sourceFrame->loader().findFrameForNavigation(request.frameName());
1173     if (targetFrame && targetFrame != sourceFrame) {
1174         if (Page* page = targetFrame->page())
1175             page->chrome().focus();
1176     }
1177 }
1178
1179 static ShouldOpenExternalURLsPolicy shouldOpenExternalURLsPolicyToApply(Frame& sourceFrame, ShouldOpenExternalURLsPolicy propagatedPolicy)
1180 {
1181     if (!sourceFrame.isMainFrame())
1182         return ShouldOpenExternalURLsPolicy::ShouldNotAllow;
1183     if (ScriptController::processingUserGesture())
1184         return ShouldOpenExternalURLsPolicy::ShouldAllow;
1185     return propagatedPolicy;
1186 }
1187
1188 void FrameLoader::loadURL(const FrameLoadRequest& frameLoadRequest, const String& referrer, FrameLoadType newLoadType, Event* event, FormState* formState)
1189 {
1190     if (m_inStopAllLoaders)
1191         return;
1192
1193     Ref<Frame> protect(m_frame);
1194
1195     String frameName = frameLoadRequest.frameName();
1196     AllowNavigationToInvalidURL allowNavigationToInvalidURL = frameLoadRequest.allowNavigationToInvalidURL();
1197     NewFrameOpenerPolicy openerPolicy = frameLoadRequest.newFrameOpenerPolicy();
1198     LockHistory lockHistory = frameLoadRequest.lockHistory();
1199     bool isFormSubmission = formState;
1200
1201     const URL& newURL = frameLoadRequest.resourceRequest().url();
1202     ResourceRequest request(newURL);
1203     if (!referrer.isEmpty()) {
1204         request.setHTTPReferrer(referrer);
1205         RefPtr<SecurityOrigin> referrerOrigin = SecurityOrigin::createFromString(referrer);
1206         addHTTPOriginIfNeeded(request, referrerOrigin->toString());
1207     }
1208 #if ENABLE(CACHE_PARTITIONING)
1209     if (&m_frame.tree().top() != &m_frame)
1210         request.setDomainForCachePartition(m_frame.tree().top().document()->securityOrigin()->domainForCachePartition());
1211 #endif
1212     addExtraFieldsToRequest(request, newLoadType, true);
1213     if (newLoadType == FrameLoadType::Reload || newLoadType == FrameLoadType::ReloadFromOrigin)
1214         request.setCachePolicy(ReloadIgnoringCacheData);
1215
1216     ASSERT(newLoadType != FrameLoadType::Same);
1217
1218     // The search for a target frame is done earlier in the case of form submission.
1219     Frame* targetFrame = isFormSubmission ? 0 : findFrameForNavigation(frameName);
1220     if (targetFrame && targetFrame != &m_frame) {
1221         FrameLoadRequest newFrameLoadRequest(frameLoadRequest);
1222         newFrameLoadRequest.setFrameName("_self");
1223         targetFrame->loader().loadURL(newFrameLoadRequest, referrer, newLoadType, event, formState);
1224         return;
1225     }
1226
1227     if (m_pageDismissalEventBeingDispatched != PageDismissalType::None)
1228         return;
1229
1230     NavigationAction action(request, newLoadType, isFormSubmission, event, frameLoadRequest.shouldOpenExternalURLsPolicy(), frameLoadRequest.downloadAttribute());
1231
1232     if (!targetFrame && !frameName.isEmpty()) {
1233         action = action.copyWithShouldOpenExternalURLsPolicy(shouldOpenExternalURLsPolicyToApply(m_frame, frameLoadRequest.shouldOpenExternalURLsPolicy()));
1234         policyChecker().checkNewWindowPolicy(action, request, formState, frameName, [this, allowNavigationToInvalidURL, openerPolicy] (const ResourceRequest& request, FormState* formState, const String& frameName, const NavigationAction& action, bool shouldContinue) {
1235             continueLoadAfterNewWindowPolicy(request, formState, frameName, action, shouldContinue, allowNavigationToInvalidURL, openerPolicy);
1236         });
1237         return;
1238     }
1239
1240     RefPtr<DocumentLoader> oldDocumentLoader = m_documentLoader;
1241
1242     bool sameURL = shouldTreatURLAsSameAsCurrent(newURL);
1243     const String& httpMethod = request.httpMethod();
1244     
1245     // Make sure to do scroll to fragment processing even if the URL is
1246     // exactly the same so pages with '#' links and DHTML side effects
1247     // work properly.
1248     if (shouldPerformFragmentNavigation(isFormSubmission, httpMethod, newLoadType, newURL)) {
1249         oldDocumentLoader->setTriggeringAction(action);
1250         oldDocumentLoader->setLastCheckedRequest(ResourceRequest());
1251         policyChecker().stopCheck();
1252         policyChecker().setLoadType(newLoadType);
1253         policyChecker().checkNavigationPolicy(request, false /* didReceiveRedirectResponse */, oldDocumentLoader.get(), formState, [this] (const ResourceRequest& request, FormState*, bool shouldContinue) {
1254             continueFragmentScrollAfterNavigationPolicy(request, shouldContinue);
1255         });
1256         return;
1257     }
1258
1259     // must grab this now, since this load may stop the previous load and clear this flag
1260     bool isRedirect = m_quickRedirectComing;
1261     loadWithNavigationAction(request, action, lockHistory, newLoadType, formState, allowNavigationToInvalidURL);
1262     if (isRedirect) {
1263         m_quickRedirectComing = false;
1264         if (m_provisionalDocumentLoader)
1265             m_provisionalDocumentLoader->setIsClientRedirect(true);
1266     } else if (sameURL && newLoadType != FrameLoadType::Reload && newLoadType != FrameLoadType::ReloadFromOrigin) {
1267         // Example of this case are sites that reload the same URL with a different cookie
1268         // driving the generated content, or a master frame with links that drive a target
1269         // frame, where the user has clicked on the same link repeatedly.
1270         m_loadType = FrameLoadType::Same;
1271     }
1272 }
1273
1274 SubstituteData FrameLoader::defaultSubstituteDataForURL(const URL& url)
1275 {
1276     if (!shouldTreatURLAsSrcdocDocument(url))
1277         return SubstituteData();
1278     String srcdoc = m_frame.ownerElement()->attributeWithoutSynchronization(srcdocAttr);
1279     ASSERT(!srcdoc.isNull());
1280     CString encodedSrcdoc = srcdoc.utf8();
1281
1282     ResourceResponse response(URL(), ASCIILiteral("text/html"), encodedSrcdoc.length(), ASCIILiteral("UTF-8"));
1283     return SubstituteData(SharedBuffer::create(encodedSrcdoc.data(), encodedSrcdoc.length()), URL(), response, SubstituteData::SessionHistoryVisibility::Hidden);
1284 }
1285
1286 void FrameLoader::load(const FrameLoadRequest& passedRequest)
1287 {
1288     FrameLoadRequest request(passedRequest);
1289
1290     if (m_inStopAllLoaders)
1291         return;
1292
1293     if (!request.frameName().isEmpty()) {
1294         Frame* frame = findFrameForNavigation(request.frameName());
1295         if (frame) {
1296             request.setShouldCheckNewWindowPolicy(false);
1297             if (&frame->loader() != this) {
1298                 frame->loader().load(request);
1299                 return;
1300             }
1301         }
1302     }
1303
1304     if (request.shouldCheckNewWindowPolicy()) {
1305         NavigationAction action(request.resourceRequest(), NavigationType::Other, passedRequest.shouldOpenExternalURLsPolicy());
1306         policyChecker().checkNewWindowPolicy(action, request.resourceRequest(), nullptr, request.frameName(), [this] (const ResourceRequest& request, FormState* formState, const String& frameName, const NavigationAction& action, bool shouldContinue) {
1307             continueLoadAfterNewWindowPolicy(request, formState, frameName, action, shouldContinue, AllowNavigationToInvalidURL::Yes, NewFrameOpenerPolicy::Suppress);
1308         });
1309
1310         return;
1311     }
1312
1313     if (!request.hasSubstituteData())
1314         request.setSubstituteData(defaultSubstituteDataForURL(request.resourceRequest().url()));
1315
1316     Ref<DocumentLoader> loader = m_client.createDocumentLoader(request.resourceRequest(), request.substituteData());
1317     applyShouldOpenExternalURLsPolicyToNewDocumentLoader(loader, request.shouldOpenExternalURLsPolicy());
1318
1319     load(loader.ptr());
1320 }
1321
1322 void FrameLoader::loadWithNavigationAction(const ResourceRequest& request, const NavigationAction& action, LockHistory lockHistory, FrameLoadType type, FormState* formState, AllowNavigationToInvalidURL allowNavigationToInvalidURL)
1323 {
1324     Ref<DocumentLoader> loader = m_client.createDocumentLoader(request, defaultSubstituteDataForURL(request.url()));
1325     applyShouldOpenExternalURLsPolicyToNewDocumentLoader(loader, action.shouldOpenExternalURLsPolicy());
1326
1327     if (lockHistory == LockHistory::Yes && m_documentLoader)
1328         loader->setClientRedirectSourceForHistory(m_documentLoader->didCreateGlobalHistoryEntry() ? m_documentLoader->urlForHistory().string() : m_documentLoader->clientRedirectSourceForHistory());
1329
1330     loader->setTriggeringAction(action);
1331     if (m_documentLoader)
1332         loader->setOverrideEncoding(m_documentLoader->overrideEncoding());
1333
1334     loadWithDocumentLoader(loader.ptr(), type, formState, allowNavigationToInvalidURL);
1335 }
1336
1337 void FrameLoader::load(DocumentLoader* newDocumentLoader)
1338 {
1339     ResourceRequest& r = newDocumentLoader->request();
1340     addExtraFieldsToMainResourceRequest(r);
1341     FrameLoadType type;
1342
1343     if (shouldTreatURLAsSameAsCurrent(newDocumentLoader->originalRequest().url())) {
1344         r.setCachePolicy(ReloadIgnoringCacheData);
1345         type = FrameLoadType::Same;
1346     } else if (shouldTreatURLAsSameAsCurrent(newDocumentLoader->unreachableURL()) && m_loadType == FrameLoadType::Reload)
1347         type = FrameLoadType::Reload;
1348     else if (m_loadType == FrameLoadType::RedirectWithLockedBackForwardList && !newDocumentLoader->unreachableURL().isEmpty() && newDocumentLoader->substituteData().isValid())
1349         type = FrameLoadType::RedirectWithLockedBackForwardList;
1350     else
1351         type = FrameLoadType::Standard;
1352
1353     if (m_documentLoader)
1354         newDocumentLoader->setOverrideEncoding(m_documentLoader->overrideEncoding());
1355     
1356     // When we loading alternate content for an unreachable URL that we're
1357     // visiting in the history list, we treat it as a reload so the history list 
1358     // is appropriately maintained.
1359     //
1360     // FIXME: This seems like a dangerous overloading of the meaning of "FrameLoadType::Reload" ...
1361     // shouldn't a more explicit type of reload be defined, that means roughly 
1362     // "load without affecting history" ? 
1363     if (shouldReloadToHandleUnreachableURL(newDocumentLoader)) {
1364         // shouldReloadToHandleUnreachableURL() returns true only when the original load type is back-forward.
1365         // In this case we should save the document state now. Otherwise the state can be lost because load type is
1366         // changed and updateForBackForwardNavigation() will not be called when loading is committed.
1367         history().saveDocumentAndScrollState();
1368
1369         ASSERT(type == FrameLoadType::Standard);
1370         type = FrameLoadType::Reload;
1371     }
1372
1373     loadWithDocumentLoader(newDocumentLoader, type, 0, AllowNavigationToInvalidURL::Yes);
1374 }
1375
1376 static void logNavigation(MainFrame& frame, FrameLoadType type)
1377 {
1378     if (!frame.page())
1379         return;
1380
1381     String navigationDescription;
1382     switch (type) {
1383     case FrameLoadType::Standard:
1384         navigationDescription = ASCIILiteral("standard");
1385         break;
1386     case FrameLoadType::Back:
1387         navigationDescription = ASCIILiteral("back");
1388         break;
1389     case FrameLoadType::Forward:
1390         navigationDescription = ASCIILiteral("forward");
1391         break;
1392     case FrameLoadType::IndexedBackForward:
1393         navigationDescription = ASCIILiteral("indexedBackForward");
1394         break;
1395     case FrameLoadType::Reload:
1396         navigationDescription = ASCIILiteral("reload");
1397         break;
1398     case FrameLoadType::Same:
1399         navigationDescription = ASCIILiteral("same");
1400         break;
1401     case FrameLoadType::ReloadFromOrigin:
1402         navigationDescription = ASCIILiteral("reloadFromOrigin");
1403         break;
1404     case FrameLoadType::Replace:
1405     case FrameLoadType::RedirectWithLockedBackForwardList:
1406         // Not logging those for now.
1407         return;
1408     }
1409     frame.page()->diagnosticLoggingClient().logDiagnosticMessage(DiagnosticLoggingKeys::navigationKey(), navigationDescription, ShouldSample::No);
1410 }
1411
1412 void FrameLoader::loadWithDocumentLoader(DocumentLoader* loader, FrameLoadType type, FormState* formState, AllowNavigationToInvalidURL allowNavigationToInvalidURL)
1413 {
1414     // Retain because dispatchBeforeLoadEvent may release the last reference to it.
1415     Ref<Frame> protect(m_frame);
1416
1417     ASSERT(m_client.hasWebView());
1418
1419     // Unfortunately the view must be non-nil, this is ultimately due
1420     // to parser requiring a FrameView.  We should fix this dependency.
1421
1422     ASSERT(m_frame.view());
1423
1424     if (m_pageDismissalEventBeingDispatched != PageDismissalType::None)
1425         return;
1426
1427     if (m_frame.document())
1428         m_previousURL = m_frame.document()->url();
1429
1430     // Log main frame navigation types.
1431     if (m_frame.isMainFrame()) {
1432         logNavigation(static_cast<MainFrame&>(m_frame), type);
1433         static_cast<MainFrame&>(m_frame).performanceLogging().didReachPointOfInterest(PerformanceLogging::MainFrameLoadStarted);
1434     }
1435
1436     policyChecker().setLoadType(type);
1437     bool isFormSubmission = formState;
1438
1439     const URL& newURL = loader->request().url();
1440     const String& httpMethod = loader->request().httpMethod();
1441
1442     if (shouldPerformFragmentNavigation(isFormSubmission, httpMethod, policyChecker().loadType(), newURL)) {
1443         RefPtr<DocumentLoader> oldDocumentLoader = m_documentLoader;
1444         NavigationAction action(loader->request(), policyChecker().loadType(), isFormSubmission);
1445
1446         oldDocumentLoader->setTriggeringAction(action);
1447         oldDocumentLoader->setLastCheckedRequest(ResourceRequest());
1448         policyChecker().stopCheck();
1449         policyChecker().checkNavigationPolicy(loader->request(), false /* didReceiveRedirectResponse */, oldDocumentLoader.get(), formState, [this] (const ResourceRequest& request, FormState*, bool shouldContinue) {
1450             continueFragmentScrollAfterNavigationPolicy(request, shouldContinue);
1451         });
1452         return;
1453     }
1454
1455     if (Frame* parent = m_frame.tree().parent())
1456         loader->setOverrideEncoding(parent->loader().documentLoader()->overrideEncoding());
1457
1458     policyChecker().stopCheck();
1459     setPolicyDocumentLoader(loader);
1460     if (loader->triggeringAction().isEmpty())
1461         loader->setTriggeringAction(NavigationAction(loader->request(), policyChecker().loadType(), isFormSubmission));
1462
1463     if (Element* ownerElement = m_frame.ownerElement()) {
1464         // We skip dispatching the beforeload event if we've already
1465         // committed a real document load because the event would leak
1466         // subsequent activity by the frame which the parent frame isn't
1467         // supposed to learn. For example, if the child frame navigated to
1468         // a new URL, the parent frame shouldn't learn the URL.
1469         if (!m_stateMachine.committedFirstRealDocumentLoad()
1470             && !ownerElement->dispatchBeforeLoadEvent(loader->request().url().string())) {
1471             continueLoadAfterNavigationPolicy(loader->request(), formState, false, allowNavigationToInvalidURL);
1472             return;
1473         }
1474     }
1475
1476     policyChecker().checkNavigationPolicy(loader->request(), false /* didReceiveRedirectResponse */, loader, formState, [this, allowNavigationToInvalidURL] (const ResourceRequest& request, FormState* formState, bool shouldContinue) {
1477         continueLoadAfterNavigationPolicy(request, formState, shouldContinue, allowNavigationToInvalidURL);
1478     });
1479 }
1480
1481 void FrameLoader::reportLocalLoadFailed(Frame* frame, const String& url)
1482 {
1483     ASSERT(!url.isEmpty());
1484     if (!frame)
1485         return;
1486
1487     frame->document()->addConsoleMessage(MessageSource::Security, MessageLevel::Error, "Not allowed to load local resource: " + url);
1488 }
1489
1490 void FrameLoader::reportBlockedPortFailed(Frame* frame, const String& url)
1491 {
1492     ASSERT(!url.isEmpty());
1493     if (!frame)
1494         return;
1495     
1496     frame->document()->addConsoleMessage(MessageSource::Security, MessageLevel::Error, "Not allowed to use restricted network port: " + url);
1497 }
1498
1499 const ResourceRequest& FrameLoader::initialRequest() const
1500 {
1501     return activeDocumentLoader()->originalRequest();
1502 }
1503
1504 bool FrameLoader::willLoadMediaElementURL(URL& url)
1505 {
1506 #if PLATFORM(IOS)
1507     // MobileStore depends on the iOS 4.0 era client delegate method because webView:resource:willSendRequest:redirectResponse:fromDataSource
1508     // doesn't let them tell when a load request is coming from a media element. See <rdar://problem/8266916> for more details.
1509     if (IOSApplication::isMobileStore())
1510         return m_client.shouldLoadMediaElementURL(url);
1511 #endif
1512
1513     ResourceRequest request(url);
1514
1515     unsigned long identifier;
1516     ResourceError error;
1517     requestFromDelegate(request, identifier, error);
1518     notifier().sendRemainingDelegateMessages(m_documentLoader.get(), identifier, request, ResourceResponse(url, String(), -1, String()), 0, -1, -1, error);
1519
1520     url = request.url();
1521
1522     return error.isNull();
1523 }
1524
1525 bool FrameLoader::shouldReloadToHandleUnreachableURL(DocumentLoader* docLoader)
1526 {
1527     URL unreachableURL = docLoader->unreachableURL();
1528
1529     if (unreachableURL.isEmpty())
1530         return false;
1531
1532     if (!isBackForwardLoadType(policyChecker().loadType()))
1533         return false;
1534
1535     // We only treat unreachableURLs specially during the delegate callbacks
1536     // for provisional load errors and navigation policy decisions. The former
1537     // case handles well-formed URLs that can't be loaded, and the latter
1538     // case handles malformed URLs and unknown schemes. Loading alternate content
1539     // at other times behaves like a standard load.
1540     if (policyChecker().delegateIsDecidingNavigationPolicy() || policyChecker().delegateIsHandlingUnimplementablePolicy())
1541         return m_policyDocumentLoader && unreachableURL == m_policyDocumentLoader->request().url();
1542
1543     return unreachableURL == m_provisionalLoadErrorBeingHandledURL;
1544 }
1545
1546 void FrameLoader::reloadWithOverrideEncoding(const String& encoding)
1547 {
1548     if (!m_documentLoader)
1549         return;
1550
1551     ResourceRequest request = m_documentLoader->request();
1552     URL unreachableURL = m_documentLoader->unreachableURL();
1553     if (!unreachableURL.isEmpty())
1554         request.setURL(unreachableURL);
1555
1556     // FIXME: If the resource is a result of form submission and is not cached, the form will be silently resubmitted.
1557     // We should ask the user for confirmation in this case.
1558     request.setCachePolicy(ReturnCacheDataElseLoad);
1559
1560     Ref<DocumentLoader> loader = m_client.createDocumentLoader(request, defaultSubstituteDataForURL(request.url()));
1561     applyShouldOpenExternalURLsPolicyToNewDocumentLoader(loader, m_documentLoader->shouldOpenExternalURLsPolicyToPropagate());
1562
1563     setPolicyDocumentLoader(loader.ptr());
1564
1565     loader->setOverrideEncoding(encoding);
1566
1567     loadWithDocumentLoader(loader.ptr(), FrameLoadType::Reload, 0, AllowNavigationToInvalidURL::Yes);
1568 }
1569
1570 void FrameLoader::reload(bool endToEndReload, bool contentBlockersEnabled)
1571 {
1572     if (!m_documentLoader)
1573         return;
1574
1575     // If a window is created by javascript, its main frame can have an empty but non-nil URL.
1576     // Reloading in this case will lose the current contents (see 4151001).
1577     if (m_documentLoader->request().url().isEmpty())
1578         return;
1579
1580     // Replace error-page URL with the URL we were trying to reach.
1581     ResourceRequest initialRequest = m_documentLoader->request();
1582     URL unreachableURL = m_documentLoader->unreachableURL();
1583     if (!unreachableURL.isEmpty())
1584         initialRequest.setURL(unreachableURL);
1585
1586     // Create a new document loader for the reload, this will become m_documentLoader eventually,
1587     // but first it has to be the "policy" document loader, and then the "provisional" document loader.
1588     Ref<DocumentLoader> loader = m_client.createDocumentLoader(initialRequest, defaultSubstituteDataForURL(initialRequest.url()));
1589     applyShouldOpenExternalURLsPolicyToNewDocumentLoader(loader, m_documentLoader->shouldOpenExternalURLsPolicyToPropagate());
1590
1591     loader->setUserContentExtensionsEnabled(contentBlockersEnabled);
1592     
1593     ResourceRequest& request = loader->request();
1594
1595     // FIXME: We don't have a mechanism to revalidate the main resource without reloading at the moment.
1596     request.setCachePolicy(ReloadIgnoringCacheData);
1597
1598     // If we're about to re-post, set up action so the application can warn the user.
1599     if (request.httpMethod() == "POST")
1600         loader->setTriggeringAction(NavigationAction(request, NavigationType::FormResubmitted));
1601
1602     loader->setOverrideEncoding(m_documentLoader->overrideEncoding());
1603     
1604     loadWithDocumentLoader(loader.ptr(), endToEndReload ? FrameLoadType::ReloadFromOrigin : FrameLoadType::Reload, 0, AllowNavigationToInvalidURL::Yes);
1605 }
1606
1607 void FrameLoader::stopAllLoaders(ClearProvisionalItemPolicy clearProvisionalItemPolicy)
1608 {
1609     ASSERT(!m_frame.document() || m_frame.document()->pageCacheState() != Document::InPageCache);
1610     if (m_pageDismissalEventBeingDispatched != PageDismissalType::None)
1611         return;
1612
1613     // If this method is called from within this method, infinite recursion can occur (3442218). Avoid this.
1614     if (m_inStopAllLoaders)
1615         return;
1616     
1617     // Calling stopLoading() on the provisional document loader can blow away
1618     // the frame from underneath.
1619     Ref<Frame> protect(m_frame);
1620
1621     m_inStopAllLoaders = true;
1622
1623     policyChecker().stopCheck();
1624
1625     // If no new load is in progress, we should clear the provisional item from history
1626     // before we call stopLoading.
1627     if (clearProvisionalItemPolicy == ShouldClearProvisionalItem)
1628         history().setProvisionalItem(nullptr);
1629
1630     for (RefPtr<Frame> child = m_frame.tree().firstChild(); child; child = child->tree().nextSibling())
1631         child->loader().stopAllLoaders(clearProvisionalItemPolicy);
1632     if (m_provisionalDocumentLoader)
1633         m_provisionalDocumentLoader->stopLoading();
1634     if (m_documentLoader)
1635         m_documentLoader->stopLoading();
1636
1637     setProvisionalDocumentLoader(nullptr);
1638
1639     m_checkTimer.stop();
1640
1641     m_inStopAllLoaders = false;    
1642 }
1643
1644 void FrameLoader::stopForUserCancel(bool deferCheckLoadComplete)
1645 {
1646     // Calling stopAllLoaders can cause the frame to be deallocated, including the frame loader.
1647     Ref<Frame> protectedFrame(m_frame);
1648
1649     stopAllLoaders();
1650
1651 #if PLATFORM(IOS)
1652     // Lay out immediately when stopping to immediately clear the old page if we just committed this one
1653     // but haven't laid out/painted yet.
1654     // FIXME: Is this behavior specific to iOS? Or should we expose a setting to toggle this behavior?
1655     if (m_frame.view() && !m_frame.view()->didFirstLayout())
1656         m_frame.view()->layout();
1657 #endif
1658
1659     if (deferCheckLoadComplete)
1660         scheduleCheckLoadComplete();
1661     else if (m_frame.page())
1662         checkLoadComplete();
1663 }
1664
1665 DocumentLoader* FrameLoader::activeDocumentLoader() const
1666 {
1667     if (m_state == FrameStateProvisional)
1668         return m_provisionalDocumentLoader.get();
1669     return m_documentLoader.get();
1670 }
1671
1672 bool FrameLoader::isLoading() const
1673 {
1674     DocumentLoader* docLoader = activeDocumentLoader();
1675     if (!docLoader)
1676         return false;
1677     return docLoader->isLoading();
1678 }
1679
1680 bool FrameLoader::frameHasLoaded() const
1681 {
1682     return m_stateMachine.committedFirstRealDocumentLoad() || (m_provisionalDocumentLoader && !m_stateMachine.creatingInitialEmptyDocument()); 
1683 }
1684
1685 void FrameLoader::setDocumentLoader(DocumentLoader* loader)
1686 {
1687     if (!loader && !m_documentLoader)
1688         return;
1689     
1690     ASSERT(loader != m_documentLoader);
1691     ASSERT(!loader || loader->frameLoader() == this);
1692
1693     m_client.prepareForDataSourceReplacement();
1694     detachChildren();
1695
1696     // detachChildren() can trigger this frame's unload event, and therefore
1697     // script can run and do just about anything. For example, an unload event that calls
1698     // document.write("") on its parent frame can lead to a recursive detachChildren()
1699     // invocation for this frame. In that case, we can end up at this point with a
1700     // loader that hasn't been deleted but has been detached from its frame. Such a
1701     // DocumentLoader has been sufficiently detached that we'll end up in an inconsistent
1702     // state if we try to use it.
1703     if (loader && !loader->frame())
1704         return;
1705
1706     if (m_documentLoader)
1707         m_documentLoader->detachFromFrame();
1708
1709     m_documentLoader = loader;
1710 }
1711
1712 void FrameLoader::setPolicyDocumentLoader(DocumentLoader* loader)
1713 {
1714     if (m_policyDocumentLoader == loader)
1715         return;
1716
1717     if (loader)
1718         loader->attachToFrame(m_frame);
1719     if (m_policyDocumentLoader
1720             && m_policyDocumentLoader != m_provisionalDocumentLoader
1721             && m_policyDocumentLoader != m_documentLoader)
1722         m_policyDocumentLoader->detachFromFrame();
1723
1724     m_policyDocumentLoader = loader;
1725 }
1726
1727 void FrameLoader::setProvisionalDocumentLoader(DocumentLoader* loader)
1728 {
1729     ASSERT(!loader || !m_provisionalDocumentLoader);
1730     ASSERT(!loader || loader->frameLoader() == this);
1731
1732     if (m_provisionalDocumentLoader && m_provisionalDocumentLoader != m_documentLoader)
1733         m_provisionalDocumentLoader->detachFromFrame();
1734
1735     m_provisionalDocumentLoader = loader;
1736 }
1737
1738 void FrameLoader::setState(FrameState newState)
1739 {
1740     FrameState oldState = m_state;
1741     m_state = newState;
1742     
1743     if (newState == FrameStateProvisional)
1744         provisionalLoadStarted();
1745     else if (newState == FrameStateComplete) {
1746         frameLoadCompleted();
1747         if (m_documentLoader)
1748             m_documentLoader->stopRecordingResponses();
1749         if (m_frame.isMainFrame() && oldState != newState)
1750             static_cast<MainFrame&>(m_frame).performanceLogging().didReachPointOfInterest(PerformanceLogging::MainFrameLoadCompleted);
1751     }
1752 }
1753
1754 void FrameLoader::clearProvisionalLoad()
1755 {
1756     setProvisionalDocumentLoader(nullptr);
1757     m_progressTracker->progressCompleted();
1758     setState(FrameStateComplete);
1759 }
1760
1761 void FrameLoader::commitProvisionalLoad()
1762 {
1763     RefPtr<DocumentLoader> pdl = m_provisionalDocumentLoader;
1764     Ref<Frame> protect(m_frame);
1765
1766     std::unique_ptr<CachedPage> cachedPage;
1767     if (m_loadingFromCachedPage && history().provisionalItem())
1768         cachedPage = PageCache::singleton().take(*history().provisionalItem(), m_frame.page());
1769
1770     LOG(PageCache, "WebCoreLoading %s: About to commit provisional load from previous URL '%s' to new URL '%s'", m_frame.tree().uniqueName().string().utf8().data(),
1771         m_frame.document() ? m_frame.document()->url().stringCenterEllipsizedToLength().utf8().data() : "",
1772         pdl ? pdl->url().stringCenterEllipsizedToLength().utf8().data() : "<no provisional DocumentLoader>");
1773
1774     willTransitionToCommitted();
1775
1776     if (!m_frame.tree().parent() && history().currentItem()) {
1777         // Check to see if we need to cache the page we are navigating away from into the back/forward cache.
1778         // We are doing this here because we know for sure that a new page is about to be loaded.
1779         PageCache::singleton().addIfCacheable(*history().currentItem(), m_frame.page());
1780         
1781         WebCore::jettisonExpensiveObjectsOnTopLevelNavigation();
1782     }
1783
1784     if (m_loadType != FrameLoadType::Replace)
1785         closeOldDataSources();
1786
1787     if (!cachedPage && !m_stateMachine.creatingInitialEmptyDocument())
1788         m_client.makeRepresentation(pdl.get());
1789
1790     transitionToCommitted(cachedPage.get());
1791
1792     if (pdl && m_documentLoader) {
1793         // Check if the destination page is allowed to access the previous page's timing information.
1794         Ref<SecurityOrigin> securityOrigin(SecurityOrigin::create(pdl->request().url()));
1795         m_documentLoader->timing().setHasSameOriginAsPreviousDocument(securityOrigin.get().canRequest(m_previousURL));
1796     }
1797
1798     // Call clientRedirectCancelledOrFinished() here so that the frame load delegate is notified that the redirect's
1799     // status has changed, if there was a redirect.  The frame load delegate may have saved some state about
1800     // the redirect in its -webView:willPerformClientRedirectToURL:delay:fireDate:forFrame:.  Since we are
1801     // just about to commit a new page, there cannot possibly be a pending redirect at this point.
1802     if (m_sentRedirectNotification)
1803         clientRedirectCancelledOrFinished(false);
1804     
1805     if (cachedPage && cachedPage->document()) {
1806 #if PLATFORM(IOS)
1807         // FIXME: CachedPage::restore() would dispatch viewport change notification. However UIKit expects load
1808         // commit to happen before any changes to viewport arguments and dealing with this there is difficult.
1809         m_frame.page()->chrome().setDispatchViewportDataDidChangeSuppressed(true);
1810 #endif
1811         prepareForCachedPageRestore();
1812
1813         // Start request for the main resource and dispatch didReceiveResponse before the load is committed for
1814         // consistency with all other loads. See https://bugs.webkit.org/show_bug.cgi?id=150927.
1815         ResourceError mainResouceError;
1816         unsigned long mainResourceIdentifier;
1817         ResourceRequest mainResourceRequest(cachedPage->documentLoader()->request());
1818         requestFromDelegate(mainResourceRequest, mainResourceIdentifier, mainResouceError);
1819         notifier().dispatchDidReceiveResponse(cachedPage->documentLoader(), mainResourceIdentifier, cachedPage->documentLoader()->response());
1820
1821         std::optional<HasInsecureContent> hasInsecureContent = cachedPage->cachedMainFrame()->hasInsecureContent();
1822
1823         // FIXME: This API should be turned around so that we ground CachedPage into the Page.
1824         cachedPage->restore(*m_frame.page());
1825
1826         dispatchDidCommitLoad(hasInsecureContent);
1827 #if PLATFORM(IOS)
1828         m_frame.page()->chrome().setDispatchViewportDataDidChangeSuppressed(false);
1829         m_frame.page()->chrome().dispatchViewportPropertiesDidChange(m_frame.page()->viewportArguments());
1830 #endif
1831
1832         auto& title = m_documentLoader->title();
1833         if (!title.string.isNull())
1834             m_client.dispatchDidReceiveTitle(title);
1835
1836         // Send remaining notifications for the main resource.
1837         notifier().sendRemainingDelegateMessages(m_documentLoader.get(), mainResourceIdentifier, mainResourceRequest, ResourceResponse(),
1838             nullptr, static_cast<int>(m_documentLoader->response().expectedContentLength()), 0, mainResouceError);
1839
1840         checkCompleted();
1841     } else
1842         didOpenURL();
1843
1844     LOG(Loading, "WebCoreLoading %s: Finished committing provisional load to URL %s", m_frame.tree().uniqueName().string().utf8().data(),
1845         m_frame.document() ? m_frame.document()->url().stringCenterEllipsizedToLength().utf8().data() : "");
1846
1847     if (m_loadType == FrameLoadType::Standard && m_documentLoader->isClientRedirect())
1848         history().updateForClientRedirect();
1849
1850     if (m_loadingFromCachedPage) {
1851 #if PLATFORM(IOS)
1852         // Note, didReceiveDocType is expected to be called for cached pages. See <rdar://problem/5906758> for more details.
1853         if (m_frame.document()->doctype() && m_frame.page())
1854             m_frame.page()->chrome().didReceiveDocType(&m_frame);
1855 #endif
1856         m_frame.document()->resume(ActiveDOMObject::PageCache);
1857
1858         // Force a layout to update view size and thereby update scrollbars.
1859 #if PLATFORM(IOS)
1860         if (!m_client.forceLayoutOnRestoreFromPageCache())
1861             m_frame.view()->forceLayout();
1862 #else
1863         m_frame.view()->forceLayout();
1864 #endif
1865
1866         // Main resource delegates were already sent, so we skip the first response here.
1867         for (unsigned i = 1; i < m_documentLoader->responses().size(); ++i) {
1868             const auto& response = m_documentLoader->responses()[i];
1869             // FIXME: If the WebKit client changes or cancels the request, this is not respected.
1870             ResourceError error;
1871             unsigned long identifier;
1872             ResourceRequest request(response.url());
1873             requestFromDelegate(request, identifier, error);
1874             // FIXME: If we get a resource with more than 2B bytes, this code won't do the right thing.
1875             // However, with today's computers and networking speeds, this won't happen in practice.
1876             // Could be an issue with a giant local file.
1877             notifier().sendRemainingDelegateMessages(m_documentLoader.get(), identifier, request, response, 0, static_cast<int>(response.expectedContentLength()), 0, error);
1878         }
1879
1880         // FIXME: Why only this frame and not parent frames?
1881         checkLoadCompleteForThisFrame();
1882     }
1883 }
1884
1885 void FrameLoader::transitionToCommitted(CachedPage* cachedPage)
1886 {
1887     ASSERT(m_client.hasWebView());
1888     ASSERT(m_state == FrameStateProvisional);
1889
1890     if (m_state != FrameStateProvisional)
1891         return;
1892
1893     if (FrameView* view = m_frame.view()) {
1894         if (ScrollAnimator* scrollAnimator = view->existingScrollAnimator())
1895             scrollAnimator->cancelAnimations();
1896     }
1897
1898     m_client.setCopiesOnScroll();
1899     history().updateForCommit();
1900
1901     // The call to closeURL() invokes the unload event handler, which can execute arbitrary
1902     // JavaScript. If the script initiates a new load, we need to abandon the current load,
1903     // or the two will stomp each other.
1904     DocumentLoader* pdl = m_provisionalDocumentLoader.get();
1905     if (m_documentLoader)
1906         closeURL();
1907     if (pdl != m_provisionalDocumentLoader)
1908         return;
1909
1910     // Nothing else can interupt this commit - set the Provisional->Committed transition in stone
1911     if (m_documentLoader)
1912         m_documentLoader->stopLoadingSubresources();
1913     if (m_documentLoader)
1914         m_documentLoader->stopLoadingPlugIns();
1915
1916     setDocumentLoader(m_provisionalDocumentLoader.get());
1917     setProvisionalDocumentLoader(nullptr);
1918
1919     if (pdl != m_documentLoader) {
1920         ASSERT(m_state == FrameStateComplete);
1921         return;
1922     }
1923
1924     setState(FrameStateCommittedPage);
1925
1926     // Handle adding the URL to the back/forward list.
1927     DocumentLoader* dl = m_documentLoader.get();
1928
1929     switch (m_loadType) {
1930     case FrameLoadType::Forward:
1931     case FrameLoadType::Back:
1932     case FrameLoadType::IndexedBackForward:
1933         if (m_frame.page()) {
1934             // If the first load within a frame is a navigation within a back/forward list that was attached
1935             // without any of the items being loaded then we need to update the history in a similar manner as
1936             // for a standard load with the exception of updating the back/forward list (<rdar://problem/8091103>).
1937             if (!m_stateMachine.committedFirstRealDocumentLoad() && m_frame.isMainFrame())
1938                 history().updateForStandardLoad(HistoryController::UpdateAllExceptBackForwardList);
1939
1940             history().updateForBackForwardNavigation();
1941
1942             // For cached pages, CachedFrame::restore will take care of firing the popstate event with the history item's state object
1943             if (history().currentItem() && !cachedPage)
1944                 m_pendingStateObject = history().currentItem()->stateObject();
1945
1946             // Create a document view for this document, or used the cached view.
1947             if (cachedPage) {
1948                 DocumentLoader* cachedDocumentLoader = cachedPage->documentLoader();
1949                 ASSERT(cachedDocumentLoader);
1950                 cachedDocumentLoader->attachToFrame(m_frame);
1951                 m_client.transitionToCommittedFromCachedFrame(cachedPage->cachedMainFrame());
1952             } else
1953                 m_client.transitionToCommittedForNewPage();
1954         }
1955         break;
1956
1957     case FrameLoadType::Reload:
1958     case FrameLoadType::ReloadFromOrigin:
1959     case FrameLoadType::Same:
1960     case FrameLoadType::Replace:
1961         history().updateForReload();
1962         m_client.transitionToCommittedForNewPage();
1963         break;
1964
1965     case FrameLoadType::Standard:
1966         history().updateForStandardLoad();
1967         if (m_frame.view())
1968             m_frame.view()->setScrollbarsSuppressed(true);
1969         m_client.transitionToCommittedForNewPage();
1970         break;
1971
1972     case FrameLoadType::RedirectWithLockedBackForwardList:
1973         history().updateForRedirectWithLockedBackForwardList();
1974         m_client.transitionToCommittedForNewPage();
1975         break;
1976
1977     // FIXME Remove this check when dummy ds is removed (whatever "dummy ds" is).
1978     // An exception should be thrown if we're in the FrameLoadTypeUninitialized state.
1979     default:
1980         ASSERT_NOT_REACHED();
1981     }
1982
1983     m_documentLoader->writer().setMIMEType(dl->responseMIMEType());
1984
1985     // Tell the client we've committed this URL.
1986     ASSERT(m_frame.view());
1987
1988     if (m_stateMachine.creatingInitialEmptyDocument())
1989         return;
1990
1991     if (!m_stateMachine.committedFirstRealDocumentLoad())
1992         m_stateMachine.advanceTo(FrameLoaderStateMachine::DisplayingInitialEmptyDocumentPostCommit);
1993 }
1994
1995 void FrameLoader::clientRedirectCancelledOrFinished(bool cancelWithLoadInProgress)
1996 {
1997     // Note that -webView:didCancelClientRedirectForFrame: is called on the frame load delegate even if
1998     // the redirect succeeded.  We should either rename this API, or add a new method, like
1999     // -webView:didFinishClientRedirectForFrame:
2000     m_client.dispatchDidCancelClientRedirect();
2001
2002     if (!cancelWithLoadInProgress)
2003         m_quickRedirectComing = false;
2004
2005     m_sentRedirectNotification = false;
2006 }
2007
2008 void FrameLoader::clientRedirected(const URL& url, double seconds, double fireDate, LockBackForwardList lockBackForwardList)
2009 {
2010     m_client.dispatchWillPerformClientRedirect(url, seconds, fireDate);
2011     
2012     // Remember that we sent a redirect notification to the frame load delegate so that when we commit
2013     // the next provisional load, we can send a corresponding -webView:didCancelClientRedirectForFrame:
2014     m_sentRedirectNotification = true;
2015     
2016     // If a "quick" redirect comes in, we set a special mode so we treat the next
2017     // load as part of the original navigation. If we don't have a document loader, we have
2018     // no "original" load on which to base a redirect, so we treat the redirect as a normal load.
2019     // Loads triggered by JavaScript form submissions never count as quick redirects.
2020     m_quickRedirectComing = (lockBackForwardList == LockBackForwardList::Yes || history().currentItemShouldBeReplaced()) && m_documentLoader && !m_isExecutingJavaScriptFormAction;
2021 }
2022
2023 bool FrameLoader::shouldReload(const URL& currentURL, const URL& destinationURL)
2024 {
2025     // This function implements the rule: "Don't reload if navigating by fragment within
2026     // the same URL, but do reload if going to a new URL or to the same URL with no
2027     // fragment identifier at all."
2028     if (!destinationURL.hasFragmentIdentifier())
2029         return true;
2030     return !equalIgnoringFragmentIdentifier(currentURL, destinationURL);
2031 }
2032
2033 void FrameLoader::closeOldDataSources()
2034 {
2035     // FIXME: Is it important for this traversal to be postorder instead of preorder?
2036     // If so, add helpers for postorder traversal, and use them. If not, then lets not
2037     // use a recursive algorithm here.
2038     for (Frame* child = m_frame.tree().firstChild(); child; child = child->tree().nextSibling())
2039         child->loader().closeOldDataSources();
2040     
2041     if (m_documentLoader)
2042         m_client.dispatchWillClose();
2043
2044     m_client.setMainFrameDocumentReady(false); // stop giving out the actual DOMDocument to observers
2045 }
2046
2047 void FrameLoader::prepareForCachedPageRestore()
2048 {
2049     ASSERT(!m_frame.tree().parent());
2050     ASSERT(m_frame.page());
2051     ASSERT(m_frame.isMainFrame());
2052
2053     m_frame.navigationScheduler().cancel();
2054
2055     // We still have to close the previous part page.
2056     closeURL();
2057     
2058     // Delete old status bar messages (if it _was_ activated on last URL).
2059     if (m_frame.script().canExecuteScripts(NotAboutToExecuteScript)) {
2060         DOMWindow* window = m_frame.document()->domWindow();
2061         window->setStatus(String());
2062         window->setDefaultStatus(String());
2063     }
2064 }
2065
2066 void FrameLoader::open(CachedFrameBase& cachedFrame)
2067 {
2068     m_isComplete = false;
2069     
2070     // Don't re-emit the load event.
2071     m_didCallImplicitClose = true;
2072
2073     URL url = cachedFrame.url();
2074
2075     // FIXME: I suspect this block of code doesn't do anything.
2076     if (url.protocolIsInHTTPFamily() && !url.host().isEmpty() && url.path().isEmpty())
2077         url.setPath("/");
2078
2079     started();
2080     Document* document = cachedFrame.document();
2081     ASSERT(document);
2082     ASSERT(document->domWindow());
2083
2084     clear(document, true, true, cachedFrame.isMainFrame());
2085
2086     document->setPageCacheState(Document::NotInPageCache);
2087
2088     m_needsClear = true;
2089     m_isComplete = false;
2090     m_didCallImplicitClose = false;
2091     m_outgoingReferrer = url.string();
2092
2093     FrameView* view = cachedFrame.view();
2094     
2095     // When navigating to a CachedFrame its FrameView should never be null.  If it is we'll crash in creative ways downstream.
2096     ASSERT(view);
2097     view->setWasScrolledByUser(false);
2098
2099     std::optional<IntRect> previousViewFrameRect = m_frame.view() ?  m_frame.view()->frameRect() : std::optional<IntRect>(std::nullopt);
2100     m_frame.setView(view);
2101
2102     // Use the previous ScrollView's frame rect.
2103     if (previousViewFrameRect)
2104         view->setFrameRect(previousViewFrameRect.value());
2105     
2106     m_frame.setDocument(document);
2107     document->domWindow()->resumeFromDocumentSuspension();
2108
2109     updateFirstPartyForCookies();
2110
2111     cachedFrame.restore();
2112 }
2113
2114 bool FrameLoader::isHostedByObjectElement() const
2115 {
2116     HTMLFrameOwnerElement* owner = m_frame.ownerElement();
2117     return owner && owner->hasTagName(objectTag);
2118 }
2119
2120 bool FrameLoader::isReplacing() const
2121 {
2122     return m_loadType == FrameLoadType::Replace;
2123 }
2124
2125 void FrameLoader::setReplacing()
2126 {
2127     m_loadType = FrameLoadType::Replace;
2128 }
2129
2130 bool FrameLoader::subframeIsLoading() const
2131 {
2132     // It's most likely that the last added frame is the last to load so we walk backwards.
2133     for (Frame* child = m_frame.tree().lastChild(); child; child = child->tree().previousSibling()) {
2134         FrameLoader& childLoader = child->loader();
2135         DocumentLoader* documentLoader = childLoader.documentLoader();
2136         if (documentLoader && documentLoader->isLoadingInAPISense())
2137             return true;
2138         documentLoader = childLoader.provisionalDocumentLoader();
2139         if (documentLoader && documentLoader->isLoadingInAPISense())
2140             return true;
2141         documentLoader = childLoader.policyDocumentLoader();
2142         if (documentLoader)
2143             return true;
2144     }
2145     return false;
2146 }
2147
2148 void FrameLoader::willChangeTitle(DocumentLoader* loader)
2149 {
2150     m_client.willChangeTitle(loader);
2151 }
2152
2153 FrameLoadType FrameLoader::loadType() const
2154 {
2155     return m_loadType;
2156 }
2157     
2158 CachePolicy FrameLoader::subresourceCachePolicy() const
2159 {
2160     if (Page* page = m_frame.page()) {
2161         if (page->isResourceCachingDisabled())
2162             return CachePolicyReload;
2163     }
2164
2165     if (m_isComplete)
2166         return CachePolicyVerify;
2167
2168     if (m_loadType == FrameLoadType::ReloadFromOrigin)
2169         return CachePolicyReload;
2170
2171     if (Frame* parentFrame = m_frame.tree().parent()) {
2172         CachePolicy parentCachePolicy = parentFrame->loader().subresourceCachePolicy();
2173         if (parentCachePolicy != CachePolicyVerify)
2174             return parentCachePolicy;
2175     }
2176     
2177     switch (m_loadType) {
2178     case FrameLoadType::Reload:
2179         return CachePolicyRevalidate;
2180     case FrameLoadType::Back:
2181     case FrameLoadType::Forward:
2182     case FrameLoadType::IndexedBackForward:
2183         return CachePolicyHistoryBuffer;
2184     case FrameLoadType::ReloadFromOrigin:
2185         ASSERT_NOT_REACHED(); // Already handled above.
2186         return CachePolicyReload;
2187     case FrameLoadType::RedirectWithLockedBackForwardList:
2188     case FrameLoadType::Replace:
2189     case FrameLoadType::Same:
2190     case FrameLoadType::Standard:
2191         return CachePolicyVerify;
2192     }
2193
2194     RELEASE_ASSERT_NOT_REACHED();
2195     return CachePolicyVerify;
2196 }
2197
2198 void FrameLoader::checkLoadCompleteForThisFrame()
2199 {
2200     ASSERT(m_client.hasWebView());
2201
2202     switch (m_state) {
2203         case FrameStateProvisional: {
2204             // FIXME: Prohibiting any provisional load failures from being sent to clients
2205             // while handling provisional load failures is too heavy. For example, the current
2206             // load will fail to cancel another ongoing load. That might prevent clients' page
2207             // load state being handled properly.
2208             if (!m_provisionalLoadErrorBeingHandledURL.isEmpty())
2209                 return;
2210
2211             RefPtr<DocumentLoader> pdl = m_provisionalDocumentLoader;
2212             if (!pdl)
2213                 return;
2214                 
2215             // If we've received any errors we may be stuck in the provisional state and actually complete.
2216             const ResourceError& error = pdl->mainDocumentError();
2217             if (error.isNull())
2218                 return;
2219
2220             // Check all children first.
2221             RefPtr<HistoryItem> item;
2222             if (Page* page = m_frame.page())
2223                 if (isBackForwardLoadType(loadType()))
2224                     // Reset the back forward list to the last committed history item at the top level.
2225                     item = page->mainFrame().loader().history().currentItem();
2226                 
2227             // Only reset if we aren't already going to a new provisional item.
2228             bool shouldReset = !history().provisionalItem();
2229             if (!pdl->isLoadingInAPISense() || pdl->isStopping()) {
2230                 m_provisionalLoadErrorBeingHandledURL = m_provisionalDocumentLoader->url();
2231                 m_client.dispatchDidFailProvisionalLoad(error);
2232 #if ENABLE(CONTENT_FILTERING)
2233                 if (auto contentFilter = pdl->contentFilter())
2234                     contentFilter->handleProvisionalLoadFailure(error);
2235 #endif
2236                 m_provisionalLoadErrorBeingHandledURL = { };
2237
2238                 ASSERT(!pdl->isLoading());
2239
2240                 // If we're in the middle of loading multipart data, we need to restore the document loader.
2241                 if (isReplacing() && !m_documentLoader.get())
2242                     setDocumentLoader(m_provisionalDocumentLoader.get());
2243
2244                 // Finish resetting the load state, but only if another load hasn't been started by the
2245                 // delegate callback.
2246                 if (pdl == m_provisionalDocumentLoader)
2247                     clearProvisionalLoad();
2248                 else if (activeDocumentLoader()) {
2249                     URL unreachableURL = activeDocumentLoader()->unreachableURL();
2250                     if (!unreachableURL.isEmpty() && unreachableURL == pdl->request().url())
2251                         shouldReset = false;
2252                 }
2253             }
2254             if (shouldReset && item)
2255                 if (Page* page = m_frame.page()) {
2256                     page->backForward().setCurrentItem(item.get());
2257                     m_frame.loader().client().updateGlobalHistoryItemForPage();
2258                 }
2259             return;
2260         }
2261         
2262         case FrameStateCommittedPage: {
2263             DocumentLoader* dl = m_documentLoader.get();            
2264             if (!dl || (dl->isLoadingInAPISense() && !dl->isStopping()))
2265                 return;
2266
2267             setState(FrameStateComplete);
2268
2269             // FIXME: Is this subsequent work important if we already navigated away?
2270             // Maybe there are bugs because of that, or extra work we can skip because
2271             // the new page is ready.
2272
2273             m_client.forceLayoutForNonHTML();
2274              
2275             // If the user had a scroll point, scroll to it, overriding the anchor point if any.
2276             if (m_frame.page()) {
2277                 if (isBackForwardLoadType(m_loadType) || m_loadType == FrameLoadType::Reload || m_loadType == FrameLoadType::ReloadFromOrigin)
2278                     history().restoreScrollPositionAndViewState();
2279             }
2280
2281             if (m_stateMachine.creatingInitialEmptyDocument() || !m_stateMachine.committedFirstRealDocumentLoad())
2282                 return;
2283
2284             m_progressTracker->progressCompleted();
2285             Page* page = m_frame.page();
2286             if (page) {
2287                 if (m_frame.isMainFrame())
2288                     page->didFinishLoad();
2289             }
2290
2291             const ResourceError& error = dl->mainDocumentError();
2292
2293             AXObjectCache::AXLoadingEvent loadingEvent;
2294             if (!error.isNull()) {
2295                 RELEASE_LOG_IF_ALLOWED("checkLoadCompleteForThisFrame: Finished frame load with error (frame = %p, main = %d, isTimeout = %d, isCancellation = %d, errorCode = %d)", &m_frame, m_frame.isMainFrame(), error.isTimeout(), error.isCancellation(), error.errorCode());
2296                 m_client.dispatchDidFailLoad(error);
2297                 loadingEvent = AXObjectCache::AXLoadingFailed;
2298             } else {
2299                 RELEASE_LOG_IF_ALLOWED("checkLoadCompleteForThisFrame: Finished frame load (frame = %p, main = %d)", &m_frame, m_frame.isMainFrame());
2300 #if ENABLE(DATA_DETECTION)
2301                 auto* document = m_frame.document();
2302                 if (m_frame.settings().dataDetectorTypes() != DataDetectorTypeNone && document) {
2303                     if (auto* documentElement = document->documentElement()) {
2304                         RefPtr<Range> documentRange = makeRange(firstPositionInNode(documentElement), lastPositionInNode(documentElement));
2305                         m_frame.setDataDetectionResults(DataDetection::detectContentInRange(documentRange, m_frame.settings().dataDetectorTypes(), m_client.dataDetectionContext()));
2306                         if (m_frame.isMainFrame())
2307                             m_client.dispatchDidFinishDataDetection(m_frame.dataDetectionResults());
2308                     }
2309                 }
2310 #endif
2311                 m_client.dispatchDidFinishLoad();
2312                 loadingEvent = AXObjectCache::AXLoadingFinished;
2313             }
2314
2315             // Notify accessibility.
2316             if (auto* document = m_frame.document()) {
2317                 if (AXObjectCache* cache = document->existingAXObjectCache())
2318                     cache->frameLoadingEventNotification(&m_frame, loadingEvent);
2319             }
2320
2321             // The above calls to dispatchDidFinishLoad() might have detached the Frame
2322             // from its Page and also might have caused Page to be deleted.
2323             // Don't assume 'page' is still available to use.
2324             if (m_frame.isMainFrame() && m_frame.page()) {
2325                 ASSERT(&m_frame.page()->mainFrame() == &m_frame);
2326                 m_frame.page()->diagnosticLoggingClient().logDiagnosticMessageWithResult(DiagnosticLoggingKeys::pageLoadedKey(), emptyString(), error.isNull() ? DiagnosticLoggingResultPass : DiagnosticLoggingResultFail, ShouldSample::Yes);
2327             }
2328
2329             return;
2330         }
2331         
2332         case FrameStateComplete:
2333             m_loadType = FrameLoadType::Standard;
2334             frameLoadCompleted();
2335             return;
2336     }
2337
2338     ASSERT_NOT_REACHED();
2339 }
2340
2341 void FrameLoader::continueLoadAfterWillSubmitForm()
2342 {
2343     if (!m_provisionalDocumentLoader)
2344         return;
2345
2346     prepareForLoadStart();
2347     
2348     // The load might be cancelled inside of prepareForLoadStart(), nulling out the m_provisionalDocumentLoader, 
2349     // so we need to null check it again.
2350     if (!m_provisionalDocumentLoader) {
2351         RELEASE_LOG_IF_ALLOWED("continueLoadAfterWillSubmitForm: Frame load canceled (frame = %p, main = %d)", &m_frame, m_frame.isMainFrame());
2352         return;
2353     }
2354
2355     DocumentLoader* activeDocLoader = activeDocumentLoader();
2356     if (activeDocLoader && activeDocLoader->isLoadingMainResource()) {
2357         RELEASE_LOG_IF_ALLOWED("continueLoadAfterWillSubmitForm: Main frame already being loaded (frame = %p, main = %d)", &m_frame, m_frame.isMainFrame());
2358         return;
2359     }
2360
2361     m_loadingFromCachedPage = false;
2362     m_provisionalDocumentLoader->startLoadingMainResource();
2363 }
2364
2365 void FrameLoader::setOriginalURLForDownloadRequest(ResourceRequest& request)
2366 {
2367     // FIXME: Rename firstPartyForCookies back to mainDocumentURL. It was a mistake to think that it was only used for cookies.
2368     // The originalURL is defined as the URL of the page where the download was initiated.
2369     URL originalURL;
2370     if (m_frame.document()) {
2371         originalURL = m_frame.document()->firstPartyForCookies();
2372         // If there is no main document URL, it means that this document is newly opened and just for download purpose.
2373         // In this case, we need to set the originalURL to this document's opener's main document URL.
2374         if (originalURL.isEmpty() && opener() && opener()->document())
2375             originalURL = opener()->document()->firstPartyForCookies();
2376     }
2377     // If the originalURL is the same as the requested URL, we are processing a download
2378     // initiated directly without a page and do not need to specify the originalURL.
2379     if (originalURL == request.url())
2380         request.setFirstPartyForCookies(URL());
2381     else
2382         request.setFirstPartyForCookies(originalURL);
2383 }
2384
2385 void FrameLoader::didReachLayoutMilestone(LayoutMilestones milestones)
2386 {
2387     ASSERT(m_frame.isMainFrame());
2388
2389     m_client.dispatchDidReachLayoutMilestone(milestones);
2390 }
2391
2392 void FrameLoader::didFirstLayout()
2393 {
2394 #if PLATFORM(IOS)
2395     // Only send layout-related delegate callbacks synchronously for the main frame to
2396     // avoid reentering layout for the main frame while delivering a layout-related delegate
2397     // callback for a subframe.
2398     if (&m_frame != &m_frame.page()->mainFrame())
2399         return;
2400 #endif
2401     if (m_frame.page() && isBackForwardLoadType(m_loadType))
2402         history().restoreScrollPositionAndViewState();
2403
2404     if (m_stateMachine.committedFirstRealDocumentLoad() && !m_stateMachine.isDisplayingInitialEmptyDocument() && !m_stateMachine.firstLayoutDone())
2405         m_stateMachine.advanceTo(FrameLoaderStateMachine::FirstLayoutDone);
2406 }
2407
2408 void FrameLoader::frameLoadCompleted()
2409 {
2410     // Note: Can be called multiple times.
2411
2412     m_client.frameLoadCompleted();
2413
2414     history().updateForFrameLoadCompleted();
2415
2416     // After a canceled provisional load, firstLayoutDone is false.
2417     // Reset it to true if we're displaying a page.
2418     if (m_documentLoader && m_stateMachine.committedFirstRealDocumentLoad() && !m_stateMachine.isDisplayingInitialEmptyDocument() && !m_stateMachine.firstLayoutDone())
2419         m_stateMachine.advanceTo(FrameLoaderStateMachine::FirstLayoutDone);
2420 }
2421
2422 void FrameLoader::detachChildren()
2423 {
2424     // detachChildren() will fire the unload event in each subframe and the
2425     // HTML specification states that the parent document's ignore-opens-during-unload counter while
2426     // this event is being fired in its subframes:
2427     // https://html.spec.whatwg.org/multipage/browsers.html#unload-a-document
2428     IgnoreOpensDuringUnloadCountIncrementer ignoreOpensDuringUnloadCountIncrementer(m_frame.document());
2429
2430     Vector<Ref<Frame>, 16> childrenToDetach;
2431     childrenToDetach.reserveInitialCapacity(m_frame.tree().childCount());
2432     for (Frame* child = m_frame.tree().lastChild(); child; child = child->tree().previousSibling())
2433         childrenToDetach.uncheckedAppend(*child);
2434     for (auto& child : childrenToDetach)
2435         child->loader().detachFromParent();
2436 }
2437
2438 void FrameLoader::closeAndRemoveChild(Frame* child)
2439 {
2440     child->tree().detachFromParent();
2441
2442     child->setView(nullptr);
2443     if (child->ownerElement() && child->page())
2444         child->page()->decrementSubframeCount();
2445     child->willDetachPage();
2446     child->detachFromPage();
2447
2448     m_frame.tree().removeChild(child);
2449 }
2450
2451 // Called every time a resource is completely loaded or an error is received.
2452 void FrameLoader::checkLoadComplete()
2453 {
2454     ASSERT(m_client.hasWebView());
2455     
2456     m_shouldCallCheckLoadComplete = false;
2457
2458     if (!m_frame.page())
2459         return;
2460
2461     // FIXME: Always traversing the entire frame tree is a bit inefficient, but 
2462     // is currently needed in order to null out the previous history item for all frames.
2463     Vector<Ref<Frame>, 16> frames;
2464     for (Frame* frame = &m_frame.mainFrame(); frame; frame = frame->tree().traverseNext())
2465         frames.append(*frame);
2466
2467     // To process children before their parents, iterate the vector backwards.
2468     for (auto frame = frames.rbegin(); frame != frames.rend(); ++frame) {
2469         if ((*frame)->page())
2470             (*frame)->loader().checkLoadCompleteForThisFrame();
2471     }
2472 }
2473
2474 int FrameLoader::numPendingOrLoadingRequests(bool recurse) const
2475 {
2476     if (!recurse)
2477         return m_frame.document()->cachedResourceLoader().requestCount();
2478
2479     int count = 0;
2480     for (Frame* frame = &m_frame; frame; frame = frame->tree().traverseNext(&m_frame))
2481         count += frame->document()->cachedResourceLoader().requestCount();
2482     return count;
2483 }
2484
2485 String FrameLoader::userAgent(const URL& url) const
2486 {
2487     return m_client.userAgent(url);
2488 }
2489
2490 void FrameLoader::dispatchOnloadEvents()
2491 {
2492     m_client.dispatchDidDispatchOnloadEvents();
2493
2494     if (documentLoader())
2495         documentLoader()->dispatchOnloadEvents();
2496 }
2497
2498 void FrameLoader::frameDetached()
2499 {
2500     // Calling stopAllLoaders can cause the frame to be deallocated, including the frame loader.
2501     Ref<Frame> protectedFrame(m_frame);
2502
2503     stopAllLoaders();
2504     m_frame.document()->stopActiveDOMObjects();
2505     detachFromParent();
2506 }
2507
2508 void FrameLoader::detachFromParent()
2509 {
2510     Ref<Frame> protect(m_frame);
2511
2512     closeURL();
2513     history().saveScrollPositionAndViewStateToItem(history().currentItem());
2514     detachChildren();
2515     // stopAllLoaders() needs to be called after detachChildren(), because detachedChildren()
2516     // will trigger the unload event handlers of any child frames, and those event
2517     // handlers might start a new subresource load in this frame.
2518     stopAllLoaders();
2519
2520     InspectorInstrumentation::frameDetachedFromParent(m_frame);
2521
2522     detachViewsAndDocumentLoader();
2523
2524     m_progressTracker = nullptr;
2525
2526     if (Frame* parent = m_frame.tree().parent()) {
2527         parent->loader().closeAndRemoveChild(&m_frame);
2528         parent->loader().scheduleCheckCompleted();
2529     } else {
2530         m_frame.setView(nullptr);
2531         m_frame.willDetachPage();
2532         m_frame.detachFromPage();
2533     }
2534 }
2535
2536 void FrameLoader::detachViewsAndDocumentLoader()
2537 {
2538     m_client.detachedFromParent2();
2539     setDocumentLoader(nullptr);
2540     m_client.detachedFromParent3();
2541 }
2542     
2543 void FrameLoader::addExtraFieldsToSubresourceRequest(ResourceRequest& request)
2544 {
2545     addExtraFieldsToRequest(request, m_loadType, false);
2546 }
2547
2548 void FrameLoader::addExtraFieldsToMainResourceRequest(ResourceRequest& request)
2549 {
2550     // FIXME: Using m_loadType seems wrong for some callers.
2551     // If we are only preparing to load the main resource, that is previous load's load type!
2552     addExtraFieldsToRequest(request, m_loadType, true);
2553
2554     // Upgrade-Insecure-Requests should only be added to main resource requests
2555     addHTTPUpgradeInsecureRequestsIfNeeded(request);
2556 }
2557
2558 ResourceRequestCachePolicy FrameLoader::defaultRequestCachingPolicy(const ResourceRequest& request, FrameLoadType loadType, bool isMainResource)
2559 {
2560     if (m_overrideCachePolicyForTesting)
2561         return m_overrideCachePolicyForTesting.value();
2562     if (!isMainResource) {
2563         if (request.isConditional())
2564             return ReloadIgnoringCacheData;
2565         if (documentLoader()->isLoadingInAPISense()) {
2566             // If we inherit cache policy from a main resource, we use the DocumentLoader's
2567             // original request cache policy for two reasons:
2568             // 1. For POST requests, we mutate the cache policy for the main resource,
2569             //    but we do not want this to apply to subresources
2570             // 2. Delegates that modify the cache policy using willSendRequest: should
2571             //    not affect any other resources. Such changes need to be done
2572             //    per request.
2573             ResourceRequestCachePolicy mainDocumentOriginalCachePolicy = documentLoader()->originalRequest().cachePolicy();
2574             // Back-forward navigations try to load main resource from cache only to avoid re-submitting form data, and start over (with a warning dialog) if that fails.
2575             // This policy is set on initial request too, but should not be inherited.
2576             return (mainDocumentOriginalCachePolicy == ReturnCacheDataDontLoad) ? ReturnCacheDataElseLoad : mainDocumentOriginalCachePolicy;
2577         }
2578     // FIXME: Other FrameLoader functions have duplicated code for setting cache policy of main request when reloading.
2579     // It seems better to manage it explicitly than to hide the logic inside addExtraFieldsToRequest().
2580     } else if (loadType == FrameLoadType::Reload || loadType == FrameLoadType::ReloadFromOrigin || request.isConditional())
2581         return ReloadIgnoringCacheData;
2582
2583     return UseProtocolCachePolicy;
2584 }
2585
2586 void FrameLoader::addExtraFieldsToRequest(ResourceRequest& request, FrameLoadType loadType, bool isMainResource)
2587 {
2588     // Don't set the cookie policy URL if it's already been set.
2589     // But make sure to set it on all requests regardless of protocol, as it has significance beyond the cookie policy (<rdar://problem/6616664>).
2590     if (request.firstPartyForCookies().isEmpty()) {
2591         if (isMainResource && m_frame.isMainFrame())
2592             request.setFirstPartyForCookies(request.url());
2593         else if (Document* document = m_frame.document())
2594             request.setFirstPartyForCookies(document->firstPartyForCookies());
2595     }
2596
2597     Page* page = frame().page();
2598     bool hasSpecificCachePolicy = request.cachePolicy() != UseProtocolCachePolicy;
2599
2600     if (page && page->isResourceCachingDisabled()) {
2601         request.setCachePolicy(ReloadIgnoringCacheData);
2602         loadType = FrameLoadType::ReloadFromOrigin;
2603     } else if (!hasSpecificCachePolicy)
2604         request.setCachePolicy(defaultRequestCachingPolicy(request, loadType, isMainResource));
2605
2606     // The remaining modifications are only necessary for HTTP and HTTPS.
2607     if (!request.url().isEmpty() && !request.url().protocolIsInHTTPFamily())
2608         return;
2609
2610     if (!hasSpecificCachePolicy && request.cachePolicy() == ReloadIgnoringCacheData) {
2611         if (loadType == FrameLoadType::Reload)
2612             request.setHTTPHeaderField(HTTPHeaderName::CacheControl, "max-age=0");
2613         else if (loadType == FrameLoadType::ReloadFromOrigin) {
2614             request.setHTTPHeaderField(HTTPHeaderName::CacheControl, "no-cache");
2615             request.setHTTPHeaderField(HTTPHeaderName::Pragma, "no-cache");
2616         }
2617     }
2618
2619     if (m_overrideResourceLoadPriorityForTesting)
2620         request.setPriority(m_overrideResourceLoadPriorityForTesting.value());
2621
2622     applyUserAgent(request);
2623
2624     if (isMainResource)
2625         request.setHTTPAccept(defaultAcceptHeader);
2626
2627     // Make sure we send the Origin header.
2628     addHTTPOriginIfNeeded(request, String());
2629
2630     // Only set fallback array if it's still empty (later attempts may be incorrect, see bug 117818).
2631     if (request.responseContentDispositionEncodingFallbackArray().isEmpty()) {
2632         // Always try UTF-8. If that fails, try frame encoding (if any) and then the default.
2633         request.setResponseContentDispositionEncodingFallbackArray("UTF-8", m_frame.document()->encoding(), m_frame.settings().defaultTextEncodingName());
2634     }
2635 }
2636
2637 void FrameLoader::addHTTPOriginIfNeeded(ResourceRequest& request, const String& origin)
2638 {
2639     if (!request.httpOrigin().isEmpty())
2640         return;  // Request already has an Origin header.
2641
2642     // Don't send an Origin header for GET or HEAD to avoid privacy issues.
2643     // For example, if an intranet page has a hyperlink to an external web
2644     // site, we don't want to include the Origin of the request because it
2645     // will leak the internal host name. Similar privacy concerns have lead
2646     // to the widespread suppression of the Referer header at the network
2647     // layer.
2648     if (request.httpMethod() == "GET" || request.httpMethod() == "HEAD")
2649         return;
2650
2651     // For non-GET and non-HEAD methods, always send an Origin header so the
2652     // server knows we support this feature.
2653
2654     if (origin.isEmpty()) {
2655         // If we don't know what origin header to attach, we attach the value
2656         // for an empty origin.
2657         request.setHTTPOrigin(SecurityOrigin::createUnique()->toString());
2658         return;
2659     }
2660
2661     request.setHTTPOrigin(origin);
2662 }
2663
2664 void FrameLoader::addHTTPUpgradeInsecureRequestsIfNeeded(ResourceRequest& request)
2665 {
2666     if (request.url().protocolIs("https")) {
2667         // FIXME: Identify HSTS cases and avoid adding the header. <https://bugs.webkit.org/show_bug.cgi?id=157885>
2668         return;
2669     }
2670
2671     request.setHTTPHeaderField(HTTPHeaderName::UpgradeInsecureRequests, ASCIILiteral("1"));
2672 }
2673
2674 void FrameLoader::loadPostRequest(const FrameLoadRequest& request, const String& referrer, FrameLoadType loadType, Event* event, FormState* formState)
2675 {
2676     String frameName = request.frameName();
2677     LockHistory lockHistory = request.lockHistory();
2678     AllowNavigationToInvalidURL allowNavigationToInvalidURL = request.allowNavigationToInvalidURL();
2679     NewFrameOpenerPolicy openerPolicy = request.newFrameOpenerPolicy();
2680
2681     const ResourceRequest& inRequest = request.resourceRequest();
2682     const URL& url = inRequest.url();
2683     const String& contentType = inRequest.httpContentType();
2684     String origin = inRequest.httpOrigin();
2685
2686     ResourceRequest workingResourceRequest(url);    
2687
2688     if (!referrer.isEmpty())
2689         workingResourceRequest.setHTTPReferrer(referrer);
2690     workingResourceRequest.setHTTPOrigin(origin);
2691     workingResourceRequest.setHTTPMethod("POST");
2692     workingResourceRequest.setHTTPBody(inRequest.httpBody());
2693     workingResourceRequest.setHTTPContentType(contentType);
2694     addExtraFieldsToRequest(workingResourceRequest, loadType, true);
2695
2696     if (Document* document = m_frame.document())
2697         document->contentSecurityPolicy()->upgradeInsecureRequestIfNeeded(workingResourceRequest, ContentSecurityPolicy::InsecureRequestType::Load);
2698
2699     NavigationAction action(workingResourceRequest, loadType, true, event, request.shouldOpenExternalURLsPolicy(), request.downloadAttribute());
2700
2701     if (!frameName.isEmpty()) {
2702         // The search for a target frame is done earlier in the case of form submission.
2703         if (Frame* targetFrame = formState ? 0 : findFrameForNavigation(frameName)) {
2704             targetFrame->loader().loadWithNavigationAction(workingResourceRequest, action, lockHistory, loadType, WTFMove(formState), allowNavigationToInvalidURL);
2705             return;
2706         }
2707
2708         policyChecker().checkNewWindowPolicy(action, workingResourceRequest, WTFMove(formState), frameName, [this, allowNavigationToInvalidURL, openerPolicy] (const ResourceRequest& request, FormState* formState, const String& frameName, const NavigationAction& action, bool shouldContinue) {
2709             continueLoadAfterNewWindowPolicy(request, formState, frameName, action, shouldContinue, allowNavigationToInvalidURL, openerPolicy);
2710         });
2711         return;
2712     }
2713
2714     // must grab this now, since this load may stop the previous load and clear this flag
2715     bool isRedirect = m_quickRedirectComing;
2716     loadWithNavigationAction(workingResourceRequest, action, lockHistory, loadType, WTFMove(formState), allowNavigationToInvalidURL);
2717     if (isRedirect) {
2718         m_quickRedirectComing = false;
2719         if (m_provisionalDocumentLoader)
2720             m_provisionalDocumentLoader->setIsClientRedirect(true);
2721     }
2722 }
2723
2724 unsigned long FrameLoader::loadResourceSynchronously(const ResourceRequest& request, StoredCredentials storedCredentials, ClientCredentialPolicy clientCredentialPolicy, ResourceError& error, ResourceResponse& response, RefPtr<SharedBuffer>& data)
2725 {
2726     ASSERT(m_frame.document());
2727     String referrer = SecurityPolicy::generateReferrerHeader(m_frame.document()->referrerPolicy(), request.url(), outgoingReferrer());
2728     
2729     ResourceRequest initialRequest = request;
2730     initialRequest.setTimeoutInterval(10);
2731     
2732     if (!referrer.isEmpty())
2733         initialRequest.setHTTPReferrer(referrer);
2734     addHTTPOriginIfNeeded(initialRequest, outgoingOrigin());
2735
2736     initialRequest.setFirstPartyForCookies(m_frame.mainFrame().loader().documentLoader()->request().url());
2737     
2738     addExtraFieldsToSubresourceRequest(initialRequest);
2739
2740     unsigned long identifier = 0;    
2741     ResourceRequest newRequest(initialRequest);
2742     requestFromDelegate(newRequest, identifier, error);
2743
2744 #if ENABLE(CONTENT_EXTENSIONS)
2745     if (error.isNull()) {
2746         if (auto* page = m_frame.page()) {
2747             if (m_documentLoader) {
2748                 auto blockedStatus = page->userContentProvider().processContentExtensionRulesForLoad(newRequest.url(), ResourceType::Raw, *m_documentLoader);
2749                 applyBlockedStatusToRequest(blockedStatus, newRequest);
2750                 if (blockedStatus.blockedLoad) {
2751                     newRequest = { };
2752                     error = ResourceError(errorDomainWebKitInternal, 0, initialRequest.url(), emptyString());
2753                     response = { };
2754                     data = nullptr;
2755                 }
2756             }
2757         }
2758     }
2759 #endif
2760
2761     m_frame.document()->contentSecurityPolicy()->upgradeInsecureRequestIfNeeded(newRequest, ContentSecurityPolicy::InsecureRequestType::Load);
2762     
2763     if (error.isNull()) {
2764         ASSERT(!newRequest.isNull());
2765
2766         if (!documentLoader()->applicationCacheHost().maybeLoadSynchronously(newRequest, error, response, data)) {
2767             Vector<char> buffer;
2768             platformStrategies()->loaderStrategy()->loadResourceSynchronously(networkingContext(), identifier, newRequest, storedCredentials, clientCredentialPolicy, error, response, buffer);
2769             data = SharedBuffer::adoptVector(buffer);
2770             documentLoader()->applicationCacheHost().maybeLoadFallbackSynchronously(newRequest, error, response, data);
2771             ResourceLoadObserver::sharedObserver().logSubresourceLoading(&m_frame, newRequest, response);
2772         }
2773     }
2774     notifier().sendRemainingDelegateMessages(m_documentLoader.get(), identifier, request, response, data ? data->data() : nullptr, data ? data->size() : 0, -1, error);
2775     return identifier;
2776 }
2777
2778 const ResourceRequest& FrameLoader::originalRequest() const
2779 {
2780     return activeDocumentLoader()->originalRequestCopy();
2781 }
2782
2783 void FrameLoader::receivedMainResourceError(const ResourceError& error)
2784 {
2785     // Retain because the stop may release the last reference to it.
2786     Ref<Frame> protect(m_frame);
2787
2788     RefPtr<DocumentLoader> loader = activeDocumentLoader();
2789     // FIXME: Don't want to do this if an entirely new load is going, so should check
2790     // that both data sources on the frame are either this or nil.
2791     stop();
2792     if (m_client.shouldFallBack(error))
2793         handleFallbackContent();
2794
2795     if (m_state == FrameStateProvisional && m_provisionalDocumentLoader) {
2796         if (m_submittedFormURL == m_provisionalDocumentLoader->originalRequestCopy().url())
2797             m_submittedFormURL = URL();
2798             
2799         // We might have made a page cache item, but now we're bailing out due to an error before we ever
2800         // transitioned to the new page (before WebFrameState == commit).  The goal here is to restore any state
2801         // so that the existing view (that wenever got far enough to replace) can continue being used.
2802         history().invalidateCurrentItemCachedPage();
2803         
2804         // Call clientRedirectCancelledOrFinished here so that the frame load delegate is notified that the redirect's
2805         // status has changed, if there was a redirect. The frame load delegate may have saved some state about
2806         // the redirect in its -webView:willPerformClientRedirectToURL:delay:fireDate:forFrame:. Since we are definitely
2807         // not going to use this provisional resource, as it was cancelled, notify the frame load delegate that the redirect
2808         // has ended.
2809         if (m_sentRedirectNotification)
2810             clientRedirectCancelledOrFinished(false);
2811     }
2812
2813     checkCompleted();
2814     if (m_frame.page())
2815         checkLoadComplete();
2816 }
2817
2818 void FrameLoader::continueFragmentScrollAfterNavigationPolicy(const ResourceRequest& request, bool shouldContinue)
2819 {
2820     m_quickRedirectComing = false;
2821
2822     if (!shouldContinue)
2823         return;
2824
2825     // Calling stopLoading() on the provisional document loader can cause the underlying
2826     // frame to be deallocated.
2827     Ref<Frame> protectedFrame(m_frame);
2828
2829     // If we have a provisional request for a different document, a fragment scroll should cancel it.
2830     if (m_provisionalDocumentLoader && !equalIgnoringFragmentIdentifier(m_provisionalDocumentLoader->request().url(), request.url())) {
2831         m_provisionalDocumentLoader->stopLoading();
2832         setProvisionalDocumentLoader(nullptr);
2833     }
2834
2835     bool isRedirect = m_quickRedirectComing || policyChecker().loadType() == FrameLoadType::RedirectWithLockedBackForwardList;
2836     loadInSameDocument(request.url(), 0, !isRedirect);
2837 }
2838
2839 bool FrameLoader::shouldPerformFragmentNavigation(bool isFormSubmission, const String& httpMethod, FrameLoadType loadType, const URL& url)
2840 {
2841     // We don't do this if we are submitting a form with method other than "GET", explicitly reloading,
2842     // currently displaying a frameset, or if the URL does not have a fragment.
2843     // These rules were originally based on what KHTML was doing in KHTMLPart::openURL.
2844
2845     // FIXME: What about load types other than Standard and Reload?
2846
2847     return (!isFormSubmission || equalLettersIgnoringASCIICase(httpMethod, "get"))
2848         && loadType != FrameLoadType::Reload
2849         && loadType != FrameLoadType::ReloadFromOrigin
2850         && loadType != FrameLoadType::Same
2851         && !shouldReload(m_frame.document()->url(), url)
2852         // We don't want to just scroll if a link from within a
2853         // frameset is trying to reload the frameset into _top.
2854         && !m_frame.document()->isFrameSet();
2855 }
2856
2857 void FrameLoader::scrollToFragmentWithParentBoundary(const URL& url)
2858 {
2859     FrameView* view = m_frame.view();
2860     if (!view)
2861         return;
2862
2863     // Leaking scroll position to a cross-origin ancestor would permit the so-called "framesniffing" attack.
2864     RefPtr<Frame> boundaryFrame(url.hasFragmentIdentifier() ? m_frame.document()->findUnsafeParentScrollPropagationBoundary() : 0);
2865
2866     if (boundaryFrame)
2867         boundaryFrame->view()->setSafeToPropagateScrollToParent(false);
2868
2869     view->scrollToFragment(url);
2870
2871     if (boundaryFrame)
2872         boundaryFrame->view()->setSafeToPropagateScrollToParent(true);
2873 }
2874
2875 bool FrameLoader::shouldClose()
2876 {
2877     Page* page = m_frame.page();
2878     if (!page)
2879         return true;
2880     if (!page->chrome().canRunBeforeUnloadConfirmPanel())
2881         return true;
2882
2883     // Store all references to each subframe in advance since beforeunload's event handler may modify frame
2884     Vector<Ref<Frame>, 16> targetFrames;
2885     targetFrames.append(m_frame);
2886     for (Frame* child = m_frame.tree().firstChild(); child; child = child->tree().traverseNext(&m_frame))
2887         targetFrames.append(*child);
2888
2889     bool shouldClose = false;
2890     {
2891         NavigationDisablerForBeforeUnload navigationDisabler;
2892         size_t i;
2893
2894         for (i = 0; i < targetFrames.size(); i++) {
2895             if (!targetFrames[i]->tree().isDescendantOf(&m_frame))
2896                 continue;
2897             if (!targetFrames[i]->loader().dispatchBeforeUnloadEvent(page->chrome(), this))
2898                 break;
2899         }
2900
2901         if (i == targetFrames.size())
2902             shouldClose = true;
2903     }
2904
2905     if (!shouldClose)
2906         m_submittedFormURL = URL();
2907
2908     m_currentNavigationHasShownBeforeUnloadConfirmPanel = false;
2909     return shouldClose;
2910 }
2911
2912 void FrameLoader::dispatchUnloadEvents(UnloadEventPolicy unloadEventPolicy)
2913 {
2914     if (!m_frame.document())
2915         return;
2916
2917     // We store the frame's page in a local variable because the frame might get detached inside dispatchEvent.
2918     ForbidPromptsScope forbidPrompts(m_frame.page());
2919     IgnoreOpensDuringUnloadCountIncrementer ignoreOpensDuringUnloadCountIncrementer(m_frame.document());
2920
2921     if (m_didCallImplicitClose && !m_wasUnloadEventEmitted) {
2922         auto* currentFocusedElement = m_frame.document()->focusedElement();
2923         if (is<HTMLInputElement>(currentFocusedElement))
2924             downcast<HTMLInputElement>(*currentFocusedElement).endEditing();
2925         if (m_pageDismissalEventBeingDispatched == PageDismissalType::None) {
2926             if (unloadEventPolicy == UnloadEventPolicyUnloadAndPageHide) {
2927                 m_pageDismissalEventBeingDispatched = PageDismissalType::PageHide;
2928                 m_frame.document()->domWindow()->dispatchEvent(PageTransitionEvent::create(eventNames().pagehideEvent, m_frame.document()->pageCacheState() == Document::AboutToEnterPageCache), m_frame.document());
2929             }
2930
2931             // FIXME: update Page Visibility state here.
2932             // https://bugs.webkit.org/show_bug.cgi?id=116770
2933
2934             if (m_frame.document()->pageCacheState() == Document::NotInPageCache) {
2935                 Ref<Event> unloadEvent(Event::create(eventNames().unloadEvent, false, false));
2936                 // The DocumentLoader (and thus its LoadTiming) might get destroyed
2937                 // while dispatching the event, so protect it to prevent writing the end
2938                 // time into freed memory.
2939                 RefPtr<DocumentLoader> documentLoader = m_provisionalDocumentLoader;
2940                 m_pageDismissalEventBeingDispatched = PageDismissalType::Unload;
2941                 if (documentLoader && documentLoader->timing().startTime() && !documentLoader->timing().unloadEventStart() && !documentLoader->timing().unloadEventEnd()) {
2942                     auto& timing = documentLoader->timing();
2943                     timing.markUnloadEventStart();
2944                     m_frame.document()->domWindow()->dispatchEvent(unloadEvent, m_frame.document());
2945                     timing.markUnloadEventEnd();
2946                 } else
2947                     m_frame.document()->domWindow()->dispatchEvent(unloadEvent, m_frame.document());
2948             }
2949         }
2950         m_pageDismissalEventBeingDispatched = PageDismissalType::None;
2951         if (m_frame.document())
2952             m_frame.document()->updateStyleIfNeeded();
2953         m_wasUnloadEventEmitted = true;
2954     }
2955
2956     // Dispatching the unload event could have made m_frame.document() null.
2957     if (!m_frame.document())
2958         return;
2959
2960     if (m_frame.document()->pageCacheState() != Document::NotInPageCache)
2961         return;
2962
2963     // Don't remove event listeners from a transitional empty document (see bug 28716 for more information).
2964     bool keepEventListeners = m_stateMachine.isDisplayingInitialEmptyDocument() && m_provisionalDocumentLoader
2965         && m_frame.document()->isSecureTransitionTo(m_provisionalDocumentLoader->url());
2966
2967     if (!keepEventListeners)
2968         m_frame.document()->removeAllEventListeners();
2969 }
2970
2971 bool FrameLoader::dispatchBeforeUnloadEvent(Chrome& chrome, FrameLoader* frameLoaderBeingNavigated)
2972 {
2973     DOMWindow* domWindow = m_frame.document()->domWindow();
2974     if (!domWindow)
2975         return true;
2976
2977     RefPtr<Document> document = m_frame.document();
2978     if (!document->bodyOrFrameset())
2979         return true;
2980     
2981     Ref<BeforeUnloadEvent> beforeUnloadEvent = BeforeUnloadEvent::create();
2982     m_pageDismissalEventBeingDispatched = PageDismissalType::BeforeUnload;
2983
2984     {
2985         ForbidPromptsScope forbidPrompts(m_frame.page());
2986         IgnoreOpensDuringUnloadCountIncrementer ignoreOpensDuringUnloadCountIncrementer(m_frame.document());
2987         domWindow->dispatchEvent(beforeUnloadEvent, domWindow->document());
2988     }
2989
2990     m_pageDismissalEventBeingDispatched = PageDismissalType::None;
2991
2992     if (!beforeUnloadEvent->defaultPrevented())
2993         document->defaultEventHandler(beforeUnloadEvent.get());
2994     if (beforeUnloadEvent->returnValue().isNull())
2995         return true;
2996
2997     // If the navigating FrameLoader has already shown a beforeunload confirmation panel for the current navigation attempt,
2998     // this frame is not allowed to cause another one to be shown.
2999     if (frameLoaderBeingNavigated->m_currentNavigationHasShownBeforeUnloadConfirmPanel) {
3000         document->addConsoleMessage(MessageSource::JS, MessageLevel::Error, ASCIILiteral("Blocked attempt to show multiple beforeunload confirmation dialogs for the same navigation."));
3001         return true;
3002     }
3003
3004     // We should only display the beforeunload dialog for an iframe if its SecurityOrigin matches all
3005     // ancestor frame SecurityOrigins up through the navigating FrameLoader.
3006     if (frameLoaderBeingNavigated != this) {
3007         Frame* parentFrame = m_frame.tree().parent();
3008         while (parentFrame) {
3009             Document* parentDocument = parentFrame->document();
3010             if (!parentDocument)
3011                 return true;
3012             if (!m_frame.document() || !m_frame.document()->securityOrigin()->canAccess(parentDocument->securityOrigin())) {
3013                 document->addConsoleMessage(MessageSource::JS, MessageLevel::Error, ASCIILiteral("Blocked attempt to show beforeunload confirmation dialog on behalf of a frame with different security origin. Protocols, domains, and ports must match."));
3014                 return true;
3015             }
3016             
3017             if (&parentFrame->loader() == frameLoaderBeingNavigated)
3018                 break;
3019             
3020             parentFrame = parentFrame->tree().parent();
3021         }
3022         
3023         // The navigatingFrameLoader should always be in our ancestory.
3024         ASSERT(parentFrame);
3025         ASSERT(&parentFrame->loader() == frameLoaderBeingNavigated);
3026     }
3027
3028     frameLoaderBeingNavigated->m_currentNavigationHasShownBeforeUnloadConfirmPanel = true;
3029
3030     String text = document->displayStringModifiedByEncoding(beforeUnloadEvent->returnValue());
3031     return chrome.runBeforeUnloadConfirmPanel(text, &m_frame);
3032 }
3033
3034 void FrameLoader::continueLoadAfterNavigationPolicy(const ResourceRequest& request, FormState* formState, bool shouldContinue, AllowNavigationToInvalidURL allowNavigationToInvalidURL)
3035 {
3036     // If we loaded an alternate page to replace an unreachableURL, we'll get in here with a
3037     // nil policyDataSource because loading the alternate page will have passed
3038     // through this method already, nested; otherwise, policyDataSource should still be set.
3039     ASSERT(m_policyDocumentLoader || !m_provisionalDocumentLoader->unreachableURL().isEmpty());
3040
3041     bool isTargetItem = history().provisionalItem() ? history().provisionalItem()->isTargetItem() : false;
3042
3043     bool urlIsDisallowed = allowNavigationToInvalidURL == AllowNavigationToInvalidURL::No && !request.url().isValid();
3044
3045     // Three reasons we can't continue:
3046     //    1) Navigation policy delegate said we can't so request is nil. A primary case of this 
3047     //       is the user responding Cancel to the form repost nag sheet.
3048     //    2) User responded Cancel to an alert popped up by the before unload event handler.
3049     //    3) The request's URL is invalid and navigation to invalid URLs is disallowed.
3050     bool canContinue = shouldContinue && shouldClose() && !urlIsDisallowed;
3051
3052     if (!canContinue) {
3053         // If we were waiting for a quick redirect, but the policy delegate decided to ignore it, then we 
3054         // need to report that the client redirect was cancelled.
3055         // FIXME: The client should be told about ignored non-quick redirects, too.
3056         if (m_quickRedirectComing)
3057             clientRedirectCancelledOrFinished(false);
3058
3059         setPolicyDocumentLoader(nullptr);
3060
3061         // If the navigation request came from the back/forward menu, and we punt on it, we have the 
3062         // problem that we have optimistically moved the b/f cursor already, so move it back.  For sanity, 
3063         // we only do this when punting a navigation for the target frame or top-level frame.  
3064         if ((isTargetItem || m_frame.isMainFrame()) && isBackForwardLoadType(policyChecker().loadType())) {
3065             if (Page* page = m_frame.page()) {
3066                 if (HistoryItem* resetItem = m_frame.mainFrame().loader().history().currentItem()) {
3067                     page->backForward().setCurrentItem(resetItem);
3068                     m_frame.loader().client().updateGlobalHistoryItemForPage();
3069                 }
3070             }
3071         }
3072         return;
3073     }
3074
3075     FrameLoadType type = policyChecker().loadType();
3076     // A new navigation is in progress, so don't clear the history's provisional item.
3077     stopAllLoaders(ShouldNotClearProvisionalItem);
3078     
3079     // <rdar://problem/6250856> - In certain circumstances on pages with multiple frames, stopAllLoaders()
3080     // might detach the current FrameLoader, in which case we should bail on this newly defunct load. 
3081     if (!m_frame.page())
3082         return;
3083
3084     setProvisionalDocumentLoader(m_policyDocumentLoader.get());
3085     m_loadType = type;
3086     setState(FrameStateProvisional);
3087
3088     setPolicyDocumentLoader(nullptr);
3089
3090     if (isBackForwardLoadType(type)) {
3091         auto& diagnosticLoggingClient = m_frame.page()->diagnosticLoggingClient();
3092         if (history().provisionalItem()->isInPageCache()) {
3093             diagnosticLoggingClient.logDiagnosticMessageWithResult(DiagnosticLoggingKeys::pageCacheKey(), DiagnosticLoggingKeys::retrievalKey(), DiagnosticLoggingResultPass, ShouldSample::Yes);
3094             loadProvisionalItemFromCachedPage();
3095             return;
3096         }
3097         diagnosticLoggingClient.logDiagnosticMessageWithResult(DiagnosticLoggingKeys::pageCacheKey(), DiagnosticLoggingKeys::retrievalKey(), DiagnosticLoggingResultFail, ShouldSample::Yes);
3098     }
3099
3100     if (!formState) {
3101         continueLoadAfterWillSubmitForm();
3102         return;
3103     }
3104
3105     m_client.dispatchWillSubmitForm(*formState, [this] (PolicyAction action) {
3106         policyChecker().continueLoadAfterWillSubmitForm(action);
3107     });
3108 }
3109
3110 void FrameLoader::continueLoadAfterNewWindowPolicy(const ResourceRequest& request,
3111     FormState* formState, const String& frameName, const NavigationAction& action, bool shouldContinue, AllowNavigationToInvalidURL allowNavigationToInvalidURL, NewFrameOpenerPolicy openerPolicy)
3112 {
3113     if (!shouldContinue)
3114         return;
3115
3116     Ref<Frame> frame(m_frame);
3117     RefPtr<Frame> mainFrame = m_client.dispatchCreatePage(action);
3118     if (!mainFrame)
3119         return;
3120
3121     mainFrame->loader().forceSandboxFlags(frame->loader().effectiveSandboxFlags());
3122
3123     if (frameName != "_blank")
3124         mainFrame->tree().setName(frameName);
3125
3126     mainFrame->page()->setOpenedByDOM();
3127     mainFrame->loader().m_client.dispatchShow();
3128     if (openerPolicy == NewFrameOpenerPolicy::Allow) {
3129         mainFrame->loader().setOpener(frame.ptr());
3130         mainFrame->document()->setReferrerPolicy(frame->document()->referrerPolicy());
3131     }
3132
3133     NavigationAction newAction(request, action.shouldOpenExternalURLsPolicy());
3134     mainFrame->loader().loadWithNavigationAction(request, newAction, LockHistory::No, FrameLoadType::Standard, formState, allowNavigationToInvalidURL);
3135 }
3136
3137 void FrameLoader::requestFromDelegate(ResourceRequest& request, unsigned long& identifier, ResourceError& error)
3138 {
3139     ASSERT(!request.isNull());
3140
3141     identifier = 0;
3142     if (Page* page = m_frame.page()) {
3143         identifier = page->progress().createUniqueIdentifier();
3144         notifier().assignIdentifierToInitialRequest(identifier, m_documentLoader.get(), request);
3145     }
3146
3147     ResourceRequest newRequest(request);
3148     notifier().dispatchWillSendRequest(m_documentLoader.get(), identifier, newRequest, ResourceResponse());
3149
3150     if (newRequest.isNull())
3151         error = cancelledError(request);
3152     else
3153         error = ResourceError();
3154
3155     request = newRequest;
3156 }
3157
3158 void FrameLoader::loadedResourceFromMemoryCache(CachedResource* resource, ResourceRequest& newRequest)
3159 {
3160     Page* page = m_frame.page();
3161     if (!page)
3162         return;
3163
3164     if (!resource->shouldSendResourceLoadCallbacks() || m_documentLoader->haveToldClientAboutLoad(resource->url()))
3165         return;
3166
3167     // Main resource delegate messages are synthesized in MainResourceLoader, so we must not send them here.
3168     if (resource->type() == CachedResource::MainResource)
3169         return;
3170
3171     if (!page->areMemoryCacheClientCallsEnabled()) {
3172         InspectorInstrumentation::didLoadResourceFromMemoryCache(*page, m_documentLoader.get(), resource);
3173         m_documentLoader->recordMemoryCacheLoadForFutureClientNotification(resource->resourceRequest());
3174         m_documentLoader->didTellClientAboutLoad(resource->url());
3175         return;
3176     }
3177
3178     if (m_client.dispatchDidLoadResourceFromMemoryCache(m_documentLoader.get(), newRequest, resource->response(), resource->encodedSize())) {
3179         InspectorInstrumentation::didLoadResourceFromMemoryCache(*page, m_documentLoader.get(), resource);
3180         m_documentLoader->didTellClientAboutLoad(resource->url());
3181         return;
3182     }
3183
3184     unsigned long identifier;
3185     ResourceError error;
3186     requestFromDelegate(newRequest, identifier, error);
3187     InspectorInstrumentation::markResourceAsCached(*page, identifier);
3188     notifier().sendRemainingDelegateMessages(m_documentLoader.get(), identifier, newRequest, resource->response(), 0, resource->encodedSize(), 0, error);
3189 }
3190
3191 void FrameLoader::applyUserAgent(ResourceRequest& request)
3192 {
3193     String userAgent = this->userAgent(request.url());
3194     ASSERT(!userAgent.isNull());
3195     request.setHTTPUserAgent(userAgent);
3196 }
3197
3198 bool FrameLoader::shouldInterruptLoadForXFrameOptions(const String& content, const URL& url, unsigned long requestIdentifier)
3199 {
3200     Frame& topFrame = m_frame.tree().top();
3201     if (&m_frame == &topFrame)
3202         return false;
3203
3204     XFrameOptionsDisposition disposition = parseXFrameOptionsHeader(content);
3205
3206     switch (disposition) {
3207     case XFrameOptionsSameOrigin: {
3208         RefPtr<SecurityOrigin> origin = SecurityOrigin::create(url);
3209         if (!origin->isSameSchemeHostPort(topFrame.document()->securityOrigin()))
3210             return true;
3211         for (Frame* frame = m_frame.tree().parent(); frame; frame = frame->tree().parent()) {
3212             if (!origin->isSameSchemeHostPort(frame->document()->securityOrigin()))
3213                 break;
3214         }
3215         return false;
3216     }
3217     case XFrameOptionsDeny:
3218         return true;
3219     case XFrameOptionsAllowAll:
3220         return false;
3221     case XFrameOptionsConflict:
3222         m_frame.document()->addConsoleMessage(MessageSource::JS, MessageLevel::Error, "Multiple 'X-Frame-Options' headers with conflicting values ('" + content + "') encountered when loading '" + url.stringCenterEllipsizedToLength() + "'. Falling back to 'DENY'.", requestIdentifier);
3223         return true;
3224     case XFrameOptionsInvalid:
3225         m_frame.document()->addConsoleMessage(MessageSource::JS, MessageLevel::Error, "Invalid 'X-Frame-Options' header encountered when loading '" + url.stringCenterEllipsizedToLength() + "': '" + content + "' is not a recognized directive. The header will be ignored.", requestIdentifier);
3226         return false;
3227     case XFrameOptionsNone:
3228         return false;
3229     }
3230     ASSERT_NOT_REACHED();
3231     return false;
3232 }
3233
3234 void FrameLoader::loadProvisionalItemFromCachedPage()
3235 {
3236     DocumentLoader* provisionalLoader = provisionalDocumentLoader();
3237     LOG(PageCache, "WebCorePageCache: Loading provisional DocumentLoader %p with URL '%s' from CachedPage", provisionalDocumentLoader(), provisionalDocumentLoader()->url().stringCenterEllipsizedToLength().utf8().data());
3238
3239     prepareForLoadStart();
3240
3241     m_loadingFromCachedPage = true;
3242
3243     // Should have timing data from previous time(s) the page was shown.
3244     ASSERT(provisionalLoader->timing().startTime());
3245     provisionalLoader->resetTiming();
3246     provisionalLoader->timing().markStartTime();
3247
3248     provisionalLoader->setCommitted(true);
3249     commitProvisionalLoad();
3250 }
3251
3252 bool FrameLoader::shouldTreatURLAsSameAsCurrent(const URL& url) const
3253 {
3254     if (!history().currentItem())
3255         return false;
3256     return url == history().currentItem()->url() || url == history().currentItem()->originalURL();
3257 }
3258
3259 bool FrameLoader::shouldTreatURLAsSrcdocDocument(const URL& url) const
3260 {
3261     if (!equalLettersIgnoringASCIICase(url.string(), "about:srcdoc"))
3262         return false;
3263     HTMLFrameOwnerElement* ownerElement = m_frame.ownerElement();
3264     if (!ownerElement)
3265         return false;
3266     if (!ownerElement->hasTagName(iframeTag))
3267         return false;
3268     return ownerElement->hasAttributeWithoutSynchronization(srcdocAttr);
3269 }
3270
3271 Frame* FrameLoader::findFrameForNavigation(const AtomicString& name, Document* activeDocument)
3272 {
3273     Frame* frame = m_frame.tree().find(name);
3274
3275     // FIXME: Eventually all callers should supply the actual activeDocument so we can call canNavigate with the right document.
3276     if (!activeDocument)
3277         activeDocument = m_frame.document();
3278
3279     if (!activeDocument->canNavigate(frame))
3280         return nullptr;
3281
3282     return frame;
3283 }
3284
3285 void FrameLoader::loadSameDocumentItem(HistoryItem& item)
3286 {
3287     ASSERT(item.documentSequenceNumber() == history().currentItem()->documentSequenceNumber());
3288
3289     Ref<Frame> protect(m_frame);
3290
3291     // Save user view state to the current history item here since we don't do a normal load.
3292     // FIXME: Does form state need to be saved here too?
3293     history().saveScrollPositionAndViewStateToItem(history().currentItem());
3294     if (FrameView* view = m_frame.view())
3295         view->setWasScrolledByUser(false);
3296
3297     history().setCurrentItem(&item);
3298         
3299     // loadInSameDocument() actually changes the URL and notifies load delegates of a "fake" load
3300     loadInSameDocument(item.url(), item.stateObject(), false);
3301
3302     // Restore user view state from the current history item here since we don't do a normal load.
3303     history().restoreScrollPositionAndViewState();
3304 }
3305
3306 // FIXME: This function should really be split into a couple pieces, some of
3307 // which should be methods of HistoryController and some of which should be
3308 // methods of FrameLoader.
3309 void FrameLoader::loadDifferentDocumentItem(HistoryItem& item, FrameLoadType loadType, FormSubmissionCacheLoadPolicy cacheLoadPolicy)
3310 {
3311     // Remember this item so we can traverse any child items as child frames load
3312     history().setProvisionalItem(&item);
3313
3314     if (CachedPage* cachedPage = PageCache::singleton().get(item, m_frame.page())) {
3315         auto documentLoader = cachedPage->documentLoader();
3316         m_client.updateCachedDocumentLoader(*documentLoader);
3317         documentLoader->setTriggeringAction(NavigationAction(documentLoader->request(), loadType, false));
3318         documentLoader->setLastCheckedRequest(ResourceRequest());
3319         loadWithDocumentLoader(documentLoader, loadType, 0, AllowNavigationToInvalidURL::Yes);
3320         return;
3321     }
3322
3323     URL itemURL = item.url();
3324     URL itemOriginalURL = item.originalURL();
3325     URL currentURL;
3326     if (documentLoader())
3327         currentURL = documentLoader()->url();
3328     RefPtr<FormData> formData = item.formData();
3329
3330     ResourceRequest request(itemURL);
3331
3332     if (!item.referrer().isNull())
3333         request.setHTTPReferrer(item.referrer());
3334
3335     ShouldOpenExternalURLsPolicy shouldOpenExternalURLsPolicy = shouldOpenExternalURLsPolicyToApply(m_frame, item.shouldOpenExternalURLsPolicy());
3336     bool isFormSubmission = false;
3337     Event* event = nullptr;
3338
3339     // If this was a repost that failed the page cache, we might try to repost the form.
3340     NavigationAction action;
3341     if (formData) {
3342         formData->generateFiles(m_frame.document());
3343
3344         request.setHTTPMethod("POST");
3345         request.setHTTPBody(WTFMove(formData));
3346         request.setHTTPContentType(item.formContentType());
3347         RefPtr<SecurityOrigin> securityOrigin = SecurityOrigin::createFromString(item.referrer());
3348         addHTTPOriginIfNeeded(request, securityOrigin->toString());
3349         addHTTPUpgradeInsecureRequestsIfNeeded(request);
3350
3351         // Make sure to add extra fields to the request after the Origin header is added for the FormData case.
3352         // See https://bugs.webkit.org/show_bug.cgi?id=22194 for more discussion.
3353         addExtraFieldsToRequest(request, loadType, true);
3354         
3355         // FIXME: Slight hack to test if the NSURL cache contains the page we're going to.
3356         // We want to know this before talking to the policy delegate, since it affects whether 
3357         // we show the DoYouReallyWantToRepost nag.
3358         //
3359         // This trick has a small bug (3123893) where we might find a cache hit, but then
3360         // have the item vanish when we try to use it in the ensuing nav.  This should be
3361         // extremely rare, but in that case the user will get an error on the navigation.
3362         
3363         if (cacheLoadPolicy == MayAttemptCacheOnlyLoadForFormSubmissionItem) {
3364             request.setCachePolicy(ReturnCacheDataDontLoad);
3365             action = NavigationAction(request, loadType, isFormSubmission, event, shouldOpenExternalURLsPolicy);
3366         } else {
3367             request.setCachePolicy(ReturnCacheDataElseLoad);
3368             action = NavigationAction(request, NavigationType::FormResubmitted, event, shouldOpenExternalURLsPolicy);
3369         }
3370     } else {
3371         switch (loadType) {
3372         case FrameLoadType::Reload:
3373         case FrameLoadType::ReloadFromOrigin:
3374             request.setCachePolicy(ReloadIgnoringCacheData);
3375             break;
3376         case FrameLoadType::Back:
3377         case FrameLoadType::Forward:
3378         case FrameLoadType::IndexedBackForward: {
3379 #if PLATFORM(COCOA)
3380             bool allowStaleData = true;
3381 #else
3382             bool allowStaleData = !item.wasRestoredFromSession();
3383 #endif
3384             if (allowStaleData)
3385                 request.setCachePolicy(ReturnCacheDataElseLoad);
3386             item.setWasRestoredFromSession(false);
3387             break;
3388         }
3389         case FrameLoadType::Standard:
3390         case FrameLoadType::RedirectWithLockedBackForwardList:
3391             break;
3392         case FrameLoadType::Same:
3393         default:
3394             ASSERT_NOT_REACHED();
3395         }
3396
3397         addExtraFieldsToRequest(request, loadType, true);
3398
3399         ResourceRequest requestForOriginalURL(request);
3400         requestForOriginalURL.setURL(itemOriginalURL);
3401         action = NavigationAction(requestForOriginalURL, loadType, isFormSubmission, event, shouldOpenExternalURLsPolicy);
3402     }
3403
3404     loadWithNavigationAction(request, action, LockHistory::No, loadType, 0, AllowNavigationToInvalidURL::Yes);
3405 }
3406
3407 // Loads content into this frame, as specified by history item
3408 void FrameLoader::loadItem(HistoryItem& item, FrameLoadType loadType)
3409 {
3410     m_requestedHistoryItem = &item;
3411     HistoryItem* currentItem = history().currentItem();
3412     bool sameDocumentNavigation = currentItem && item.shouldDoSameDocumentNavigationTo(*currentItem);
3413
3414     if (sameDocumentNavigation)
3415         loadSameDocumentItem(item);
3416     else
3417         loadDifferentDocumentItem(item, loadType, MayAttemptCacheOnlyLoadForFormSubmissionItem);
3418 }
3419
3420 void FrameLoader::retryAfterFailedCacheOnlyMainResourceLoad()
3421 {
3422     ASSERT(m_state == FrameStateProvisional);
3423     ASSERT(!m_loadingFromCachedPage);
3424     ASSERT(history().provisionalItem());
3425     ASSERT(history().provisionalItem()->formData());
3426     ASSERT(history().provisionalItem() == m_requestedHistoryItem.get());
3427
3428     FrameLoadType loadType = m_loadType;
3429     HistoryItem& item = *history().provisionalItem();
3430
3431     stopAllLoaders(ShouldNotClearProvisionalItem);
3432     loadDifferentDocumentItem(item, loadType, MayNotAttemptCacheOnlyLoadForFormSubmissionItem);
3433 }
3434
3435 ResourceError FrameLoader::cancelledError(const ResourceRequest& request) const
3436 {
3437     ResourceError error = m_client.cancelledError(request);
3438     error.setType(ResourceError::Type::Cancellation);
3439     return error;
3440 }
3441
3442 ResourceError FrameLoader::blockedByContentBlockerError(const ResourceRequest& request) const
3443 {
3444     return m_client.blockedByContentBlockerError(request);
3445 }
3446
3447 ResourceError FrameLoader::blockedError(const ResourceRequest& request) const
3448 {
3449     ResourceError error = m_client.blockedError(request);
3450     error.setType(ResourceError::Type::Cancellation);
3451     return error;
3452 }
3453
3454 #if ENABLE(CONTENT_FILTERING)
3455 ResourceError FrameLoader::blockedByContentFilterError(const ResourceRequest& request) const
3456 {
3457     ResourceError error = m_client.blockedByContentFilterError(request);
3458     error.setType(ResourceError::Type::General);
3459     return error;
3460 }
3461 #endif
3462
3463 #if PLATFORM(IOS)
3464 RetainPtr<CFDictionaryRef> FrameLoader::connectionProperties(ResourceLoader* loader)
3465 {
3466     return m_client.connectionProperties(loader->documentLoader(), loader->identifier());
3467 }
3468 #endif
3469
3470 String FrameLoader::referrer() const
3471 {
3472     return m_documentLoader ? m_documentLoader->request().httpReferrer() : emptyString();
3473 }
3474
3475 void FrameLoader::dispatchDidClearWindowObjectsInAllWorlds()
3476 {
3477     if (!m_frame.script().canExecuteScripts(NotAboutToExecuteScript))
3478         return;
3479
3480     Vector<Ref<DOMWrapperWorld>> worlds;
3481     ScriptController::getAllWorlds(worlds);
3482     for (auto& world : worlds)
3483         dispatchDidClearWindowObjectInWorld(world);
3484 }
3485
3486 void FrameLoader::dispatchDidClearWindowObjectInWorld(DOMWrapperWorld& world)
3487 {
3488     if (!m_frame.script().canExecuteScripts(NotAboutToExecuteScript) || !m_frame.script().existingWindowShell(world))
3489         return;
3490
3491     m_client.dispatchDidClearWindowObjectInWorld(world);
3492
3493     if (Page* page = m_frame.page())
3494         page->inspectorController().didClearWindowObjectInWorld(m_frame, world);
3495
3496     InspectorInstrumentation::didClearWindowObjectInWorld(m_frame, world);
3497 }
3498
3499 void FrameLoader::dispatchGlobalObjectAvailableInAllWorlds()
3500 {
3501     Vector<Ref<DOMWrapperWorld>> worlds;
3502     ScriptController::getAllWorlds(worlds);
3503     for (auto& world : worlds)
3504         m_client.dispatchGlobalObjectAvailable(world);
3505 }
3506
3507 SandboxFlags FrameLoader::effectiveSandboxFlags() const
3508 {
3509     SandboxFlags flags = m_forcedSandboxFlags;
3510     if (Frame* parentFrame = m_frame.tree().parent())
3511         flags |= parentFrame->document()->sandboxFlags();
3512     if (HTMLFrameOwnerElement* ownerElement = m_frame.ownerElement())
3513         flags |= ownerElement->sandboxFlags();
3514     return flags;
3515 }
3516
3517 void FrameLoader::didChangeTitle(DocumentLoader* loader)
3518 {
3519     m_client.didChangeTitle(loader);
3520
3521     if (loader == m_documentLoader) {
3522         // Must update the entries in the back-forward list too.
3523         history().setCurrentItemTitle(loader->title());
3524         // This must go through the WebFrame because it has the right notion of the current b/f item.
3525         m_client.setTitle(loader->title(), loader->urlForHistory());
3526         m_client.setMainFrameDocumentReady(true); // update observers with new DOMDocument
3527         m_client.dispatchDidReceiveTitle(loader->title());
3528     }
3529
3530 #if ENABLE(REMOTE_INSPECTOR)
3531     if (m_frame.isMainFrame())
3532         m_frame.page()->remoteInspectorInformationDidChange();
3533 #endif
3534 }
3535
3536 void FrameLoader::dispatchDidCommitLoad(std::optional<HasInsecureContent> initialHasInsecureContent)
3537 {
3538     if (m_stateMachine.creatingInitialEmptyDocument())
3539         return;
3540
3541     m_client.dispatchDidCommitLoad(initialHasInsecureContent);
3542
3543     if (m_frame.isMainFrame()) {
3544         m_frame.page()->resetSeenPlugins();
3545         m_frame.page()->resetSeenMediaEngines();
3546     }
3547
3548     InspectorInstrumentation::didCommitLoad(m_frame, m_documentLoader.get());
3549
3550 #if ENABLE(REMOTE_INSPECTOR)
3551     if (m_frame.isMainFrame())
3552         m_frame.page()->remoteInspectorInformationDidChange();
3553 #endif
3554 }
3555
3556 void FrameLoader::tellClientAboutPastMemoryCacheLoads()
3557 {
3558     ASSERT(m_frame.page());
3559     ASSERT(m_frame.page()->areMemoryCacheClientCallsEnabled());
3560
3561     if (!m_documentLoader)
3562         return;
3563
3564     Vector<ResourceRequest> pastLoads;
3565     m_documentLoader->takeMemoryCacheLoadsForClientNotification(pastLoads);
3566
3567     for (auto& pastLoad : pastLoads) {
3568         CachedResource* resource = MemoryCache::singleton().resourceForRequest(pastLoad, m_frame.page()->sessionID());
3569
3570         // FIXME: These loads, loaded from cache, but now gone from the cache by the time
3571         // Page::setMemoryCacheClientCallsEnabled(true) is called, will not be seen by the client.
3572         // Consider if there's some efficient way of remembering enough to deliver this client call.
3573         // We have the URL, but not the rest of the response or the length.
3574         if (!resource)
3575             continue;
3576
3577         ResourceRequest request(resource->url());
3578         m_client.dispatchDidLoadResourceFromMemoryCache(m_documentLoader.get(), request, resource->response(), resource->encodedSize());
3579     }
3580 }
3581
3582 NetworkingContext* FrameLoader::networkingContext() const
3583 {
3584     return m_networkingContext.get();
3585 }
3586
3587 void FrameLoader::loadProgressingStatusChanged()
3588 {
3589     if (auto* view = m_frame.mainFrame().view())
3590         view->loadProgressingStatusChanged();
3591 }
3592
3593 void FrameLoader::forcePageTransitionIfNeeded()
3594 {
3595     m_client.forcePageTransitionIfNeeded();
3596 }
3597
3598 void FrameLoader::clearTestingOverrides()
3599 {
3600     m_overrideCachePolicyForTesting = std::nullopt;
3601     m_overrideResourceLoadPriorityForTesting = std::nullopt;
3602     m_isStrictRawResourceValidationPolicyDisabledForTesting = false;
3603 }
3604
3605 void FrameLoader::applyShouldOpenExternalURLsPolicyToNewDocumentLoader(DocumentLoader& documentLoader, ShouldOpenExternalURLsPolicy propagatedPolicy)
3606 {
3607     documentLoader.setShouldOpenExternalURLsPolicy(shouldOpenExternalURLsPolicyToApply(m_frame, propagatedPolicy));
3608 }
3609
3610 bool FrameLoader::isAlwaysOnLoggingAllowed() const
3611 {
3612     return frame().isAlwaysOnLoggingAllowed();
3613 }
3614
3615 bool FrameLoaderClient::hasHTMLView() const
3616 {
3617     return true;
3618 }
3619
3620 RefPtr<Frame> createWindow(Frame& openerFrame, Frame& lookupFrame, const FrameLoadRequest& request, const WindowFeatures& features, bool& created)
3621 {
3622     ASSERT(!features.dialog || request.frameName().isEmpty());
3623
3624     created = false;
3625
3626     if (!request.frameName().isEmpty() && request.frameName() != "_blank") {
3627         if (RefPtr<Frame> frame = lookupFrame.loader().findFrameForNavigation(request.frameName(), openerFrame.document())) {
3628             if (request.frameName() != "_self") {
3629                 if (Page* page = frame->page())
3630                     page->chrome().focus();
3631             }
3632             return frame;
3633         }
3634     }
3635
3636     // Sandboxed frames cannot open new auxiliary browsing contexts.
3637     if (isDocumentSandboxed(openerFrame, SandboxPopups)) {
3638         // FIXME: This message should be moved off the console once a solution to https://bugs.webkit.org/show_bug.cgi?id=103274 exists.
3639         openerFrame.document()->addConsoleMessage(MessageSource::Security, MessageLevel::Error, "Blocked opening '" + request.resourceRequest().url().stringCenterEllipsizedToLength() + "' in a new window because the request was made in a sandboxed frame whose 'allow-popups' permission is not set.");
3640         return nullptr;
3641     }
3642
3643     // FIXME: Setting the referrer should be the caller's responsibility.
3644     FrameLoadRequest requestWithReferrer = request;
3645     String referrer = SecurityPolicy::generateReferrerHeader(openerFrame.document()->referrerPolicy(), request.resourceRequest().url(), openerFrame.loader().outgoingReferrer());
3646     if (!referrer.isEmpty())
3647         requestWithReferrer.resourceRequest().setHTTPReferrer(referrer);
3648     FrameLoader::addHTTPOriginIfNeeded(requestWithReferrer.resourceRequest(), openerFrame.loader().outgoingOrigin());
3649     FrameLoader::addHTTPUpgradeInsecureRequestsIfNeeded(requestWithReferrer.resourceRequest());
3650
3651     Page* oldPage = openerFrame.page();
3652     if (!oldPage)
3653         return nullptr;
3654
3655     ShouldOpenExternalURLsPolicy shouldOpenExternalURLsPolicy = shouldOpenExternalURLsPolicyToApply(openerFrame, request.shouldOpenExternalURLsPolicy());
3656     Page* page = oldPage->chrome().createWindow(&openerFrame, requestWithReferrer, features, NavigationAction(requestWithReferrer.resourceRequest(), shouldOpenExternalURLsPolicy));
3657     if (!page)
3658         return nullptr;
3659
3660     RefPtr<Frame> frame = &page->mainFrame();
3661
3662     frame->loader().forceSandboxFlags(openerFrame.document()->sandboxFlags());
3663
3664     if (request.frameName() != "_blank")
3665         frame->tree().setName(request.frameName());
3666
3667     page->chrome().setToolbarsVisible(features.toolBarVisible || features.locationBarVisible);
3668
3669     if (!frame->page())
3670         return nullptr;
3671     page->chrome().setStatusbarVisible(features.statusBarVisible);
3672
3673     if (!frame->page())
3674         return nullptr;
3675     page->chrome().setScrollbarsVisible(features.scrollbarsVisible);
3676
3677     if (!frame->page())
3678         return nullptr;
3679     page->chrome().setMenubarVisible(features.menuBarVisible);
3680
3681     if (!frame->page())
3682         return nullptr;
3683     page->chrome().setResizable(features.resizable);
3684
3685     // 'x' and 'y' specify the location of the window, while 'width' and 'height'
3686     // specify the size of the viewport. We can only resize the window, so adjust
3687     // for the difference between the window size and the viewport size.
3688
3689     // FIXME: We should reconcile the initialization of viewport arguments between iOS and non-IOS.
3690 #if !PLATFORM(IOS)
3691     FloatSize viewportSize = page->chrome().pageRect().size();
3692     FloatRect windowRect = page->chrome().windowRect();
3693     if (features.x)
3694         windowRect.setX(*features.x);
3695     if (features.y)
3696         windowRect.setY(*features.y);
3697     // Zero width and height mean using default size, not minumum one.
3698     if (features.width && *features.width)
3699         windowRect.setWidth(*features.width + (windowRect.width() - viewportSize.width()));
3700     if (features.height && *features.height)
3701         windowRect.setHeight(*features.height + (windowRect.height() - viewportSize.height()));
3702
3703     // Ensure non-NaN values, minimum size as well as being within valid screen area.
3704     FloatRect newWindowRect = DOMWindow::adjustWindowRect(page, windowRect);
3705
3706     if (!frame->page())
3707         return nullptr;
3708     page->chrome().setWindowRect(newWindowRect);
3709 #else
3710     // On iOS, width and height refer to the viewport dimensions.
3711     ViewportArguments arguments;
3712     // Zero width and height mean using default size, not minimum one.
3713     if (features.width && *features.width)
3714         arguments.width = *features.width;
3715     if (features.height && *features.height)
3716         arguments.height = *features.height;
3717     frame->setViewportArguments(arguments);
3718 #endif
3719
3720     if (!frame->page())
3721         return nullptr;
3722     page->chrome().show();
3723
3724     created = true;
3725     return frame;
3726 }
3727
3728 bool FrameLoader::shouldSuppressKeyboardInput() const
3729 {
3730     return m_frame.settings().shouldSuppressKeyboardInputDuringProvisionalNavigation() && m_state == FrameStateProvisional;
3731 }
3732
3733 } // namespace WebCore