9172dd853ccd02cd8fefb9bd7105516c43c306f7
[WebKit-https.git] / Source / WebCore / loader / FrameLoader.cpp
1 /*
2  * Copyright (C) 2006, 2007, 2008, 2009, 2010, 2011 Apple Inc. All rights reserved.
3  * Copyright (C) 2008 Nokia Corporation and/or its subsidiary(-ies)
4  * Copyright (C) 2008, 2009 Torch Mobile Inc. All rights reserved. (http://www.torchmobile.com/)
5  * Copyright (C) 2008 Alp Toker <alp@atoker.com>
6  * Copyright (C) Research In Motion Limited 2009. All rights reserved.
7  * Copyright (C) 2011 Kris Jordan <krisjordan@gmail.com>
8  * Copyright (C) 2011 Google Inc. All rights reserved.
9  *
10  * Redistribution and use in source and binary forms, with or without
11  * modification, are permitted provided that the following conditions
12  * are met:
13  *
14  * 1.  Redistributions of source code must retain the above copyright
15  *     notice, this list of conditions and the following disclaimer. 
16  * 2.  Redistributions in binary form must reproduce the above copyright
17  *     notice, this list of conditions and the following disclaimer in the
18  *     documentation and/or other materials provided with the distribution. 
19  * 3.  Neither the name of Apple Computer, Inc. ("Apple") nor the names of
20  *     its contributors may be used to endorse or promote products derived
21  *     from this software without specific prior written permission. 
22  *
23  * THIS SOFTWARE IS PROVIDED BY APPLE AND ITS CONTRIBUTORS "AS IS" AND ANY
24  * EXPRESS OR IMPLIED WARRANTIES, INCLUDING, BUT NOT LIMITED TO, THE IMPLIED
25  * WARRANTIES OF MERCHANTABILITY AND FITNESS FOR A PARTICULAR PURPOSE ARE
26  * DISCLAIMED. IN NO EVENT SHALL APPLE OR ITS CONTRIBUTORS BE LIABLE FOR ANY
27  * DIRECT, INDIRECT, INCIDENTAL, SPECIAL, EXEMPLARY, OR CONSEQUENTIAL DAMAGES
28  * (INCLUDING, BUT NOT LIMITED TO, PROCUREMENT OF SUBSTITUTE GOODS OR SERVICES;
29  * LOSS OF USE, DATA, OR PROFITS; OR BUSINESS INTERRUPTION) HOWEVER CAUSED AND
30  * ON ANY THEORY OF LIABILITY, WHETHER IN CONTRACT, STRICT LIABILITY, OR TORT
31  * (INCLUDING NEGLIGENCE OR OTHERWISE) ARISING IN ANY WAY OUT OF THE USE OF
32  * THIS SOFTWARE, EVEN IF ADVISED OF THE POSSIBILITY OF SUCH DAMAGE.
33  */
34
35 #include "config.h"
36 #include "FrameLoader.h"
37
38 #include "AXObjectCache.h"
39 #include "ApplicationCacheHost.h"
40 #include "BackForwardController.h"
41 #include "BeforeUnloadEvent.h"
42 #include "CachedPage.h"
43 #include "CachedResourceLoader.h"
44 #include "Chrome.h"
45 #include "ChromeClient.h"
46 #include "Console.h"
47 #include "ContentSecurityPolicy.h"
48 #include "DOMImplementation.h"
49 #include "DOMWindow.h"
50 #include "DatabaseManager.h"
51 #include "Document.h"
52 #include "DocumentLoadTiming.h"
53 #include "DocumentLoader.h"
54 #include "Editor.h"
55 #include "EditorClient.h"
56 #include "Element.h"
57 #include "Event.h"
58 #include "EventHandler.h"
59 #include "EventNames.h"
60 #include "FloatRect.h"
61 #include "FormState.h"
62 #include "FormSubmission.h"
63 #include "Frame.h"
64 #include "FrameLoadRequest.h"
65 #include "FrameLoaderClient.h"
66 #include "FrameNetworkingContext.h"
67 #include "FrameTree.h"
68 #include "FrameView.h"
69 #include "HTMLAnchorElement.h"
70 #include "HTMLFormElement.h"
71 #include "HTMLInputElement.h"
72 #include "HTMLNames.h"
73 #include "HTMLObjectElement.h"
74 #include "HTMLParserIdioms.h"
75 #include "HTTPParsers.h"
76 #include "HistoryController.h"
77 #include "HistoryItem.h"
78 #include "IconController.h"
79 #include "InspectorController.h"
80 #include "InspectorInstrumentation.h"
81 #include "LoaderStrategy.h"
82 #include "Logging.h"
83 #include "MIMETypeRegistry.h"
84 #include "MemoryCache.h"
85 #include "Page.h"
86 #include "PageCache.h"
87 #include "PageTransitionEvent.h"
88 #include "PlatformStrategies.h"
89 #include "PluginData.h"
90 #include "PluginDatabase.h"
91 #include "PluginDocument.h"
92 #include "PolicyChecker.h"
93 #include "ProgressTracker.h"
94 #include "ResourceHandle.h"
95 #include "ResourceRequest.h"
96 #include "SchemeRegistry.h"
97 #include "ScriptCallStack.h"
98 #include "ScriptController.h"
99 #include "ScriptSourceCode.h"
100 #include "ScrollAnimator.h"
101 #include "SecurityOrigin.h"
102 #include "SecurityPolicy.h"
103 #include "SegmentedString.h"
104 #include "SerializedScriptValue.h"
105 #include "Settings.h"
106 #include "TextResourceDecoder.h"
107 #include "WindowFeatures.h"
108 #include "XMLDocumentParser.h"
109 #include <wtf/CurrentTime.h>
110 #include <wtf/StdLibExtras.h>
111 #include <wtf/text/CString.h>
112 #include <wtf/text/WTFString.h>
113
114 #if ENABLE(SHARED_WORKERS)
115 #include "SharedWorkerRepository.h"
116 #endif
117
118 #if ENABLE(SVG)
119 #include "SVGDocument.h"
120 #include "SVGLocatable.h"
121 #include "SVGNames.h"
122 #include "SVGPreserveAspectRatio.h"
123 #include "SVGSVGElement.h"
124 #include "SVGViewElement.h"
125 #include "SVGViewSpec.h"
126 #endif
127
128 #if ENABLE(WEB_ARCHIVE) || ENABLE(MHTML)
129 #include "Archive.h"
130 #endif
131
132
133 namespace WebCore {
134
135 using namespace HTMLNames;
136
137 #if ENABLE(SVG)
138 using namespace SVGNames;
139 #endif
140
141 static const char defaultAcceptHeader[] = "text/html,application/xhtml+xml,application/xml;q=0.9,*/*;q=0.8";
142 static double storedTimeOfLastCompletedLoad;
143
144 bool isBackForwardLoadType(FrameLoadType type)
145 {
146     switch (type) {
147         case FrameLoadTypeStandard:
148         case FrameLoadTypeReload:
149         case FrameLoadTypeReloadFromOrigin:
150         case FrameLoadTypeSame:
151         case FrameLoadTypeRedirectWithLockedBackForwardList:
152         case FrameLoadTypeReplace:
153             return false;
154         case FrameLoadTypeBack:
155         case FrameLoadTypeForward:
156         case FrameLoadTypeIndexedBackForward:
157             return true;
158     }
159     ASSERT_NOT_REACHED();
160     return false;
161 }
162
163 // This is not in the FrameLoader class to emphasize that it does not depend on
164 // private FrameLoader data, and to avoid increasing the number of public functions
165 // with access to private data.  Since only this .cpp file needs it, making it
166 // non-member lets us exclude it from the header file, thus keeping FrameLoader.h's
167 // API simpler.
168 //
169 static bool isDocumentSandboxed(Frame* frame, SandboxFlags mask)
170 {
171     return frame->document() && frame->document()->isSandboxed(mask);
172 }
173
174 class FrameLoader::FrameProgressTracker {
175 public:
176     static PassOwnPtr<FrameProgressTracker> create(Frame* frame) { return adoptPtr(new FrameProgressTracker(frame)); }
177     ~FrameProgressTracker()
178     {
179         ASSERT(!m_inProgress || m_frame->page());
180         if (m_inProgress)
181             m_frame->page()->progress()->progressCompleted(m_frame);
182     }
183
184     void progressStarted()
185     {
186         ASSERT(m_frame->page());
187         if (!m_inProgress)
188             m_frame->page()->progress()->progressStarted(m_frame);
189         m_inProgress = true;
190     }
191
192     void progressCompleted()
193     {
194         ASSERT(m_inProgress);
195         ASSERT(m_frame->page());
196         m_inProgress = false;
197         m_frame->page()->progress()->progressCompleted(m_frame);
198     }
199
200 private:
201     FrameProgressTracker(Frame* frame)
202         : m_frame(frame)
203         , m_inProgress(false)
204     {
205     }
206
207     Frame* m_frame;
208     bool m_inProgress;
209 };
210
211 FrameLoader::FrameLoader(Frame* frame, FrameLoaderClient* client)
212     : m_frame(frame)
213     , m_client(client)
214     , m_policyChecker(adoptPtr(new PolicyChecker(frame)))
215     , m_history(adoptPtr(new HistoryController(frame)))
216     , m_notifer(frame)
217     , m_subframeLoader(frame)
218     , m_icon(adoptPtr(new IconController(frame)))
219     , m_mixedContentChecker(frame)
220     , m_state(FrameStateProvisional)
221     , m_loadType(FrameLoadTypeStandard)
222     , m_delegateIsHandlingProvisionalLoadError(false)
223     , m_quickRedirectComing(false)
224     , m_sentRedirectNotification(false)
225     , m_inStopAllLoaders(false)
226     , m_isExecutingJavaScriptFormAction(false)
227     , m_didCallImplicitClose(true)
228     , m_wasUnloadEventEmitted(false)
229     , m_pageDismissalEventBeingDispatched(NoDismissal)
230     , m_isComplete(false)
231     , m_needsClear(false)
232     , m_checkTimer(this, &FrameLoader::checkTimerFired)
233     , m_shouldCallCheckCompleted(false)
234     , m_shouldCallCheckLoadComplete(false)
235     , m_opener(0)
236     , m_didPerformFirstNavigation(false)
237     , m_loadingFromCachedPage(false)
238     , m_suppressOpenerInNewFrame(false)
239     , m_forcedSandboxFlags(SandboxNone)
240 {
241 }
242
243 FrameLoader::~FrameLoader()
244 {
245     setOpener(0);
246
247     HashSet<Frame*>::iterator end = m_openedFrames.end();
248     for (HashSet<Frame*>::iterator it = m_openedFrames.begin(); it != end; ++it)
249         (*it)->loader()->m_opener = 0;
250
251     m_client->frameLoaderDestroyed();
252
253     if (m_networkingContext)
254         m_networkingContext->invalidate();
255 }
256
257 void FrameLoader::init()
258 {
259     // This somewhat odd set of steps gives the frame an initial empty document.
260     setPolicyDocumentLoader(m_client->createDocumentLoader(ResourceRequest(KURL(ParsedURLString, emptyString())), SubstituteData()).get());
261     setProvisionalDocumentLoader(m_policyDocumentLoader.get());
262     m_provisionalDocumentLoader->startLoadingMainResource();
263     m_frame->document()->cancelParsing();
264     m_stateMachine.advanceTo(FrameLoaderStateMachine::DisplayingInitialEmptyDocument);
265
266     m_networkingContext = m_client->createNetworkingContext();
267     m_progressTracker = FrameProgressTracker::create(m_frame);
268 }
269
270 void FrameLoader::setDefersLoading(bool defers)
271 {
272     if (m_documentLoader)
273         m_documentLoader->setDefersLoading(defers);
274     if (m_provisionalDocumentLoader)
275         m_provisionalDocumentLoader->setDefersLoading(defers);
276     if (m_policyDocumentLoader)
277         m_policyDocumentLoader->setDefersLoading(defers);
278     history()->setDefersLoading(defers);
279
280     if (!defers) {
281         m_frame->navigationScheduler()->startTimer();
282         startCheckCompleteTimer();
283     }
284 }
285
286 void FrameLoader::changeLocation(SecurityOrigin* securityOrigin, const KURL& url, const String& referrer, bool lockHistory, bool lockBackForwardList, bool refresh)
287 {
288     urlSelected(FrameLoadRequest(securityOrigin, ResourceRequest(url, referrer, refresh ? ReloadIgnoringCacheData : UseProtocolCachePolicy), "_self"),
289         0, lockHistory, lockBackForwardList, MaybeSendReferrer, ReplaceDocumentIfJavaScriptURL);
290 }
291
292 void FrameLoader::urlSelected(const KURL& url, const String& passedTarget, PassRefPtr<Event> triggeringEvent, bool lockHistory, bool lockBackForwardList, ShouldSendReferrer shouldSendReferrer)
293 {
294     urlSelected(FrameLoadRequest(m_frame->document()->securityOrigin(), ResourceRequest(url), passedTarget),
295         triggeringEvent, lockHistory, lockBackForwardList, shouldSendReferrer, DoNotReplaceDocumentIfJavaScriptURL);
296 }
297
298 // The shouldReplaceDocumentIfJavaScriptURL parameter will go away when the FIXME to eliminate the
299 // corresponding parameter from ScriptController::executeIfJavaScriptURL() is addressed.
300 void FrameLoader::urlSelected(const FrameLoadRequest& passedRequest, PassRefPtr<Event> triggeringEvent, bool lockHistory, bool lockBackForwardList, ShouldSendReferrer shouldSendReferrer, ShouldReplaceDocumentIfJavaScriptURL shouldReplaceDocumentIfJavaScriptURL)
301 {
302     ASSERT(!m_suppressOpenerInNewFrame);
303
304     RefPtr<Frame> protect(m_frame);
305     FrameLoadRequest frameRequest(passedRequest);
306
307     if (m_frame->script()->executeIfJavaScriptURL(frameRequest.resourceRequest().url(), shouldReplaceDocumentIfJavaScriptURL))
308         return;
309
310     if (frameRequest.frameName().isEmpty())
311         frameRequest.setFrameName(m_frame->document()->baseTarget());
312
313     if (shouldSendReferrer == NeverSendReferrer)
314         m_suppressOpenerInNewFrame = true;
315     addHTTPOriginIfNeeded(frameRequest.resourceRequest(), outgoingOrigin());
316
317     loadFrameRequest(frameRequest, lockHistory, lockBackForwardList, triggeringEvent, 0, shouldSendReferrer);
318
319     m_suppressOpenerInNewFrame = false;
320 }
321
322 void FrameLoader::submitForm(PassRefPtr<FormSubmission> submission)
323 {
324     ASSERT(submission->method() == FormSubmission::PostMethod || submission->method() == FormSubmission::GetMethod);
325
326     // FIXME: Find a good spot for these.
327     ASSERT(submission->data());
328     ASSERT(submission->state());
329     ASSERT(!submission->state()->sourceDocument()->frame() || submission->state()->sourceDocument()->frame() == m_frame);
330     
331     if (!m_frame->page())
332         return;
333     
334     if (submission->action().isEmpty())
335         return;
336
337     if (isDocumentSandboxed(m_frame, SandboxForms)) {
338         // FIXME: This message should be moved off the console once a solution to https://bugs.webkit.org/show_bug.cgi?id=103274 exists.
339         m_frame->document()->addConsoleMessage(SecurityMessageSource, ErrorMessageLevel, "Blocked form submission to '" + submission->action().elidedString() + "' because the form's frame is sandboxed and the 'allow-forms' permission is not set.");
340         return;
341     }
342
343     if (protocolIsJavaScript(submission->action())) {
344         if (!m_frame->document()->contentSecurityPolicy()->allowFormAction(KURL(submission->action())))
345             return;
346         m_isExecutingJavaScriptFormAction = true;
347         m_frame->script()->executeIfJavaScriptURL(submission->action(), DoNotReplaceDocumentIfJavaScriptURL);
348         m_isExecutingJavaScriptFormAction = false;
349         return;
350     }
351
352     Frame* targetFrame = findFrameForNavigation(submission->target(), submission->state()->sourceDocument());
353     if (!targetFrame) {
354         if (!DOMWindow::allowPopUp(m_frame) && !ScriptController::processingUserGesture())
355             return;
356
357         targetFrame = m_frame;
358     } else
359         submission->clearTarget();
360
361     if (!targetFrame->page())
362         return;
363
364     // FIXME: We'd like to remove this altogether and fix the multiple form submission issue another way.
365
366     // We do not want to submit more than one form from the same page, nor do we want to submit a single
367     // form more than once. This flag prevents these from happening; not sure how other browsers prevent this.
368     // The flag is reset in each time we start handle a new mouse or key down event, and
369     // also in setView since this part may get reused for a page from the back/forward cache.
370     // The form multi-submit logic here is only needed when we are submitting a form that affects this frame.
371
372     // FIXME: Frame targeting is only one of the ways the submission could end up doing something other
373     // than replacing this frame's content, so this check is flawed. On the other hand, the check is hardly
374     // needed any more now that we reset m_submittedFormURL on each mouse or key down event.
375
376     if (m_frame->tree()->isDescendantOf(targetFrame)) {
377         if (m_submittedFormURL == submission->requestURL())
378             return;
379         m_submittedFormURL = submission->requestURL();
380     }
381
382     submission->data()->generateFiles(m_frame->document());
383     submission->setReferrer(outgoingReferrer());
384     submission->setOrigin(outgoingOrigin());
385
386     targetFrame->navigationScheduler()->scheduleFormSubmission(submission);
387 }
388
389 void FrameLoader::stopLoading(UnloadEventPolicy unloadEventPolicy)
390 {
391     if (m_frame->document() && m_frame->document()->parser())
392         m_frame->document()->parser()->stopParsing();
393
394     if (unloadEventPolicy != UnloadEventPolicyNone) {
395         if (m_frame->document()) {
396             if (m_didCallImplicitClose && !m_wasUnloadEventEmitted) {
397                 Node* currentFocusedNode = m_frame->document()->focusedNode();
398                 if (currentFocusedNode && currentFocusedNode->toInputElement())
399                     currentFocusedNode->toInputElement()->endEditing();
400                 if (m_pageDismissalEventBeingDispatched == NoDismissal) {
401                     if (unloadEventPolicy == UnloadEventPolicyUnloadAndPageHide) {
402                         m_pageDismissalEventBeingDispatched = PageHideDismissal;
403                         m_frame->document()->domWindow()->dispatchEvent(PageTransitionEvent::create(eventNames().pagehideEvent, m_frame->document()->inPageCache()), m_frame->document());
404                     }
405                     if (!m_frame->document()->inPageCache()) {
406                         RefPtr<Event> unloadEvent(Event::create(eventNames().unloadEvent, false, false));
407                         // The DocumentLoader (and thus its DocumentLoadTiming) might get destroyed
408                         // while dispatching the event, so protect it to prevent writing the end
409                         // time into freed memory.
410                         RefPtr<DocumentLoader> documentLoader = m_provisionalDocumentLoader;
411                         m_pageDismissalEventBeingDispatched = UnloadDismissal;
412                         if (documentLoader && !documentLoader->timing()->unloadEventStart() && !documentLoader->timing()->unloadEventEnd()) {
413                             DocumentLoadTiming* timing = documentLoader->timing();
414                             ASSERT(timing->navigationStart());
415                             timing->markUnloadEventStart();
416                             m_frame->document()->domWindow()->dispatchEvent(unloadEvent, m_frame->document());
417                             timing->markUnloadEventEnd();
418                         } else
419                             m_frame->document()->domWindow()->dispatchEvent(unloadEvent, m_frame->document());
420                     }
421                 }
422                 m_pageDismissalEventBeingDispatched = NoDismissal;
423                 if (m_frame->document())
424                     m_frame->document()->updateStyleIfNeeded();
425                 m_wasUnloadEventEmitted = true;
426             }
427         }
428
429         // Dispatching the unload event could have made m_frame->document() null.
430         if (m_frame->document() && !m_frame->document()->inPageCache()) {
431             // Don't remove event listeners from a transitional empty document (see bug 28716 for more information).
432             bool keepEventListeners = m_stateMachine.isDisplayingInitialEmptyDocument() && m_provisionalDocumentLoader
433                 && m_frame->document()->isSecureTransitionTo(m_provisionalDocumentLoader->url());
434
435             if (!keepEventListeners)
436                 m_frame->document()->removeAllEventListeners();
437         }
438     }
439
440     m_isComplete = true; // to avoid calling completed() in finishedParsing()
441     m_didCallImplicitClose = true; // don't want that one either
442
443     if (m_frame->document() && m_frame->document()->parsing()) {
444         finishedParsing();
445         m_frame->document()->setParsing(false);
446     }
447
448     if (Document* doc = m_frame->document()) {
449         // FIXME: HTML5 doesn't tell us to set the state to complete when aborting, but we do anyway to match legacy behavior.
450         // http://www.w3.org/Bugs/Public/show_bug.cgi?id=10537
451         doc->setReadyState(Document::Complete);
452
453 #if ENABLE(SQL_DATABASE)
454         // FIXME: Should the DatabaseManager watch for something like ActiveDOMObject::stop() rather than being special-cased here?
455         DatabaseManager::manager().stopDatabases(doc, 0);
456 #endif
457     }
458
459     // FIXME: This will cancel redirection timer, which really needs to be restarted when restoring the frame from b/f cache.
460     m_frame->navigationScheduler()->cancel();
461 }
462
463 void FrameLoader::stop()
464 {
465     // http://bugs.webkit.org/show_bug.cgi?id=10854
466     // The frame's last ref may be removed and it will be deleted by checkCompleted().
467     RefPtr<Frame> protector(m_frame);
468
469     if (DocumentParser* parser = m_frame->document()->parser()) {
470         parser->stopParsing();
471         parser->finish();
472     }
473     
474     icon()->stopLoader();
475 }
476
477 bool FrameLoader::closeURL()
478 {
479     history()->saveDocumentState();
480     
481     // Should only send the pagehide event here if the current document exists and has not been placed in the page cache.    
482     Document* currentDocument = m_frame->document();
483     stopLoading(currentDocument && !currentDocument->inPageCache() ? UnloadEventPolicyUnloadAndPageHide : UnloadEventPolicyUnloadOnly);
484     
485     m_frame->editor().clearUndoRedoOperations();
486     return true;
487 }
488
489 bool FrameLoader::didOpenURL()
490 {
491     if (m_frame->navigationScheduler()->redirectScheduledDuringLoad()) {
492         // A redirect was scheduled before the document was created.
493         // This can happen when one frame changes another frame's location.
494         return false;
495     }
496
497     m_frame->navigationScheduler()->cancel();
498     m_frame->editor().clearLastEditCommand();
499
500     m_isComplete = false;
501     m_didCallImplicitClose = false;
502
503     // If we are still in the process of initializing an empty document then
504     // its frame is not in a consistent state for rendering, so avoid setJSStatusBarText
505     // since it may cause clients to attempt to render the frame.
506     if (!m_stateMachine.creatingInitialEmptyDocument()) {
507         DOMWindow* window = m_frame->document()->domWindow();
508         window->setStatus(String());
509         window->setDefaultStatus(String());
510     }
511
512     started();
513
514     return true;
515 }
516
517 void FrameLoader::didExplicitOpen()
518 {
519     m_isComplete = false;
520     m_didCallImplicitClose = false;
521
522     // Calling document.open counts as committing the first real document load.
523     if (!m_stateMachine.committedFirstRealDocumentLoad())
524         m_stateMachine.advanceTo(FrameLoaderStateMachine::DisplayingInitialEmptyDocumentPostCommit);
525     
526     // Prevent window.open(url) -- eg window.open("about:blank") -- from blowing away results
527     // from a subsequent window.document.open / window.document.write call. 
528     // Canceling redirection here works for all cases because document.open 
529     // implicitly precedes document.write.
530     m_frame->navigationScheduler()->cancel();
531 }
532
533
534 void FrameLoader::cancelAndClear()
535 {
536     m_frame->navigationScheduler()->cancel();
537
538     if (!m_isComplete)
539         closeURL();
540
541     clear(m_frame->document(), false);
542     m_frame->script()->updatePlatformScriptObjects();
543 }
544
545 void FrameLoader::clear(Document* newDocument, bool clearWindowProperties, bool clearScriptObjects, bool clearFrameView)
546 {
547     m_frame->editor().clear();
548
549     if (!m_needsClear)
550         return;
551     m_needsClear = false;
552     
553     if (!m_frame->document()->inPageCache()) {
554         m_frame->document()->cancelParsing();
555         m_frame->document()->stopActiveDOMObjects();
556         if (m_frame->document()->attached()) {
557             m_frame->document()->prepareForDestruction();
558             m_frame->document()->removeFocusedNodeOfSubtree(m_frame->document());
559         }
560     }
561
562     // Do this after detaching the document so that the unload event works.
563     if (clearWindowProperties) {
564         InspectorInstrumentation::frameWindowDiscarded(m_frame, m_frame->document()->domWindow());
565         m_frame->document()->domWindow()->resetUnlessSuspendedForPageCache();
566         m_frame->script()->clearWindowShell(newDocument->domWindow(), m_frame->document()->inPageCache());
567     }
568
569     m_frame->selection()->prepareForDestruction();
570     m_frame->eventHandler()->clear();
571     if (clearFrameView && m_frame->view())
572         m_frame->view()->clear();
573
574     // Do not drop the document before the ScriptController and view are cleared
575     // as some destructors might still try to access the document.
576     m_frame->setDocument(0);
577
578     m_subframeLoader.clear();
579
580     if (clearScriptObjects)
581         m_frame->script()->clearScriptObjects();
582
583     m_frame->script()->enableEval();
584
585     m_frame->navigationScheduler()->clear();
586
587     m_checkTimer.stop();
588     m_shouldCallCheckCompleted = false;
589     m_shouldCallCheckLoadComplete = false;
590
591     if (m_stateMachine.isDisplayingInitialEmptyDocument() && m_stateMachine.committedFirstRealDocumentLoad())
592         m_stateMachine.advanceTo(FrameLoaderStateMachine::CommittedFirstRealLoad);
593 }
594
595 void FrameLoader::receivedFirstData()
596 {
597     dispatchDidCommitLoad();
598     dispatchDidClearWindowObjectsInAllWorlds();
599     dispatchGlobalObjectAvailableInAllWorlds();
600
601     if (m_documentLoader) {
602         StringWithDirection ptitle = m_documentLoader->title();
603         // If we have a title let the WebView know about it.
604         if (!ptitle.isNull())
605             m_client->dispatchDidReceiveTitle(ptitle);
606     }
607
608     if (!m_documentLoader)
609         return;
610     if (m_frame->document()->isViewSource())
611         return;
612
613     double delay;
614     String url;
615     if (!parseHTTPRefresh(m_documentLoader->response().httpHeaderField("Refresh"), false, delay, url))
616         return;
617     if (url.isEmpty())
618         url = m_frame->document()->url().string();
619     else
620         url = m_frame->document()->completeURL(url).string();
621
622     m_frame->navigationScheduler()->scheduleRedirect(delay, url);
623 }
624
625 void FrameLoader::setOutgoingReferrer(const KURL& url)
626 {
627     m_outgoingReferrer = url.strippedForUseAsReferrer();
628 }
629
630 void FrameLoader::didBeginDocument(bool dispatch)
631 {
632     m_needsClear = true;
633     m_isComplete = false;
634     m_didCallImplicitClose = false;
635     m_frame->document()->setReadyState(Document::Loading);
636
637     if (m_pendingStateObject) {
638         m_frame->document()->statePopped(m_pendingStateObject.get());
639         m_pendingStateObject.clear();
640     }
641
642     if (dispatch)
643         dispatchDidClearWindowObjectsInAllWorlds();
644
645     updateFirstPartyForCookies();
646     m_frame->document()->initContentSecurityPolicy();
647
648     Settings* settings = m_frame->document()->settings();
649     if (settings) {
650         m_frame->document()->cachedResourceLoader()->setImagesEnabled(settings->areImagesEnabled());
651         m_frame->document()->cachedResourceLoader()->setAutoLoadImages(settings->loadsImagesAutomatically());
652     }
653
654     if (m_documentLoader) {
655         String dnsPrefetchControl = m_documentLoader->response().httpHeaderField("X-DNS-Prefetch-Control");
656         if (!dnsPrefetchControl.isEmpty())
657             m_frame->document()->parseDNSPrefetchControlHeader(dnsPrefetchControl);
658
659         String policyValue = m_documentLoader->response().httpHeaderField("Content-Security-Policy");
660         if (!policyValue.isEmpty())
661             m_frame->document()->contentSecurityPolicy()->didReceiveHeader(policyValue, ContentSecurityPolicy::Enforce);
662
663         policyValue = m_documentLoader->response().httpHeaderField("Content-Security-Policy-Report-Only");
664         if (!policyValue.isEmpty())
665             m_frame->document()->contentSecurityPolicy()->didReceiveHeader(policyValue, ContentSecurityPolicy::Report);
666
667         policyValue = m_documentLoader->response().httpHeaderField("X-WebKit-CSP");
668         if (!policyValue.isEmpty())
669             m_frame->document()->contentSecurityPolicy()->didReceiveHeader(policyValue, ContentSecurityPolicy::PrefixedEnforce);
670
671         policyValue = m_documentLoader->response().httpHeaderField("X-WebKit-CSP-Report-Only");
672         if (!policyValue.isEmpty())
673             m_frame->document()->contentSecurityPolicy()->didReceiveHeader(policyValue, ContentSecurityPolicy::PrefixedReport);
674
675         String headerContentLanguage = m_documentLoader->response().httpHeaderField("Content-Language");
676         if (!headerContentLanguage.isEmpty()) {
677             size_t commaIndex = headerContentLanguage.find(',');
678             headerContentLanguage.truncate(commaIndex); // notFound == -1 == don't truncate
679             headerContentLanguage = headerContentLanguage.stripWhiteSpace(isHTMLSpace);
680             if (!headerContentLanguage.isEmpty())
681                 m_frame->document()->setContentLanguage(headerContentLanguage);
682         }
683     }
684
685     history()->restoreDocumentState();
686 }
687
688 void FrameLoader::finishedParsing()
689 {
690     m_frame->injectUserScripts(InjectAtDocumentEnd);
691
692     if (m_stateMachine.creatingInitialEmptyDocument())
693         return;
694
695     // This can be called from the Frame's destructor, in which case we shouldn't protect ourselves
696     // because doing so will cause us to re-enter the destructor when protector goes out of scope.
697     // Null-checking the FrameView indicates whether or not we're in the destructor.
698     RefPtr<Frame> protector = m_frame->view() ? m_frame : 0;
699
700     m_client->dispatchDidFinishDocumentLoad();
701
702     checkCompleted();
703
704     if (!m_frame->view())
705         return; // We are being destroyed by something checkCompleted called.
706
707     // Check if the scrollbars are really needed for the content.
708     // If not, remove them, relayout, and repaint.
709     m_frame->view()->restoreScrollbar();
710     scrollToFragmentWithParentBoundary(m_frame->document()->url());
711 }
712
713 void FrameLoader::loadDone()
714 {
715     checkCompleted();
716 }
717
718 bool FrameLoader::allChildrenAreComplete() const
719 {
720     for (Frame* child = m_frame->tree()->firstChild(); child; child = child->tree()->nextSibling()) {
721         if (!child->loader()->m_isComplete)
722             return false;
723     }
724     return true;
725 }
726
727 bool FrameLoader::allAncestorsAreComplete() const
728 {
729     for (Frame* ancestor = m_frame; ancestor; ancestor = ancestor->tree()->parent()) {
730         if (!ancestor->loader()->m_isComplete)
731             return false;
732     }
733     return true;
734 }
735
736 void FrameLoader::checkCompleted()
737 {
738     RefPtr<Frame> protect(m_frame);
739     m_shouldCallCheckCompleted = false;
740
741     if (m_frame->view())
742         m_frame->view()->handleLoadCompleted();
743
744     // Have we completed before?
745     if (m_isComplete)
746         return;
747
748     // Are we still parsing?
749     if (m_frame->document()->parsing())
750         return;
751
752     // Still waiting for images/scripts?
753     if (m_frame->document()->cachedResourceLoader()->requestCount())
754         return;
755
756     // Still waiting for elements that don't go through a FrameLoader?
757     if (m_frame->document()->isDelayingLoadEvent())
758         return;
759
760     // Any frame that hasn't completed yet?
761     if (!allChildrenAreComplete())
762         return;
763
764     // OK, completed.
765     m_isComplete = true;
766     m_requestedHistoryItem = 0;
767     m_frame->document()->setReadyState(Document::Complete);
768
769     checkCallImplicitClose(); // if we didn't do it before
770
771     m_frame->navigationScheduler()->startTimer();
772
773     completed();
774     if (m_frame->page())
775         checkLoadComplete();
776
777     if (m_frame->view())
778         m_frame->view()->handleLoadCompleted();
779 }
780
781 void FrameLoader::checkTimerFired(Timer<FrameLoader>*)
782 {
783     RefPtr<Frame> protect(m_frame);
784
785     if (Page* page = m_frame->page()) {
786         if (page->defersLoading())
787             return;
788     }
789     if (m_shouldCallCheckCompleted)
790         checkCompleted();
791     if (m_shouldCallCheckLoadComplete)
792         checkLoadComplete();
793 }
794
795 void FrameLoader::startCheckCompleteTimer()
796 {
797     if (!(m_shouldCallCheckCompleted || m_shouldCallCheckLoadComplete))
798         return;
799     if (m_checkTimer.isActive())
800         return;
801     m_checkTimer.startOneShot(0);
802 }
803
804 void FrameLoader::scheduleCheckCompleted()
805 {
806     m_shouldCallCheckCompleted = true;
807     startCheckCompleteTimer();
808 }
809
810 void FrameLoader::scheduleCheckLoadComplete()
811 {
812     m_shouldCallCheckLoadComplete = true;
813     startCheckCompleteTimer();
814 }
815
816 void FrameLoader::checkCallImplicitClose()
817 {
818     if (m_didCallImplicitClose || m_frame->document()->parsing() || m_frame->document()->isDelayingLoadEvent())
819         return;
820
821     if (!allChildrenAreComplete())
822         return; // still got a frame running -> too early
823
824     m_didCallImplicitClose = true;
825     m_wasUnloadEventEmitted = false;
826     m_frame->document()->implicitClose();
827 }
828
829 void FrameLoader::loadURLIntoChildFrame(const KURL& url, const String& referer, Frame* childFrame)
830 {
831     ASSERT(childFrame);
832
833 #if ENABLE(WEB_ARCHIVE) || ENABLE(MHTML)
834     RefPtr<Archive> subframeArchive = activeDocumentLoader()->popArchiveForSubframe(childFrame->tree()->uniqueName(), url);    
835     if (subframeArchive) {
836         childFrame->loader()->loadArchive(subframeArchive.release());
837         return;
838     }
839 #endif // ENABLE(WEB_ARCHIVE)
840
841     HistoryItem* parentItem = history()->currentItem();
842     // If we're moving in the back/forward list, we might want to replace the content
843     // of this child frame with whatever was there at that point.
844     if (parentItem && parentItem->children().size() && isBackForwardLoadType(loadType()) 
845         && !m_frame->document()->loadEventFinished()) {
846         HistoryItem* childItem = parentItem->childItemWithTarget(childFrame->tree()->uniqueName());
847         if (childItem) {
848             childFrame->loader()->loadDifferentDocumentItem(childItem, loadType(), MayAttemptCacheOnlyLoadForFormSubmissionItem);
849             return;
850         }
851     }
852
853     childFrame->loader()->loadURL(url, referer, "_self", false, FrameLoadTypeRedirectWithLockedBackForwardList, 0, 0);
854 }
855
856 #if ENABLE(WEB_ARCHIVE) || ENABLE(MHTML)
857 void FrameLoader::loadArchive(PassRefPtr<Archive> archive)
858 {
859     ArchiveResource* mainResource = archive->mainResource();
860     ASSERT(mainResource);
861     if (!mainResource)
862         return;
863         
864     SubstituteData substituteData(mainResource->data(), mainResource->mimeType(), mainResource->textEncoding(), KURL());
865     
866     ResourceRequest request(mainResource->url());
867 #if PLATFORM(MAC)
868     request.applyWebArchiveHackForMail();
869 #endif
870
871     RefPtr<DocumentLoader> documentLoader = m_client->createDocumentLoader(request, substituteData);
872     documentLoader->setArchive(archive.get());
873     load(documentLoader.get());
874 }
875 #endif // ENABLE(WEB_ARCHIVE) || ENABLE(MHTML)
876
877 ObjectContentType FrameLoader::defaultObjectContentType(const KURL& url, const String& mimeTypeIn, bool shouldPreferPlugInsForImages)
878 {
879     String mimeType = mimeTypeIn;
880
881     if (mimeType.isEmpty())
882         mimeType = mimeTypeFromURL(url);
883
884 #if !PLATFORM(MAC) && !PLATFORM(EFL) // Mac has no PluginDatabase, nor does Chromium or EFL
885     if (mimeType.isEmpty()) {
886         String decodedPath = decodeURLEscapeSequences(url.path());
887         mimeType = PluginDatabase::installedPlugins()->MIMETypeForExtension(decodedPath.substring(decodedPath.reverseFind('.') + 1));
888     }
889 #endif
890
891     if (mimeType.isEmpty())
892         return ObjectContentFrame; // Go ahead and hope that we can display the content.
893
894 #if !PLATFORM(MAC) && !PLATFORM(EFL) // Mac has no PluginDatabase, nor does Chromium or EFL
895     bool plugInSupportsMIMEType = PluginDatabase::installedPlugins()->isMIMETypeRegistered(mimeType);
896 #else
897     bool plugInSupportsMIMEType = false;
898 #endif
899
900     if (MIMETypeRegistry::isSupportedImageMIMEType(mimeType))
901         return shouldPreferPlugInsForImages && plugInSupportsMIMEType ? WebCore::ObjectContentNetscapePlugin : WebCore::ObjectContentImage;
902
903     if (plugInSupportsMIMEType)
904         return WebCore::ObjectContentNetscapePlugin;
905
906     if (MIMETypeRegistry::isSupportedNonImageMIMEType(mimeType))
907         return WebCore::ObjectContentFrame;
908
909     return WebCore::ObjectContentNone;
910 }
911
912 String FrameLoader::outgoingReferrer() const
913 {
914     // See http://www.whatwg.org/specs/web-apps/current-work/#fetching-resources
915     // for why we walk the parent chain for srcdoc documents.
916     Frame* frame = m_frame;
917     while (frame->document()->isSrcdocDocument()) {
918         frame = frame->tree()->parent();
919         // Srcdoc documents cannot be top-level documents, by definition,
920         // because they need to be contained in iframes with the srcdoc.
921         ASSERT(frame);
922     }
923     return frame->loader()->m_outgoingReferrer;
924 }
925
926 String FrameLoader::outgoingOrigin() const
927 {
928     return m_frame->document()->securityOrigin()->toString();
929 }
930
931 bool FrameLoader::checkIfFormActionAllowedByCSP(const KURL& url) const
932 {
933     if (m_submittedFormURL.isEmpty())
934         return true;
935
936     return m_frame->document()->contentSecurityPolicy()->allowFormAction(url);
937 }
938
939 Frame* FrameLoader::opener()
940 {
941     return m_opener;
942 }
943
944 void FrameLoader::setOpener(Frame* opener)
945 {
946     if (m_opener && !opener)
947         m_client->didDisownOpener();
948
949     if (m_opener)
950         m_opener->loader()->m_openedFrames.remove(m_frame);
951     if (opener)
952         opener->loader()->m_openedFrames.add(m_frame);
953     m_opener = opener;
954
955     if (m_frame->document())
956         m_frame->document()->initSecurityContext();
957 }
958
959 // FIXME: This does not belong in FrameLoader!
960 void FrameLoader::handleFallbackContent()
961 {
962     HTMLFrameOwnerElement* owner = m_frame->ownerElement();
963     if (!owner || !owner->hasTagName(objectTag))
964         return;
965     static_cast<HTMLObjectElement*>(owner)->renderFallbackContent();
966 }
967
968 void FrameLoader::provisionalLoadStarted()
969 {
970     if (m_stateMachine.firstLayoutDone())
971         m_stateMachine.advanceTo(FrameLoaderStateMachine::CommittedFirstRealLoad);
972     m_frame->navigationScheduler()->cancel(true);
973     m_client->provisionalLoadStarted();
974 }
975
976 void FrameLoader::resetMultipleFormSubmissionProtection()
977 {
978     m_submittedFormURL = KURL();
979 }
980
981 void FrameLoader::updateFirstPartyForCookies()
982 {
983     if (m_frame->tree()->parent())
984         setFirstPartyForCookies(m_frame->tree()->parent()->document()->firstPartyForCookies());
985     else
986         setFirstPartyForCookies(m_frame->document()->url());
987 }
988
989 void FrameLoader::setFirstPartyForCookies(const KURL& url)
990 {
991     for (Frame* frame = m_frame; frame; frame = frame->tree()->traverseNext(m_frame))
992         frame->document()->setFirstPartyForCookies(url);
993 }
994
995 // This does the same kind of work that didOpenURL does, except it relies on the fact
996 // that a higher level already checked that the URLs match and the scrolling is the right thing to do.
997 void FrameLoader::loadInSameDocument(const KURL& url, PassRefPtr<SerializedScriptValue> stateObject, bool isNewNavigation)
998 {
999     // If we have a state object, we cannot also be a new navigation.
1000     ASSERT(!stateObject || (stateObject && !isNewNavigation));
1001
1002     // Update the data source's request with the new URL to fake the URL change
1003     KURL oldURL = m_frame->document()->url();
1004     m_frame->document()->setURL(url);
1005     setOutgoingReferrer(url);
1006     documentLoader()->replaceRequestURLForSameDocumentNavigation(url);
1007     if (isNewNavigation && !shouldTreatURLAsSameAsCurrent(url) && !stateObject) {
1008         // NB: must happen after replaceRequestURLForSameDocumentNavigation(), since we add 
1009         // based on the current request. Must also happen before we openURL and displace the 
1010         // scroll position, since adding the BF item will save away scroll state.
1011         
1012         // NB2: If we were loading a long, slow doc, and the user fragment navigated before
1013         // it was done, currItem is now set the that slow doc, and prevItem is whatever was
1014         // before it.  Adding the b/f item will bump the slow doc down to prevItem, even
1015         // though its load is not yet done.  I think this all works out OK, for one because
1016         // we have already saved away the scroll and doc state for the long slow load,
1017         // but it's not an obvious case.
1018
1019         history()->updateBackForwardListForFragmentScroll();
1020     }
1021     
1022     bool hashChange = equalIgnoringFragmentIdentifier(url, oldURL) && url.fragmentIdentifier() != oldURL.fragmentIdentifier();
1023     
1024     history()->updateForSameDocumentNavigation();
1025
1026     // If we were in the autoscroll/panScroll mode we want to stop it before following the link to the anchor
1027     if (hashChange)
1028         m_frame->eventHandler()->stopAutoscrollTimer();
1029     
1030     // It's important to model this as a load that starts and immediately finishes.
1031     // Otherwise, the parent frame may think we never finished loading.
1032     started();
1033
1034     // We need to scroll to the fragment whether or not a hash change occurred, since
1035     // the user might have scrolled since the previous navigation.
1036     scrollToFragmentWithParentBoundary(url);
1037     
1038     m_isComplete = false;
1039     checkCompleted();
1040
1041     if (isNewNavigation) {
1042         // This will clear previousItem from the rest of the frame tree that didn't
1043         // doing any loading. We need to make a pass on this now, since for fragment
1044         // navigation we'll not go through a real load and reach Completed state.
1045         checkLoadComplete();
1046     }
1047
1048     m_client->dispatchDidNavigateWithinPage();
1049
1050     m_frame->document()->statePopped(stateObject ? stateObject : SerializedScriptValue::nullValue());
1051     m_client->dispatchDidPopStateWithinPage();
1052     
1053     if (hashChange) {
1054         m_frame->document()->enqueueHashchangeEvent(oldURL, url);
1055         m_client->dispatchDidChangeLocationWithinPage();
1056     }
1057     
1058     // FrameLoaderClient::didFinishLoad() tells the internal load delegate the load finished with no error
1059     m_client->didFinishLoad();
1060 }
1061
1062 bool FrameLoader::isComplete() const
1063 {
1064     return m_isComplete;
1065 }
1066
1067 void FrameLoader::completed()
1068 {
1069     RefPtr<Frame> protect(m_frame);
1070
1071     for (Frame* descendant = m_frame->tree()->traverseNext(m_frame); descendant; descendant = descendant->tree()->traverseNext(m_frame))
1072         descendant->navigationScheduler()->startTimer();
1073
1074     if (Frame* parent = m_frame->tree()->parent())
1075         parent->loader()->checkCompleted();
1076
1077     if (m_frame->view())
1078         m_frame->view()->maintainScrollPositionAtAnchor(0);
1079 }
1080
1081 void FrameLoader::started()
1082 {
1083     for (Frame* frame = m_frame; frame; frame = frame->tree()->parent())
1084         frame->loader()->m_isComplete = false;
1085 }
1086
1087 void FrameLoader::prepareForHistoryNavigation()
1088 {
1089     // If there is no currentItem, but we still want to engage in 
1090     // history navigation we need to manufacture one, and update
1091     // the state machine of this frame to impersonate having
1092     // loaded it.
1093     RefPtr<HistoryItem> currentItem = history()->currentItem();
1094     if (!currentItem) {
1095         currentItem = HistoryItem::create();
1096         currentItem->setLastVisitWasFailure(true);
1097         history()->setCurrentItem(currentItem.get());
1098         frame()->page()->backForward()->setCurrentItem(currentItem.get());
1099
1100         ASSERT(stateMachine()->isDisplayingInitialEmptyDocument());
1101         stateMachine()->advanceTo(FrameLoaderStateMachine::DisplayingInitialEmptyDocumentPostCommit);
1102         stateMachine()->advanceTo(FrameLoaderStateMachine::CommittedFirstRealLoad);
1103     }
1104 }
1105
1106 void FrameLoader::prepareForLoadStart()
1107 {
1108     m_progressTracker->progressStarted();
1109     m_client->dispatchDidStartProvisionalLoad();
1110
1111     // Notify accessibility.
1112     if (AXObjectCache* cache = m_frame->document()->existingAXObjectCache()) {
1113         AXObjectCache::AXLoadingEvent loadingEvent = loadType() == FrameLoadTypeReload ? AXObjectCache::AXLoadingReloaded : AXObjectCache::AXLoadingStarted;
1114         cache->frameLoadingEventNotification(m_frame, loadingEvent);
1115     }
1116 }
1117
1118 void FrameLoader::setupForReplace()
1119 {
1120     m_client->revertToProvisionalState(m_documentLoader.get());
1121     setState(FrameStateProvisional);
1122     m_provisionalDocumentLoader = m_documentLoader;
1123     m_documentLoader = 0;
1124     detachChildren();
1125 }
1126
1127 void FrameLoader::loadFrameRequest(const FrameLoadRequest& request, bool lockHistory, bool lockBackForwardList,
1128     PassRefPtr<Event> event, PassRefPtr<FormState> formState, ShouldSendReferrer shouldSendReferrer)
1129 {    
1130     // Protect frame from getting blown away inside dispatchBeforeLoadEvent in loadWithDocumentLoader.
1131     RefPtr<Frame> protect(m_frame);
1132
1133     KURL url = request.resourceRequest().url();
1134
1135     ASSERT(m_frame->document());
1136     if (!request.requester()->canDisplay(url)) {
1137         reportLocalLoadFailed(m_frame, url.elidedString());
1138         return;
1139     }
1140
1141     String argsReferrer = request.resourceRequest().httpReferrer();
1142     if (argsReferrer.isEmpty())
1143         argsReferrer = outgoingReferrer();
1144
1145     String referrer = SecurityPolicy::generateReferrerHeader(m_frame->document()->referrerPolicy(), url, argsReferrer);
1146     if (shouldSendReferrer == NeverSendReferrer)
1147         referrer = String();
1148     
1149     FrameLoadType loadType;
1150     if (request.resourceRequest().cachePolicy() == ReloadIgnoringCacheData)
1151         loadType = FrameLoadTypeReload;
1152     else if (lockBackForwardList)
1153         loadType = FrameLoadTypeRedirectWithLockedBackForwardList;
1154     else
1155         loadType = FrameLoadTypeStandard;
1156
1157     if (request.resourceRequest().httpMethod() == "POST")
1158         loadPostRequest(request.resourceRequest(), referrer, request.frameName(), lockHistory, loadType, event, formState.get());
1159     else
1160         loadURL(request.resourceRequest().url(), referrer, request.frameName(), lockHistory, loadType, event, formState.get());
1161
1162     // FIXME: It's possible this targetFrame will not be the same frame that was targeted by the actual
1163     // load if frame names have changed.
1164     Frame* sourceFrame = formState ? formState->sourceDocument()->frame() : m_frame;
1165     if (!sourceFrame)
1166         sourceFrame = m_frame;
1167     Frame* targetFrame = sourceFrame->loader()->findFrameForNavigation(request.frameName());
1168     if (targetFrame && targetFrame != sourceFrame) {
1169         if (Page* page = targetFrame->page())
1170             page->chrome().focus();
1171     }
1172 }
1173
1174 void FrameLoader::loadURL(const KURL& newURL, const String& referrer, const String& frameName, bool lockHistory, FrameLoadType newLoadType,
1175     PassRefPtr<Event> event, PassRefPtr<FormState> prpFormState)
1176 {
1177     if (m_inStopAllLoaders)
1178         return;
1179
1180     RefPtr<FormState> formState = prpFormState;
1181     bool isFormSubmission = formState;
1182     
1183     ResourceRequest request(newURL);
1184     if (!referrer.isEmpty()) {
1185         request.setHTTPReferrer(referrer);
1186         RefPtr<SecurityOrigin> referrerOrigin = SecurityOrigin::createFromString(referrer);
1187         addHTTPOriginIfNeeded(request, referrerOrigin->toString());
1188     }
1189 #if ENABLE(CACHE_PARTITIONING)
1190     if (m_frame->tree()->top() != m_frame)
1191         request.setCachePartition(m_frame->tree()->top()->document()->securityOrigin()->cachePartition());
1192 #endif
1193     addExtraFieldsToRequest(request, newLoadType, true);
1194     if (newLoadType == FrameLoadTypeReload || newLoadType == FrameLoadTypeReloadFromOrigin)
1195         request.setCachePolicy(ReloadIgnoringCacheData);
1196
1197     ASSERT(newLoadType != FrameLoadTypeSame);
1198
1199     // The search for a target frame is done earlier in the case of form submission.
1200     Frame* targetFrame = isFormSubmission ? 0 : findFrameForNavigation(frameName);
1201     if (targetFrame && targetFrame != m_frame) {
1202         targetFrame->loader()->loadURL(newURL, referrer, "_self", lockHistory, newLoadType, event, formState.release());
1203         return;
1204     }
1205
1206     if (m_pageDismissalEventBeingDispatched != NoDismissal)
1207         return;
1208
1209     NavigationAction action(request, newLoadType, isFormSubmission, event);
1210
1211     if (!targetFrame && !frameName.isEmpty()) {
1212         policyChecker()->checkNewWindowPolicy(action, FrameLoader::callContinueLoadAfterNewWindowPolicy,
1213             request, formState.release(), frameName, this);
1214         return;
1215     }
1216
1217     RefPtr<DocumentLoader> oldDocumentLoader = m_documentLoader;
1218
1219     bool sameURL = shouldTreatURLAsSameAsCurrent(newURL);
1220     const String& httpMethod = request.httpMethod();
1221     
1222     // Make sure to do scroll to fragment processing even if the URL is
1223     // exactly the same so pages with '#' links and DHTML side effects
1224     // work properly.
1225     if (shouldPerformFragmentNavigation(isFormSubmission, httpMethod, newLoadType, newURL)) {
1226         oldDocumentLoader->setTriggeringAction(action);
1227         policyChecker()->stopCheck();
1228         policyChecker()->setLoadType(newLoadType);
1229         policyChecker()->checkNavigationPolicy(request, oldDocumentLoader.get(), formState.release(),
1230             callContinueFragmentScrollAfterNavigationPolicy, this);
1231     } else {
1232         // must grab this now, since this load may stop the previous load and clear this flag
1233         bool isRedirect = m_quickRedirectComing;
1234         loadWithNavigationAction(request, action, lockHistory, newLoadType, formState.release());
1235         if (isRedirect) {
1236             m_quickRedirectComing = false;
1237             if (m_provisionalDocumentLoader)
1238                 m_provisionalDocumentLoader->setIsClientRedirect(true);
1239         } else if (sameURL && newLoadType != FrameLoadTypeReload && newLoadType != FrameLoadTypeReloadFromOrigin)
1240             // Example of this case are sites that reload the same URL with a different cookie
1241             // driving the generated content, or a master frame with links that drive a target
1242             // frame, where the user has clicked on the same link repeatedly.
1243             m_loadType = FrameLoadTypeSame;
1244     }
1245 }
1246
1247 SubstituteData FrameLoader::defaultSubstituteDataForURL(const KURL& url)
1248 {
1249     if (!shouldTreatURLAsSrcdocDocument(url))
1250         return SubstituteData();
1251     String srcdoc = m_frame->ownerElement()->fastGetAttribute(srcdocAttr);
1252     ASSERT(!srcdoc.isNull());
1253     CString encodedSrcdoc = srcdoc.utf8();
1254     return SubstituteData(SharedBuffer::create(encodedSrcdoc.data(), encodedSrcdoc.length()), "text/html", "UTF-8", KURL());
1255 }
1256
1257 void FrameLoader::load(const FrameLoadRequest& passedRequest)
1258 {
1259     FrameLoadRequest request(passedRequest);
1260
1261     if (m_inStopAllLoaders)
1262         return;
1263
1264     if (!request.frameName().isEmpty()) {
1265         Frame* frame = findFrameForNavigation(request.frameName());
1266         if (frame) {
1267             request.setShouldCheckNewWindowPolicy(false);
1268             if (frame->loader() != this) {
1269                 frame->loader()->load(request);
1270                 return;
1271             }
1272         }
1273     }
1274
1275     if (request.shouldCheckNewWindowPolicy()) {
1276         policyChecker()->checkNewWindowPolicy(NavigationAction(request.resourceRequest(), NavigationTypeOther), FrameLoader::callContinueLoadAfterNewWindowPolicy, request.resourceRequest(), 0, request.frameName(), this);
1277         return;
1278     }
1279
1280     if (!request.hasSubstituteData())
1281         request.setSubstituteData(defaultSubstituteDataForURL(request.resourceRequest().url()));
1282
1283     RefPtr<DocumentLoader> loader = m_client->createDocumentLoader(request.resourceRequest(), request.substituteData());
1284     if (request.lockHistory() && m_documentLoader)
1285         loader->setClientRedirectSourceForHistory(m_documentLoader->didCreateGlobalHistoryEntry() ? m_documentLoader->urlForHistory().string() : m_documentLoader->clientRedirectSourceForHistory());
1286     load(loader.get());
1287 }
1288
1289 void FrameLoader::loadWithNavigationAction(const ResourceRequest& request, const NavigationAction& action, bool lockHistory, FrameLoadType type, PassRefPtr<FormState> formState)
1290 {
1291     RefPtr<DocumentLoader> loader = m_client->createDocumentLoader(request, defaultSubstituteDataForURL(request.url()));
1292     if (lockHistory && m_documentLoader)
1293         loader->setClientRedirectSourceForHistory(m_documentLoader->didCreateGlobalHistoryEntry() ? m_documentLoader->urlForHistory().string() : m_documentLoader->clientRedirectSourceForHistory());
1294
1295     loader->setTriggeringAction(action);
1296     if (m_documentLoader)
1297         loader->setOverrideEncoding(m_documentLoader->overrideEncoding());
1298
1299     loadWithDocumentLoader(loader.get(), type, formState);
1300 }
1301
1302 void FrameLoader::load(DocumentLoader* newDocumentLoader)
1303 {
1304     ResourceRequest& r = newDocumentLoader->request();
1305     addExtraFieldsToMainResourceRequest(r);
1306     FrameLoadType type;
1307
1308     if (shouldTreatURLAsSameAsCurrent(newDocumentLoader->originalRequest().url())) {
1309         r.setCachePolicy(ReloadIgnoringCacheData);
1310         type = FrameLoadTypeSame;
1311     } else if (shouldTreatURLAsSameAsCurrent(newDocumentLoader->unreachableURL()) && m_loadType == FrameLoadTypeReload)
1312         type = FrameLoadTypeReload;
1313     else
1314         type = FrameLoadTypeStandard;
1315
1316     if (m_documentLoader)
1317         newDocumentLoader->setOverrideEncoding(m_documentLoader->overrideEncoding());
1318     
1319     // When we loading alternate content for an unreachable URL that we're
1320     // visiting in the history list, we treat it as a reload so the history list 
1321     // is appropriately maintained.
1322     //
1323     // FIXME: This seems like a dangerous overloading of the meaning of "FrameLoadTypeReload" ...
1324     // shouldn't a more explicit type of reload be defined, that means roughly 
1325     // "load without affecting history" ? 
1326     if (shouldReloadToHandleUnreachableURL(newDocumentLoader)) {
1327         // shouldReloadToHandleUnreachableURL() returns true only when the original load type is back-forward.
1328         // In this case we should save the document state now. Otherwise the state can be lost because load type is
1329         // changed and updateForBackForwardNavigation() will not be called when loading is committed.
1330         history()->saveDocumentAndScrollState();
1331
1332         ASSERT(type == FrameLoadTypeStandard);
1333         type = FrameLoadTypeReload;
1334     }
1335
1336     loadWithDocumentLoader(newDocumentLoader, type, 0);
1337 }
1338
1339 void FrameLoader::loadWithDocumentLoader(DocumentLoader* loader, FrameLoadType type, PassRefPtr<FormState> prpFormState)
1340 {
1341     // Retain because dispatchBeforeLoadEvent may release the last reference to it.
1342     RefPtr<Frame> protect(m_frame);
1343
1344     ASSERT(m_client->hasWebView());
1345
1346     // Unfortunately the view must be non-nil, this is ultimately due
1347     // to parser requiring a FrameView.  We should fix this dependency.
1348
1349     ASSERT(m_frame->view());
1350
1351     if (m_pageDismissalEventBeingDispatched != NoDismissal)
1352         return;
1353
1354     if (m_frame->document())
1355         m_previousURL = m_frame->document()->url();
1356
1357     policyChecker()->setLoadType(type);
1358     RefPtr<FormState> formState = prpFormState;
1359     bool isFormSubmission = formState;
1360
1361     const KURL& newURL = loader->request().url();
1362     const String& httpMethod = loader->request().httpMethod();
1363
1364     if (shouldPerformFragmentNavigation(isFormSubmission, httpMethod, policyChecker()->loadType(), newURL)) {
1365         RefPtr<DocumentLoader> oldDocumentLoader = m_documentLoader;
1366         NavigationAction action(loader->request(), policyChecker()->loadType(), isFormSubmission);
1367
1368         oldDocumentLoader->setTriggeringAction(action);
1369         policyChecker()->stopCheck();
1370         policyChecker()->checkNavigationPolicy(loader->request(), oldDocumentLoader.get(), formState,
1371             callContinueFragmentScrollAfterNavigationPolicy, this);
1372     } else {
1373         if (Frame* parent = m_frame->tree()->parent())
1374             loader->setOverrideEncoding(parent->loader()->documentLoader()->overrideEncoding());
1375
1376         policyChecker()->stopCheck();
1377         setPolicyDocumentLoader(loader);
1378         if (loader->triggeringAction().isEmpty())
1379             loader->setTriggeringAction(NavigationAction(loader->request(), policyChecker()->loadType(), isFormSubmission));
1380
1381         if (Element* ownerElement = m_frame->ownerElement()) {
1382             // We skip dispatching the beforeload event if we've already
1383             // committed a real document load because the event would leak
1384             // subsequent activity by the frame which the parent frame isn't
1385             // supposed to learn. For example, if the child frame navigated to
1386             // a new URL, the parent frame shouldn't learn the URL.
1387             if (!m_stateMachine.committedFirstRealDocumentLoad()
1388                 && !ownerElement->dispatchBeforeLoadEvent(loader->request().url().string())) {
1389                 continueLoadAfterNavigationPolicy(loader->request(), formState, false);
1390                 return;
1391             }
1392         }
1393
1394         policyChecker()->checkNavigationPolicy(loader->request(), loader, formState,
1395             callContinueLoadAfterNavigationPolicy, this);
1396     }
1397 }
1398
1399 void FrameLoader::reportLocalLoadFailed(Frame* frame, const String& url)
1400 {
1401     ASSERT(!url.isEmpty());
1402     if (!frame)
1403         return;
1404
1405     frame->document()->addConsoleMessage(SecurityMessageSource, ErrorMessageLevel, "Not allowed to load local resource: " + url);
1406 }
1407
1408 const ResourceRequest& FrameLoader::initialRequest() const
1409 {
1410     return activeDocumentLoader()->originalRequest();
1411 }
1412
1413 bool FrameLoader::willLoadMediaElementURL(KURL& url)
1414 {
1415     ResourceRequest request(url);
1416
1417     unsigned long identifier;
1418     ResourceError error;
1419     requestFromDelegate(request, identifier, error);
1420     notifier()->sendRemainingDelegateMessages(m_documentLoader.get(), identifier, request, ResourceResponse(url, String(), -1, String(), String()), 0, -1, -1, error);
1421
1422     url = request.url();
1423
1424     return error.isNull();
1425 }
1426
1427 bool FrameLoader::shouldReloadToHandleUnreachableURL(DocumentLoader* docLoader)
1428 {
1429     KURL unreachableURL = docLoader->unreachableURL();
1430
1431     if (unreachableURL.isEmpty())
1432         return false;
1433
1434     if (!isBackForwardLoadType(policyChecker()->loadType()))
1435         return false;
1436
1437     // We only treat unreachableURLs specially during the delegate callbacks
1438     // for provisional load errors and navigation policy decisions. The former
1439     // case handles well-formed URLs that can't be loaded, and the latter
1440     // case handles malformed URLs and unknown schemes. Loading alternate content
1441     // at other times behaves like a standard load.
1442     DocumentLoader* compareDocumentLoader = 0;
1443     if (policyChecker()->delegateIsDecidingNavigationPolicy() || policyChecker()->delegateIsHandlingUnimplementablePolicy())
1444         compareDocumentLoader = m_policyDocumentLoader.get();
1445     else if (m_delegateIsHandlingProvisionalLoadError)
1446         compareDocumentLoader = m_provisionalDocumentLoader.get();
1447
1448     return compareDocumentLoader && unreachableURL == compareDocumentLoader->request().url();
1449 }
1450
1451 void FrameLoader::reloadWithOverrideEncoding(const String& encoding)
1452 {
1453     if (!m_documentLoader)
1454         return;
1455
1456     ResourceRequest request = m_documentLoader->request();
1457     KURL unreachableURL = m_documentLoader->unreachableURL();
1458     if (!unreachableURL.isEmpty())
1459         request.setURL(unreachableURL);
1460
1461     // FIXME: If the resource is a result of form submission and is not cached, the form will be silently resubmitted.
1462     // We should ask the user for confirmation in this case.
1463     request.setCachePolicy(ReturnCacheDataElseLoad);
1464
1465     RefPtr<DocumentLoader> loader = m_client->createDocumentLoader(request, defaultSubstituteDataForURL(request.url()));
1466     setPolicyDocumentLoader(loader.get());
1467
1468     loader->setOverrideEncoding(encoding);
1469
1470     loadWithDocumentLoader(loader.get(), FrameLoadTypeReload, 0);
1471 }
1472
1473 void FrameLoader::reloadWithOverrideURL(const KURL& overrideUrl, bool endToEndReload)
1474 {
1475     if (!m_documentLoader)
1476         return;
1477
1478     if (overrideUrl.isEmpty())
1479         return;
1480
1481     ResourceRequest request = m_documentLoader->request();
1482     request.setURL(overrideUrl);
1483     reloadWithRequest(request, endToEndReload);
1484 }
1485
1486 void FrameLoader::reload(bool endToEndReload)
1487 {
1488     if (!m_documentLoader)
1489         return;
1490
1491     // If a window is created by javascript, its main frame can have an empty but non-nil URL.
1492     // Reloading in this case will lose the current contents (see 4151001).
1493     if (m_documentLoader->request().url().isEmpty())
1494         return;
1495
1496     // Replace error-page URL with the URL we were trying to reach.
1497     ResourceRequest initialRequest = m_documentLoader->request();
1498     KURL unreachableURL = m_documentLoader->unreachableURL();
1499     if (!unreachableURL.isEmpty())
1500         initialRequest.setURL(unreachableURL);
1501
1502     reloadWithRequest(initialRequest, endToEndReload);
1503 }
1504
1505 void FrameLoader::reloadWithRequest(const ResourceRequest& initialRequest, bool endToEndReload)
1506 {
1507     ASSERT(m_documentLoader);
1508
1509     // Create a new document loader for the reload, this will become m_documentLoader eventually,
1510     // but first it has to be the "policy" document loader, and then the "provisional" document loader.
1511     RefPtr<DocumentLoader> loader = m_client->createDocumentLoader(initialRequest, defaultSubstituteDataForURL(initialRequest.url()));
1512
1513     ResourceRequest& request = loader->request();
1514
1515     // FIXME: We don't have a mechanism to revalidate the main resource without reloading at the moment.
1516     request.setCachePolicy(ReloadIgnoringCacheData);
1517
1518     // If we're about to re-post, set up action so the application can warn the user.
1519     if (request.httpMethod() == "POST")
1520         loader->setTriggeringAction(NavigationAction(request, NavigationTypeFormResubmitted));
1521
1522     loader->setOverrideEncoding(m_documentLoader->overrideEncoding());
1523     
1524     loadWithDocumentLoader(loader.get(), endToEndReload ? FrameLoadTypeReloadFromOrigin : FrameLoadTypeReload, 0);
1525 }
1526
1527 void FrameLoader::stopAllLoaders(ClearProvisionalItemPolicy clearProvisionalItemPolicy)
1528 {
1529     ASSERT(!m_frame->document() || !m_frame->document()->inPageCache());
1530     if (m_pageDismissalEventBeingDispatched != NoDismissal)
1531         return;
1532
1533     // If this method is called from within this method, infinite recursion can occur (3442218). Avoid this.
1534     if (m_inStopAllLoaders)
1535         return;
1536     
1537     // Calling stopLoading() on the provisional document loader can blow away
1538     // the frame from underneath.
1539     RefPtr<Frame> protect(m_frame);
1540
1541     m_inStopAllLoaders = true;
1542
1543     policyChecker()->stopCheck();
1544
1545     // If no new load is in progress, we should clear the provisional item from history
1546     // before we call stopLoading.
1547     if (clearProvisionalItemPolicy == ShouldClearProvisionalItem)
1548         history()->setProvisionalItem(0);
1549
1550     for (RefPtr<Frame> child = m_frame->tree()->firstChild(); child; child = child->tree()->nextSibling())
1551         child->loader()->stopAllLoaders(clearProvisionalItemPolicy);
1552     if (m_provisionalDocumentLoader)
1553         m_provisionalDocumentLoader->stopLoading();
1554     if (m_documentLoader)
1555         m_documentLoader->stopLoading();
1556
1557     setProvisionalDocumentLoader(0);
1558
1559     m_checkTimer.stop();
1560
1561     m_inStopAllLoaders = false;    
1562 }
1563
1564 void FrameLoader::stopForUserCancel(bool deferCheckLoadComplete)
1565 {
1566     stopAllLoaders();
1567     
1568     if (deferCheckLoadComplete)
1569         scheduleCheckLoadComplete();
1570     else if (m_frame->page())
1571         checkLoadComplete();
1572 }
1573
1574 DocumentLoader* FrameLoader::activeDocumentLoader() const
1575 {
1576     if (m_state == FrameStateProvisional)
1577         return m_provisionalDocumentLoader.get();
1578     return m_documentLoader.get();
1579 }
1580
1581 bool FrameLoader::isLoading() const
1582 {
1583     DocumentLoader* docLoader = activeDocumentLoader();
1584     if (!docLoader)
1585         return false;
1586     return docLoader->isLoading();
1587 }
1588
1589 bool FrameLoader::frameHasLoaded() const
1590 {
1591     return m_stateMachine.committedFirstRealDocumentLoad() || (m_provisionalDocumentLoader && !m_stateMachine.creatingInitialEmptyDocument()); 
1592 }
1593
1594 void FrameLoader::setDocumentLoader(DocumentLoader* loader)
1595 {
1596     if (!loader && !m_documentLoader)
1597         return;
1598     
1599     ASSERT(loader != m_documentLoader);
1600     ASSERT(!loader || loader->frameLoader() == this);
1601
1602     m_client->prepareForDataSourceReplacement();
1603     detachChildren();
1604
1605     // detachChildren() can trigger this frame's unload event, and therefore
1606     // script can run and do just about anything. For example, an unload event that calls
1607     // document.write("") on its parent frame can lead to a recursive detachChildren()
1608     // invocation for this frame. In that case, we can end up at this point with a
1609     // loader that hasn't been deleted but has been detached from its frame. Such a
1610     // DocumentLoader has been sufficiently detached that we'll end up in an inconsistent
1611     // state if we try to use it.
1612     if (loader && !loader->frame())
1613         return;
1614
1615     if (m_documentLoader)
1616         m_documentLoader->detachFromFrame();
1617
1618     m_documentLoader = loader;
1619 }
1620
1621 void FrameLoader::setPolicyDocumentLoader(DocumentLoader* loader)
1622 {
1623     if (m_policyDocumentLoader == loader)
1624         return;
1625
1626     ASSERT(m_frame);
1627     if (loader)
1628         loader->setFrame(m_frame);
1629     if (m_policyDocumentLoader
1630             && m_policyDocumentLoader != m_provisionalDocumentLoader
1631             && m_policyDocumentLoader != m_documentLoader)
1632         m_policyDocumentLoader->detachFromFrame();
1633
1634     m_policyDocumentLoader = loader;
1635 }
1636
1637 void FrameLoader::setProvisionalDocumentLoader(DocumentLoader* loader)
1638 {
1639     ASSERT(!loader || !m_provisionalDocumentLoader);
1640     ASSERT(!loader || loader->frameLoader() == this);
1641
1642     if (m_provisionalDocumentLoader && m_provisionalDocumentLoader != m_documentLoader)
1643         m_provisionalDocumentLoader->detachFromFrame();
1644
1645     m_provisionalDocumentLoader = loader;
1646 }
1647
1648 double FrameLoader::timeOfLastCompletedLoad()
1649 {
1650     return storedTimeOfLastCompletedLoad;
1651 }
1652
1653 void FrameLoader::setState(FrameState newState)
1654 {    
1655     m_state = newState;
1656     
1657     if (newState == FrameStateProvisional)
1658         provisionalLoadStarted();
1659     else if (newState == FrameStateComplete) {
1660         frameLoadCompleted();
1661         storedTimeOfLastCompletedLoad = currentTime();
1662         if (m_documentLoader)
1663             m_documentLoader->stopRecordingResponses();
1664     }
1665 }
1666
1667 void FrameLoader::clearProvisionalLoad()
1668 {
1669     setProvisionalDocumentLoader(0);
1670     m_progressTracker->progressCompleted();
1671     setState(FrameStateComplete);
1672 }
1673
1674 void FrameLoader::commitProvisionalLoad()
1675 {
1676     RefPtr<CachedPage> cachedPage = m_loadingFromCachedPage ? pageCache()->get(history()->provisionalItem()) : 0;
1677     RefPtr<DocumentLoader> pdl = m_provisionalDocumentLoader;
1678     RefPtr<Frame> protect(m_frame);
1679
1680     LOG(PageCache, "WebCoreLoading %s: About to commit provisional load from previous URL '%s' to new URL '%s'", m_frame->tree()->uniqueName().string().utf8().data(),
1681         m_frame->document() ? m_frame->document()->url().elidedString().utf8().data() : "",
1682         pdl ? pdl->url().elidedString().utf8().data() : "<no provisional DocumentLoader>");
1683
1684     // Check to see if we need to cache the page we are navigating away from into the back/forward cache.
1685     // We are doing this here because we know for sure that a new page is about to be loaded.
1686     HistoryItem* item = history()->currentItem();
1687     if (!m_frame->tree()->parent() && pageCache()->canCache(m_frame->page()) && !item->isInPageCache())
1688         pageCache()->add(item, m_frame->page());
1689
1690     if (m_loadType != FrameLoadTypeReplace)
1691         closeOldDataSources();
1692
1693     if (!cachedPage && !m_stateMachine.creatingInitialEmptyDocument())
1694         m_client->makeRepresentation(pdl.get());
1695
1696     transitionToCommitted(cachedPage);
1697
1698     if (pdl && m_documentLoader) {
1699         // Check if the destination page is allowed to access the previous page's timing information.
1700         RefPtr<SecurityOrigin> securityOrigin = SecurityOrigin::create(pdl->request().url());
1701         m_documentLoader->timing()->setHasSameOriginAsPreviousDocument(securityOrigin->canRequest(m_previousURL));
1702     }
1703
1704     // Call clientRedirectCancelledOrFinished() here so that the frame load delegate is notified that the redirect's
1705     // status has changed, if there was a redirect.  The frame load delegate may have saved some state about
1706     // the redirect in its -webView:willPerformClientRedirectToURL:delay:fireDate:forFrame:.  Since we are
1707     // just about to commit a new page, there cannot possibly be a pending redirect at this point.
1708     if (m_sentRedirectNotification)
1709         clientRedirectCancelledOrFinished(false);
1710     
1711     if (cachedPage && cachedPage->document()) {
1712         prepareForCachedPageRestore();
1713         cachedPage->restore(m_frame->page());
1714
1715         // The page should be removed from the cache immediately after a restoration in order for the PageCache to be consistent.
1716         pageCache()->remove(history()->currentItem());
1717
1718         dispatchDidCommitLoad();
1719
1720         // If we have a title let the WebView know about it. 
1721         StringWithDirection title = m_documentLoader->title();
1722         if (!title.isNull())
1723             m_client->dispatchDidReceiveTitle(title);
1724
1725         checkCompleted();
1726     } else {
1727         if (cachedPage)
1728             pageCache()->remove(history()->currentItem());
1729         didOpenURL();
1730     }
1731
1732     LOG(Loading, "WebCoreLoading %s: Finished committing provisional load to URL %s", m_frame->tree()->uniqueName().string().utf8().data(),
1733         m_frame->document() ? m_frame->document()->url().elidedString().utf8().data() : "");
1734
1735     if (m_loadType == FrameLoadTypeStandard && m_documentLoader->isClientRedirect())
1736         history()->updateForClientRedirect();
1737
1738     if (m_loadingFromCachedPage) {
1739         m_frame->document()->documentDidResumeFromPageCache();
1740         
1741         // Force a layout to update view size and thereby update scrollbars.
1742         m_frame->view()->forceLayout();
1743
1744         const ResponseVector& responses = m_documentLoader->responses();
1745         size_t count = responses.size();
1746         for (size_t i = 0; i < count; i++) {
1747             const ResourceResponse& response = responses[i];
1748             // FIXME: If the WebKit client changes or cancels the request, this is not respected.
1749             ResourceError error;
1750             unsigned long identifier;
1751             ResourceRequest request(response.url());
1752             requestFromDelegate(request, identifier, error);
1753             // FIXME: If we get a resource with more than 2B bytes, this code won't do the right thing.
1754             // However, with today's computers and networking speeds, this won't happen in practice.
1755             // Could be an issue with a giant local file.
1756             notifier()->sendRemainingDelegateMessages(m_documentLoader.get(), identifier, request, response, 0, static_cast<int>(response.expectedContentLength()), 0, error);
1757         }
1758
1759         // FIXME: Why only this frame and not parent frames?
1760         checkLoadCompleteForThisFrame();
1761     }
1762 }
1763
1764 void FrameLoader::transitionToCommitted(PassRefPtr<CachedPage> cachedPage)
1765 {
1766     ASSERT(m_client->hasWebView());
1767     ASSERT(m_state == FrameStateProvisional);
1768
1769     if (m_state != FrameStateProvisional)
1770         return;
1771
1772     if (FrameView* view = m_frame->view()) {
1773         if (ScrollAnimator* scrollAnimator = view->existingScrollAnimator())
1774             scrollAnimator->cancelAnimations();
1775     }
1776
1777     m_client->setCopiesOnScroll();
1778     history()->updateForCommit();
1779
1780     // The call to closeURL() invokes the unload event handler, which can execute arbitrary
1781     // JavaScript. If the script initiates a new load, we need to abandon the current load,
1782     // or the two will stomp each other.
1783     DocumentLoader* pdl = m_provisionalDocumentLoader.get();
1784     if (m_documentLoader)
1785         closeURL();
1786     if (pdl != m_provisionalDocumentLoader)
1787         return;
1788
1789     // Nothing else can interupt this commit - set the Provisional->Committed transition in stone
1790     if (m_documentLoader)
1791         m_documentLoader->stopLoadingSubresources();
1792     if (m_documentLoader)
1793         m_documentLoader->stopLoadingPlugIns();
1794
1795     setDocumentLoader(m_provisionalDocumentLoader.get());
1796     setProvisionalDocumentLoader(0);
1797
1798     if (pdl != m_documentLoader) {
1799         ASSERT(m_state == FrameStateComplete);
1800         return;
1801     }
1802
1803     setState(FrameStateCommittedPage);
1804
1805 #if ENABLE(TOUCH_EVENTS)
1806     if (isLoadingMainFrame())
1807         m_frame->page()->chrome().client()->needTouchEvents(false);
1808 #endif
1809
1810     // Handle adding the URL to the back/forward list.
1811     DocumentLoader* dl = m_documentLoader.get();
1812
1813     switch (m_loadType) {
1814         case FrameLoadTypeForward:
1815         case FrameLoadTypeBack:
1816         case FrameLoadTypeIndexedBackForward:
1817             if (m_frame->page()) {
1818                 // If the first load within a frame is a navigation within a back/forward list that was attached
1819                 // without any of the items being loaded then we need to update the history in a similar manner as
1820                 // for a standard load with the exception of updating the back/forward list (<rdar://problem/8091103>).
1821                 if (!m_stateMachine.committedFirstRealDocumentLoad() && isLoadingMainFrame())
1822                     history()->updateForStandardLoad(HistoryController::UpdateAllExceptBackForwardList);
1823
1824                 history()->updateForBackForwardNavigation();
1825
1826                 // For cached pages, CachedFrame::restore will take care of firing the popstate event with the history item's state object
1827                 if (history()->currentItem() && !cachedPage)
1828                     m_pendingStateObject = history()->currentItem()->stateObject();
1829
1830                 // Create a document view for this document, or used the cached view.
1831                 if (cachedPage) {
1832                     DocumentLoader* cachedDocumentLoader = cachedPage->documentLoader();
1833                     ASSERT(cachedDocumentLoader);
1834                     cachedDocumentLoader->setFrame(m_frame);
1835                     m_client->transitionToCommittedFromCachedFrame(cachedPage->cachedMainFrame());
1836
1837                 } else
1838                     m_client->transitionToCommittedForNewPage();
1839             }
1840             break;
1841
1842         case FrameLoadTypeReload:
1843         case FrameLoadTypeReloadFromOrigin:
1844         case FrameLoadTypeSame:
1845         case FrameLoadTypeReplace:
1846             history()->updateForReload();
1847             m_client->transitionToCommittedForNewPage();
1848             break;
1849
1850         case FrameLoadTypeStandard:
1851             history()->updateForStandardLoad();
1852             if (m_frame->view())
1853                 m_frame->view()->setScrollbarsSuppressed(true);
1854             m_client->transitionToCommittedForNewPage();
1855             break;
1856
1857         case FrameLoadTypeRedirectWithLockedBackForwardList:
1858             history()->updateForRedirectWithLockedBackForwardList();
1859             m_client->transitionToCommittedForNewPage();
1860             break;
1861
1862         // FIXME Remove this check when dummy ds is removed (whatever "dummy ds" is).
1863         // An exception should be thrown if we're in the FrameLoadTypeUninitialized state.
1864         default:
1865             ASSERT_NOT_REACHED();
1866     }
1867
1868     m_documentLoader->writer()->setMIMEType(dl->responseMIMEType());
1869
1870     // Tell the client we've committed this URL.
1871     ASSERT(m_frame->view());
1872
1873     if (m_stateMachine.creatingInitialEmptyDocument())
1874         return;
1875
1876     if (!m_stateMachine.committedFirstRealDocumentLoad())
1877         m_stateMachine.advanceTo(FrameLoaderStateMachine::DisplayingInitialEmptyDocumentPostCommit);
1878 }
1879
1880 void FrameLoader::clientRedirectCancelledOrFinished(bool cancelWithLoadInProgress)
1881 {
1882     // Note that -webView:didCancelClientRedirectForFrame: is called on the frame load delegate even if
1883     // the redirect succeeded.  We should either rename this API, or add a new method, like
1884     // -webView:didFinishClientRedirectForFrame:
1885     m_client->dispatchDidCancelClientRedirect();
1886
1887     if (!cancelWithLoadInProgress)
1888         m_quickRedirectComing = false;
1889
1890     m_sentRedirectNotification = false;
1891 }
1892
1893 void FrameLoader::clientRedirected(const KURL& url, double seconds, double fireDate, bool lockBackForwardList)
1894 {
1895     m_client->dispatchWillPerformClientRedirect(url, seconds, fireDate);
1896     
1897     // Remember that we sent a redirect notification to the frame load delegate so that when we commit
1898     // the next provisional load, we can send a corresponding -webView:didCancelClientRedirectForFrame:
1899     m_sentRedirectNotification = true;
1900     
1901     // If a "quick" redirect comes in, we set a special mode so we treat the next
1902     // load as part of the original navigation. If we don't have a document loader, we have
1903     // no "original" load on which to base a redirect, so we treat the redirect as a normal load.
1904     // Loads triggered by JavaScript form submissions never count as quick redirects.
1905     m_quickRedirectComing = (lockBackForwardList || history()->currentItemShouldBeReplaced()) && m_documentLoader && !m_isExecutingJavaScriptFormAction;
1906 }
1907
1908 bool FrameLoader::shouldReload(const KURL& currentURL, const KURL& destinationURL)
1909 {
1910     // This function implements the rule: "Don't reload if navigating by fragment within
1911     // the same URL, but do reload if going to a new URL or to the same URL with no
1912     // fragment identifier at all."
1913     if (!destinationURL.hasFragmentIdentifier())
1914         return true;
1915     return !equalIgnoringFragmentIdentifier(currentURL, destinationURL);
1916 }
1917
1918 void FrameLoader::closeOldDataSources()
1919 {
1920     // FIXME: Is it important for this traversal to be postorder instead of preorder?
1921     // If so, add helpers for postorder traversal, and use them. If not, then lets not
1922     // use a recursive algorithm here.
1923     for (Frame* child = m_frame->tree()->firstChild(); child; child = child->tree()->nextSibling())
1924         child->loader()->closeOldDataSources();
1925     
1926     if (m_documentLoader)
1927         m_client->dispatchWillClose();
1928
1929     m_client->setMainFrameDocumentReady(false); // stop giving out the actual DOMDocument to observers
1930 }
1931
1932 void FrameLoader::prepareForCachedPageRestore()
1933 {
1934     ASSERT(!m_frame->tree()->parent());
1935     ASSERT(m_frame->page());
1936     ASSERT(m_frame->page()->mainFrame() == m_frame);
1937
1938     m_frame->navigationScheduler()->cancel();
1939
1940     // We still have to close the previous part page.
1941     closeURL();
1942     
1943     // Delete old status bar messages (if it _was_ activated on last URL).
1944     if (m_frame->script()->canExecuteScripts(NotAboutToExecuteScript)) {
1945         DOMWindow* window = m_frame->document()->domWindow();
1946         window->setStatus(String());
1947         window->setDefaultStatus(String());
1948     }
1949 }
1950
1951 void FrameLoader::open(CachedFrameBase& cachedFrame)
1952 {
1953     m_isComplete = false;
1954     
1955     // Don't re-emit the load event.
1956     m_didCallImplicitClose = true;
1957
1958     KURL url = cachedFrame.url();
1959
1960     // FIXME: I suspect this block of code doesn't do anything.
1961     if (url.protocolIsInHTTPFamily() && !url.host().isEmpty() && url.path().isEmpty())
1962         url.setPath("/");
1963
1964     started();
1965     Document* document = cachedFrame.document();
1966     ASSERT(document);
1967     ASSERT(document->domWindow());
1968
1969     clear(document, true, true, cachedFrame.isMainFrame());
1970
1971     document->setInPageCache(false);
1972
1973     m_needsClear = true;
1974     m_isComplete = false;
1975     m_didCallImplicitClose = false;
1976     m_outgoingReferrer = url.string();
1977
1978     FrameView* view = cachedFrame.view();
1979     
1980     // When navigating to a CachedFrame its FrameView should never be null.  If it is we'll crash in creative ways downstream.
1981     ASSERT(view);
1982     view->setWasScrolledByUser(false);
1983
1984     // Use the current ScrollView's frame rect.
1985     if (m_frame->view())
1986         view->setFrameRect(m_frame->view()->frameRect());
1987     m_frame->setView(view);
1988     
1989     m_frame->setDocument(document);
1990     document->domWindow()->resumeFromPageCache();
1991
1992     updateFirstPartyForCookies();
1993
1994     cachedFrame.restore();
1995 }
1996
1997 bool FrameLoader::isHostedByObjectElement() const
1998 {
1999     HTMLFrameOwnerElement* owner = m_frame->ownerElement();
2000     return owner && owner->hasTagName(objectTag);
2001 }
2002
2003 bool FrameLoader::isLoadingMainFrame() const
2004 {
2005     Page* page = m_frame->page();
2006     return page && m_frame == page->mainFrame();
2007 }
2008
2009 bool FrameLoader::isReplacing() const
2010 {
2011     return m_loadType == FrameLoadTypeReplace;
2012 }
2013
2014 void FrameLoader::setReplacing()
2015 {
2016     m_loadType = FrameLoadTypeReplace;
2017 }
2018
2019 bool FrameLoader::subframeIsLoading() const
2020 {
2021     // It's most likely that the last added frame is the last to load so we walk backwards.
2022     for (Frame* child = m_frame->tree()->lastChild(); child; child = child->tree()->previousSibling()) {
2023         FrameLoader* childLoader = child->loader();
2024         DocumentLoader* documentLoader = childLoader->documentLoader();
2025         if (documentLoader && documentLoader->isLoadingInAPISense())
2026             return true;
2027         documentLoader = childLoader->provisionalDocumentLoader();
2028         if (documentLoader && documentLoader->isLoadingInAPISense())
2029             return true;
2030         documentLoader = childLoader->policyDocumentLoader();
2031         if (documentLoader)
2032             return true;
2033     }
2034     return false;
2035 }
2036
2037 void FrameLoader::willChangeTitle(DocumentLoader* loader)
2038 {
2039     m_client->willChangeTitle(loader);
2040 }
2041
2042 FrameLoadType FrameLoader::loadType() const
2043 {
2044     return m_loadType;
2045 }
2046     
2047 CachePolicy FrameLoader::subresourceCachePolicy() const
2048 {
2049     if (m_isComplete)
2050         return CachePolicyVerify;
2051
2052     if (m_loadType == FrameLoadTypeReloadFromOrigin)
2053         return CachePolicyReload;
2054
2055     if (Frame* parentFrame = m_frame->tree()->parent()) {
2056         CachePolicy parentCachePolicy = parentFrame->loader()->subresourceCachePolicy();
2057         if (parentCachePolicy != CachePolicyVerify)
2058             return parentCachePolicy;
2059     }
2060     
2061     if (m_loadType == FrameLoadTypeReload)
2062         return CachePolicyRevalidate;
2063
2064     const ResourceRequest& request(documentLoader()->request());
2065 #if PLATFORM(MAC)
2066     if (request.cachePolicy() == ReloadIgnoringCacheData && !equalIgnoringCase(request.httpMethod(), "post") && ResourceRequest::useQuickLookResourceCachingQuirks())
2067         return CachePolicyRevalidate;
2068 #endif
2069
2070     if (request.cachePolicy() == ReturnCacheDataElseLoad)
2071         return CachePolicyHistoryBuffer;
2072
2073     return CachePolicyVerify;
2074 }
2075
2076 void FrameLoader::checkLoadCompleteForThisFrame()
2077 {
2078     ASSERT(m_client->hasWebView());
2079
2080     Settings* settings = m_frame->settings();
2081
2082     switch (m_state) {
2083         case FrameStateProvisional: {
2084             if (m_delegateIsHandlingProvisionalLoadError)
2085                 return;
2086
2087             RefPtr<DocumentLoader> pdl = m_provisionalDocumentLoader;
2088             if (!pdl)
2089                 return;
2090                 
2091             // If we've received any errors we may be stuck in the provisional state and actually complete.
2092             const ResourceError& error = pdl->mainDocumentError();
2093             if (error.isNull())
2094                 return;
2095
2096             // Check all children first.
2097             RefPtr<HistoryItem> item;
2098             if (Page* page = m_frame->page())
2099                 if (isBackForwardLoadType(loadType()))
2100                     // Reset the back forward list to the last committed history item at the top level.
2101                     item = page->mainFrame()->loader()->history()->currentItem();
2102                 
2103             // Only reset if we aren't already going to a new provisional item.
2104             bool shouldReset = !history()->provisionalItem();
2105             if (!pdl->isLoadingInAPISense() || pdl->isStopping()) {
2106                 m_delegateIsHandlingProvisionalLoadError = true;
2107                 m_client->dispatchDidFailProvisionalLoad(error);
2108                 m_delegateIsHandlingProvisionalLoadError = false;
2109
2110                 ASSERT(!pdl->isLoading());
2111
2112                 // If we're in the middle of loading multipart data, we need to restore the document loader.
2113                 if (isReplacing() && !m_documentLoader.get())
2114                     setDocumentLoader(m_provisionalDocumentLoader.get());
2115
2116                 // Finish resetting the load state, but only if another load hasn't been started by the
2117                 // delegate callback.
2118                 if (pdl == m_provisionalDocumentLoader)
2119                     clearProvisionalLoad();
2120                 else if (activeDocumentLoader()) {
2121                     KURL unreachableURL = activeDocumentLoader()->unreachableURL();
2122                     if (!unreachableURL.isEmpty() && unreachableURL == pdl->request().url())
2123                         shouldReset = false;
2124                 }
2125             }
2126             if (shouldReset && item)
2127                 if (Page* page = m_frame->page()) {
2128                     page->backForward()->setCurrentItem(item.get());
2129                     m_frame->loader()->client()->updateGlobalHistoryItemForPage();
2130                 }
2131             return;
2132         }
2133         
2134         case FrameStateCommittedPage: {
2135             DocumentLoader* dl = m_documentLoader.get();            
2136             if (!dl || (dl->isLoadingInAPISense() && !dl->isStopping()))
2137                 return;
2138
2139             setState(FrameStateComplete);
2140
2141             // FIXME: Is this subsequent work important if we already navigated away?
2142             // Maybe there are bugs because of that, or extra work we can skip because
2143             // the new page is ready.
2144
2145             m_client->forceLayoutForNonHTML();
2146              
2147             // If the user had a scroll point, scroll to it, overriding the anchor point if any.
2148             if (m_frame->page()) {
2149                 if (isBackForwardLoadType(m_loadType) || m_loadType == FrameLoadTypeReload || m_loadType == FrameLoadTypeReloadFromOrigin)
2150                     history()->restoreScrollPositionAndViewState();
2151             }
2152
2153             if (m_stateMachine.creatingInitialEmptyDocument() || !m_stateMachine.committedFirstRealDocumentLoad())
2154                 return;
2155
2156             if (!settings->needsDidFinishLoadOrderQuirk()) {
2157                 m_progressTracker->progressCompleted();
2158                 if (Page* page = m_frame->page()) {
2159                     if (m_frame == page->mainFrame())
2160                         page->resetRelevantPaintedObjectCounter();
2161                 }
2162             }
2163
2164             const ResourceError& error = dl->mainDocumentError();
2165
2166             AXObjectCache::AXLoadingEvent loadingEvent;
2167             if (!error.isNull()) {
2168                 m_client->dispatchDidFailLoad(error);
2169                 loadingEvent = AXObjectCache::AXLoadingFailed;
2170             } else {
2171                 m_client->dispatchDidFinishLoad();
2172                 loadingEvent = AXObjectCache::AXLoadingFinished;
2173             }
2174
2175             if (settings->needsDidFinishLoadOrderQuirk()) {
2176                 m_progressTracker->progressCompleted();
2177                 if (Page* page = m_frame->page()) {
2178                     if (m_frame == page->mainFrame())
2179                         page->resetRelevantPaintedObjectCounter();
2180                 }
2181             }
2182
2183             // Notify accessibility.
2184             if (AXObjectCache* cache = m_frame->document()->existingAXObjectCache())
2185                 cache->frameLoadingEventNotification(m_frame, loadingEvent);
2186
2187             return;
2188         }
2189         
2190         case FrameStateComplete:
2191             m_loadType = FrameLoadTypeStandard;
2192             frameLoadCompleted();
2193             return;
2194     }
2195
2196     ASSERT_NOT_REACHED();
2197 }
2198
2199 void FrameLoader::continueLoadAfterWillSubmitForm()
2200 {
2201     if (!m_provisionalDocumentLoader)
2202         return;
2203
2204     prepareForLoadStart();
2205     
2206     // The load might be cancelled inside of prepareForLoadStart(), nulling out the m_provisionalDocumentLoader, 
2207     // so we need to null check it again.
2208     if (!m_provisionalDocumentLoader)
2209         return;
2210
2211     DocumentLoader* activeDocLoader = activeDocumentLoader();
2212     if (activeDocLoader && activeDocLoader->isLoadingMainResource())
2213         return;
2214
2215     m_loadingFromCachedPage = false;
2216     m_provisionalDocumentLoader->startLoadingMainResource();
2217 }
2218
2219 static KURL originatingURLFromBackForwardList(Page* page)
2220 {
2221     // FIXME: Can this logic be replaced with m_frame->document()->firstPartyForCookies()?
2222     // It has the same meaning of "page a user thinks is the current one".
2223
2224     KURL originalURL;
2225     int backCount = page->backForward()->backCount();
2226     for (int backIndex = 0; backIndex <= backCount; backIndex++) {
2227         // FIXME: At one point we had code here to check a "was user gesture" flag.
2228         // Do we need to restore that logic?
2229         HistoryItem* historyItem = page->backForward()->itemAtIndex(-backIndex);
2230         if (!historyItem)
2231             continue;
2232
2233         originalURL = historyItem->originalURL(); 
2234         if (!originalURL.isNull()) 
2235             return originalURL;
2236     }
2237
2238     return KURL();
2239 }
2240
2241 void FrameLoader::setOriginalURLForDownloadRequest(ResourceRequest& request)
2242 {
2243     KURL originalURL;
2244     
2245     // If there is no referrer, assume that the download was initiated directly, so current document is
2246     // completely unrelated to it. See <rdar://problem/5294691>.
2247     // FIXME: Referrer is not sent in many other cases, so we will often miss this important information.
2248     // Find a better way to decide whether the download was unrelated to current document.
2249     if (!request.httpReferrer().isNull()) {
2250         // find the first item in the history that was originated by the user
2251         originalURL = originatingURLFromBackForwardList(m_frame->page());
2252     }
2253
2254     if (originalURL.isNull())
2255         originalURL = request.url();
2256
2257     if (!originalURL.protocol().isEmpty() && !originalURL.host().isEmpty()) {
2258         unsigned port = originalURL.port();
2259
2260         // Original URL is needed to show the user where a file was downloaded from. We should make a URL that won't result in downloading the file again.
2261         // FIXME: Using host-only URL is a very heavy-handed approach. We should attempt to provide the actual page where the download was initiated from, as a reminder to the user.
2262         String hostOnlyURLString;
2263         if (port)
2264             hostOnlyURLString = makeString(originalURL.protocol(), "://", originalURL.host(), ":", String::number(port));
2265         else
2266             hostOnlyURLString = makeString(originalURL.protocol(), "://", originalURL.host());
2267
2268         // FIXME: Rename firstPartyForCookies back to mainDocumentURL. It was a mistake to think that it was only used for cookies.
2269         request.setFirstPartyForCookies(KURL(KURL(), hostOnlyURLString));
2270     }
2271 }
2272
2273 void FrameLoader::didLayout(LayoutMilestones milestones)
2274 {
2275     m_client->dispatchDidLayout(milestones);
2276 }
2277
2278 void FrameLoader::didFirstLayout()
2279 {
2280     if (m_frame->page() && isBackForwardLoadType(m_loadType))
2281         history()->restoreScrollPositionAndViewState();
2282
2283     if (m_stateMachine.committedFirstRealDocumentLoad() && !m_stateMachine.isDisplayingInitialEmptyDocument() && !m_stateMachine.firstLayoutDone())
2284         m_stateMachine.advanceTo(FrameLoaderStateMachine::FirstLayoutDone);
2285 }
2286
2287 void FrameLoader::frameLoadCompleted()
2288 {
2289     // Note: Can be called multiple times.
2290
2291     m_client->frameLoadCompleted();
2292
2293     history()->updateForFrameLoadCompleted();
2294
2295     // After a canceled provisional load, firstLayoutDone is false.
2296     // Reset it to true if we're displaying a page.
2297     if (m_documentLoader && m_stateMachine.committedFirstRealDocumentLoad() && !m_stateMachine.isDisplayingInitialEmptyDocument() && !m_stateMachine.firstLayoutDone())
2298         m_stateMachine.advanceTo(FrameLoaderStateMachine::FirstLayoutDone);
2299 }
2300
2301 void FrameLoader::detachChildren()
2302 {
2303     typedef Vector<RefPtr<Frame> > FrameVector;
2304     FrameVector childrenToDetach;
2305     childrenToDetach.reserveCapacity(m_frame->tree()->childCount());
2306     for (Frame* child = m_frame->tree()->lastChild(); child; child = child->tree()->previousSibling())
2307         childrenToDetach.append(child);
2308     FrameVector::iterator end = childrenToDetach.end();
2309     for (FrameVector::iterator it = childrenToDetach.begin(); it != end; ++it)
2310         (*it)->loader()->detachFromParent();
2311 }
2312
2313 void FrameLoader::closeAndRemoveChild(Frame* child)
2314 {
2315     child->tree()->detachFromParent();
2316
2317     child->setView(0);
2318     if (child->ownerElement() && child->page())
2319         child->page()->decrementSubframeCount();
2320     child->willDetachPage();
2321     child->detachFromPage();
2322
2323     m_frame->tree()->removeChild(child);
2324 }
2325
2326 // Called every time a resource is completely loaded or an error is received.
2327 void FrameLoader::checkLoadComplete()
2328 {
2329     ASSERT(m_client->hasWebView());
2330     
2331     m_shouldCallCheckLoadComplete = false;
2332
2333     // FIXME: Always traversing the entire frame tree is a bit inefficient, but 
2334     // is currently needed in order to null out the previous history item for all frames.
2335     if (Page* page = m_frame->page()) {
2336         Vector<RefPtr<Frame>, 10> frames;
2337         for (RefPtr<Frame> frame = page->mainFrame(); frame; frame = frame->tree()->traverseNext())
2338             frames.append(frame);
2339         // To process children before their parents, iterate the vector backwards.
2340         for (size_t i = frames.size(); i; --i)
2341             frames[i - 1]->loader()->checkLoadCompleteForThisFrame();
2342     }
2343 }
2344
2345 int FrameLoader::numPendingOrLoadingRequests(bool recurse) const
2346 {
2347     if (!recurse)
2348         return m_frame->document()->cachedResourceLoader()->requestCount();
2349
2350     int count = 0;
2351     for (Frame* frame = m_frame; frame; frame = frame->tree()->traverseNext(m_frame))
2352         count += frame->document()->cachedResourceLoader()->requestCount();
2353     return count;
2354 }
2355
2356 String FrameLoader::userAgent(const KURL& url) const
2357 {
2358     String userAgent = m_client->userAgent(url);
2359     InspectorInstrumentation::applyUserAgentOverride(m_frame, &userAgent);
2360     return userAgent;
2361 }
2362
2363 void FrameLoader::handledOnloadEvents()
2364 {
2365     m_client->dispatchDidHandleOnloadEvents();
2366
2367     if (documentLoader())
2368         documentLoader()->handledOnloadEvents();
2369 }
2370
2371 void FrameLoader::frameDetached()
2372 {
2373     stopAllLoaders();
2374     m_frame->document()->stopActiveDOMObjects();
2375     detachFromParent();
2376 }
2377
2378 void FrameLoader::detachFromParent()
2379 {
2380     RefPtr<Frame> protect(m_frame);
2381
2382     closeURL();
2383     history()->saveScrollPositionAndViewStateToItem(history()->currentItem());
2384     detachChildren();
2385     // stopAllLoaders() needs to be called after detachChildren(), because detachedChildren()
2386     // will trigger the unload event handlers of any child frames, and those event
2387     // handlers might start a new subresource load in this frame.
2388     stopAllLoaders();
2389
2390     InspectorInstrumentation::frameDetachedFromParent(m_frame);
2391
2392     detachViewsAndDocumentLoader();
2393
2394     m_progressTracker.clear();
2395
2396     if (Frame* parent = m_frame->tree()->parent()) {
2397         parent->loader()->closeAndRemoveChild(m_frame);
2398         parent->loader()->scheduleCheckCompleted();
2399     } else {
2400         m_frame->setView(0);
2401         m_frame->willDetachPage();
2402         m_frame->detachFromPage();
2403     }
2404 }
2405
2406 void FrameLoader::detachViewsAndDocumentLoader()
2407 {
2408     m_client->detachedFromParent2();
2409     setDocumentLoader(0);
2410     m_client->detachedFromParent3();
2411 }
2412     
2413 void FrameLoader::addExtraFieldsToSubresourceRequest(ResourceRequest& request)
2414 {
2415     addExtraFieldsToRequest(request, m_loadType, false);
2416 }
2417
2418 void FrameLoader::addExtraFieldsToMainResourceRequest(ResourceRequest& request)
2419 {
2420     // FIXME: Using m_loadType seems wrong for some callers.
2421     // If we are only preparing to load the main resource, that is previous load's load type!
2422     addExtraFieldsToRequest(request, m_loadType, true);
2423 }
2424
2425 void FrameLoader::addExtraFieldsToRequest(ResourceRequest& request, FrameLoadType loadType, bool mainResource)
2426 {
2427     // Don't set the cookie policy URL if it's already been set.
2428     // But make sure to set it on all requests regardless of protocol, as it has significance beyond the cookie policy (<rdar://problem/6616664>).
2429     if (request.firstPartyForCookies().isEmpty()) {
2430         if (mainResource && isLoadingMainFrame())
2431             request.setFirstPartyForCookies(request.url());
2432         else if (Document* document = m_frame->document())
2433             request.setFirstPartyForCookies(document->firstPartyForCookies());
2434     }
2435
2436     // The remaining modifications are only necessary for HTTP and HTTPS.
2437     if (!request.url().isEmpty() && !request.url().protocolIsInHTTPFamily())
2438         return;
2439
2440     applyUserAgent(request);
2441
2442     if (!mainResource) {
2443         if (request.isConditional())
2444             request.setCachePolicy(ReloadIgnoringCacheData);
2445         else if (documentLoader()->isLoadingInAPISense()) {
2446             // If we inherit cache policy from a main resource, we use the DocumentLoader's
2447             // original request cache policy for two reasons:
2448             // 1. For POST requests, we mutate the cache policy for the main resource,
2449             //    but we do not want this to apply to subresources
2450             // 2. Delegates that modify the cache policy using willSendRequest: should
2451             //    not affect any other resources. Such changes need to be done
2452             //    per request.
2453             ResourceRequestCachePolicy mainDocumentOriginalCachePolicy = documentLoader()->originalRequest().cachePolicy();
2454             // Back-forward navigations try to load main resource from cache only to avoid re-submitting form data, and start over (with a warning dialog) if that fails.
2455             // This policy is set on initial request too, but should not be inherited.
2456             ResourceRequestCachePolicy subresourceCachePolicy = (mainDocumentOriginalCachePolicy == ReturnCacheDataDontLoad) ? ReturnCacheDataElseLoad : mainDocumentOriginalCachePolicy;
2457             request.setCachePolicy(subresourceCachePolicy);
2458         } else
2459             request.setCachePolicy(UseProtocolCachePolicy);
2460
2461     // FIXME: Other FrameLoader functions have duplicated code for setting cache policy of main request when reloading.
2462     // It seems better to manage it explicitly than to hide the logic inside addExtraFieldsToRequest().
2463     } else if (loadType == FrameLoadTypeReload || loadType == FrameLoadTypeReloadFromOrigin || request.isConditional())
2464         request.setCachePolicy(ReloadIgnoringCacheData);
2465
2466     if (request.cachePolicy() == ReloadIgnoringCacheData) {
2467         if (loadType == FrameLoadTypeReload)
2468             request.setHTTPHeaderField("Cache-Control", "max-age=0");
2469         else if (loadType == FrameLoadTypeReloadFromOrigin) {
2470             request.setHTTPHeaderField("Cache-Control", "no-cache");
2471             request.setHTTPHeaderField("Pragma", "no-cache");
2472         }
2473     }
2474     
2475     if (mainResource)
2476         request.setHTTPAccept(defaultAcceptHeader);
2477
2478     // Make sure we send the Origin header.
2479     addHTTPOriginIfNeeded(request, String());
2480
2481     // Always try UTF-8. If that fails, try frame encoding (if any) and then the default.
2482     Settings* settings = m_frame->settings();
2483     request.setResponseContentDispositionEncodingFallbackArray("UTF-8", m_frame->document()->encoding(), settings ? settings->defaultTextEncodingName() : String());
2484 }
2485
2486 void FrameLoader::addHTTPOriginIfNeeded(ResourceRequest& request, const String& origin)
2487 {
2488     if (!request.httpOrigin().isEmpty())
2489         return;  // Request already has an Origin header.
2490
2491     // Don't send an Origin header for GET or HEAD to avoid privacy issues.
2492     // For example, if an intranet page has a hyperlink to an external web
2493     // site, we don't want to include the Origin of the request because it
2494     // will leak the internal host name. Similar privacy concerns have lead
2495     // to the widespread suppression of the Referer header at the network
2496     // layer.
2497     if (request.httpMethod() == "GET" || request.httpMethod() == "HEAD")
2498         return;
2499
2500     // For non-GET and non-HEAD methods, always send an Origin header so the
2501     // server knows we support this feature.
2502
2503     if (origin.isEmpty()) {
2504         // If we don't know what origin header to attach, we attach the value
2505         // for an empty origin.
2506         request.setHTTPOrigin(SecurityOrigin::createUnique()->toString());
2507         return;
2508     }
2509
2510     request.setHTTPOrigin(origin);
2511 }
2512
2513 void FrameLoader::loadPostRequest(const ResourceRequest& inRequest, const String& referrer, const String& frameName, bool lockHistory, FrameLoadType loadType, PassRefPtr<Event> event, PassRefPtr<FormState> prpFormState)
2514 {
2515     RefPtr<FormState> formState = prpFormState;
2516
2517     // Previously when this method was reached, the original FrameLoadRequest had been deconstructed to build a 
2518     // bunch of parameters that would come in here and then be built back up to a ResourceRequest.  In case
2519     // any caller depends on the immutability of the original ResourceRequest, I'm rebuilding a ResourceRequest
2520     // from scratch as it did all along.
2521     const KURL& url = inRequest.url();
2522     RefPtr<FormData> formData = inRequest.httpBody();
2523     const String& contentType = inRequest.httpContentType();
2524     String origin = inRequest.httpOrigin();
2525
2526     ResourceRequest workingResourceRequest(url);    
2527
2528     if (!referrer.isEmpty())
2529         workingResourceRequest.setHTTPReferrer(referrer);
2530     workingResourceRequest.setHTTPOrigin(origin);
2531     workingResourceRequest.setHTTPMethod("POST");
2532     workingResourceRequest.setHTTPBody(formData);
2533     workingResourceRequest.setHTTPContentType(contentType);
2534     addExtraFieldsToRequest(workingResourceRequest, loadType, true);
2535
2536     NavigationAction action(workingResourceRequest, loadType, true, event);
2537
2538     if (!frameName.isEmpty()) {
2539         // The search for a target frame is done earlier in the case of form submission.
2540         if (Frame* targetFrame = formState ? 0 : findFrameForNavigation(frameName))
2541             targetFrame->loader()->loadWithNavigationAction(workingResourceRequest, action, lockHistory, loadType, formState.release());
2542         else
2543             policyChecker()->checkNewWindowPolicy(action, FrameLoader::callContinueLoadAfterNewWindowPolicy, workingResourceRequest, formState.release(), frameName, this);
2544     } else {
2545         // must grab this now, since this load may stop the previous load and clear this flag
2546         bool isRedirect = m_quickRedirectComing;
2547         loadWithNavigationAction(workingResourceRequest, action, lockHistory, loadType, formState.release());    
2548         if (isRedirect) {
2549             m_quickRedirectComing = false;
2550             if (m_provisionalDocumentLoader)
2551                 m_provisionalDocumentLoader->setIsClientRedirect(true);
2552         }
2553     }
2554 }
2555
2556 unsigned long FrameLoader::loadResourceSynchronously(const ResourceRequest& request, StoredCredentials storedCredentials, ClientCredentialPolicy clientCredentialPolicy, ResourceError& error, ResourceResponse& response, Vector<char>& data)
2557 {
2558     ASSERT(m_frame->document());
2559     String referrer = SecurityPolicy::generateReferrerHeader(m_frame->document()->referrerPolicy(), request.url(), outgoingReferrer());
2560     
2561     ResourceRequest initialRequest = request;
2562     initialRequest.setTimeoutInterval(10);
2563     
2564     if (!referrer.isEmpty())
2565         initialRequest.setHTTPReferrer(referrer);
2566     addHTTPOriginIfNeeded(initialRequest, outgoingOrigin());
2567
2568     if (Page* page = m_frame->page())
2569         initialRequest.setFirstPartyForCookies(page->mainFrame()->loader()->documentLoader()->request().url());
2570     
2571     addExtraFieldsToSubresourceRequest(initialRequest);
2572
2573     unsigned long identifier = 0;    
2574     ResourceRequest newRequest(initialRequest);
2575     requestFromDelegate(newRequest, identifier, error);
2576
2577     if (error.isNull()) {
2578         ASSERT(!newRequest.isNull());
2579         
2580         if (!documentLoader()->applicationCacheHost()->maybeLoadSynchronously(newRequest, error, response, data)) {
2581             platformStrategies()->loaderStrategy()->loadResourceSynchronously(networkingContext(), identifier, newRequest, storedCredentials, clientCredentialPolicy, error, response, data);
2582             documentLoader()->applicationCacheHost()->maybeLoadFallbackSynchronously(newRequest, error, response, data);
2583         }
2584     }
2585     notifier()->sendRemainingDelegateMessages(m_documentLoader.get(), identifier, request, response, data.data(), data.size(), -1, error);
2586     return identifier;
2587 }
2588
2589 const ResourceRequest& FrameLoader::originalRequest() const
2590 {
2591     return activeDocumentLoader()->originalRequestCopy();
2592 }
2593
2594 void FrameLoader::receivedMainResourceError(const ResourceError& error)
2595 {
2596     // Retain because the stop may release the last reference to it.
2597     RefPtr<Frame> protect(m_frame);
2598
2599     RefPtr<DocumentLoader> loader = activeDocumentLoader();
2600     // FIXME: Don't want to do this if an entirely new load is going, so should check
2601     // that both data sources on the frame are either this or nil.
2602     stop();
2603     if (m_client->shouldFallBack(error))
2604         handleFallbackContent();
2605
2606     if (m_state == FrameStateProvisional && m_provisionalDocumentLoader) {
2607         if (m_submittedFormURL == m_provisionalDocumentLoader->originalRequestCopy().url())
2608             m_submittedFormURL = KURL();
2609             
2610         // We might have made a page cache item, but now we're bailing out due to an error before we ever
2611         // transitioned to the new page (before WebFrameState == commit).  The goal here is to restore any state
2612         // so that the existing view (that wenever got far enough to replace) can continue being used.
2613         history()->invalidateCurrentItemCachedPage();
2614         
2615         // Call clientRedirectCancelledOrFinished here so that the frame load delegate is notified that the redirect's
2616         // status has changed, if there was a redirect. The frame load delegate may have saved some state about
2617         // the redirect in its -webView:willPerformClientRedirectToURL:delay:fireDate:forFrame:. Since we are definitely
2618         // not going to use this provisional resource, as it was cancelled, notify the frame load delegate that the redirect
2619         // has ended.
2620         if (m_sentRedirectNotification)
2621             clientRedirectCancelledOrFinished(false);
2622     }
2623
2624     checkCompleted();
2625     if (m_frame->page())
2626         checkLoadComplete();
2627 }
2628
2629 void FrameLoader::callContinueFragmentScrollAfterNavigationPolicy(void* argument,
2630     const ResourceRequest& request, PassRefPtr<FormState>, bool shouldContinue)
2631 {
2632     FrameLoader* loader = static_cast<FrameLoader*>(argument);
2633     loader->continueFragmentScrollAfterNavigationPolicy(request, shouldContinue);
2634 }
2635
2636 void FrameLoader::continueFragmentScrollAfterNavigationPolicy(const ResourceRequest& request, bool shouldContinue)
2637 {
2638     m_quickRedirectComing = false;
2639
2640     if (!shouldContinue)
2641         return;
2642
2643     // If we have a provisional request for a different document, a fragment scroll should cancel it.
2644     if (m_provisionalDocumentLoader && !equalIgnoringFragmentIdentifier(m_provisionalDocumentLoader->request().url(), request.url())) {
2645         m_provisionalDocumentLoader->stopLoading();
2646         setProvisionalDocumentLoader(0);
2647     }
2648
2649     bool isRedirect = m_quickRedirectComing || policyChecker()->loadType() == FrameLoadTypeRedirectWithLockedBackForwardList;    
2650     loadInSameDocument(request.url(), 0, !isRedirect);
2651 }
2652
2653 bool FrameLoader::shouldPerformFragmentNavigation(bool isFormSubmission, const String& httpMethod, FrameLoadType loadType, const KURL& url)
2654 {
2655     // We don't do this if we are submitting a form with method other than "GET", explicitly reloading,
2656     // currently displaying a frameset, or if the URL does not have a fragment.
2657     // These rules were originally based on what KHTML was doing in KHTMLPart::openURL.
2658
2659     // FIXME: What about load types other than Standard and Reload?
2660
2661     return (!isFormSubmission || equalIgnoringCase(httpMethod, "GET"))
2662         && loadType != FrameLoadTypeReload
2663         && loadType != FrameLoadTypeReloadFromOrigin
2664         && loadType != FrameLoadTypeSame
2665         && !shouldReload(m_frame->document()->url(), url)
2666         // We don't want to just scroll if a link from within a
2667         // frameset is trying to reload the frameset into _top.
2668         && !m_frame->document()->isFrameSet();
2669 }
2670
2671 void FrameLoader::scrollToFragmentWithParentBoundary(const KURL& url)
2672 {
2673     FrameView* view = m_frame->view();
2674     if (!view)
2675         return;
2676
2677     // Leaking scroll position to a cross-origin ancestor would permit the so-called "framesniffing" attack.
2678     RefPtr<Frame> boundaryFrame(url.hasFragmentIdentifier() ? m_frame->document()->findUnsafeParentScrollPropagationBoundary() : 0);
2679
2680     if (boundaryFrame)
2681         boundaryFrame->view()->setSafeToPropagateScrollToParent(false);
2682
2683     view->scrollToFragment(url);
2684
2685     if (boundaryFrame)
2686         boundaryFrame->view()->setSafeToPropagateScrollToParent(true);
2687 }
2688
2689 void FrameLoader::callContinueLoadAfterNavigationPolicy(void* argument,
2690     const ResourceRequest& request, PassRefPtr<FormState> formState, bool shouldContinue)
2691 {
2692     FrameLoader* loader = static_cast<FrameLoader*>(argument);
2693     loader->continueLoadAfterNavigationPolicy(request, formState, shouldContinue);
2694 }
2695
2696 bool FrameLoader::shouldClose()
2697 {
2698     Page* page = m_frame->page();
2699     if (!page)
2700         return true;
2701     if (!page->chrome().canRunBeforeUnloadConfirmPanel())
2702         return true;
2703
2704     // Store all references to each subframe in advance since beforeunload's event handler may modify frame
2705     Vector<RefPtr<Frame> > targetFrames;
2706     targetFrames.append(m_frame);
2707     for (Frame* child = m_frame->tree()->firstChild(); child; child = child->tree()->traverseNext(m_frame))
2708         targetFrames.append(child);
2709
2710     bool shouldClose = false;
2711     {
2712         NavigationDisablerForBeforeUnload navigationDisabler;
2713         size_t i;
2714
2715         for (i = 0; i < targetFrames.size(); i++) {
2716             if (!targetFrames[i]->tree()->isDescendantOf(m_frame))
2717                 continue;
2718             if (!targetFrames[i]->loader()->fireBeforeUnloadEvent(page->chrome()))
2719                 break;
2720         }
2721
2722         if (i == targetFrames.size())
2723             shouldClose = true;
2724     }
2725
2726     if (!shouldClose)
2727         m_submittedFormURL = KURL();
2728
2729     return shouldClose;
2730 }
2731
2732 bool FrameLoader::fireBeforeUnloadEvent(Chrome& chrome)
2733 {
2734     DOMWindow* domWindow = m_frame->document()->domWindow();
2735     if (!domWindow)
2736         return true;
2737
2738     RefPtr<Document> document = m_frame->document();
2739     if (!document->body())
2740         return true;
2741
2742     RefPtr<BeforeUnloadEvent> beforeUnloadEvent = BeforeUnloadEvent::create();
2743     m_pageDismissalEventBeingDispatched = BeforeUnloadDismissal;
2744     domWindow->dispatchEvent(beforeUnloadEvent.get(), domWindow->document());
2745     m_pageDismissalEventBeingDispatched = NoDismissal;
2746
2747     if (!beforeUnloadEvent->defaultPrevented())
2748         document->defaultEventHandler(beforeUnloadEvent.get());
2749     if (beforeUnloadEvent->result().isNull())
2750         return true;
2751
2752     String text = document->displayStringModifiedByEncoding(beforeUnloadEvent->result());
2753     return chrome.runBeforeUnloadConfirmPanel(text, m_frame);
2754 }
2755
2756 void FrameLoader::continueLoadAfterNavigationPolicy(const ResourceRequest&, PassRefPtr<FormState> formState, bool shouldContinue)
2757 {
2758     // If we loaded an alternate page to replace an unreachableURL, we'll get in here with a
2759     // nil policyDataSource because loading the alternate page will have passed
2760     // through this method already, nested; otherwise, policyDataSource should still be set.
2761     ASSERT(m_policyDocumentLoader || !m_provisionalDocumentLoader->unreachableURL().isEmpty());
2762
2763     bool isTargetItem = history()->provisionalItem() ? history()->provisionalItem()->isTargetItem() : false;
2764
2765     // Two reasons we can't continue:
2766     //    1) Navigation policy delegate said we can't so request is nil. A primary case of this 
2767     //       is the user responding Cancel to the form repost nag sheet.
2768     //    2) User responded Cancel to an alert popped up by the before unload event handler.
2769     bool canContinue = shouldContinue && shouldClose();
2770
2771     if (!canContinue) {
2772         // If we were waiting for a quick redirect, but the policy delegate decided to ignore it, then we 
2773         // need to report that the client redirect was cancelled.
2774         if (m_quickRedirectComing)
2775             clientRedirectCancelledOrFinished(false);
2776
2777         setPolicyDocumentLoader(0);
2778
2779         // If the navigation request came from the back/forward menu, and we punt on it, we have the 
2780         // problem that we have optimistically moved the b/f cursor already, so move it back.  For sanity, 
2781         // we only do this when punting a navigation for the target frame or top-level frame.  
2782         if ((isTargetItem || isLoadingMainFrame()) && isBackForwardLoadType(policyChecker()->loadType())) {
2783             if (Page* page = m_frame->page()) {
2784                 Frame* mainFrame = page->mainFrame();
2785                 if (HistoryItem* resetItem = mainFrame->loader()->history()->currentItem()) {
2786                     page->backForward()->setCurrentItem(resetItem);
2787                     m_frame->loader()->client()->updateGlobalHistoryItemForPage();
2788                 }
2789             }
2790         }
2791         return;
2792     }
2793
2794     FrameLoadType type = policyChecker()->loadType();
2795     // A new navigation is in progress, so don't clear the history's provisional item.
2796     stopAllLoaders(ShouldNotClearProvisionalItem);
2797     
2798     // <rdar://problem/6250856> - In certain circumstances on pages with multiple frames, stopAllLoaders()
2799     // might detach the current FrameLoader, in which case we should bail on this newly defunct load. 
2800     if (!m_frame->page())
2801         return;
2802
2803 #if ENABLE(JAVASCRIPT_DEBUGGER) && ENABLE(INSPECTOR)
2804     if (Page* page = m_frame->page()) {
2805         if (page->mainFrame() == m_frame)
2806             m_frame->page()->inspectorController()->resume();
2807     }
2808 #endif
2809
2810     setProvisionalDocumentLoader(m_policyDocumentLoader.get());
2811     m_loadType = type;
2812     setState(FrameStateProvisional);
2813
2814     setPolicyDocumentLoader(0);
2815
2816     if (isBackForwardLoadType(type) && history()->provisionalItem()->isInPageCache()) {
2817         loadProvisionalItemFromCachedPage();
2818         return;
2819     }
2820
2821     if (formState)
2822         m_client->dispatchWillSubmitForm(&PolicyChecker::continueLoadAfterWillSubmitForm, formState);
2823     else
2824         continueLoadAfterWillSubmitForm();
2825 }
2826
2827 void FrameLoader::callContinueLoadAfterNewWindowPolicy(void* argument,
2828     const ResourceRequest& request, PassRefPtr<FormState> formState, const String& frameName, const NavigationAction& action, bool shouldContinue)
2829 {
2830     FrameLoader* loader = static_cast<FrameLoader*>(argument);
2831     loader->continueLoadAfterNewWindowPolicy(request, formState, frameName, action, shouldContinue);
2832 }
2833
2834 void FrameLoader::continueLoadAfterNewWindowPolicy(const ResourceRequest& request,
2835     PassRefPtr<FormState> formState, const String& frameName, const NavigationAction& action, bool shouldContinue)
2836 {
2837     if (!shouldContinue)
2838         return;
2839
2840     RefPtr<Frame> frame = m_frame;
2841     RefPtr<Frame> mainFrame = m_client->dispatchCreatePage(action);
2842     if (!mainFrame)
2843         return;
2844
2845     if (frameName != "_blank")
2846         mainFrame->tree()->setName(frameName);
2847
2848     mainFrame->page()->setOpenedByDOM();
2849     mainFrame->loader()->m_client->dispatchShow();
2850     if (!m_suppressOpenerInNewFrame) {
2851         mainFrame->loader()->setOpener(frame.get());
2852         mainFrame->document()->setReferrerPolicy(frame->document()->referrerPolicy());
2853     }
2854     mainFrame->loader()->loadWithNavigationAction(request, NavigationAction(request), false, FrameLoadTypeStandard, formState);
2855 }
2856
2857 void FrameLoader::requestFromDelegate(ResourceRequest& request, unsigned long& identifier, ResourceError& error)
2858 {
2859     ASSERT(!request.isNull());
2860
2861     identifier = 0;
2862     if (Page* page = m_frame->page()) {
2863         identifier = page->progress()->createUniqueIdentifier();
2864         notifier()->assignIdentifierToInitialRequest(identifier, m_documentLoader.get(), request);
2865     }
2866
2867     ResourceRequest newRequest(request);
2868     notifier()->dispatchWillSendRequest(m_documentLoader.get(), identifier, newRequest, ResourceResponse());
2869
2870     if (newRequest.isNull())
2871         error = cancelledError(request);
2872     else
2873         error = ResourceError();
2874
2875     request = newRequest;
2876 }
2877
2878 void FrameLoader::loadedResourceFromMemoryCache(CachedResource* resource, ResourceRequest& newRequest)
2879 {
2880     newRequest = ResourceRequest(resource->url());
2881
2882     Page* page = m_frame->page();
2883     if (!page)
2884         return;
2885
2886     if (!resource->shouldSendResourceLoadCallbacks() || m_documentLoader->haveToldClientAboutLoad(resource->url()))
2887         return;
2888
2889     // Main resource delegate messages are synthesized in MainResourceLoader, so we must not send them here.
2890     if (resource->type() == CachedResource::MainResource)
2891         return;
2892
2893     if (!page->areMemoryCacheClientCallsEnabled()) {
2894         InspectorInstrumentation::didLoadResourceFromMemoryCache(page, m_documentLoader.get(), resource);
2895         m_documentLoader->recordMemoryCacheLoadForFutureClientNotification(resource->resourceRequest());
2896         m_documentLoader->didTellClientAboutLoad(resource->url());
2897         return;
2898     }
2899
2900     if (m_client->dispatchDidLoadResourceFromMemoryCache(m_documentLoader.get(), newRequest, resource->response(), resource->encodedSize())) {
2901         InspectorInstrumentation::didLoadResourceFromMemoryCache(page, m_documentLoader.get(), resource);
2902         m_documentLoader->didTellClientAboutLoad(resource->url());
2903         return;
2904     }
2905
2906     unsigned long identifier;
2907     ResourceError error;
2908     requestFromDelegate(newRequest, identifier, error);
2909     InspectorInstrumentation::markResourceAsCached(page, identifier);
2910     notifier()->sendRemainingDelegateMessages(m_documentLoader.get(), identifier, newRequest, resource->response(), 0, resource->encodedSize(), 0, error);
2911 }
2912
2913 void FrameLoader::applyUserAgent(ResourceRequest& request)
2914 {
2915     String userAgent = this->userAgent(request.url());
2916     ASSERT(!userAgent.isNull());
2917     request.setHTTPUserAgent(userAgent);
2918 }
2919
2920 bool FrameLoader::shouldInterruptLoadForXFrameOptions(const String& content, const KURL& url, unsigned long requestIdentifier)
2921 {
2922     FeatureObserver::observe(m_frame->document(), FeatureObserver::XFrameOptions);
2923
2924     Frame* topFrame = m_frame->tree()->top();
2925     if (m_frame == topFrame)
2926         return false;
2927
2928     XFrameOptionsDisposition disposition = parseXFrameOptionsHeader(content);
2929
2930     switch (disposition) {
2931     case XFrameOptionsSameOrigin: {
2932         FeatureObserver::observe(m_frame->document(), FeatureObserver::XFrameOptionsSameOrigin);
2933         RefPtr<SecurityOrigin> origin = SecurityOrigin::create(url);
2934         if (!origin->isSameSchemeHostPort(topFrame->document()->securityOrigin()))
2935             return true;
2936         for (Frame* frame = m_frame->tree()->parent(); frame; frame = frame->tree()->parent()) {
2937             if (!origin->isSameSchemeHostPort(frame->document()->securityOrigin())) {
2938                 FeatureObserver::observe(m_frame->document(), FeatureObserver::XFrameOptionsSameOriginWithBadAncestorChain);
2939                 break;
2940             }
2941         }
2942         return false;
2943     }
2944     case XFrameOptionsDeny:
2945         return true;
2946     case XFrameOptionsAllowAll:
2947         return false;
2948     case XFrameOptionsConflict:
2949         m_frame->document()->addConsoleMessage(JSMessageSource, ErrorMessageLevel, "Multiple 'X-Frame-Options' headers with conflicting values ('" + content + "') encountered when loading '" + url.elidedString() + "'. Falling back to 'DENY'.", requestIdentifier);
2950         return true;
2951     case XFrameOptionsInvalid:
2952         m_frame->document()->addConsoleMessage(JSMessageSource, ErrorMessageLevel, "Invalid 'X-Frame-Options' header encountered when loading '" + url.elidedString() + "': '" + content + "' is not a recognized directive. The header will be ignored.", requestIdentifier);
2953         return false;
2954     default:
2955         ASSERT_NOT_REACHED();
2956         return false;
2957     }
2958 }
2959
2960 void FrameLoader::loadProvisionalItemFromCachedPage()
2961 {
2962     DocumentLoader* provisionalLoader = provisionalDocumentLoader();
2963     LOG(PageCache, "WebCorePageCache: Loading provisional DocumentLoader %p with URL '%s' from CachedPage", provisionalDocumentLoader(), provisionalDocumentLoader()->url().elidedString().utf8().data());
2964
2965     prepareForLoadStart();
2966
2967     m_loadingFromCachedPage = true;
2968
2969     // Should have timing data from previous time(s) the page was shown.
2970     ASSERT(provisionalLoader->timing()->navigationStart());
2971     provisionalLoader->resetTiming();
2972     provisionalLoader->timing()->markNavigationStart();
2973
2974     provisionalLoader->setCommitted(true);
2975     commitProvisionalLoad();
2976 }
2977
2978 bool FrameLoader::shouldTreatURLAsSameAsCurrent(const KURL& url) const
2979 {
2980     if (!history()->currentItem())
2981         return false;
2982     return url == history()->currentItem()->url() || url == history()->currentItem()->originalURL();
2983 }
2984
2985 bool FrameLoader::shouldTreatURLAsSrcdocDocument(const KURL& url) const
2986 {
2987     if (!equalIgnoringCase(url.string(), "about:srcdoc"))
2988         return false;
2989     HTMLFrameOwnerElement* ownerElement = m_frame->ownerElement();
2990     if (!ownerElement)
2991         return false;
2992     if (!ownerElement->hasTagName(iframeTag))
2993         return false;
2994     return ownerElement->fastHasAttribute(srcdocAttr);
2995 }
2996
2997 void FrameLoader::checkDidPerformFirstNavigation()
2998 {
2999     Page* page = m_frame->page();
3000     if (!page)
3001         return;
3002
3003     if (!m_didPerformFirstNavigation && page->backForward()->currentItem() && !page->backForward()->backItem() && !page->backForward()->forwardItem()) {
3004         m_didPerformFirstNavigation = true;
3005         m_client->didPerformFirstNavigation();
3006     }
3007 }
3008
3009 Frame* FrameLoader::findFrameForNavigation(const AtomicString& name, Document* activeDocument)
3010 {
3011     Frame* frame = m_frame->tree()->find(name);
3012
3013     // From http://www.whatwg.org/specs/web-apps/current-work/#seamlessLinks:
3014     //
3015     // If the source browsing context is the same as the browsing context
3016     // being navigated, and this browsing context has its seamless browsing
3017     // context flag set, and the browsing context being navigated was not
3018     // chosen using an explicit self-navigation override, then find the
3019     // nearest ancestor browsing context that does not have its seamless
3020     // browsing context flag set, and continue these steps as if that
3021     // browsing context was the one that was going to be navigated instead.
3022     if (frame == m_frame && name != "_self" && m_frame->document()->shouldDisplaySeamlesslyWithParent()) {
3023         for (Frame* ancestor = m_frame; ancestor; ancestor = ancestor->tree()->parent()) {
3024             if (!ancestor->document()->shouldDisplaySeamlesslyWithParent()) {
3025                 frame = ancestor;
3026                 break;
3027             }
3028         }
3029         ASSERT(frame != m_frame);
3030     }
3031
3032     if (activeDocument) {
3033         if (!activeDocument->canNavigate(frame))
3034             return 0;
3035     } else {
3036         // FIXME: Eventually all callers should supply the actual activeDocument
3037         // so we can call canNavigate with the right document.
3038         if (!m_frame->document()->canNavigate(frame))
3039             return 0;
3040     }
3041
3042     return frame;
3043 }
3044
3045 void FrameLoader::loadSameDocumentItem(HistoryItem* item)
3046 {
3047     ASSERT(item->documentSequenceNumber() == history()->currentItem()->documentSequenceNumber());
3048
3049     // Save user view state to the current history item here since we don't do a normal load.
3050     // FIXME: Does form state need to be saved here too?
3051     history()->saveScrollPositionAndViewStateToItem(history()->currentItem());
3052     if (FrameView* view = m_frame->view())
3053         view->setWasScrolledByUser(false);
3054
3055     history()->setCurrentItem(item);
3056         
3057     // loadInSameDocument() actually changes the URL and notifies load delegates of a "fake" load
3058     loadInSameDocument(item->url(), item->stateObject(), false);
3059
3060     // Restore user view state from the current history item here since we don't do a normal load.
3061     history()->restoreScrollPositionAndViewState();
3062 }
3063
3064 // FIXME: This function should really be split into a couple pieces, some of
3065 // which should be methods of HistoryController and some of which should be
3066 // methods of FrameLoader.
3067 void FrameLoader::loadDifferentDocumentItem(HistoryItem* item, FrameLoadType loadType, FormSubmissionCacheLoadPolicy cacheLoadPolicy)
3068 {
3069     // Remember this item so we can traverse any child items as child frames load
3070     history()->setProvisionalItem(item);
3071
3072     if (CachedPage* cachedPage = pageCache()->get(item)) {
3073         loadWithDocumentLoader(cachedPage->documentLoader(), loadType, 0);   
3074         return;
3075     }
3076
3077     KURL itemURL = item->url();
3078     KURL itemOriginalURL = item->originalURL();
3079     KURL currentURL;
3080     if (documentLoader())
3081         currentURL = documentLoader()->url();
3082     RefPtr<FormData> formData = item->formData();
3083
3084     ResourceRequest request(itemURL);
3085
3086     if (!item->referrer().isNull())
3087         request.setHTTPReferrer(item->referrer());
3088     
3089     // If this was a repost that failed the page cache, we might try to repost the form.
3090     NavigationAction action;
3091     if (formData) {
3092         formData->generateFiles(m_frame->document());
3093
3094         request.setHTTPMethod("POST");
3095         request.setHTTPBody(formData);
3096         request.setHTTPContentType(item->formContentType());
3097         RefPtr<SecurityOrigin> securityOrigin = SecurityOrigin::createFromString(item->referrer());
3098         addHTTPOriginIfNeeded(request, securityOrigin->toString());
3099
3100         // Make sure to add extra fields to the request after the Origin header is added for the FormData case.
3101         // See https://bugs.webkit.org/show_bug.cgi?id=22194 for more discussion.
3102         addExtraFieldsToRequest(request, loadType, true);
3103         
3104         // FIXME: Slight hack to test if the NSURL cache contains the page we're going to.
3105         // We want to know this before talking to the policy delegate, since it affects whether 
3106         // we show the DoYouReallyWantToRepost nag.
3107         //
3108         // This trick has a small bug (3123893) where we might find a cache hit, but then
3109         // have the item vanish when we try to use it in the ensuing nav.  This should be
3110         // extremely rare, but in that case the user will get an error on the navigation.
3111         
3112         if (cacheLoadPolicy == MayAttemptCacheOnlyLoadForFormSubmissionItem) {
3113             request.setCachePolicy(ReturnCacheDataDontLoad);
3114             action = NavigationAction(request, loadType, false);
3115         } else {
3116             request.setCachePolicy(ReturnCacheDataElseLoad);
3117             action = NavigationAction(request, NavigationTypeFormResubmitted);
3118         }
3119     } else {
3120         switch (loadType) {
3121             case FrameLoadTypeReload:
3122             case FrameLoadTypeReloadFromOrigin:
3123                 request.setCachePolicy(ReloadIgnoringCacheData);
3124                 break;
3125             case FrameLoadTypeBack:
3126             case FrameLoadTypeForward:
3127             case FrameLoadTypeIndexedBackForward:
3128                 // If the first load within a frame is a navigation within a back/forward list that was attached 
3129                 // without any of the items being loaded then we should use the default caching policy (<rdar://problem/8131355>).
3130                 if (m_stateMachine.committedFirstRealDocumentLoad())
3131                     request.setCachePolicy(ReturnCacheDataElseLoad);
3132                 break;
3133             case FrameLoadTypeStandard:
3134             case FrameLoadTypeRedirectWithLockedBackForwardList:
3135                 break;
3136             case FrameLoadTypeSame:
3137             default:
3138                 ASSERT_NOT_REACHED();
3139         }
3140
3141         addExtraFieldsToRequest(request, loadType, true);
3142
3143         ResourceRequest requestForOriginalURL(request);
3144         requestForOriginalURL.setURL(itemOriginalURL);
3145         action = NavigationAction(requestForOriginalURL, loadType, false);
3146     }
3147
3148     loadWithNavigationAction(request, action, false, loadType, 0);
3149 }
3150
3151 // Loads content into this frame, as specified by history item
3152 void FrameLoader::loadItem(HistoryItem* item, FrameLoadType loadType)
3153 {
3154     m_requestedHistoryItem = item;
3155     HistoryItem* currentItem = history()->currentItem();
3156     bool sameDocumentNavigation = currentItem && item->shouldDoSameDocumentNavigationTo(currentItem);
3157
3158     if (sameDocumentNavigation)
3159         loadSameDocumentItem(item);
3160     else
3161         loadDifferentDocumentItem(item, loadType, MayAttemptCacheOnlyLoadForFormSubmissionItem);
3162 }
3163
3164 void FrameLoader::retryAfterFailedCacheOnlyMainResourceLoad()
3165 {
3166     ASSERT(m_state == FrameStateProvisional);
3167     ASSERT(!m_loadingFromCachedPage);
3168     // We only use cache-only loads to avoid resubmitting forms.
3169     ASSERT(isBackForwardLoadType(m_loadType));
3170     ASSERT(m_history->provisionalItem()->formData());
3171     ASSERT(m_history->provisionalItem() == m_requestedHistoryItem.get());
3172
3173     FrameLoadType loadType = m_loadType;
3174     HistoryItem* item = m_history->provisionalItem();
3175
3176     stopAllLoaders(ShouldNotClearProvisionalItem);
3177     loadDifferentDocumentItem(item, loadType, MayNotAttemptCacheOnlyLoadForFormSubmissionItem);
3178 }
3179
3180 ResourceError FrameLoader::cancelledError(const ResourceRequest& request) const
3181 {
3182     ResourceError error = m_client->cancelledError(request);
3183     error.setIsCancellation(true);
3184     return error;
3185 }
3186
3187 void FrameLoader::setTitle(const StringWithDirection& title)
3188 {
3189     documentLoader()->setTitle(title);
3190 }
3191
3192 String FrameLoader::referrer() const
3193 {
3194     return m_documentLoader ? m_documentLoader->request().httpReferrer() : "";
3195 }
3196
3197 void FrameLoader::dispatchDocumentElementAvailable()
3198 {
3199     m_frame->injectUserScripts(InjectAtDocumentStart);
3200     m_client->documentElementAvailable();
3201 }
3202
3203 void FrameLoader::dispatchDidClearWindowObjectsInAllWorlds()
3204 {
3205     if (!m_frame->script()->canExecuteScripts(NotAboutToExecuteScript))
3206         return;
3207
3208     Vector<RefPtr<DOMWrapperWorld> > worlds;
3209     ScriptController::getAllWorlds(worlds);
3210     for (size_t i = 0; i < worlds.size(); ++i)
3211         dispatchDidClearWindowObjectInWorld(worlds[i].get());
3212 }
3213
3214 void FrameLoader::dispatchDidClearWindowObjectInWorld(DOMWrapperWorld* world)
3215 {
3216     if (!m_frame->script()->canExecuteScripts(NotAboutToExecuteScript) || !m_frame->script()->existingWindowShell(world))
3217         return;
3218
3219     m_client->dispatchDidClearWindowObjectInWorld(world);
3220
3221 #if ENABLE(INSPECTOR)
3222     if (Page* page = m_frame->page())
3223         page->inspectorController()->didClearWindowObjectInWorld(m_frame, world);
3224 #endif
3225
3226     InspectorInstrumentation::didClearWindowObjectInWorld(m_frame, world);
3227 }
3228
3229 void FrameLoader::dispatchGlobalObjectAvailableInAllWorlds()
3230 {
3231     Vector<RefPtr<DOMWrapperWorld> > worlds;
3232     ScriptController::getAllWorlds(worlds);
3233     for (size_t i = 0; i < worlds.size(); ++i)
3234         m_client->dispatchGlobalObjectAvailable(worlds[i].get());
3235 }
3236
3237 SandboxFlags FrameLoader::effectiveSandboxFlags() const
3238 {
3239     SandboxFlags flags = m_forcedSandboxFlags;
3240     if (Frame* parentFrame = m_frame->tree()->parent())
3241         flags |= parentFrame->document()->sandboxFlags();
3242     if (HTMLFrameOwnerElement* ownerElement = m_frame->ownerElement())
3243         flags |= ownerElement->sandboxFlags();
3244     return flags;
3245 }
3246
3247 void FrameLoader::didChangeTitle(DocumentLoader* loader)
3248 {
3249     m_client->didChangeTitle(loader);
3250
3251     if (loader == m_documentLoader) {
3252         // Must update the entries in the back-forward list too.
3253         history()->setCurrentItemTitle(loader->title());
3254         // This must go through the WebFrame because it has the right notion of the current b/f item.
3255         m_client->setTitle(loader->title(), loader->urlForHistory());
3256         m_client->setMainFrameDocumentReady(true); // update observers with new DOMDocument
3257         m_client->dispatchDidReceiveTitle(loader->title());
3258     }
3259 }
3260
3261 void FrameLoader::didChangeIcons(IconType type)
3262 {
3263     m_client->dispatchDidChangeIcons(type);
3264 }
3265
3266 void FrameLoader::dispatchDidCommitLoad()
3267 {
3268     if (m_stateMachine.creatingInitialEmptyDocument())
3269         return;
3270
3271     m_client->dispatchDidCommitLoad();
3272
3273     if (isLoadingMainFrame()) {
3274         m_frame->page()->resetSeenPlugins();
3275         m_frame->page()->resetSeenMediaEngines();
3276     }
3277
3278     InspectorInstrumentation::didCommitLoad(m_frame, m_documentLoader.get());
3279
3280     if (m_frame->page()->mainFrame() == m_frame)
3281         m_frame->page()->featureObserver()->didCommitLoad();
3282
3283 }
3284
3285 void FrameLoader::tellClientAboutPastMemoryCacheLoads()
3286 {
3287     ASSERT(m_frame->page());
3288     ASSERT(m_frame->page()->areMemoryCacheClientCallsEnabled());
3289
3290     if (!m_documentLoader)
3291         return;
3292
3293     Vector<ResourceRequest> pastLoads;
3294     m_documentLoader->takeMemoryCacheLoadsForClientNotification(pastLoads);
3295
3296     size_t size = pastLoads.size();
3297     for (size_t i = 0; i < size; ++i) {
3298         CachedResource* resource = memoryCache()->resourceForRequest(pastLoads[i]);
3299
3300         // FIXME: These loads, loaded from cache, but now gone from the cache by the time
3301         // Page::setMemoryCacheClientCallsEnabled(true) is called, will not be seen by the client.
3302         // Consider if there's some efficient way of remembering enough to deliver this client call.
3303         // We have the URL, but not the rest of the response or the length.
3304         if (!resource)
3305             continue;
3306
3307         ResourceRequest request(resource->url());
3308         m_client->dispatchDidLoadResourceFromMemoryCache(m_documentLoader.get(), request, resource->response(), resource->encodedSize());
3309     }
3310 }
3311
3312 NetworkingContext* FrameLoader::networkingContext() const
3313 {
3314     return m_networkingContext.get();
3315 }
3316
3317 void FrameLoader::loadProgressingStatusChanged()
3318 {
3319     FrameView* view = m_frame->page()->mainFrame()->view();
3320     view->updateLayerFlushThrottlingInAllFrames();
3321     view->adjustTiledBackingCoverage();
3322 }
3323
3324 bool FrameLoaderClient::hasHTMLView() const
3325 {
3326     return true;
3327 }
3328
3329 PassRefPtr<Frame> createWindow(Frame* openerFrame, Frame* lookupFrame, const FrameLoadRequest& request, const WindowFeatures& features, bool& created)
3330 {
3331     ASSERT(!features.dialog || request.frameName().isEmpty());
3332
3333     if (!request.frameName().isEmpty() && request.frameName() != "_blank") {
3334         if (Frame* frame = lookupFrame->loader()->findFrameForNavigation(request.frameName(), openerFrame->document())) {
3335             if (request.frameName() != "_self") {
3336                 if (Page* page = frame->page())
3337                     page->chrome().focus();
3338             }
3339             created = false;
3340             return frame;
3341         }
3342     }
3343
3344     // Sandboxed frames cannot open new auxiliary browsing contexts.
3345     if (isDocumentSandboxed(openerFrame, SandboxPopups)) {
3346         // FIXME: This message should be moved off the console once a solution to https://bugs.webkit.org/show_bug.cgi?id=103274 exists.
3347         openerFrame->document()->addConsoleMessage(SecurityMessageSource, ErrorMessageLevel, "Blocked opening '" + request.resourceRequest().url().elidedString() + "' in a new window because the request was made in a sandboxed frame whose 'allow-popups' permission is not set.");
3348         return 0;
3349     }
3350
3351     // FIXME: Setting the referrer should be the caller's responsibility.
3352     FrameLoadRequest requestWithReferrer = request;
3353     String referrer = SecurityPolicy::generateReferrerHeader(openerFrame->document()->referrerPolicy(), request.resourceRequest().url(), openerFrame->loader()->outgoingReferrer());
3354     if (!referrer.isEmpty())
3355         requestWithReferrer.resourceRequest().setHTTPReferrer(referrer);
3356     FrameLoader::addHTTPOriginIfNeeded(requestWithReferrer.resourceRequest(), openerFrame->loader()->outgoingOrigin());
3357
3358     if (openerFrame->settings() && !openerFrame->settings()->supportsMultipleWindows()) {
3359         created = false;
3360         return openerFrame;
3361     }
3362
3363     Page* oldPage = openerFrame->page();
3364     if (!oldPage)
3365         return 0;
3366
3367     NavigationAction action(requestWithReferrer.resourceRequest());
3368     Page* page = oldPage->chrome().createWindow(openerFrame, requestWithReferrer, features, action);
3369     if (!page)
3370         return 0;
3371
3372     Frame* frame = page->mainFrame();
3373
3374     frame->loader()->forceSandboxFlags(openerFrame->document()->sandboxFlags());
3375
3376     if (request.frameName() != "_blank")
3377         frame->tree()->setName(request.frameName());
3378
3379     page->chrome().setToolbarsVisible(features.toolBarVisible || features.locationBarVisible);
3380     page->chrome().setStatusbarVisible(features.statusBarVisible);
3381     page->chrome().setScrollbarsVisible(features.scrollbarsVisible);
3382     page->chrome().setMenubarVisible(features.menuBarVisible);
3383     page->chrome().setResizable(features.resizable);
3384
3385     // 'x' and 'y' specify the location of the window, while 'width' and 'height'
3386     // specify the size of the viewport. We can only resize the window, so adjust
3387     // for the difference between the window size and the viewport size.
3388
3389     FloatRect windowRect = page->chrome().windowRect();
3390     FloatSize viewportSize = page->chrome().pageRect().size();
3391
3392     if (features.xSet)
3393         windowRect.setX(features.x);
3394     if (features.ySet)
3395         windowRect.setY(features.y);
3396     if (features.widthSet)
3397         windowRect.setWidth(features.width + (windowRect.width() - viewportSize.width()));
3398     if (features.heightSet)
3399         windowRect.setHeight(features.height + (windowRect.height() - viewportSize.height()));
3400
3401     // Ensure non-NaN values, minimum size as well as being within valid screen area.
3402     FloatRect newWindowRect = DOMWindow::adjustWindowRect(page, windowRect);
3403
3404     page->chrome().setWindowRect(newWindowRect);
3405     page->chrome().show();
3406
3407     created = true;
3408     return frame;
3409 }
3410
3411 } // namespace WebCore