b51d3951c8c9b869183289d027c83763acc3ee77
[WebKit-https.git] / Source / WebCore / loader / FrameLoader.cpp
1 /*
2  * Copyright (C) 2006, 2007, 2008, 2009, 2010, 2011 Apple Inc. All rights reserved.
3  * Copyright (C) 2008 Nokia Corporation and/or its subsidiary(-ies)
4  * Copyright (C) 2008, 2009 Torch Mobile Inc. All rights reserved. (http://www.torchmobile.com/)
5  * Copyright (C) 2008 Alp Toker <alp@atoker.com>
6  * Copyright (C) Research In Motion Limited 2009. All rights reserved.
7  * Copyright (C) 2011 Kris Jordan <krisjordan@gmail.com>
8  * Copyright (C) 2011 Google Inc. All rights reserved.
9  *
10  * Redistribution and use in source and binary forms, with or without
11  * modification, are permitted provided that the following conditions
12  * are met:
13  *
14  * 1.  Redistributions of source code must retain the above copyright
15  *     notice, this list of conditions and the following disclaimer. 
16  * 2.  Redistributions in binary form must reproduce the above copyright
17  *     notice, this list of conditions and the following disclaimer in the
18  *     documentation and/or other materials provided with the distribution. 
19  * 3.  Neither the name of Apple Computer, Inc. ("Apple") nor the names of
20  *     its contributors may be used to endorse or promote products derived
21  *     from this software without specific prior written permission. 
22  *
23  * THIS SOFTWARE IS PROVIDED BY APPLE AND ITS CONTRIBUTORS "AS IS" AND ANY
24  * EXPRESS OR IMPLIED WARRANTIES, INCLUDING, BUT NOT LIMITED TO, THE IMPLIED
25  * WARRANTIES OF MERCHANTABILITY AND FITNESS FOR A PARTICULAR PURPOSE ARE
26  * DISCLAIMED. IN NO EVENT SHALL APPLE OR ITS CONTRIBUTORS BE LIABLE FOR ANY
27  * DIRECT, INDIRECT, INCIDENTAL, SPECIAL, EXEMPLARY, OR CONSEQUENTIAL DAMAGES
28  * (INCLUDING, BUT NOT LIMITED TO, PROCUREMENT OF SUBSTITUTE GOODS OR SERVICES;
29  * LOSS OF USE, DATA, OR PROFITS; OR BUSINESS INTERRUPTION) HOWEVER CAUSED AND
30  * ON ANY THEORY OF LIABILITY, WHETHER IN CONTRACT, STRICT LIABILITY, OR TORT
31  * (INCLUDING NEGLIGENCE OR OTHERWISE) ARISING IN ANY WAY OUT OF THE USE OF
32  * THIS SOFTWARE, EVEN IF ADVISED OF THE POSSIBILITY OF SUCH DAMAGE.
33  */
34
35 #include "config.h"
36 #include "FrameLoader.h"
37
38 #include "AXObjectCache.h"
39 #include "ApplicationCacheHost.h"
40 #include "BackForwardController.h"
41 #include "BeforeUnloadEvent.h"
42 #include "MemoryCache.h"
43 #include "CachedPage.h"
44 #include "CachedResourceLoader.h"
45 #include "Chrome.h"
46 #include "ChromeClient.h"
47 #include "Console.h"
48 #include "ContentSecurityPolicy.h"
49 #include "DOMImplementation.h"
50 #include "DOMWindow.h"
51 #include "DatabaseManager.h"
52 #include "Document.h"
53 #include "DocumentLoadTiming.h"
54 #include "DocumentLoader.h"
55 #include "Editor.h"
56 #include "EditorClient.h"
57 #include "Element.h"
58 #include "Event.h"
59 #include "EventNames.h"
60 #include "FloatRect.h"
61 #include "FormState.h"
62 #include "FormSubmission.h"
63 #include "Frame.h"
64 #include "FrameLoadRequest.h"
65 #include "FrameLoaderClient.h"
66 #include "FrameNetworkingContext.h"
67 #include "FrameTree.h"
68 #include "FrameView.h"
69 #include "HTMLAnchorElement.h"
70 #include "HTMLFormElement.h"
71 #include "HTMLInputElement.h"
72 #include "HTMLNames.h"
73 #include "HTMLObjectElement.h"
74 #include "HTMLParserIdioms.h"
75 #include "HTTPParsers.h"
76 #include "HistoryItem.h"
77 #include "InspectorController.h"
78 #include "InspectorInstrumentation.h"
79 #include "LoaderStrategy.h"
80 #include "Logging.h"
81 #include "MIMETypeRegistry.h"
82 #include "MainResourceLoader.h"
83 #include "Page.h"
84 #include "PageCache.h"
85 #include "PageTransitionEvent.h"
86 #include "PlatformStrategies.h"
87 #include "PluginData.h"
88 #include "PluginDatabase.h"
89 #include "PluginDocument.h"
90 #include "PolicyChecker.h"
91 #include "ProgressTracker.h"
92 #include "ResourceHandle.h"
93 #include "ResourceRequest.h"
94 #include "SchemeRegistry.h"
95 #include "ScriptCallStack.h"
96 #include "ScriptController.h"
97 #include "ScriptSourceCode.h"
98 #include "ScrollAnimator.h"
99 #include "SecurityOrigin.h"
100 #include "SecurityPolicy.h"
101 #include "SegmentedString.h"
102 #include "SerializedScriptValue.h"
103 #include "Settings.h"
104 #include "TextResourceDecoder.h"
105 #include "WebCoreMemoryInstrumentation.h"
106 #include "WindowFeatures.h"
107 #include "XMLDocumentParser.h"
108 #include <wtf/CurrentTime.h>
109 #include <wtf/MemoryInstrumentationHashSet.h>
110 #include <wtf/StdLibExtras.h>
111 #include <wtf/text/CString.h>
112 #include <wtf/text/WTFString.h>
113
114 #if ENABLE(SHARED_WORKERS)
115 #include "SharedWorkerRepository.h"
116 #endif
117
118 #if ENABLE(SVG)
119 #include "SVGDocument.h"
120 #include "SVGLocatable.h"
121 #include "SVGNames.h"
122 #include "SVGPreserveAspectRatio.h"
123 #include "SVGSVGElement.h"
124 #include "SVGViewElement.h"
125 #include "SVGViewSpec.h"
126 #endif
127
128 #if ENABLE(WEB_ARCHIVE) || ENABLE(MHTML)
129 #include "Archive.h"
130 #endif
131
132
133 namespace WebCore {
134
135 using namespace HTMLNames;
136
137 #if ENABLE(SVG)
138 using namespace SVGNames;
139 #endif
140
141 static const char defaultAcceptHeader[] = "text/html,application/xhtml+xml,application/xml;q=0.9,*/*;q=0.8";
142 static double storedTimeOfLastCompletedLoad;
143
144 bool isBackForwardLoadType(FrameLoadType type)
145 {
146     switch (type) {
147         case FrameLoadTypeStandard:
148         case FrameLoadTypeReload:
149         case FrameLoadTypeReloadFromOrigin:
150         case FrameLoadTypeSame:
151         case FrameLoadTypeRedirectWithLockedBackForwardList:
152         case FrameLoadTypeReplace:
153             return false;
154         case FrameLoadTypeBack:
155         case FrameLoadTypeForward:
156         case FrameLoadTypeIndexedBackForward:
157             return true;
158     }
159     ASSERT_NOT_REACHED();
160     return false;
161 }
162
163 // This is not in the FrameLoader class to emphasize that it does not depend on
164 // private FrameLoader data, and to avoid increasing the number of public functions
165 // with access to private data.  Since only this .cpp file needs it, making it
166 // non-member lets us exclude it from the header file, thus keeping FrameLoader.h's
167 // API simpler.
168 //
169 static bool isDocumentSandboxed(Frame* frame, SandboxFlags mask)
170 {
171     return frame->document() && frame->document()->isSandboxed(mask);
172 }
173
174 class FrameLoader::FrameProgressTracker {
175 public:
176     static PassOwnPtr<FrameProgressTracker> create(Frame* frame) { return adoptPtr(new FrameProgressTracker(frame)); }
177     ~FrameProgressTracker()
178     {
179         ASSERT(!m_inProgress || m_frame->page());
180         if (m_inProgress)
181             m_frame->page()->progress()->progressCompleted(m_frame);
182     }
183
184     void progressStarted()
185     {
186         ASSERT(m_frame->page());
187         if (!m_inProgress)
188             m_frame->page()->progress()->progressStarted(m_frame);
189         m_inProgress = true;
190     }
191
192     void progressCompleted()
193     {
194         ASSERT(m_inProgress);
195         ASSERT(m_frame->page());
196         m_inProgress = false;
197         m_frame->page()->progress()->progressCompleted(m_frame);
198     }
199
200 private:
201     FrameProgressTracker(Frame* frame)
202         : m_frame(frame)
203         , m_inProgress(false)
204     {
205     }
206
207     Frame* m_frame;
208     bool m_inProgress;
209 };
210
211 FrameLoader::FrameLoader(Frame* frame, FrameLoaderClient* client)
212     : m_frame(frame)
213     , m_client(client)
214     , m_policyChecker(frame)
215     , m_history(frame)
216     , m_notifer(frame)
217     , m_subframeLoader(frame)
218     , m_icon(frame)
219     , m_mixedContentChecker(frame)
220     , m_state(FrameStateProvisional)
221     , m_loadType(FrameLoadTypeStandard)
222     , m_delegateIsHandlingProvisionalLoadError(false)
223     , m_quickRedirectComing(false)
224     , m_sentRedirectNotification(false)
225     , m_inStopAllLoaders(false)
226     , m_isExecutingJavaScriptFormAction(false)
227     , m_didCallImplicitClose(true)
228     , m_wasUnloadEventEmitted(false)
229     , m_pageDismissalEventBeingDispatched(NoDismissal)
230     , m_isComplete(false)
231     , m_needsClear(false)
232     , m_checkTimer(this, &FrameLoader::checkTimerFired)
233     , m_shouldCallCheckCompleted(false)
234     , m_shouldCallCheckLoadComplete(false)
235     , m_opener(0)
236     , m_didPerformFirstNavigation(false)
237     , m_loadingFromCachedPage(false)
238     , m_suppressOpenerInNewFrame(false)
239     , m_forcedSandboxFlags(SandboxNone)
240 {
241 }
242
243 FrameLoader::~FrameLoader()
244 {
245     setOpener(0);
246
247     HashSet<Frame*>::iterator end = m_openedFrames.end();
248     for (HashSet<Frame*>::iterator it = m_openedFrames.begin(); it != end; ++it)
249         (*it)->loader()->m_opener = 0;
250
251     m_client->frameLoaderDestroyed();
252
253     if (m_networkingContext)
254         m_networkingContext->invalidate();
255 }
256
257 void FrameLoader::init()
258 {
259     // This somewhat odd set of steps gives the frame an initial empty document.
260     setPolicyDocumentLoader(m_client->createDocumentLoader(ResourceRequest(KURL(ParsedURLString, emptyString())), SubstituteData()).get());
261     setProvisionalDocumentLoader(m_policyDocumentLoader.get());
262     m_provisionalDocumentLoader->startLoadingMainResource();
263     m_frame->document()->cancelParsing();
264     m_stateMachine.advanceTo(FrameLoaderStateMachine::DisplayingInitialEmptyDocument);
265
266     m_networkingContext = m_client->createNetworkingContext();
267     m_progressTracker = FrameProgressTracker::create(m_frame);
268 }
269
270 void FrameLoader::setDefersLoading(bool defers)
271 {
272     if (m_documentLoader)
273         m_documentLoader->setDefersLoading(defers);
274     if (m_provisionalDocumentLoader)
275         m_provisionalDocumentLoader->setDefersLoading(defers);
276     if (m_policyDocumentLoader)
277         m_policyDocumentLoader->setDefersLoading(defers);
278     history()->setDefersLoading(defers);
279
280     if (!defers) {
281         m_frame->navigationScheduler()->startTimer();
282         startCheckCompleteTimer();
283     }
284 }
285
286 void FrameLoader::changeLocation(SecurityOrigin* securityOrigin, const KURL& url, const String& referrer, bool lockHistory, bool lockBackForwardList, bool refresh)
287 {
288     urlSelected(FrameLoadRequest(securityOrigin, ResourceRequest(url, referrer, refresh ? ReloadIgnoringCacheData : UseProtocolCachePolicy), "_self"),
289         0, lockHistory, lockBackForwardList, MaybeSendReferrer, ReplaceDocumentIfJavaScriptURL);
290 }
291
292 void FrameLoader::urlSelected(const KURL& url, const String& passedTarget, PassRefPtr<Event> triggeringEvent, bool lockHistory, bool lockBackForwardList, ShouldSendReferrer shouldSendReferrer)
293 {
294     urlSelected(FrameLoadRequest(m_frame->document()->securityOrigin(), ResourceRequest(url), passedTarget),
295         triggeringEvent, lockHistory, lockBackForwardList, shouldSendReferrer, DoNotReplaceDocumentIfJavaScriptURL);
296 }
297
298 // The shouldReplaceDocumentIfJavaScriptURL parameter will go away when the FIXME to eliminate the
299 // corresponding parameter from ScriptController::executeIfJavaScriptURL() is addressed.
300 void FrameLoader::urlSelected(const FrameLoadRequest& passedRequest, PassRefPtr<Event> triggeringEvent, bool lockHistory, bool lockBackForwardList, ShouldSendReferrer shouldSendReferrer, ShouldReplaceDocumentIfJavaScriptURL shouldReplaceDocumentIfJavaScriptURL)
301 {
302     ASSERT(!m_suppressOpenerInNewFrame);
303
304     RefPtr<Frame> protect(m_frame);
305     FrameLoadRequest frameRequest(passedRequest);
306
307     if (m_frame->script()->executeIfJavaScriptURL(frameRequest.resourceRequest().url(), shouldReplaceDocumentIfJavaScriptURL))
308         return;
309
310     if (frameRequest.frameName().isEmpty())
311         frameRequest.setFrameName(m_frame->document()->baseTarget());
312
313     if (shouldSendReferrer == NeverSendReferrer)
314         m_suppressOpenerInNewFrame = true;
315     addHTTPOriginIfNeeded(frameRequest.resourceRequest(), outgoingOrigin());
316
317     loadFrameRequest(frameRequest, lockHistory, lockBackForwardList, triggeringEvent, 0, shouldSendReferrer);
318
319     m_suppressOpenerInNewFrame = false;
320 }
321
322 void FrameLoader::submitForm(PassRefPtr<FormSubmission> submission)
323 {
324     ASSERT(submission->method() == FormSubmission::PostMethod || submission->method() == FormSubmission::GetMethod);
325
326     // FIXME: Find a good spot for these.
327     ASSERT(submission->data());
328     ASSERT(submission->state());
329     ASSERT(!submission->state()->sourceDocument()->frame() || submission->state()->sourceDocument()->frame() == m_frame);
330     
331     if (!m_frame->page())
332         return;
333     
334     if (submission->action().isEmpty())
335         return;
336
337     if (isDocumentSandboxed(m_frame, SandboxForms)) {
338         // FIXME: This message should be moved off the console once a solution to https://bugs.webkit.org/show_bug.cgi?id=103274 exists.
339         m_frame->document()->addConsoleMessage(HTMLMessageSource, ErrorMessageLevel, "Blocked form submission to '" + submission->action().string() + "' because the form's frame is sandboxed and the 'allow-forms' permission is not set.");
340         return;
341     }
342
343     if (protocolIsJavaScript(submission->action())) {
344         if (!m_frame->document()->contentSecurityPolicy()->allowFormAction(KURL(submission->action())))
345             return;
346         m_isExecutingJavaScriptFormAction = true;
347         m_frame->script()->executeIfJavaScriptURL(submission->action(), DoNotReplaceDocumentIfJavaScriptURL);
348         m_isExecutingJavaScriptFormAction = false;
349         return;
350     }
351
352     Frame* targetFrame = findFrameForNavigation(submission->target(), submission->state()->sourceDocument());
353     if (!targetFrame) {
354         if (!DOMWindow::allowPopUp(m_frame) && !ScriptController::processingUserGesture())
355             return;
356
357         targetFrame = m_frame;
358     } else
359         submission->clearTarget();
360
361     if (!targetFrame->page())
362         return;
363
364     // FIXME: We'd like to remove this altogether and fix the multiple form submission issue another way.
365
366     // We do not want to submit more than one form from the same page, nor do we want to submit a single
367     // form more than once. This flag prevents these from happening; not sure how other browsers prevent this.
368     // The flag is reset in each time we start handle a new mouse or key down event, and
369     // also in setView since this part may get reused for a page from the back/forward cache.
370     // The form multi-submit logic here is only needed when we are submitting a form that affects this frame.
371
372     // FIXME: Frame targeting is only one of the ways the submission could end up doing something other
373     // than replacing this frame's content, so this check is flawed. On the other hand, the check is hardly
374     // needed any more now that we reset m_submittedFormURL on each mouse or key down event.
375
376     if (m_frame->tree()->isDescendantOf(targetFrame)) {
377         if (m_submittedFormURL == submission->requestURL())
378             return;
379         m_submittedFormURL = submission->requestURL();
380     }
381
382     submission->data()->generateFiles(m_frame->document());
383     submission->setReferrer(outgoingReferrer());
384     submission->setOrigin(outgoingOrigin());
385
386     targetFrame->navigationScheduler()->scheduleFormSubmission(submission);
387 }
388
389 void FrameLoader::stopLoading(UnloadEventPolicy unloadEventPolicy)
390 {
391     if (m_frame->document() && m_frame->document()->parser())
392         m_frame->document()->parser()->stopParsing();
393
394     if (unloadEventPolicy != UnloadEventPolicyNone) {
395         if (m_frame->document()) {
396             if (m_didCallImplicitClose && !m_wasUnloadEventEmitted) {
397                 Node* currentFocusedNode = m_frame->document()->focusedNode();
398                 if (currentFocusedNode && currentFocusedNode->toInputElement())
399                     currentFocusedNode->toInputElement()->endEditing();
400                 if (m_pageDismissalEventBeingDispatched == NoDismissal) {
401                     if (unloadEventPolicy == UnloadEventPolicyUnloadAndPageHide) {
402                         m_pageDismissalEventBeingDispatched = PageHideDismissal;
403                         m_frame->document()->domWindow()->dispatchEvent(PageTransitionEvent::create(eventNames().pagehideEvent, m_frame->document()->inPageCache()), m_frame->document());
404                     }
405                     if (!m_frame->document()->inPageCache()) {
406                         RefPtr<Event> unloadEvent(Event::create(eventNames().unloadEvent, false, false));
407                         // The DocumentLoader (and thus its DocumentLoadTiming) might get destroyed
408                         // while dispatching the event, so protect it to prevent writing the end
409                         // time into freed memory.
410                         RefPtr<DocumentLoader> documentLoader = m_provisionalDocumentLoader;
411                         m_pageDismissalEventBeingDispatched = UnloadDismissal;
412                         if (documentLoader && !documentLoader->timing()->unloadEventStart() && !documentLoader->timing()->unloadEventEnd()) {
413                             DocumentLoadTiming* timing = documentLoader->timing();
414                             ASSERT(timing->navigationStart());
415                             timing->markUnloadEventStart();
416                             m_frame->document()->domWindow()->dispatchEvent(unloadEvent, m_frame->document());
417                             timing->markUnloadEventEnd();
418                         } else
419                             m_frame->document()->domWindow()->dispatchEvent(unloadEvent, m_frame->document());
420                     }
421                 }
422                 m_pageDismissalEventBeingDispatched = NoDismissal;
423                 if (m_frame->document())
424                     m_frame->document()->updateStyleIfNeeded();
425                 m_wasUnloadEventEmitted = true;
426             }
427         }
428
429         // Dispatching the unload event could have made m_frame->document() null.
430         if (m_frame->document() && !m_frame->document()->inPageCache()) {
431             // Don't remove event listeners from a transitional empty document (see bug 28716 for more information).
432             bool keepEventListeners = m_stateMachine.isDisplayingInitialEmptyDocument() && m_provisionalDocumentLoader
433                 && m_frame->document()->isSecureTransitionTo(m_provisionalDocumentLoader->url());
434
435             if (!keepEventListeners)
436                 m_frame->document()->removeAllEventListeners();
437         }
438     }
439
440     m_isComplete = true; // to avoid calling completed() in finishedParsing()
441     m_didCallImplicitClose = true; // don't want that one either
442
443     if (m_frame->document() && m_frame->document()->parsing()) {
444         finishedParsing();
445         m_frame->document()->setParsing(false);
446     }
447
448     if (Document* doc = m_frame->document()) {
449         // FIXME: HTML5 doesn't tell us to set the state to complete when aborting, but we do anyway to match legacy behavior.
450         // http://www.w3.org/Bugs/Public/show_bug.cgi?id=10537
451         doc->setReadyState(Document::Complete);
452
453 #if ENABLE(SQL_DATABASE)
454         // FIXME: Should the DatabaseManager watch for something like ActiveDOMObject::stop() rather than being special-cased here?
455         DatabaseManager::manager().stopDatabases(doc, 0);
456 #endif
457     }
458
459     // FIXME: This will cancel redirection timer, which really needs to be restarted when restoring the frame from b/f cache.
460     m_frame->navigationScheduler()->cancel();
461 }
462
463 void FrameLoader::stop()
464 {
465     // http://bugs.webkit.org/show_bug.cgi?id=10854
466     // The frame's last ref may be removed and it will be deleted by checkCompleted().
467     RefPtr<Frame> protector(m_frame);
468
469     if (DocumentParser* parser = m_frame->document()->parser()) {
470         parser->stopParsing();
471         parser->finish();
472     }
473     
474     icon()->stopLoader();
475 }
476
477 bool FrameLoader::closeURL()
478 {
479     history()->saveDocumentState();
480     
481     // Should only send the pagehide event here if the current document exists and has not been placed in the page cache.    
482     Document* currentDocument = m_frame->document();
483     stopLoading(currentDocument && !currentDocument->inPageCache() ? UnloadEventPolicyUnloadAndPageHide : UnloadEventPolicyUnloadOnly);
484     
485     m_frame->editor()->clearUndoRedoOperations();
486     return true;
487 }
488
489 bool FrameLoader::didOpenURL()
490 {
491     if (m_frame->navigationScheduler()->redirectScheduledDuringLoad()) {
492         // A redirect was scheduled before the document was created.
493         // This can happen when one frame changes another frame's location.
494         return false;
495     }
496
497     m_frame->navigationScheduler()->cancel();
498     m_frame->editor()->clearLastEditCommand();
499
500     m_isComplete = false;
501     m_didCallImplicitClose = false;
502
503     // If we are still in the process of initializing an empty document then
504     // its frame is not in a consistent state for rendering, so avoid setJSStatusBarText
505     // since it may cause clients to attempt to render the frame.
506     if (!m_stateMachine.creatingInitialEmptyDocument()) {
507         DOMWindow* window = m_frame->document()->domWindow();
508         window->setStatus(String());
509         window->setDefaultStatus(String());
510     }
511
512     started();
513
514     return true;
515 }
516
517 void FrameLoader::didExplicitOpen()
518 {
519     m_isComplete = false;
520     m_didCallImplicitClose = false;
521
522     // Calling document.open counts as committing the first real document load.
523     if (!m_stateMachine.committedFirstRealDocumentLoad())
524         m_stateMachine.advanceTo(FrameLoaderStateMachine::DisplayingInitialEmptyDocumentPostCommit);
525     
526     // Prevent window.open(url) -- eg window.open("about:blank") -- from blowing away results
527     // from a subsequent window.document.open / window.document.write call. 
528     // Canceling redirection here works for all cases because document.open 
529     // implicitly precedes document.write.
530     m_frame->navigationScheduler()->cancel();
531 }
532
533
534 void FrameLoader::cancelAndClear()
535 {
536     m_frame->navigationScheduler()->cancel();
537
538     if (!m_isComplete)
539         closeURL();
540
541     clear(m_frame->document(), false);
542     m_frame->script()->updatePlatformScriptObjects();
543 }
544
545 void FrameLoader::clear(Document* newDocument, bool clearWindowProperties, bool clearScriptObjects, bool clearFrameView)
546 {
547     m_frame->editor()->clear();
548
549     if (!m_needsClear)
550         return;
551     m_needsClear = false;
552     
553     if (!m_frame->document()->inPageCache()) {
554         m_frame->document()->cancelParsing();
555         m_frame->document()->stopActiveDOMObjects();
556         if (m_frame->document()->attached()) {
557             m_frame->document()->prepareForDestruction();
558             m_frame->document()->removeFocusedNodeOfSubtree(m_frame->document());
559         }
560     }
561
562     // Do this after detaching the document so that the unload event works.
563     if (clearWindowProperties) {
564         InspectorInstrumentation::frameWindowDiscarded(m_frame, m_frame->document()->domWindow());
565         m_frame->document()->domWindow()->resetUnlessSuspendedForPageCache();
566         m_frame->script()->clearWindowShell(newDocument->domWindow(), m_frame->document()->inPageCache());
567     }
568
569     m_frame->selection()->prepareForDestruction();
570     m_frame->eventHandler()->clear();
571     if (clearFrameView && m_frame->view())
572         m_frame->view()->clear();
573
574     // Do not drop the document before the ScriptController and view are cleared
575     // as some destructors might still try to access the document.
576     m_frame->setDocument(0);
577
578     m_subframeLoader.clear();
579
580     if (clearScriptObjects)
581         m_frame->script()->clearScriptObjects();
582
583     m_frame->script()->enableEval();
584
585     m_frame->navigationScheduler()->clear();
586
587     m_checkTimer.stop();
588     m_shouldCallCheckCompleted = false;
589     m_shouldCallCheckLoadComplete = false;
590
591     if (m_stateMachine.isDisplayingInitialEmptyDocument() && m_stateMachine.committedFirstRealDocumentLoad())
592         m_stateMachine.advanceTo(FrameLoaderStateMachine::CommittedFirstRealLoad);
593 }
594
595 void FrameLoader::receivedFirstData()
596 {
597     dispatchDidCommitLoad();
598     dispatchDidClearWindowObjectsInAllWorlds();
599     dispatchGlobalObjectAvailableInAllWorlds();
600
601     if (m_documentLoader) {
602         StringWithDirection ptitle = m_documentLoader->title();
603         // If we have a title let the WebView know about it.
604         if (!ptitle.isNull())
605             m_client->dispatchDidReceiveTitle(ptitle);
606     }
607
608     if (!m_documentLoader)
609         return;
610     if (m_frame->document()->isViewSource())
611         return;
612
613     double delay;
614     String url;
615     if (!parseHTTPRefresh(m_documentLoader->response().httpHeaderField("Refresh"), false, delay, url))
616         return;
617     if (url.isEmpty())
618         url = m_frame->document()->url().string();
619     else
620         url = m_frame->document()->completeURL(url).string();
621
622     m_frame->navigationScheduler()->scheduleRedirect(delay, url);
623 }
624
625 void FrameLoader::setOutgoingReferrer(const KURL& url)
626 {
627     m_outgoingReferrer = url.strippedForUseAsReferrer();
628 }
629
630 void FrameLoader::didBeginDocument(bool dispatch)
631 {
632     m_needsClear = true;
633     m_isComplete = false;
634     m_didCallImplicitClose = false;
635     m_frame->document()->setReadyState(Document::Loading);
636
637     if (m_pendingStateObject) {
638         m_frame->document()->statePopped(m_pendingStateObject.get());
639         m_pendingStateObject.clear();
640     }
641
642     if (dispatch)
643         dispatchDidClearWindowObjectsInAllWorlds();
644
645     updateFirstPartyForCookies();
646     m_frame->document()->initContentSecurityPolicy();
647
648     Settings* settings = m_frame->document()->settings();
649     if (settings) {
650         m_frame->document()->cachedResourceLoader()->setImagesEnabled(settings->areImagesEnabled());
651         m_frame->document()->cachedResourceLoader()->setAutoLoadImages(settings->loadsImagesAutomatically());
652     }
653
654     if (m_documentLoader) {
655         String dnsPrefetchControl = m_documentLoader->response().httpHeaderField("X-DNS-Prefetch-Control");
656         if (!dnsPrefetchControl.isEmpty())
657             m_frame->document()->parseDNSPrefetchControlHeader(dnsPrefetchControl);
658
659         String policyValue = m_documentLoader->response().httpHeaderField("Content-Security-Policy");
660         if (!policyValue.isEmpty())
661             m_frame->document()->contentSecurityPolicy()->didReceiveHeader(policyValue, ContentSecurityPolicy::Enforce);
662
663         policyValue = m_documentLoader->response().httpHeaderField("Content-Security-Policy-Report-Only");
664         if (!policyValue.isEmpty())
665             m_frame->document()->contentSecurityPolicy()->didReceiveHeader(policyValue, ContentSecurityPolicy::Report);
666
667         policyValue = m_documentLoader->response().httpHeaderField("X-WebKit-CSP");
668         if (!policyValue.isEmpty())
669             m_frame->document()->contentSecurityPolicy()->didReceiveHeader(policyValue, ContentSecurityPolicy::PrefixedEnforce);
670
671         policyValue = m_documentLoader->response().httpHeaderField("X-WebKit-CSP-Report-Only");
672         if (!policyValue.isEmpty())
673             m_frame->document()->contentSecurityPolicy()->didReceiveHeader(policyValue, ContentSecurityPolicy::PrefixedReport);
674
675         String headerContentLanguage = m_documentLoader->response().httpHeaderField("Content-Language");
676         if (!headerContentLanguage.isEmpty()) {
677             size_t commaIndex = headerContentLanguage.find(',');
678             headerContentLanguage.truncate(commaIndex); // notFound == -1 == don't truncate
679             headerContentLanguage = headerContentLanguage.stripWhiteSpace(isHTMLSpace);
680             if (!headerContentLanguage.isEmpty())
681                 m_frame->document()->setContentLanguage(headerContentLanguage);
682         }
683
684         if (SecurityPolicy::allowSubstituteDataAccessToLocal() && m_documentLoader->substituteData().isValid()) {
685             // If this document was loaded with substituteData, then the document can
686             // load local resources. See https://bugs.webkit.org/show_bug.cgi?id=16756
687             // and https://bugs.webkit.org/show_bug.cgi?id=19760 for further
688             // discussion.
689             m_frame->document()->securityOrigin()->grantLoadLocalResources();
690         }
691     }
692
693     history()->restoreDocumentState();
694 }
695
696 void FrameLoader::finishedParsing()
697 {
698     m_frame->injectUserScripts(InjectAtDocumentEnd);
699
700     if (m_stateMachine.creatingInitialEmptyDocument())
701         return;
702
703     // This can be called from the Frame's destructor, in which case we shouldn't protect ourselves
704     // because doing so will cause us to re-enter the destructor when protector goes out of scope.
705     // Null-checking the FrameView indicates whether or not we're in the destructor.
706     RefPtr<Frame> protector = m_frame->view() ? m_frame : 0;
707
708     m_client->dispatchDidFinishDocumentLoad();
709
710     checkCompleted();
711
712     if (!m_frame->view())
713         return; // We are being destroyed by something checkCompleted called.
714
715     // Check if the scrollbars are really needed for the content.
716     // If not, remove them, relayout, and repaint.
717     m_frame->view()->restoreScrollbar();
718     scrollToFragmentWithParentBoundary(m_frame->document()->url());
719 }
720
721 void FrameLoader::loadDone()
722 {
723     checkCompleted();
724 }
725
726 bool FrameLoader::allChildrenAreComplete() const
727 {
728     for (Frame* child = m_frame->tree()->firstChild(); child; child = child->tree()->nextSibling()) {
729         if (!child->loader()->m_isComplete)
730             return false;
731     }
732     return true;
733 }
734
735 bool FrameLoader::allAncestorsAreComplete() const
736 {
737     for (Frame* ancestor = m_frame; ancestor; ancestor = ancestor->tree()->parent()) {
738         if (!ancestor->loader()->m_isComplete)
739             return false;
740     }
741     return true;
742 }
743
744 void FrameLoader::checkCompleted()
745 {
746     RefPtr<Frame> protect(m_frame);
747     m_shouldCallCheckCompleted = false;
748
749     if (m_frame->view())
750         m_frame->view()->handleLoadCompleted();
751
752     // Have we completed before?
753     if (m_isComplete)
754         return;
755
756     // Are we still parsing?
757     if (m_frame->document()->parsing())
758         return;
759
760     // Still waiting for images/scripts?
761     if (m_frame->document()->cachedResourceLoader()->requestCount())
762         return;
763
764     // Still waiting for elements that don't go through a FrameLoader?
765     if (m_frame->document()->isDelayingLoadEvent())
766         return;
767
768     // Any frame that hasn't completed yet?
769     if (!allChildrenAreComplete())
770         return;
771
772     // OK, completed.
773     m_isComplete = true;
774     m_requestedHistoryItem = 0;
775     m_frame->document()->setReadyState(Document::Complete);
776
777     checkCallImplicitClose(); // if we didn't do it before
778
779     m_frame->navigationScheduler()->startTimer();
780
781     completed();
782     if (m_frame->page())
783         checkLoadComplete();
784
785     if (m_frame->view())
786         m_frame->view()->handleLoadCompleted();
787 }
788
789 void FrameLoader::checkTimerFired(Timer<FrameLoader>*)
790 {
791     RefPtr<Frame> protect(m_frame);
792
793     if (Page* page = m_frame->page()) {
794         if (page->defersLoading())
795             return;
796     }
797     if (m_shouldCallCheckCompleted)
798         checkCompleted();
799     if (m_shouldCallCheckLoadComplete)
800         checkLoadComplete();
801 }
802
803 void FrameLoader::startCheckCompleteTimer()
804 {
805     if (!(m_shouldCallCheckCompleted || m_shouldCallCheckLoadComplete))
806         return;
807     if (m_checkTimer.isActive())
808         return;
809     m_checkTimer.startOneShot(0);
810 }
811
812 void FrameLoader::scheduleCheckCompleted()
813 {
814     m_shouldCallCheckCompleted = true;
815     startCheckCompleteTimer();
816 }
817
818 void FrameLoader::scheduleCheckLoadComplete()
819 {
820     m_shouldCallCheckLoadComplete = true;
821     startCheckCompleteTimer();
822 }
823
824 void FrameLoader::checkCallImplicitClose()
825 {
826     if (m_didCallImplicitClose || m_frame->document()->parsing() || m_frame->document()->isDelayingLoadEvent())
827         return;
828
829     if (!allChildrenAreComplete())
830         return; // still got a frame running -> too early
831
832     m_didCallImplicitClose = true;
833     m_wasUnloadEventEmitted = false;
834     m_frame->document()->implicitClose();
835 }
836
837 void FrameLoader::loadURLIntoChildFrame(const KURL& url, const String& referer, Frame* childFrame)
838 {
839     ASSERT(childFrame);
840
841 #if ENABLE(WEB_ARCHIVE) || ENABLE(MHTML)
842     RefPtr<Archive> subframeArchive = activeDocumentLoader()->popArchiveForSubframe(childFrame->tree()->uniqueName(), url);    
843     if (subframeArchive) {
844         childFrame->loader()->loadArchive(subframeArchive.release());
845         return;
846     }
847 #endif // ENABLE(WEB_ARCHIVE)
848
849     HistoryItem* parentItem = history()->currentItem();
850     // If we're moving in the back/forward list, we might want to replace the content
851     // of this child frame with whatever was there at that point.
852     if (parentItem && parentItem->children().size() && isBackForwardLoadType(loadType()) 
853         && !m_frame->document()->loadEventFinished()) {
854         HistoryItem* childItem = parentItem->childItemWithTarget(childFrame->tree()->uniqueName());
855         if (childItem) {
856             childFrame->loader()->loadDifferentDocumentItem(childItem, loadType(), MayAttemptCacheOnlyLoadForFormSubmissionItem);
857             return;
858         }
859     }
860
861     childFrame->loader()->loadURL(url, referer, "_self", false, FrameLoadTypeRedirectWithLockedBackForwardList, 0, 0);
862 }
863
864 #if ENABLE(WEB_ARCHIVE) || ENABLE(MHTML)
865 void FrameLoader::loadArchive(PassRefPtr<Archive> archive)
866 {
867     ArchiveResource* mainResource = archive->mainResource();
868     ASSERT(mainResource);
869     if (!mainResource)
870         return;
871         
872     SubstituteData substituteData(mainResource->data(), mainResource->mimeType(), mainResource->textEncoding(), KURL());
873     
874     ResourceRequest request(mainResource->url());
875 #if PLATFORM(MAC)
876     request.applyWebArchiveHackForMail();
877 #endif
878
879     RefPtr<DocumentLoader> documentLoader = m_client->createDocumentLoader(request, substituteData);
880     documentLoader->setArchive(archive.get());
881     load(documentLoader.get());
882 }
883 #endif // ENABLE(WEB_ARCHIVE) || ENABLE(MHTML)
884
885 ObjectContentType FrameLoader::defaultObjectContentType(const KURL& url, const String& mimeTypeIn, bool shouldPreferPlugInsForImages)
886 {
887     String mimeType = mimeTypeIn;
888
889     if (mimeType.isEmpty())
890         mimeType = mimeTypeFromURL(url);
891
892 #if !PLATFORM(MAC) && !PLATFORM(CHROMIUM) && !PLATFORM(EFL) // Mac has no PluginDatabase, nor does Chromium or EFL
893     if (mimeType.isEmpty()) {
894         String decodedPath = decodeURLEscapeSequences(url.path());
895         mimeType = PluginDatabase::installedPlugins()->MIMETypeForExtension(decodedPath.substring(decodedPath.reverseFind('.') + 1));
896     }
897 #endif
898
899     if (mimeType.isEmpty())
900         return ObjectContentFrame; // Go ahead and hope that we can display the content.
901
902 #if !PLATFORM(MAC) && !PLATFORM(CHROMIUM) && !PLATFORM(EFL) // Mac has no PluginDatabase, nor does Chromium or EFL
903     bool plugInSupportsMIMEType = PluginDatabase::installedPlugins()->isMIMETypeRegistered(mimeType);
904 #else
905     bool plugInSupportsMIMEType = false;
906 #endif
907
908     if (MIMETypeRegistry::isSupportedImageMIMEType(mimeType))
909         return shouldPreferPlugInsForImages && plugInSupportsMIMEType ? WebCore::ObjectContentNetscapePlugin : WebCore::ObjectContentImage;
910
911     if (plugInSupportsMIMEType)
912         return WebCore::ObjectContentNetscapePlugin;
913
914     if (MIMETypeRegistry::isSupportedNonImageMIMEType(mimeType))
915         return WebCore::ObjectContentFrame;
916
917     return WebCore::ObjectContentNone;
918 }
919
920 String FrameLoader::outgoingReferrer() const
921 {
922     // See http://www.whatwg.org/specs/web-apps/current-work/#fetching-resources
923     // for why we walk the parent chain for srcdoc documents.
924     Frame* frame = m_frame;
925     while (frame->document()->isSrcdocDocument()) {
926         frame = frame->tree()->parent();
927         // Srcdoc documents cannot be top-level documents, by definition,
928         // because they need to be contained in iframes with the srcdoc.
929         ASSERT(frame);
930     }
931     return frame->loader()->m_outgoingReferrer;
932 }
933
934 String FrameLoader::outgoingOrigin() const
935 {
936     return m_frame->document()->securityOrigin()->toString();
937 }
938
939 bool FrameLoader::checkIfFormActionAllowedByCSP(const KURL& url) const
940 {
941     if (m_submittedFormURL.isEmpty())
942         return true;
943
944     return m_frame->document()->contentSecurityPolicy()->allowFormAction(url);
945 }
946
947 Frame* FrameLoader::opener()
948 {
949     return m_opener;
950 }
951
952 void FrameLoader::setOpener(Frame* opener)
953 {
954     if (m_opener && !opener)
955         m_client->didDisownOpener();
956
957     if (m_opener)
958         m_opener->loader()->m_openedFrames.remove(m_frame);
959     if (opener)
960         opener->loader()->m_openedFrames.add(m_frame);
961     m_opener = opener;
962
963     if (m_frame->document())
964         m_frame->document()->initSecurityContext();
965 }
966
967 // FIXME: This does not belong in FrameLoader!
968 void FrameLoader::handleFallbackContent()
969 {
970     HTMLFrameOwnerElement* owner = m_frame->ownerElement();
971     if (!owner || !owner->hasTagName(objectTag))
972         return;
973     static_cast<HTMLObjectElement*>(owner)->renderFallbackContent();
974 }
975
976 void FrameLoader::provisionalLoadStarted()
977 {
978     if (m_stateMachine.firstLayoutDone())
979         m_stateMachine.advanceTo(FrameLoaderStateMachine::CommittedFirstRealLoad);
980     m_frame->navigationScheduler()->cancel(true);
981     m_client->provisionalLoadStarted();
982 }
983
984 void FrameLoader::resetMultipleFormSubmissionProtection()
985 {
986     m_submittedFormURL = KURL();
987 }
988
989 void FrameLoader::updateFirstPartyForCookies()
990 {
991     if (m_frame->tree()->parent())
992         setFirstPartyForCookies(m_frame->tree()->parent()->document()->firstPartyForCookies());
993     else
994         setFirstPartyForCookies(m_frame->document()->url());
995 }
996
997 void FrameLoader::setFirstPartyForCookies(const KURL& url)
998 {
999     for (Frame* frame = m_frame; frame; frame = frame->tree()->traverseNext(m_frame))
1000         frame->document()->setFirstPartyForCookies(url);
1001 }
1002
1003 // This does the same kind of work that didOpenURL does, except it relies on the fact
1004 // that a higher level already checked that the URLs match and the scrolling is the right thing to do.
1005 void FrameLoader::loadInSameDocument(const KURL& url, PassRefPtr<SerializedScriptValue> stateObject, bool isNewNavigation)
1006 {
1007     // If we have a state object, we cannot also be a new navigation.
1008     ASSERT(!stateObject || (stateObject && !isNewNavigation));
1009
1010     // Update the data source's request with the new URL to fake the URL change
1011     KURL oldURL = m_frame->document()->url();
1012     m_frame->document()->setURL(url);
1013     setOutgoingReferrer(url);
1014     documentLoader()->replaceRequestURLForSameDocumentNavigation(url);
1015     if (isNewNavigation && !shouldTreatURLAsSameAsCurrent(url) && !stateObject) {
1016         // NB: must happen after replaceRequestURLForSameDocumentNavigation(), since we add 
1017         // based on the current request. Must also happen before we openURL and displace the 
1018         // scroll position, since adding the BF item will save away scroll state.
1019         
1020         // NB2: If we were loading a long, slow doc, and the user fragment navigated before
1021         // it was done, currItem is now set the that slow doc, and prevItem is whatever was
1022         // before it.  Adding the b/f item will bump the slow doc down to prevItem, even
1023         // though its load is not yet done.  I think this all works out OK, for one because
1024         // we have already saved away the scroll and doc state for the long slow load,
1025         // but it's not an obvious case.
1026
1027         history()->updateBackForwardListForFragmentScroll();
1028     }
1029     
1030     bool hashChange = equalIgnoringFragmentIdentifier(url, oldURL) && url.fragmentIdentifier() != oldURL.fragmentIdentifier();
1031     
1032     history()->updateForSameDocumentNavigation();
1033
1034     // If we were in the autoscroll/panScroll mode we want to stop it before following the link to the anchor
1035     if (hashChange)
1036         m_frame->eventHandler()->stopAutoscrollTimer();
1037     
1038     // It's important to model this as a load that starts and immediately finishes.
1039     // Otherwise, the parent frame may think we never finished loading.
1040     started();
1041
1042     // We need to scroll to the fragment whether or not a hash change occurred, since
1043     // the user might have scrolled since the previous navigation.
1044     scrollToFragmentWithParentBoundary(url);
1045     
1046     m_isComplete = false;
1047     checkCompleted();
1048
1049     if (isNewNavigation) {
1050         // This will clear previousItem from the rest of the frame tree that didn't
1051         // doing any loading. We need to make a pass on this now, since for fragment
1052         // navigation we'll not go through a real load and reach Completed state.
1053         checkLoadComplete();
1054     }
1055
1056     m_client->dispatchDidNavigateWithinPage();
1057
1058     m_frame->document()->statePopped(stateObject ? stateObject : SerializedScriptValue::nullValue());
1059     m_client->dispatchDidPopStateWithinPage();
1060     
1061     if (hashChange) {
1062         m_frame->document()->enqueueHashchangeEvent(oldURL, url);
1063         m_client->dispatchDidChangeLocationWithinPage();
1064     }
1065     
1066     // FrameLoaderClient::didFinishLoad() tells the internal load delegate the load finished with no error
1067     m_client->didFinishLoad();
1068 }
1069
1070 bool FrameLoader::isComplete() const
1071 {
1072     return m_isComplete;
1073 }
1074
1075 void FrameLoader::completed()
1076 {
1077     RefPtr<Frame> protect(m_frame);
1078
1079     for (Frame* descendant = m_frame->tree()->traverseNext(m_frame); descendant; descendant = descendant->tree()->traverseNext(m_frame))
1080         descendant->navigationScheduler()->startTimer();
1081
1082     if (Frame* parent = m_frame->tree()->parent())
1083         parent->loader()->checkCompleted();
1084
1085     if (m_frame->view())
1086         m_frame->view()->maintainScrollPositionAtAnchor(0);
1087 }
1088
1089 void FrameLoader::started()
1090 {
1091     for (Frame* frame = m_frame; frame; frame = frame->tree()->parent())
1092         frame->loader()->m_isComplete = false;
1093 }
1094
1095 void FrameLoader::prepareForHistoryNavigation()
1096 {
1097     // If there is no currentItem, but we still want to engage in 
1098     // history navigation we need to manufacture one, and update
1099     // the state machine of this frame to impersonate having
1100     // loaded it.
1101     RefPtr<HistoryItem> currentItem = history()->currentItem();
1102     if (!currentItem) {
1103         currentItem = HistoryItem::create();
1104         currentItem->setLastVisitWasFailure(true);
1105         history()->setCurrentItem(currentItem.get());
1106         frame()->page()->backForward()->setCurrentItem(currentItem.get());
1107
1108         ASSERT(stateMachine()->isDisplayingInitialEmptyDocument());
1109         stateMachine()->advanceTo(FrameLoaderStateMachine::DisplayingInitialEmptyDocumentPostCommit);
1110         stateMachine()->advanceTo(FrameLoaderStateMachine::CommittedFirstRealLoad);
1111     }
1112 }
1113
1114 void FrameLoader::prepareForLoadStart()
1115 {
1116     m_progressTracker->progressStarted();
1117     m_client->dispatchDidStartProvisionalLoad();
1118
1119     // Notify accessibility.
1120     if (AXObjectCache::accessibilityEnabled()) {
1121         AXObjectCache::AXLoadingEvent loadingEvent = loadType() == FrameLoadTypeReload ? AXObjectCache::AXLoadingReloaded : AXObjectCache::AXLoadingStarted;
1122         m_frame->document()->axObjectCache()->frameLoadingEventNotification(m_frame, loadingEvent);
1123     }
1124 }
1125
1126 void FrameLoader::setupForReplace()
1127 {
1128     m_client->revertToProvisionalState(m_documentLoader.get());
1129     setState(FrameStateProvisional);
1130     m_provisionalDocumentLoader = m_documentLoader;
1131     m_documentLoader = 0;
1132     detachChildren();
1133 }
1134
1135 void FrameLoader::loadFrameRequest(const FrameLoadRequest& request, bool lockHistory, bool lockBackForwardList,
1136     PassRefPtr<Event> event, PassRefPtr<FormState> formState, ShouldSendReferrer shouldSendReferrer)
1137 {    
1138     // Protect frame from getting blown away inside dispatchBeforeLoadEvent in loadWithDocumentLoader.
1139     RefPtr<Frame> protect(m_frame);
1140
1141     KURL url = request.resourceRequest().url();
1142
1143     ASSERT(m_frame->document());
1144     if (!request.requester()->canDisplay(url)) {
1145         reportLocalLoadFailed(m_frame, url.string());
1146         return;
1147     }
1148
1149     String argsReferrer = request.resourceRequest().httpReferrer();
1150     if (argsReferrer.isEmpty())
1151         argsReferrer = outgoingReferrer();
1152
1153     String referrer = SecurityPolicy::generateReferrerHeader(m_frame->document()->referrerPolicy(), url, argsReferrer);
1154     if (shouldSendReferrer == NeverSendReferrer)
1155         referrer = String();
1156     
1157     FrameLoadType loadType;
1158     if (request.resourceRequest().cachePolicy() == ReloadIgnoringCacheData)
1159         loadType = FrameLoadTypeReload;
1160     else if (lockBackForwardList)
1161         loadType = FrameLoadTypeRedirectWithLockedBackForwardList;
1162     else
1163         loadType = FrameLoadTypeStandard;
1164
1165     if (request.resourceRequest().httpMethod() == "POST")
1166         loadPostRequest(request.resourceRequest(), referrer, request.frameName(), lockHistory, loadType, event, formState.get());
1167     else
1168         loadURL(request.resourceRequest().url(), referrer, request.frameName(), lockHistory, loadType, event, formState.get());
1169
1170     // FIXME: It's possible this targetFrame will not be the same frame that was targeted by the actual
1171     // load if frame names have changed.
1172     Frame* sourceFrame = formState ? formState->sourceDocument()->frame() : m_frame;
1173     if (!sourceFrame)
1174         sourceFrame = m_frame;
1175     Frame* targetFrame = sourceFrame->loader()->findFrameForNavigation(request.frameName());
1176     if (targetFrame && targetFrame != sourceFrame) {
1177         if (Page* page = targetFrame->page())
1178             page->chrome()->focus();
1179     }
1180 }
1181
1182 void FrameLoader::loadURL(const KURL& newURL, const String& referrer, const String& frameName, bool lockHistory, FrameLoadType newLoadType,
1183     PassRefPtr<Event> event, PassRefPtr<FormState> prpFormState)
1184 {
1185     if (m_inStopAllLoaders)
1186         return;
1187
1188     RefPtr<FormState> formState = prpFormState;
1189     bool isFormSubmission = formState;
1190     
1191     ResourceRequest request(newURL);
1192     if (!referrer.isEmpty()) {
1193         request.setHTTPReferrer(referrer);
1194         RefPtr<SecurityOrigin> referrerOrigin = SecurityOrigin::createFromString(referrer);
1195         addHTTPOriginIfNeeded(request, referrerOrigin->toString());
1196     }
1197     addExtraFieldsToRequest(request, newLoadType, true);
1198     if (newLoadType == FrameLoadTypeReload || newLoadType == FrameLoadTypeReloadFromOrigin)
1199         request.setCachePolicy(ReloadIgnoringCacheData);
1200
1201     ASSERT(newLoadType != FrameLoadTypeSame);
1202
1203     // The search for a target frame is done earlier in the case of form submission.
1204     Frame* targetFrame = isFormSubmission ? 0 : findFrameForNavigation(frameName);
1205     if (targetFrame && targetFrame != m_frame) {
1206         targetFrame->loader()->loadURL(newURL, referrer, "_self", lockHistory, newLoadType, event, formState.release());
1207         return;
1208     }
1209
1210     if (m_pageDismissalEventBeingDispatched != NoDismissal)
1211         return;
1212
1213     NavigationAction action(request, newLoadType, isFormSubmission, event);
1214
1215     if (!targetFrame && !frameName.isEmpty()) {
1216         policyChecker()->checkNewWindowPolicy(action, FrameLoader::callContinueLoadAfterNewWindowPolicy,
1217             request, formState.release(), frameName, this);
1218         return;
1219     }
1220
1221     RefPtr<DocumentLoader> oldDocumentLoader = m_documentLoader;
1222
1223     bool sameURL = shouldTreatURLAsSameAsCurrent(newURL);
1224     const String& httpMethod = request.httpMethod();
1225     
1226     // Make sure to do scroll to fragment processing even if the URL is
1227     // exactly the same so pages with '#' links and DHTML side effects
1228     // work properly.
1229     if (shouldPerformFragmentNavigation(isFormSubmission, httpMethod, newLoadType, newURL)) {
1230         oldDocumentLoader->setTriggeringAction(action);
1231         policyChecker()->stopCheck();
1232         policyChecker()->setLoadType(newLoadType);
1233         policyChecker()->checkNavigationPolicy(request, oldDocumentLoader.get(), formState.release(),
1234             callContinueFragmentScrollAfterNavigationPolicy, this);
1235     } else {
1236         // must grab this now, since this load may stop the previous load and clear this flag
1237         bool isRedirect = m_quickRedirectComing;
1238         loadWithNavigationAction(request, action, lockHistory, newLoadType, formState.release());
1239         if (isRedirect) {
1240             m_quickRedirectComing = false;
1241             if (m_provisionalDocumentLoader)
1242                 m_provisionalDocumentLoader->setIsClientRedirect(true);
1243         } else if (sameURL && newLoadType != FrameLoadTypeReload && newLoadType != FrameLoadTypeReloadFromOrigin)
1244             // Example of this case are sites that reload the same URL with a different cookie
1245             // driving the generated content, or a master frame with links that drive a target
1246             // frame, where the user has clicked on the same link repeatedly.
1247             m_loadType = FrameLoadTypeSame;
1248     }
1249 }
1250
1251 SubstituteData FrameLoader::defaultSubstituteDataForURL(const KURL& url)
1252 {
1253     if (!shouldTreatURLAsSrcdocDocument(url))
1254         return SubstituteData();
1255     String srcdoc = m_frame->ownerElement()->fastGetAttribute(srcdocAttr);
1256     ASSERT(!srcdoc.isNull());
1257     CString encodedSrcdoc = srcdoc.utf8();
1258     return SubstituteData(SharedBuffer::create(encodedSrcdoc.data(), encodedSrcdoc.length()), "text/html", "UTF-8", KURL());
1259 }
1260
1261 void FrameLoader::load(const FrameLoadRequest& passedRequest)
1262 {
1263     FrameLoadRequest request(passedRequest);
1264
1265     if (m_inStopAllLoaders)
1266         return;
1267
1268     if (!request.frameName().isEmpty()) {
1269         Frame* frame = findFrameForNavigation(request.frameName());
1270         if (frame) {
1271             request.setShouldCheckNewWindowPolicy(false);
1272             if (frame->loader() != this) {
1273                 frame->loader()->load(request);
1274                 return;
1275             }
1276         }
1277     }
1278
1279     if (request.shouldCheckNewWindowPolicy()) {
1280         policyChecker()->checkNewWindowPolicy(NavigationAction(request.resourceRequest(), NavigationTypeOther), FrameLoader::callContinueLoadAfterNewWindowPolicy, request.resourceRequest(), 0, request.frameName(), this);
1281         return;
1282     }
1283
1284     if (!request.hasSubstituteData())
1285         request.setSubstituteData(defaultSubstituteDataForURL(request.resourceRequest().url()));
1286
1287     RefPtr<DocumentLoader> loader = m_client->createDocumentLoader(request.resourceRequest(), request.substituteData());
1288     if (request.lockHistory() && m_documentLoader)
1289         loader->setClientRedirectSourceForHistory(m_documentLoader->didCreateGlobalHistoryEntry() ? m_documentLoader->urlForHistory().string() : m_documentLoader->clientRedirectSourceForHistory());
1290     load(loader.get());
1291 }
1292
1293 void FrameLoader::loadWithNavigationAction(const ResourceRequest& request, const NavigationAction& action, bool lockHistory, FrameLoadType type, PassRefPtr<FormState> formState)
1294 {
1295     RefPtr<DocumentLoader> loader = m_client->createDocumentLoader(request, defaultSubstituteDataForURL(request.url()));
1296     if (lockHistory && m_documentLoader)
1297         loader->setClientRedirectSourceForHistory(m_documentLoader->didCreateGlobalHistoryEntry() ? m_documentLoader->urlForHistory().string() : m_documentLoader->clientRedirectSourceForHistory());
1298
1299     loader->setTriggeringAction(action);
1300     if (m_documentLoader)
1301         loader->setOverrideEncoding(m_documentLoader->overrideEncoding());
1302
1303     loadWithDocumentLoader(loader.get(), type, formState);
1304 }
1305
1306 void FrameLoader::load(DocumentLoader* newDocumentLoader)
1307 {
1308     ResourceRequest& r = newDocumentLoader->request();
1309     addExtraFieldsToMainResourceRequest(r);
1310     FrameLoadType type;
1311
1312     if (shouldTreatURLAsSameAsCurrent(newDocumentLoader->originalRequest().url())) {
1313         r.setCachePolicy(ReloadIgnoringCacheData);
1314         type = FrameLoadTypeSame;
1315     } else if (shouldTreatURLAsSameAsCurrent(newDocumentLoader->unreachableURL()) && m_loadType == FrameLoadTypeReload)
1316         type = FrameLoadTypeReload;
1317     else
1318         type = FrameLoadTypeStandard;
1319
1320     if (m_documentLoader)
1321         newDocumentLoader->setOverrideEncoding(m_documentLoader->overrideEncoding());
1322     
1323     // When we loading alternate content for an unreachable URL that we're
1324     // visiting in the history list, we treat it as a reload so the history list 
1325     // is appropriately maintained.
1326     //
1327     // FIXME: This seems like a dangerous overloading of the meaning of "FrameLoadTypeReload" ...
1328     // shouldn't a more explicit type of reload be defined, that means roughly 
1329     // "load without affecting history" ? 
1330     if (shouldReloadToHandleUnreachableURL(newDocumentLoader)) {
1331         // shouldReloadToHandleUnreachableURL() returns true only when the original load type is back-forward.
1332         // In this case we should save the document state now. Otherwise the state can be lost because load type is
1333         // changed and updateForBackForwardNavigation() will not be called when loading is committed.
1334         history()->saveDocumentAndScrollState();
1335
1336         ASSERT(type == FrameLoadTypeStandard);
1337         type = FrameLoadTypeReload;
1338     }
1339
1340     loadWithDocumentLoader(newDocumentLoader, type, 0);
1341 }
1342
1343 void FrameLoader::loadWithDocumentLoader(DocumentLoader* loader, FrameLoadType type, PassRefPtr<FormState> prpFormState)
1344 {
1345     // Retain because dispatchBeforeLoadEvent may release the last reference to it.
1346     RefPtr<Frame> protect(m_frame);
1347
1348     ASSERT(m_client->hasWebView());
1349
1350     // Unfortunately the view must be non-nil, this is ultimately due
1351     // to parser requiring a FrameView.  We should fix this dependency.
1352
1353     ASSERT(m_frame->view());
1354
1355     if (m_pageDismissalEventBeingDispatched != NoDismissal)
1356         return;
1357
1358     if (m_frame->document())
1359         m_previousUrl = m_frame->document()->url();
1360
1361     policyChecker()->setLoadType(type);
1362     RefPtr<FormState> formState = prpFormState;
1363     bool isFormSubmission = formState;
1364
1365     const KURL& newURL = loader->request().url();
1366     const String& httpMethod = loader->request().httpMethod();
1367
1368     if (shouldPerformFragmentNavigation(isFormSubmission, httpMethod, policyChecker()->loadType(), newURL)) {
1369         RefPtr<DocumentLoader> oldDocumentLoader = m_documentLoader;
1370         NavigationAction action(loader->request(), policyChecker()->loadType(), isFormSubmission);
1371
1372         oldDocumentLoader->setTriggeringAction(action);
1373         policyChecker()->stopCheck();
1374         policyChecker()->checkNavigationPolicy(loader->request(), oldDocumentLoader.get(), formState,
1375             callContinueFragmentScrollAfterNavigationPolicy, this);
1376     } else {
1377         if (Frame* parent = m_frame->tree()->parent())
1378             loader->setOverrideEncoding(parent->loader()->documentLoader()->overrideEncoding());
1379
1380         policyChecker()->stopCheck();
1381         setPolicyDocumentLoader(loader);
1382         if (loader->triggeringAction().isEmpty())
1383             loader->setTriggeringAction(NavigationAction(loader->request(), policyChecker()->loadType(), isFormSubmission));
1384
1385         if (Element* ownerElement = m_frame->ownerElement()) {
1386             // We skip dispatching the beforeload event if we've already
1387             // committed a real document load because the event would leak
1388             // subsequent activity by the frame which the parent frame isn't
1389             // supposed to learn. For example, if the child frame navigated to
1390             // a new URL, the parent frame shouldn't learn the URL.
1391             if (!m_stateMachine.committedFirstRealDocumentLoad()
1392                 && !ownerElement->dispatchBeforeLoadEvent(loader->request().url().string())) {
1393                 continueLoadAfterNavigationPolicy(loader->request(), formState, false);
1394                 return;
1395             }
1396         }
1397
1398         policyChecker()->checkNavigationPolicy(loader->request(), loader, formState,
1399             callContinueLoadAfterNavigationPolicy, this);
1400     }
1401 }
1402
1403 void FrameLoader::reportLocalLoadFailed(Frame* frame, const String& url)
1404 {
1405     ASSERT(!url.isEmpty());
1406     if (!frame)
1407         return;
1408
1409     frame->document()->addConsoleMessage(JSMessageSource, ErrorMessageLevel, "Not allowed to load local resource: " + url);
1410 }
1411
1412 const ResourceRequest& FrameLoader::initialRequest() const
1413 {
1414     return activeDocumentLoader()->originalRequest();
1415 }
1416
1417 bool FrameLoader::willLoadMediaElementURL(KURL& url)
1418 {
1419     ResourceRequest request(url);
1420
1421     unsigned long identifier;
1422     ResourceError error;
1423     requestFromDelegate(request, identifier, error);
1424     notifier()->sendRemainingDelegateMessages(m_documentLoader.get(), identifier, ResourceResponse(url, String(), -1, String(), String()), 0, -1, -1, error);
1425
1426     url = request.url();
1427
1428     return error.isNull();
1429 }
1430
1431 bool FrameLoader::shouldReloadToHandleUnreachableURL(DocumentLoader* docLoader)
1432 {
1433     KURL unreachableURL = docLoader->unreachableURL();
1434
1435     if (unreachableURL.isEmpty())
1436         return false;
1437
1438     if (!isBackForwardLoadType(policyChecker()->loadType()))
1439         return false;
1440
1441     // We only treat unreachableURLs specially during the delegate callbacks
1442     // for provisional load errors and navigation policy decisions. The former
1443     // case handles well-formed URLs that can't be loaded, and the latter
1444     // case handles malformed URLs and unknown schemes. Loading alternate content
1445     // at other times behaves like a standard load.
1446     DocumentLoader* compareDocumentLoader = 0;
1447     if (policyChecker()->delegateIsDecidingNavigationPolicy() || policyChecker()->delegateIsHandlingUnimplementablePolicy())
1448         compareDocumentLoader = m_policyDocumentLoader.get();
1449     else if (m_delegateIsHandlingProvisionalLoadError)
1450         compareDocumentLoader = m_provisionalDocumentLoader.get();
1451
1452     return compareDocumentLoader && unreachableURL == compareDocumentLoader->request().url();
1453 }
1454
1455 void FrameLoader::reloadWithOverrideEncoding(const String& encoding)
1456 {
1457     if (!m_documentLoader)
1458         return;
1459
1460     ResourceRequest request = m_documentLoader->request();
1461     KURL unreachableURL = m_documentLoader->unreachableURL();
1462     if (!unreachableURL.isEmpty())
1463         request.setURL(unreachableURL);
1464
1465     // FIXME: If the resource is a result of form submission and is not cached, the form will be silently resubmitted.
1466     // We should ask the user for confirmation in this case.
1467     request.setCachePolicy(ReturnCacheDataElseLoad);
1468
1469     RefPtr<DocumentLoader> loader = m_client->createDocumentLoader(request, defaultSubstituteDataForURL(request.url()));
1470     setPolicyDocumentLoader(loader.get());
1471
1472     loader->setOverrideEncoding(encoding);
1473
1474     loadWithDocumentLoader(loader.get(), FrameLoadTypeReload, 0);
1475 }
1476
1477 void FrameLoader::reloadWithOverrideURL(const KURL& overrideUrl, bool endToEndReload)
1478 {
1479     if (!m_documentLoader)
1480         return;
1481
1482     if (overrideUrl.isEmpty())
1483         return;
1484
1485     ResourceRequest request = m_documentLoader->request();
1486     request.setURL(overrideUrl);
1487     reloadWithRequest(request, endToEndReload);
1488 }
1489
1490 void FrameLoader::reload(bool endToEndReload)
1491 {
1492     if (!m_documentLoader)
1493         return;
1494
1495     // If a window is created by javascript, its main frame can have an empty but non-nil URL.
1496     // Reloading in this case will lose the current contents (see 4151001).
1497     if (m_documentLoader->request().url().isEmpty())
1498         return;
1499
1500     // Replace error-page URL with the URL we were trying to reach.
1501     ResourceRequest initialRequest = m_documentLoader->request();
1502     KURL unreachableURL = m_documentLoader->unreachableURL();
1503     if (!unreachableURL.isEmpty())
1504         initialRequest.setURL(unreachableURL);
1505
1506     reloadWithRequest(initialRequest, endToEndReload);
1507 }
1508
1509 void FrameLoader::reloadWithRequest(const ResourceRequest& initialRequest, bool endToEndReload)
1510 {
1511     ASSERT(m_documentLoader);
1512
1513     // Create a new document loader for the reload, this will become m_documentLoader eventually,
1514     // but first it has to be the "policy" document loader, and then the "provisional" document loader.
1515     RefPtr<DocumentLoader> loader = m_client->createDocumentLoader(initialRequest, defaultSubstituteDataForURL(initialRequest.url()));
1516
1517     ResourceRequest& request = loader->request();
1518
1519     // FIXME: We don't have a mechanism to revalidate the main resource without reloading at the moment.
1520     request.setCachePolicy(ReloadIgnoringCacheData);
1521
1522     // If we're about to re-post, set up action so the application can warn the user.
1523     if (request.httpMethod() == "POST")
1524         loader->setTriggeringAction(NavigationAction(request, NavigationTypeFormResubmitted));
1525
1526     loader->setOverrideEncoding(m_documentLoader->overrideEncoding());
1527     
1528     loadWithDocumentLoader(loader.get(), endToEndReload ? FrameLoadTypeReloadFromOrigin : FrameLoadTypeReload, 0);
1529 }
1530
1531 void FrameLoader::stopAllLoaders(ClearProvisionalItemPolicy clearProvisionalItemPolicy)
1532 {
1533     ASSERT(!m_frame->document() || !m_frame->document()->inPageCache());
1534     if (m_pageDismissalEventBeingDispatched != NoDismissal)
1535         return;
1536
1537     // If this method is called from within this method, infinite recursion can occur (3442218). Avoid this.
1538     if (m_inStopAllLoaders)
1539         return;
1540     
1541     // Calling stopLoading() on the provisional document loader can blow away
1542     // the frame from underneath.
1543     RefPtr<Frame> protect(m_frame);
1544
1545     m_inStopAllLoaders = true;
1546
1547     policyChecker()->stopCheck();
1548
1549     // If no new load is in progress, we should clear the provisional item from history
1550     // before we call stopLoading.
1551     if (clearProvisionalItemPolicy == ShouldClearProvisionalItem)
1552         history()->setProvisionalItem(0);
1553
1554     for (RefPtr<Frame> child = m_frame->tree()->firstChild(); child; child = child->tree()->nextSibling())
1555         child->loader()->stopAllLoaders(clearProvisionalItemPolicy);
1556     if (m_provisionalDocumentLoader)
1557         m_provisionalDocumentLoader->stopLoading();
1558     if (m_documentLoader)
1559         m_documentLoader->stopLoading();
1560
1561     setProvisionalDocumentLoader(0);
1562
1563     m_checkTimer.stop();
1564
1565     m_inStopAllLoaders = false;    
1566 }
1567
1568 void FrameLoader::stopForUserCancel(bool deferCheckLoadComplete)
1569 {
1570     stopAllLoaders();
1571     
1572     if (deferCheckLoadComplete)
1573         scheduleCheckLoadComplete();
1574     else if (m_frame->page())
1575         checkLoadComplete();
1576 }
1577
1578 DocumentLoader* FrameLoader::activeDocumentLoader() const
1579 {
1580     if (m_state == FrameStateProvisional)
1581         return m_provisionalDocumentLoader.get();
1582     return m_documentLoader.get();
1583 }
1584
1585 bool FrameLoader::isLoading() const
1586 {
1587     DocumentLoader* docLoader = activeDocumentLoader();
1588     if (!docLoader)
1589         return false;
1590     return docLoader->isLoading();
1591 }
1592
1593 bool FrameLoader::frameHasLoaded() const
1594 {
1595     return m_stateMachine.committedFirstRealDocumentLoad() || (m_provisionalDocumentLoader && !m_stateMachine.creatingInitialEmptyDocument()); 
1596 }
1597
1598 void FrameLoader::setDocumentLoader(DocumentLoader* loader)
1599 {
1600     if (!loader && !m_documentLoader)
1601         return;
1602     
1603     ASSERT(loader != m_documentLoader);
1604     ASSERT(!loader || loader->frameLoader() == this);
1605
1606     m_client->prepareForDataSourceReplacement();
1607     detachChildren();
1608
1609     // detachChildren() can trigger this frame's unload event, and therefore
1610     // script can run and do just about anything. For example, an unload event that calls
1611     // document.write("") on its parent frame can lead to a recursive detachChildren()
1612     // invocation for this frame. In that case, we can end up at this point with a
1613     // loader that hasn't been deleted but has been detached from its frame. Such a
1614     // DocumentLoader has been sufficiently detached that we'll end up in an inconsistent
1615     // state if we try to use it.
1616     if (loader && !loader->frame())
1617         return;
1618
1619     if (m_documentLoader)
1620         m_documentLoader->detachFromFrame();
1621
1622     m_documentLoader = loader;
1623 }
1624
1625 void FrameLoader::setPolicyDocumentLoader(DocumentLoader* loader)
1626 {
1627     if (m_policyDocumentLoader == loader)
1628         return;
1629
1630     ASSERT(m_frame);
1631     if (loader)
1632         loader->setFrame(m_frame);
1633     if (m_policyDocumentLoader
1634             && m_policyDocumentLoader != m_provisionalDocumentLoader
1635             && m_policyDocumentLoader != m_documentLoader)
1636         m_policyDocumentLoader->detachFromFrame();
1637
1638     m_policyDocumentLoader = loader;
1639 }
1640
1641 void FrameLoader::setProvisionalDocumentLoader(DocumentLoader* loader)
1642 {
1643     ASSERT(!loader || !m_provisionalDocumentLoader);
1644     ASSERT(!loader || loader->frameLoader() == this);
1645
1646     if (m_provisionalDocumentLoader && m_provisionalDocumentLoader != m_documentLoader)
1647         m_provisionalDocumentLoader->detachFromFrame();
1648
1649     m_provisionalDocumentLoader = loader;
1650 }
1651
1652 double FrameLoader::timeOfLastCompletedLoad()
1653 {
1654     return storedTimeOfLastCompletedLoad;
1655 }
1656
1657 void FrameLoader::setState(FrameState newState)
1658 {    
1659     m_state = newState;
1660     
1661     if (newState == FrameStateProvisional)
1662         provisionalLoadStarted();
1663     else if (newState == FrameStateComplete) {
1664         frameLoadCompleted();
1665         storedTimeOfLastCompletedLoad = currentTime();
1666         if (m_documentLoader)
1667             m_documentLoader->stopRecordingResponses();
1668     }
1669 }
1670
1671 void FrameLoader::clearProvisionalLoad()
1672 {
1673     setProvisionalDocumentLoader(0);
1674     m_progressTracker->progressCompleted();
1675     setState(FrameStateComplete);
1676 }
1677
1678 void FrameLoader::commitProvisionalLoad()
1679 {
1680     RefPtr<CachedPage> cachedPage = m_loadingFromCachedPage ? pageCache()->get(history()->provisionalItem()) : 0;
1681     RefPtr<DocumentLoader> pdl = m_provisionalDocumentLoader;
1682     RefPtr<Frame> protect(m_frame);
1683
1684     LOG(PageCache, "WebCoreLoading %s: About to commit provisional load from previous URL '%s' to new URL '%s'", m_frame->tree()->uniqueName().string().utf8().data(),
1685         m_frame->document() ? m_frame->document()->url().string().utf8().data() : "", 
1686         pdl ? pdl->url().string().utf8().data() : "<no provisional DocumentLoader>");
1687
1688     // Check to see if we need to cache the page we are navigating away from into the back/forward cache.
1689     // We are doing this here because we know for sure that a new page is about to be loaded.
1690     HistoryItem* item = history()->currentItem();
1691     if (!m_frame->tree()->parent() && pageCache()->canCache(m_frame->page()) && !item->isInPageCache())
1692         pageCache()->add(item, m_frame->page());
1693
1694     if (m_loadType != FrameLoadTypeReplace)
1695         closeOldDataSources();
1696
1697     if (!cachedPage && !m_stateMachine.creatingInitialEmptyDocument())
1698         m_client->makeRepresentation(pdl.get());
1699
1700     transitionToCommitted(cachedPage);
1701
1702     if (pdl && m_documentLoader) {
1703         // Check if the destination page is allowed to access the previous page's timing information.
1704         RefPtr<SecurityOrigin> securityOrigin = SecurityOrigin::create(pdl->request().url());
1705         m_documentLoader->timing()->setHasSameOriginAsPreviousDocument(securityOrigin->canRequest(m_previousUrl));
1706     }
1707
1708     // Call clientRedirectCancelledOrFinished() here so that the frame load delegate is notified that the redirect's
1709     // status has changed, if there was a redirect.  The frame load delegate may have saved some state about
1710     // the redirect in its -webView:willPerformClientRedirectToURL:delay:fireDate:forFrame:.  Since we are
1711     // just about to commit a new page, there cannot possibly be a pending redirect at this point.
1712     if (m_sentRedirectNotification)
1713         clientRedirectCancelledOrFinished(false);
1714     
1715     if (cachedPage && cachedPage->document()) {
1716         prepareForCachedPageRestore();
1717         cachedPage->restore(m_frame->page());
1718
1719         // The page should be removed from the cache immediately after a restoration in order for the PageCache to be consistent.
1720         pageCache()->remove(history()->currentItem());
1721
1722         dispatchDidCommitLoad();
1723
1724         // If we have a title let the WebView know about it. 
1725         StringWithDirection title = m_documentLoader->title();
1726         if (!title.isNull())
1727             m_client->dispatchDidReceiveTitle(title);
1728
1729         checkCompleted();
1730     } else {
1731         if (cachedPage)
1732             pageCache()->remove(history()->currentItem());
1733         didOpenURL();
1734     }
1735
1736     LOG(Loading, "WebCoreLoading %s: Finished committing provisional load to URL %s", m_frame->tree()->uniqueName().string().utf8().data(),
1737         m_frame->document() ? m_frame->document()->url().string().utf8().data() : "");
1738
1739     if (m_loadType == FrameLoadTypeStandard && m_documentLoader->isClientRedirect())
1740         history()->updateForClientRedirect();
1741
1742     if (m_loadingFromCachedPage) {
1743         m_frame->document()->documentDidResumeFromPageCache();
1744         
1745         // Force a layout to update view size and thereby update scrollbars.
1746         m_frame->view()->forceLayout();
1747
1748         const ResponseVector& responses = m_documentLoader->responses();
1749         size_t count = responses.size();
1750         for (size_t i = 0; i < count; i++) {
1751             const ResourceResponse& response = responses[i];
1752             // FIXME: If the WebKit client changes or cancels the request, this is not respected.
1753             ResourceError error;
1754             unsigned long identifier;
1755             ResourceRequest request(response.url());
1756             requestFromDelegate(request, identifier, error);
1757             // FIXME: If we get a resource with more than 2B bytes, this code won't do the right thing.
1758             // However, with today's computers and networking speeds, this won't happen in practice.
1759             // Could be an issue with a giant local file.
1760             notifier()->sendRemainingDelegateMessages(m_documentLoader.get(), identifier, response, 0, static_cast<int>(response.expectedContentLength()), 0, error);
1761         }
1762
1763         // FIXME: Why only this frame and not parent frames?
1764         checkLoadCompleteForThisFrame();
1765     }
1766 }
1767
1768 void FrameLoader::transitionToCommitted(PassRefPtr<CachedPage> cachedPage)
1769 {
1770     ASSERT(m_client->hasWebView());
1771     ASSERT(m_state == FrameStateProvisional);
1772
1773     if (m_state != FrameStateProvisional)
1774         return;
1775
1776     if (FrameView* view = m_frame->view()) {
1777         if (ScrollAnimator* scrollAnimator = view->existingScrollAnimator())
1778             scrollAnimator->cancelAnimations();
1779     }
1780
1781     m_client->setCopiesOnScroll();
1782     history()->updateForCommit();
1783
1784     // The call to closeURL() invokes the unload event handler, which can execute arbitrary
1785     // JavaScript. If the script initiates a new load, we need to abandon the current load,
1786     // or the two will stomp each other.
1787     DocumentLoader* pdl = m_provisionalDocumentLoader.get();
1788     if (m_documentLoader)
1789         closeURL();
1790     if (pdl != m_provisionalDocumentLoader)
1791         return;
1792
1793     // Nothing else can interupt this commit - set the Provisional->Committed transition in stone
1794     if (m_documentLoader)
1795         m_documentLoader->stopLoadingSubresources();
1796     if (m_documentLoader)
1797         m_documentLoader->stopLoadingPlugIns();
1798
1799     setDocumentLoader(m_provisionalDocumentLoader.get());
1800     setProvisionalDocumentLoader(0);
1801
1802     if (pdl != m_documentLoader) {
1803         ASSERT(m_state == FrameStateComplete);
1804         return;
1805     }
1806
1807     setState(FrameStateCommittedPage);
1808
1809 #if ENABLE(TOUCH_EVENTS)
1810     if (isLoadingMainFrame())
1811         m_frame->page()->chrome()->client()->needTouchEvents(false);
1812 #endif
1813
1814     // Handle adding the URL to the back/forward list.
1815     DocumentLoader* dl = m_documentLoader.get();
1816
1817     switch (m_loadType) {
1818         case FrameLoadTypeForward:
1819         case FrameLoadTypeBack:
1820         case FrameLoadTypeIndexedBackForward:
1821             if (m_frame->page()) {
1822                 // If the first load within a frame is a navigation within a back/forward list that was attached
1823                 // without any of the items being loaded then we need to update the history in a similar manner as
1824                 // for a standard load with the exception of updating the back/forward list (<rdar://problem/8091103>).
1825                 if (!m_stateMachine.committedFirstRealDocumentLoad() && isLoadingMainFrame())
1826                     history()->updateForStandardLoad(HistoryController::UpdateAllExceptBackForwardList);
1827
1828                 history()->updateForBackForwardNavigation();
1829
1830                 // For cached pages, CachedFrame::restore will take care of firing the popstate event with the history item's state object
1831                 if (history()->currentItem() && !cachedPage)
1832                     m_pendingStateObject = history()->currentItem()->stateObject();
1833
1834                 // Create a document view for this document, or used the cached view.
1835                 if (cachedPage) {
1836                     DocumentLoader* cachedDocumentLoader = cachedPage->documentLoader();
1837                     ASSERT(cachedDocumentLoader);
1838                     cachedDocumentLoader->setFrame(m_frame);
1839                     m_client->transitionToCommittedFromCachedFrame(cachedPage->cachedMainFrame());
1840
1841                 } else
1842                     m_client->transitionToCommittedForNewPage();
1843             }
1844             break;
1845
1846         case FrameLoadTypeReload:
1847         case FrameLoadTypeReloadFromOrigin:
1848         case FrameLoadTypeSame:
1849         case FrameLoadTypeReplace:
1850             history()->updateForReload();
1851             m_client->transitionToCommittedForNewPage();
1852             break;
1853
1854         case FrameLoadTypeStandard:
1855             history()->updateForStandardLoad();
1856             if (m_frame->view())
1857                 m_frame->view()->setScrollbarsSuppressed(true);
1858             m_client->transitionToCommittedForNewPage();
1859             break;
1860
1861         case FrameLoadTypeRedirectWithLockedBackForwardList:
1862             history()->updateForRedirectWithLockedBackForwardList();
1863             m_client->transitionToCommittedForNewPage();
1864             break;
1865
1866         // FIXME Remove this check when dummy ds is removed (whatever "dummy ds" is).
1867         // An exception should be thrown if we're in the FrameLoadTypeUninitialized state.
1868         default:
1869             ASSERT_NOT_REACHED();
1870     }
1871
1872     m_documentLoader->writer()->setMIMEType(dl->responseMIMEType());
1873
1874     // Tell the client we've committed this URL.
1875     ASSERT(m_frame->view());
1876
1877     if (m_stateMachine.creatingInitialEmptyDocument())
1878         return;
1879
1880     if (!m_stateMachine.committedFirstRealDocumentLoad())
1881         m_stateMachine.advanceTo(FrameLoaderStateMachine::DisplayingInitialEmptyDocumentPostCommit);
1882 }
1883
1884 void FrameLoader::clientRedirectCancelledOrFinished(bool cancelWithLoadInProgress)
1885 {
1886     // Note that -webView:didCancelClientRedirectForFrame: is called on the frame load delegate even if
1887     // the redirect succeeded.  We should either rename this API, or add a new method, like
1888     // -webView:didFinishClientRedirectForFrame:
1889     m_client->dispatchDidCancelClientRedirect();
1890
1891     if (!cancelWithLoadInProgress)
1892         m_quickRedirectComing = false;
1893
1894     m_sentRedirectNotification = false;
1895 }
1896
1897 void FrameLoader::clientRedirected(const KURL& url, double seconds, double fireDate, bool lockBackForwardList)
1898 {
1899     m_client->dispatchWillPerformClientRedirect(url, seconds, fireDate);
1900     
1901     // Remember that we sent a redirect notification to the frame load delegate so that when we commit
1902     // the next provisional load, we can send a corresponding -webView:didCancelClientRedirectForFrame:
1903     m_sentRedirectNotification = true;
1904     
1905     // If a "quick" redirect comes in, we set a special mode so we treat the next
1906     // load as part of the original navigation. If we don't have a document loader, we have
1907     // no "original" load on which to base a redirect, so we treat the redirect as a normal load.
1908     // Loads triggered by JavaScript form submissions never count as quick redirects.
1909     m_quickRedirectComing = (lockBackForwardList || history()->currentItemShouldBeReplaced()) && m_documentLoader && !m_isExecutingJavaScriptFormAction;
1910 }
1911
1912 bool FrameLoader::shouldReload(const KURL& currentURL, const KURL& destinationURL)
1913 {
1914     // This function implements the rule: "Don't reload if navigating by fragment within
1915     // the same URL, but do reload if going to a new URL or to the same URL with no
1916     // fragment identifier at all."
1917     if (!destinationURL.hasFragmentIdentifier())
1918         return true;
1919     return !equalIgnoringFragmentIdentifier(currentURL, destinationURL);
1920 }
1921
1922 void FrameLoader::closeOldDataSources()
1923 {
1924     // FIXME: Is it important for this traversal to be postorder instead of preorder?
1925     // If so, add helpers for postorder traversal, and use them. If not, then lets not
1926     // use a recursive algorithm here.
1927     for (Frame* child = m_frame->tree()->firstChild(); child; child = child->tree()->nextSibling())
1928         child->loader()->closeOldDataSources();
1929     
1930     if (m_documentLoader)
1931         m_client->dispatchWillClose();
1932
1933     m_client->setMainFrameDocumentReady(false); // stop giving out the actual DOMDocument to observers
1934 }
1935
1936 void FrameLoader::prepareForCachedPageRestore()
1937 {
1938     ASSERT(!m_frame->tree()->parent());
1939     ASSERT(m_frame->page());
1940     ASSERT(m_frame->page()->mainFrame() == m_frame);
1941
1942     m_frame->navigationScheduler()->cancel();
1943
1944     // We still have to close the previous part page.
1945     closeURL();
1946     
1947     // Delete old status bar messages (if it _was_ activated on last URL).
1948     if (m_frame->script()->canExecuteScripts(NotAboutToExecuteScript)) {
1949         DOMWindow* window = m_frame->document()->domWindow();
1950         window->setStatus(String());
1951         window->setDefaultStatus(String());
1952     }
1953 }
1954
1955 void FrameLoader::open(CachedFrameBase& cachedFrame)
1956 {
1957     m_isComplete = false;
1958     
1959     // Don't re-emit the load event.
1960     m_didCallImplicitClose = true;
1961
1962     KURL url = cachedFrame.url();
1963
1964     // FIXME: I suspect this block of code doesn't do anything.
1965     if (url.protocolIsInHTTPFamily() && !url.host().isEmpty() && url.path().isEmpty())
1966         url.setPath("/");
1967
1968     started();
1969     Document* document = cachedFrame.document();
1970     ASSERT(document);
1971     ASSERT(document->domWindow());
1972
1973     clear(document, true, true, cachedFrame.isMainFrame());
1974
1975     document->setInPageCache(false);
1976
1977     m_needsClear = true;
1978     m_isComplete = false;
1979     m_didCallImplicitClose = false;
1980     m_outgoingReferrer = url.string();
1981
1982     FrameView* view = cachedFrame.view();
1983     
1984     // When navigating to a CachedFrame its FrameView should never be null.  If it is we'll crash in creative ways downstream.
1985     ASSERT(view);
1986     view->setWasScrolledByUser(false);
1987
1988     // Use the current ScrollView's frame rect.
1989     if (m_frame->view())
1990         view->setFrameRect(m_frame->view()->frameRect());
1991     m_frame->setView(view);
1992     
1993     m_frame->setDocument(document);
1994     document->domWindow()->resumeFromPageCache();
1995
1996     updateFirstPartyForCookies();
1997
1998     cachedFrame.restore();
1999 }
2000
2001 bool FrameLoader::isHostedByObjectElement() const
2002 {
2003     HTMLFrameOwnerElement* owner = m_frame->ownerElement();
2004     return owner && owner->hasTagName(objectTag);
2005 }
2006
2007 bool FrameLoader::isLoadingMainFrame() const
2008 {
2009     Page* page = m_frame->page();
2010     return page && m_frame == page->mainFrame();
2011 }
2012
2013 bool FrameLoader::isReplacing() const
2014 {
2015     return m_loadType == FrameLoadTypeReplace;
2016 }
2017
2018 void FrameLoader::setReplacing()
2019 {
2020     m_loadType = FrameLoadTypeReplace;
2021 }
2022
2023 bool FrameLoader::subframeIsLoading() const
2024 {
2025     // It's most likely that the last added frame is the last to load so we walk backwards.
2026     for (Frame* child = m_frame->tree()->lastChild(); child; child = child->tree()->previousSibling()) {
2027         FrameLoader* childLoader = child->loader();
2028         DocumentLoader* documentLoader = childLoader->documentLoader();
2029         if (documentLoader && documentLoader->isLoadingInAPISense())
2030             return true;
2031         documentLoader = childLoader->provisionalDocumentLoader();
2032         if (documentLoader && documentLoader->isLoadingInAPISense())
2033             return true;
2034         documentLoader = childLoader->policyDocumentLoader();
2035         if (documentLoader)
2036             return true;
2037     }
2038     return false;
2039 }
2040
2041 void FrameLoader::willChangeTitle(DocumentLoader* loader)
2042 {
2043     m_client->willChangeTitle(loader);
2044 }
2045
2046 FrameLoadType FrameLoader::loadType() const
2047 {
2048     return m_loadType;
2049 }
2050     
2051 CachePolicy FrameLoader::subresourceCachePolicy() const
2052 {
2053     if (m_isComplete)
2054         return CachePolicyVerify;
2055
2056     if (m_loadType == FrameLoadTypeReloadFromOrigin)
2057         return CachePolicyReload;
2058
2059     if (Frame* parentFrame = m_frame->tree()->parent()) {
2060         CachePolicy parentCachePolicy = parentFrame->loader()->subresourceCachePolicy();
2061         if (parentCachePolicy != CachePolicyVerify)
2062             return parentCachePolicy;
2063     }
2064     
2065     if (m_loadType == FrameLoadTypeReload)
2066         return CachePolicyRevalidate;
2067
2068     const ResourceRequest& request(documentLoader()->request());
2069 #if PLATFORM(MAC)
2070     if (request.cachePolicy() == ReloadIgnoringCacheData && !equalIgnoringCase(request.httpMethod(), "post") && ResourceRequest::useQuickLookResourceCachingQuirks())
2071         return CachePolicyRevalidate;
2072 #endif
2073
2074     if (request.cachePolicy() == ReturnCacheDataElseLoad)
2075         return CachePolicyHistoryBuffer;
2076
2077     return CachePolicyVerify;
2078 }
2079
2080 void FrameLoader::checkLoadCompleteForThisFrame()
2081 {
2082     ASSERT(m_client->hasWebView());
2083
2084     Settings* settings = m_frame->settings();
2085
2086     switch (m_state) {
2087         case FrameStateProvisional: {
2088             if (m_delegateIsHandlingProvisionalLoadError)
2089                 return;
2090
2091             RefPtr<DocumentLoader> pdl = m_provisionalDocumentLoader;
2092             if (!pdl)
2093                 return;
2094                 
2095             // If we've received any errors we may be stuck in the provisional state and actually complete.
2096             const ResourceError& error = pdl->mainDocumentError();
2097             if (error.isNull())
2098                 return;
2099
2100             // Check all children first.
2101             RefPtr<HistoryItem> item;
2102             if (Page* page = m_frame->page())
2103                 if (isBackForwardLoadType(loadType()))
2104                     // Reset the back forward list to the last committed history item at the top level.
2105                     item = page->mainFrame()->loader()->history()->currentItem();
2106                 
2107             // Only reset if we aren't already going to a new provisional item.
2108             bool shouldReset = !history()->provisionalItem();
2109             if (!pdl->isLoadingInAPISense() || pdl->isStopping()) {
2110                 m_delegateIsHandlingProvisionalLoadError = true;
2111                 m_client->dispatchDidFailProvisionalLoad(error);
2112                 m_delegateIsHandlingProvisionalLoadError = false;
2113
2114                 ASSERT(!pdl->isLoading());
2115
2116                 // If we're in the middle of loading multipart data, we need to restore the document loader.
2117                 if (isReplacing() && !m_documentLoader.get())
2118                     setDocumentLoader(m_provisionalDocumentLoader.get());
2119
2120                 // Finish resetting the load state, but only if another load hasn't been started by the
2121                 // delegate callback.
2122                 if (pdl == m_provisionalDocumentLoader)
2123                     clearProvisionalLoad();
2124                 else if (activeDocumentLoader()) {
2125                     KURL unreachableURL = activeDocumentLoader()->unreachableURL();
2126                     if (!unreachableURL.isEmpty() && unreachableURL == pdl->request().url())
2127                         shouldReset = false;
2128                 }
2129             }
2130             if (shouldReset && item)
2131                 if (Page* page = m_frame->page()) {
2132                     page->backForward()->setCurrentItem(item.get());
2133                     m_frame->loader()->client()->updateGlobalHistoryItemForPage();
2134                 }
2135             return;
2136         }
2137         
2138         case FrameStateCommittedPage: {
2139             DocumentLoader* dl = m_documentLoader.get();            
2140             if (!dl || (dl->isLoadingInAPISense() && !dl->isStopping()))
2141                 return;
2142
2143             setState(FrameStateComplete);
2144
2145             // FIXME: Is this subsequent work important if we already navigated away?
2146             // Maybe there are bugs because of that, or extra work we can skip because
2147             // the new page is ready.
2148
2149             m_client->forceLayoutForNonHTML();
2150              
2151             // If the user had a scroll point, scroll to it, overriding the anchor point if any.
2152             if (m_frame->page()) {
2153                 if (isBackForwardLoadType(m_loadType) || m_loadType == FrameLoadTypeReload || m_loadType == FrameLoadTypeReloadFromOrigin)
2154                     history()->restoreScrollPositionAndViewState();
2155             }
2156
2157             if (m_stateMachine.creatingInitialEmptyDocument() || !m_stateMachine.committedFirstRealDocumentLoad())
2158                 return;
2159
2160             if (!settings->needsDidFinishLoadOrderQuirk()) {
2161                 m_progressTracker->progressCompleted();
2162                 if (Page* page = m_frame->page()) {
2163                     if (m_frame == page->mainFrame())
2164                         page->resetRelevantPaintedObjectCounter();
2165                 }
2166             }
2167
2168             const ResourceError& error = dl->mainDocumentError();
2169
2170             AXObjectCache::AXLoadingEvent loadingEvent;
2171             if (!error.isNull()) {
2172                 m_client->dispatchDidFailLoad(error);
2173                 loadingEvent = AXObjectCache::AXLoadingFailed;
2174             } else {
2175                 m_client->dispatchDidFinishLoad();
2176                 loadingEvent = AXObjectCache::AXLoadingFinished;
2177             }
2178
2179             if (settings->needsDidFinishLoadOrderQuirk()) {
2180                 m_progressTracker->progressCompleted();
2181                 if (Page* page = m_frame->page()) {
2182                     if (m_frame == page->mainFrame())
2183                         page->resetRelevantPaintedObjectCounter();
2184                 }
2185             }
2186
2187             // Notify accessibility.
2188             if (AXObjectCache::accessibilityEnabled())
2189                 m_frame->document()->axObjectCache()->frameLoadingEventNotification(m_frame, loadingEvent);
2190
2191             return;
2192         }
2193         
2194         case FrameStateComplete:
2195             m_loadType = FrameLoadTypeStandard;
2196             frameLoadCompleted();
2197             return;
2198     }
2199
2200     ASSERT_NOT_REACHED();
2201 }
2202
2203 void FrameLoader::continueLoadAfterWillSubmitForm()
2204 {
2205     if (!m_provisionalDocumentLoader)
2206         return;
2207
2208     prepareForLoadStart();
2209     
2210     // The load might be cancelled inside of prepareForLoadStart(), nulling out the m_provisionalDocumentLoader, 
2211     // so we need to null check it again.
2212     if (!m_provisionalDocumentLoader)
2213         return;
2214
2215     DocumentLoader* activeDocLoader = activeDocumentLoader();
2216     if (activeDocLoader && activeDocLoader->isLoadingMainResource())
2217         return;
2218
2219     m_loadingFromCachedPage = false;
2220     m_provisionalDocumentLoader->startLoadingMainResource();
2221 }
2222
2223 static KURL originatingURLFromBackForwardList(Page* page)
2224 {
2225     // FIXME: Can this logic be replaced with m_frame->document()->firstPartyForCookies()?
2226     // It has the same meaning of "page a user thinks is the current one".
2227
2228     KURL originalURL;
2229     int backCount = page->backForward()->backCount();
2230     for (int backIndex = 0; backIndex <= backCount; backIndex++) {
2231         // FIXME: At one point we had code here to check a "was user gesture" flag.
2232         // Do we need to restore that logic?
2233         HistoryItem* historyItem = page->backForward()->itemAtIndex(-backIndex);
2234         if (!historyItem)
2235             continue;
2236
2237         originalURL = historyItem->originalURL(); 
2238         if (!originalURL.isNull()) 
2239             return originalURL;
2240     }
2241
2242     return KURL();
2243 }
2244
2245 void FrameLoader::setOriginalURLForDownloadRequest(ResourceRequest& request)
2246 {
2247     KURL originalURL;
2248     
2249     // If there is no referrer, assume that the download was initiated directly, so current document is
2250     // completely unrelated to it. See <rdar://problem/5294691>.
2251     // FIXME: Referrer is not sent in many other cases, so we will often miss this important information.
2252     // Find a better way to decide whether the download was unrelated to current document.
2253     if (!request.httpReferrer().isNull()) {
2254         // find the first item in the history that was originated by the user
2255         originalURL = originatingURLFromBackForwardList(m_frame->page());
2256     }
2257
2258     if (originalURL.isNull())
2259         originalURL = request.url();
2260
2261     if (!originalURL.protocol().isEmpty() && !originalURL.host().isEmpty()) {
2262         unsigned port = originalURL.port();
2263
2264         // Original URL is needed to show the user where a file was downloaded from. We should make a URL that won't result in downloading the file again.
2265         // FIXME: Using host-only URL is a very heavy-handed approach. We should attempt to provide the actual page where the download was initiated from, as a reminder to the user.
2266         String hostOnlyURLString;
2267         if (port)
2268             hostOnlyURLString = makeString(originalURL.protocol(), "://", originalURL.host(), ":", String::number(port));
2269         else
2270             hostOnlyURLString = makeString(originalURL.protocol(), "://", originalURL.host());
2271
2272         // FIXME: Rename firstPartyForCookies back to mainDocumentURL. It was a mistake to think that it was only used for cookies.
2273         request.setFirstPartyForCookies(KURL(KURL(), hostOnlyURLString));
2274     }
2275 }
2276
2277 void FrameLoader::didLayout(LayoutMilestones milestones)
2278 {
2279     m_client->dispatchDidLayout(milestones);
2280 }
2281
2282 void FrameLoader::didFirstLayout()
2283 {
2284     if (m_frame->page() && isBackForwardLoadType(m_loadType))
2285         history()->restoreScrollPositionAndViewState();
2286
2287     if (m_stateMachine.committedFirstRealDocumentLoad() && !m_stateMachine.isDisplayingInitialEmptyDocument() && !m_stateMachine.firstLayoutDone())
2288         m_stateMachine.advanceTo(FrameLoaderStateMachine::FirstLayoutDone);
2289 }
2290
2291 void FrameLoader::frameLoadCompleted()
2292 {
2293     // Note: Can be called multiple times.
2294
2295     m_client->frameLoadCompleted();
2296
2297     history()->updateForFrameLoadCompleted();
2298
2299     // After a canceled provisional load, firstLayoutDone is false.
2300     // Reset it to true if we're displaying a page.
2301     if (m_documentLoader && m_stateMachine.committedFirstRealDocumentLoad() && !m_stateMachine.isDisplayingInitialEmptyDocument() && !m_stateMachine.firstLayoutDone())
2302         m_stateMachine.advanceTo(FrameLoaderStateMachine::FirstLayoutDone);
2303 }
2304
2305 void FrameLoader::detachChildren()
2306 {
2307     typedef Vector<RefPtr<Frame> > FrameVector;
2308     FrameVector childrenToDetach;
2309     childrenToDetach.reserveCapacity(m_frame->tree()->childCount());
2310     for (Frame* child = m_frame->tree()->lastChild(); child; child = child->tree()->previousSibling())
2311         childrenToDetach.append(child);
2312     FrameVector::iterator end = childrenToDetach.end();
2313     for (FrameVector::iterator it = childrenToDetach.begin(); it != end; it++)
2314         (*it)->loader()->detachFromParent();
2315 }
2316
2317 void FrameLoader::closeAndRemoveChild(Frame* child)
2318 {
2319     child->tree()->detachFromParent();
2320
2321     child->setView(0);
2322     if (child->ownerElement() && child->page())
2323         child->page()->decrementSubframeCount();
2324     child->willDetachPage();
2325     child->detachFromPage();
2326
2327     m_frame->tree()->removeChild(child);
2328 }
2329
2330 // Called every time a resource is completely loaded or an error is received.
2331 void FrameLoader::checkLoadComplete()
2332 {
2333     ASSERT(m_client->hasWebView());
2334     
2335     m_shouldCallCheckLoadComplete = false;
2336
2337     // FIXME: Always traversing the entire frame tree is a bit inefficient, but 
2338     // is currently needed in order to null out the previous history item for all frames.
2339     if (Page* page = m_frame->page()) {
2340         Vector<RefPtr<Frame>, 10> frames;
2341         for (RefPtr<Frame> frame = page->mainFrame(); frame; frame = frame->tree()->traverseNext())
2342             frames.append(frame);
2343         // To process children before their parents, iterate the vector backwards.
2344         for (size_t i = frames.size(); i; --i)
2345             frames[i - 1]->loader()->checkLoadCompleteForThisFrame();
2346     }
2347 }
2348
2349 int FrameLoader::numPendingOrLoadingRequests(bool recurse) const
2350 {
2351     if (!recurse)
2352         return m_frame->document()->cachedResourceLoader()->requestCount();
2353
2354     int count = 0;
2355     for (Frame* frame = m_frame; frame; frame = frame->tree()->traverseNext(m_frame))
2356         count += frame->document()->cachedResourceLoader()->requestCount();
2357     return count;
2358 }
2359
2360 String FrameLoader::userAgent(const KURL& url) const
2361 {
2362     String userAgent = m_client->userAgent(url);
2363     InspectorInstrumentation::applyUserAgentOverride(m_frame, &userAgent);
2364     return userAgent;
2365 }
2366
2367 void FrameLoader::handledOnloadEvents()
2368 {
2369     m_client->dispatchDidHandleOnloadEvents();
2370
2371     if (documentLoader())
2372         documentLoader()->handledOnloadEvents();
2373 }
2374
2375 void FrameLoader::frameDetached()
2376 {
2377     stopAllLoaders();
2378     m_frame->document()->stopActiveDOMObjects();
2379     detachFromParent();
2380 }
2381
2382 void FrameLoader::detachFromParent()
2383 {
2384     RefPtr<Frame> protect(m_frame);
2385
2386     closeURL();
2387     history()->saveScrollPositionAndViewStateToItem(history()->currentItem());
2388     detachChildren();
2389     // stopAllLoaders() needs to be called after detachChildren(), because detachedChildren()
2390     // will trigger the unload event handlers of any child frames, and those event
2391     // handlers might start a new subresource load in this frame.
2392     stopAllLoaders();
2393
2394     InspectorInstrumentation::frameDetachedFromParent(m_frame);
2395
2396     detachViewsAndDocumentLoader();
2397
2398     m_progressTracker.clear();
2399
2400     if (Frame* parent = m_frame->tree()->parent()) {
2401         parent->loader()->closeAndRemoveChild(m_frame);
2402         parent->loader()->scheduleCheckCompleted();
2403     } else {
2404         m_frame->setView(0);
2405         m_frame->willDetachPage();
2406         m_frame->detachFromPage();
2407     }
2408 }
2409
2410 void FrameLoader::detachViewsAndDocumentLoader()
2411 {
2412     m_client->detachedFromParent2();
2413     setDocumentLoader(0);
2414     m_client->detachedFromParent3();
2415 }
2416     
2417 void FrameLoader::addExtraFieldsToSubresourceRequest(ResourceRequest& request)
2418 {
2419     addExtraFieldsToRequest(request, m_loadType, false);
2420 }
2421
2422 void FrameLoader::addExtraFieldsToMainResourceRequest(ResourceRequest& request)
2423 {
2424     // FIXME: Using m_loadType seems wrong for some callers.
2425     // If we are only preparing to load the main resource, that is previous load's load type!
2426     addExtraFieldsToRequest(request, m_loadType, true);
2427 }
2428
2429 void FrameLoader::addExtraFieldsToRequest(ResourceRequest& request, FrameLoadType loadType, bool mainResource)
2430 {
2431     // Don't set the cookie policy URL if it's already been set.
2432     // But make sure to set it on all requests regardless of protocol, as it has significance beyond the cookie policy (<rdar://problem/6616664>).
2433     if (request.firstPartyForCookies().isEmpty()) {
2434         if (mainResource && isLoadingMainFrame())
2435             request.setFirstPartyForCookies(request.url());
2436         else if (Document* document = m_frame->document())
2437             request.setFirstPartyForCookies(document->firstPartyForCookies());
2438     }
2439
2440     // The remaining modifications are only necessary for HTTP and HTTPS.
2441     if (!request.url().isEmpty() && !request.url().protocolIsInHTTPFamily())
2442         return;
2443
2444     applyUserAgent(request);
2445
2446     if (!mainResource) {
2447         if (request.isConditional())
2448             request.setCachePolicy(ReloadIgnoringCacheData);
2449         else if (documentLoader()->isLoadingInAPISense()) {
2450             // If we inherit cache policy from a main resource, we use the DocumentLoader's
2451             // original request cache policy for two reasons:
2452             // 1. For POST requests, we mutate the cache policy for the main resource,
2453             //    but we do not want this to apply to subresources
2454             // 2. Delegates that modify the cache policy using willSendRequest: should
2455             //    not affect any other resources. Such changes need to be done
2456             //    per request.
2457             ResourceRequestCachePolicy mainDocumentOriginalCachePolicy = documentLoader()->originalRequest().cachePolicy();
2458             // Back-forward navigations try to load main resource from cache only to avoid re-submitting form data, and start over (with a warning dialog) if that fails.
2459             // This policy is set on initial request too, but should not be inherited.
2460             ResourceRequestCachePolicy subresourceCachePolicy = (mainDocumentOriginalCachePolicy == ReturnCacheDataDontLoad) ? ReturnCacheDataElseLoad : mainDocumentOriginalCachePolicy;
2461             request.setCachePolicy(subresourceCachePolicy);
2462         } else
2463             request.setCachePolicy(UseProtocolCachePolicy);
2464
2465     // FIXME: Other FrameLoader functions have duplicated code for setting cache policy of main request when reloading.
2466     // It seems better to manage it explicitly than to hide the logic inside addExtraFieldsToRequest().
2467     } else if (loadType == FrameLoadTypeReload || loadType == FrameLoadTypeReloadFromOrigin || request.isConditional())
2468         request.setCachePolicy(ReloadIgnoringCacheData);
2469
2470     if (request.cachePolicy() == ReloadIgnoringCacheData) {
2471         if (loadType == FrameLoadTypeReload)
2472             request.setHTTPHeaderField("Cache-Control", "max-age=0");
2473         else if (loadType == FrameLoadTypeReloadFromOrigin) {
2474             request.setHTTPHeaderField("Cache-Control", "no-cache");
2475             request.setHTTPHeaderField("Pragma", "no-cache");
2476         }
2477     }
2478     
2479     if (mainResource)
2480         request.setHTTPAccept(defaultAcceptHeader);
2481
2482     // Make sure we send the Origin header.
2483     addHTTPOriginIfNeeded(request, String());
2484
2485     // Always try UTF-8. If that fails, try frame encoding (if any) and then the default.
2486     Settings* settings = m_frame->settings();
2487     request.setResponseContentDispositionEncodingFallbackArray("UTF-8", m_frame->document()->encoding(), settings ? settings->defaultTextEncodingName() : String());
2488 }
2489
2490 void FrameLoader::addHTTPOriginIfNeeded(ResourceRequest& request, const String& origin)
2491 {
2492     if (!request.httpOrigin().isEmpty())
2493         return;  // Request already has an Origin header.
2494
2495     // Don't send an Origin header for GET or HEAD to avoid privacy issues.
2496     // For example, if an intranet page has a hyperlink to an external web
2497     // site, we don't want to include the Origin of the request because it
2498     // will leak the internal host name. Similar privacy concerns have lead
2499     // to the widespread suppression of the Referer header at the network
2500     // layer.
2501     if (request.httpMethod() == "GET" || request.httpMethod() == "HEAD")
2502         return;
2503
2504     // For non-GET and non-HEAD methods, always send an Origin header so the
2505     // server knows we support this feature.
2506
2507     if (origin.isEmpty()) {
2508         // If we don't know what origin header to attach, we attach the value
2509         // for an empty origin.
2510         request.setHTTPOrigin(SecurityOrigin::createUnique()->toString());
2511         return;
2512     }
2513
2514     request.setHTTPOrigin(origin);
2515 }
2516
2517 void FrameLoader::loadPostRequest(const ResourceRequest& inRequest, const String& referrer, const String& frameName, bool lockHistory, FrameLoadType loadType, PassRefPtr<Event> event, PassRefPtr<FormState> prpFormState)
2518 {
2519     RefPtr<FormState> formState = prpFormState;
2520
2521     // Previously when this method was reached, the original FrameLoadRequest had been deconstructed to build a 
2522     // bunch of parameters that would come in here and then be built back up to a ResourceRequest.  In case
2523     // any caller depends on the immutability of the original ResourceRequest, I'm rebuilding a ResourceRequest
2524     // from scratch as it did all along.
2525     const KURL& url = inRequest.url();
2526     RefPtr<FormData> formData = inRequest.httpBody();
2527     const String& contentType = inRequest.httpContentType();
2528     String origin = inRequest.httpOrigin();
2529
2530     ResourceRequest workingResourceRequest(url);    
2531
2532     if (!referrer.isEmpty())
2533         workingResourceRequest.setHTTPReferrer(referrer);
2534     workingResourceRequest.setHTTPOrigin(origin);
2535     workingResourceRequest.setHTTPMethod("POST");
2536     workingResourceRequest.setHTTPBody(formData);
2537     workingResourceRequest.setHTTPContentType(contentType);
2538     addExtraFieldsToRequest(workingResourceRequest, loadType, true);
2539
2540     NavigationAction action(workingResourceRequest, loadType, true, event);
2541
2542     if (!frameName.isEmpty()) {
2543         // The search for a target frame is done earlier in the case of form submission.
2544         if (Frame* targetFrame = formState ? 0 : findFrameForNavigation(frameName))
2545             targetFrame->loader()->loadWithNavigationAction(workingResourceRequest, action, lockHistory, loadType, formState.release());
2546         else
2547             policyChecker()->checkNewWindowPolicy(action, FrameLoader::callContinueLoadAfterNewWindowPolicy, workingResourceRequest, formState.release(), frameName, this);
2548     } else {
2549         // must grab this now, since this load may stop the previous load and clear this flag
2550         bool isRedirect = m_quickRedirectComing;
2551         loadWithNavigationAction(workingResourceRequest, action, lockHistory, loadType, formState.release());    
2552         if (isRedirect) {
2553             m_quickRedirectComing = false;
2554             if (m_provisionalDocumentLoader)
2555                 m_provisionalDocumentLoader->setIsClientRedirect(true);
2556         }
2557     }
2558 }
2559
2560 unsigned long FrameLoader::loadResourceSynchronously(const ResourceRequest& request, StoredCredentials storedCredentials, ResourceError& error, ResourceResponse& response, Vector<char>& data)
2561 {
2562     ASSERT(m_frame->document());
2563     String referrer = SecurityPolicy::generateReferrerHeader(m_frame->document()->referrerPolicy(), request.url(), outgoingReferrer());
2564     
2565     ResourceRequest initialRequest = request;
2566     initialRequest.setTimeoutInterval(10);
2567     
2568     if (!referrer.isEmpty())
2569         initialRequest.setHTTPReferrer(referrer);
2570     addHTTPOriginIfNeeded(initialRequest, outgoingOrigin());
2571
2572     if (Page* page = m_frame->page())
2573         initialRequest.setFirstPartyForCookies(page->mainFrame()->loader()->documentLoader()->request().url());
2574     
2575     addExtraFieldsToSubresourceRequest(initialRequest);
2576
2577     unsigned long identifier = 0;    
2578     ResourceRequest newRequest(initialRequest);
2579     requestFromDelegate(newRequest, identifier, error);
2580
2581     if (error.isNull()) {
2582         ASSERT(!newRequest.isNull());
2583         
2584         if (!documentLoader()->applicationCacheHost()->maybeLoadSynchronously(newRequest, error, response, data)) {
2585 #if USE(PLATFORM_STRATEGIES)
2586             platformStrategies()->loaderStrategy()->loadResourceSynchronously(networkingContext(), identifier, newRequest, storedCredentials, error, response, data);
2587 #else
2588             ResourceHandle::loadResourceSynchronously(networkingContext(), newRequest, storedCredentials, error, response, data);
2589 #endif
2590             documentLoader()->applicationCacheHost()->maybeLoadFallbackSynchronously(newRequest, error, response, data);
2591         }
2592     }
2593     int encodedDataLength = response.resourceLoadInfo() ? static_cast<int>(response.resourceLoadInfo()->encodedDataLength) : -1;
2594     notifier()->sendRemainingDelegateMessages(m_documentLoader.get(), identifier, response, data.data(), data.size(), encodedDataLength, error);
2595     return identifier;
2596 }
2597
2598 const ResourceRequest& FrameLoader::originalRequest() const
2599 {
2600     return activeDocumentLoader()->originalRequestCopy();
2601 }
2602
2603 void FrameLoader::receivedMainResourceError(const ResourceError& error)
2604 {
2605     // Retain because the stop may release the last reference to it.
2606     RefPtr<Frame> protect(m_frame);
2607
2608     RefPtr<DocumentLoader> loader = activeDocumentLoader();
2609     // FIXME: Don't want to do this if an entirely new load is going, so should check
2610     // that both data sources on the frame are either this or nil.
2611     stop();
2612     if (m_client->shouldFallBack(error))
2613         handleFallbackContent();
2614
2615     if (m_state == FrameStateProvisional && m_provisionalDocumentLoader) {
2616         if (m_submittedFormURL == m_provisionalDocumentLoader->originalRequestCopy().url())
2617             m_submittedFormURL = KURL();
2618             
2619         // We might have made a page cache item, but now we're bailing out due to an error before we ever
2620         // transitioned to the new page (before WebFrameState == commit).  The goal here is to restore any state
2621         // so that the existing view (that wenever got far enough to replace) can continue being used.
2622         history()->invalidateCurrentItemCachedPage();
2623         
2624         // Call clientRedirectCancelledOrFinished here so that the frame load delegate is notified that the redirect's
2625         // status has changed, if there was a redirect. The frame load delegate may have saved some state about
2626         // the redirect in its -webView:willPerformClientRedirectToURL:delay:fireDate:forFrame:. Since we are definitely
2627         // not going to use this provisional resource, as it was cancelled, notify the frame load delegate that the redirect
2628         // has ended.
2629         if (m_sentRedirectNotification)
2630             clientRedirectCancelledOrFinished(false);
2631     }
2632
2633     checkCompleted();
2634     if (m_frame->page())
2635         checkLoadComplete();
2636 }
2637
2638 void FrameLoader::callContinueFragmentScrollAfterNavigationPolicy(void* argument,
2639     const ResourceRequest& request, PassRefPtr<FormState>, bool shouldContinue)
2640 {
2641     FrameLoader* loader = static_cast<FrameLoader*>(argument);
2642     loader->continueFragmentScrollAfterNavigationPolicy(request, shouldContinue);
2643 }
2644
2645 void FrameLoader::continueFragmentScrollAfterNavigationPolicy(const ResourceRequest& request, bool shouldContinue)
2646 {
2647     m_quickRedirectComing = false;
2648
2649     if (!shouldContinue)
2650         return;
2651
2652     // If we have a provisional request for a different document, a fragment scroll should cancel it.
2653     if (m_provisionalDocumentLoader && !equalIgnoringFragmentIdentifier(m_provisionalDocumentLoader->request().url(), request.url())) {
2654         m_provisionalDocumentLoader->stopLoading();
2655         setProvisionalDocumentLoader(0);
2656     }
2657
2658     bool isRedirect = m_quickRedirectComing || policyChecker()->loadType() == FrameLoadTypeRedirectWithLockedBackForwardList;    
2659     loadInSameDocument(request.url(), 0, !isRedirect);
2660 }
2661
2662 bool FrameLoader::shouldPerformFragmentNavigation(bool isFormSubmission, const String& httpMethod, FrameLoadType loadType, const KURL& url)
2663 {
2664     // We don't do this if we are submitting a form with method other than "GET", explicitly reloading,
2665     // currently displaying a frameset, or if the URL does not have a fragment.
2666     // These rules were originally based on what KHTML was doing in KHTMLPart::openURL.
2667
2668     // FIXME: What about load types other than Standard and Reload?
2669
2670     return (!isFormSubmission || equalIgnoringCase(httpMethod, "GET"))
2671         && loadType != FrameLoadTypeReload
2672         && loadType != FrameLoadTypeReloadFromOrigin
2673         && loadType != FrameLoadTypeSame
2674         && !shouldReload(m_frame->document()->url(), url)
2675         // We don't want to just scroll if a link from within a
2676         // frameset is trying to reload the frameset into _top.
2677         && !m_frame->document()->isFrameSet();
2678 }
2679
2680 void FrameLoader::scrollToFragmentWithParentBoundary(const KURL& url)
2681 {
2682     FrameView* view = m_frame->view();
2683     if (!view)
2684         return;
2685
2686     // Leaking scroll position to a cross-origin ancestor would permit the so-called "framesniffing" attack.
2687     RefPtr<Frame> boundaryFrame(url.hasFragmentIdentifier() ? m_frame->document()->findUnsafeParentScrollPropagationBoundary() : 0);
2688
2689     if (boundaryFrame)
2690         boundaryFrame->view()->setSafeToPropagateScrollToParent(false);
2691
2692     view->scrollToFragment(url);
2693
2694     if (boundaryFrame)
2695         boundaryFrame->view()->setSafeToPropagateScrollToParent(true);
2696 }
2697
2698 void FrameLoader::callContinueLoadAfterNavigationPolicy(void* argument,
2699     const ResourceRequest& request, PassRefPtr<FormState> formState, bool shouldContinue)
2700 {
2701     FrameLoader* loader = static_cast<FrameLoader*>(argument);
2702     loader->continueLoadAfterNavigationPolicy(request, formState, shouldContinue);
2703 }
2704
2705 bool FrameLoader::shouldClose()
2706 {
2707     Page* page = m_frame->page();
2708     Chrome* chrome = page ? page->chrome() : 0;
2709     if (!chrome || !chrome->canRunBeforeUnloadConfirmPanel())
2710         return true;
2711
2712     // Store all references to each subframe in advance since beforeunload's event handler may modify frame
2713     Vector<RefPtr<Frame> > targetFrames;
2714     targetFrames.append(m_frame);
2715     for (Frame* child = m_frame->tree()->firstChild(); child; child = child->tree()->traverseNext(m_frame))
2716         targetFrames.append(child);
2717
2718     bool shouldClose = false;
2719     {
2720         NavigationDisablerForBeforeUnload navigationDisabler;
2721         size_t i;
2722
2723         for (i = 0; i < targetFrames.size(); i++) {
2724             if (!targetFrames[i]->tree()->isDescendantOf(m_frame))
2725                 continue;
2726             if (!targetFrames[i]->loader()->fireBeforeUnloadEvent(chrome))
2727                 break;
2728         }
2729
2730         if (i == targetFrames.size())
2731             shouldClose = true;
2732     }
2733
2734     if (!shouldClose)
2735         m_submittedFormURL = KURL();
2736
2737     return shouldClose;
2738 }
2739
2740 bool FrameLoader::fireBeforeUnloadEvent(Chrome* chrome)
2741 {
2742     DOMWindow* domWindow = m_frame->document()->domWindow();
2743     if (!domWindow)
2744         return true;
2745
2746     RefPtr<Document> document = m_frame->document();
2747     if (!document->body())
2748         return true;
2749
2750     RefPtr<BeforeUnloadEvent> beforeUnloadEvent = BeforeUnloadEvent::create();
2751     m_pageDismissalEventBeingDispatched = BeforeUnloadDismissal;
2752     domWindow->dispatchEvent(beforeUnloadEvent.get(), domWindow->document());
2753     m_pageDismissalEventBeingDispatched = NoDismissal;
2754
2755     if (!beforeUnloadEvent->defaultPrevented())
2756         document->defaultEventHandler(beforeUnloadEvent.get());
2757     if (beforeUnloadEvent->result().isNull())
2758         return true;
2759
2760     String text = document->displayStringModifiedByEncoding(beforeUnloadEvent->result());
2761     return chrome->runBeforeUnloadConfirmPanel(text, m_frame);
2762 }
2763
2764 void FrameLoader::continueLoadAfterNavigationPolicy(const ResourceRequest&, PassRefPtr<FormState> formState, bool shouldContinue)
2765 {
2766     // If we loaded an alternate page to replace an unreachableURL, we'll get in here with a
2767     // nil policyDataSource because loading the alternate page will have passed
2768     // through this method already, nested; otherwise, policyDataSource should still be set.
2769     ASSERT(m_policyDocumentLoader || !m_provisionalDocumentLoader->unreachableURL().isEmpty());
2770
2771     bool isTargetItem = history()->provisionalItem() ? history()->provisionalItem()->isTargetItem() : false;
2772
2773     // Two reasons we can't continue:
2774     //    1) Navigation policy delegate said we can't so request is nil. A primary case of this 
2775     //       is the user responding Cancel to the form repost nag sheet.
2776     //    2) User responded Cancel to an alert popped up by the before unload event handler.
2777     bool canContinue = shouldContinue && shouldClose();
2778
2779     if (!canContinue) {
2780         // If we were waiting for a quick redirect, but the policy delegate decided to ignore it, then we 
2781         // need to report that the client redirect was cancelled.
2782         if (m_quickRedirectComing)
2783             clientRedirectCancelledOrFinished(false);
2784
2785         setPolicyDocumentLoader(0);
2786
2787         // If the navigation request came from the back/forward menu, and we punt on it, we have the 
2788         // problem that we have optimistically moved the b/f cursor already, so move it back.  For sanity, 
2789         // we only do this when punting a navigation for the target frame or top-level frame.  
2790         if ((isTargetItem || isLoadingMainFrame()) && isBackForwardLoadType(policyChecker()->loadType())) {
2791             if (Page* page = m_frame->page()) {
2792                 Frame* mainFrame = page->mainFrame();
2793                 if (HistoryItem* resetItem = mainFrame->loader()->history()->currentItem()) {
2794                     page->backForward()->setCurrentItem(resetItem);
2795                     m_frame->loader()->client()->updateGlobalHistoryItemForPage();
2796                 }
2797             }
2798         }
2799         return;
2800     }
2801
2802     FrameLoadType type = policyChecker()->loadType();
2803     // A new navigation is in progress, so don't clear the history's provisional item.
2804     stopAllLoaders(ShouldNotClearProvisionalItem);
2805     
2806     // <rdar://problem/6250856> - In certain circumstances on pages with multiple frames, stopAllLoaders()
2807     // might detach the current FrameLoader, in which case we should bail on this newly defunct load. 
2808     if (!m_frame->page())
2809         return;
2810
2811 #if ENABLE(JAVASCRIPT_DEBUGGER) && ENABLE(INSPECTOR)
2812     if (Page* page = m_frame->page()) {
2813         if (page->mainFrame() == m_frame)
2814             m_frame->page()->inspectorController()->resume();
2815     }
2816 #endif
2817
2818     setProvisionalDocumentLoader(m_policyDocumentLoader.get());
2819     m_loadType = type;
2820     setState(FrameStateProvisional);
2821
2822     setPolicyDocumentLoader(0);
2823
2824     if (isBackForwardLoadType(type) && history()->provisionalItem()->isInPageCache()) {
2825         loadProvisionalItemFromCachedPage();
2826         return;
2827     }
2828
2829     if (formState)
2830         m_client->dispatchWillSubmitForm(&PolicyChecker::continueLoadAfterWillSubmitForm, formState);
2831     else
2832         continueLoadAfterWillSubmitForm();
2833 }
2834
2835 void FrameLoader::callContinueLoadAfterNewWindowPolicy(void* argument,
2836     const ResourceRequest& request, PassRefPtr<FormState> formState, const String& frameName, const NavigationAction& action, bool shouldContinue)
2837 {
2838     FrameLoader* loader = static_cast<FrameLoader*>(argument);
2839     loader->continueLoadAfterNewWindowPolicy(request, formState, frameName, action, shouldContinue);
2840 }
2841
2842 void FrameLoader::continueLoadAfterNewWindowPolicy(const ResourceRequest& request,
2843     PassRefPtr<FormState> formState, const String& frameName, const NavigationAction& action, bool shouldContinue)
2844 {
2845     if (!shouldContinue)
2846         return;
2847
2848     RefPtr<Frame> frame = m_frame;
2849     RefPtr<Frame> mainFrame = m_client->dispatchCreatePage(action);
2850     if (!mainFrame)
2851         return;
2852
2853     if (frameName != "_blank")
2854         mainFrame->tree()->setName(frameName);
2855
2856     mainFrame->page()->setOpenedByDOM();
2857     mainFrame->loader()->m_client->dispatchShow();
2858     if (!m_suppressOpenerInNewFrame) {
2859         mainFrame->loader()->setOpener(frame.get());
2860         mainFrame->document()->setReferrerPolicy(frame->document()->referrerPolicy());
2861     }
2862     mainFrame->loader()->loadWithNavigationAction(request, NavigationAction(request), false, FrameLoadTypeStandard, formState);
2863 }
2864
2865 void FrameLoader::requestFromDelegate(ResourceRequest& request, unsigned long& identifier, ResourceError& error)
2866 {
2867     ASSERT(!request.isNull());
2868
2869     identifier = 0;
2870     if (Page* page = m_frame->page()) {
2871         identifier = page->progress()->createUniqueIdentifier();
2872         notifier()->assignIdentifierToInitialRequest(identifier, m_documentLoader.get(), request);
2873     }
2874
2875     ResourceRequest newRequest(request);
2876     notifier()->dispatchWillSendRequest(m_documentLoader.get(), identifier, newRequest, ResourceResponse());
2877
2878     if (newRequest.isNull())
2879         error = cancelledError(request);
2880     else
2881         error = ResourceError();
2882
2883     request = newRequest;
2884 }
2885
2886 void FrameLoader::loadedResourceFromMemoryCache(CachedResource* resource)
2887 {
2888     Page* page = m_frame->page();
2889     if (!page)
2890         return;
2891
2892     if (!resource->shouldSendResourceLoadCallbacks() || m_documentLoader->haveToldClientAboutLoad(resource->url()))
2893         return;
2894
2895     // Main resource delegate messages are synthesized in MainResourceLoader, so we must not send them here.
2896     if (resource->type() == CachedResource::MainResource)
2897         return;
2898
2899     if (!page->areMemoryCacheClientCallsEnabled()) {
2900         InspectorInstrumentation::didLoadResourceFromMemoryCache(page, m_documentLoader.get(), resource);
2901         m_documentLoader->recordMemoryCacheLoadForFutureClientNotification(resource->resourceRequest());
2902         m_documentLoader->didTellClientAboutLoad(resource->url());
2903         return;
2904     }
2905
2906     ResourceRequest request(resource->url());
2907     if (m_client->dispatchDidLoadResourceFromMemoryCache(m_documentLoader.get(), request, resource->response(), resource->encodedSize())) {
2908         InspectorInstrumentation::didLoadResourceFromMemoryCache(page, m_documentLoader.get(), resource);
2909         m_documentLoader->didTellClientAboutLoad(resource->url());
2910         return;
2911     }
2912
2913     unsigned long identifier;
2914     ResourceError error;
2915     requestFromDelegate(request, identifier, error);
2916     InspectorInstrumentation::markResourceAsCached(page, identifier);
2917     notifier()->sendRemainingDelegateMessages(m_documentLoader.get(), identifier, resource->response(), 0, resource->encodedSize(), 0, error);
2918 }
2919
2920 void FrameLoader::applyUserAgent(ResourceRequest& request)
2921 {
2922     String userAgent = this->userAgent(request.url());
2923     ASSERT(!userAgent.isNull());
2924     request.setHTTPUserAgent(userAgent);
2925 }
2926
2927 bool FrameLoader::shouldInterruptLoadForXFrameOptions(const String& content, const KURL& url, unsigned long requestIdentifier)
2928 {
2929     Frame* topFrame = m_frame->tree()->top();
2930     if (m_frame == topFrame)
2931         return false;
2932
2933     if (equalIgnoringCase(content, "deny"))
2934         return true;
2935     else if (equalIgnoringCase(content, "sameorigin")) {
2936         RefPtr<SecurityOrigin> origin = SecurityOrigin::create(url);
2937         if (!origin->isSameSchemeHostPort(topFrame->document()->securityOrigin()))
2938             return true;
2939     } else if (!equalIgnoringCase(content, "allowall")) {
2940         String message = "Invalid 'X-Frame-Options' header encountered when loading '" + url.string() + "': '" + content + "' is not a recognized directive. The header will be ignored.";
2941         m_frame->document()->addConsoleMessage(JSMessageSource, ErrorMessageLevel, message, requestIdentifier);
2942     }
2943
2944     return false;
2945 }
2946
2947 void FrameLoader::loadProvisionalItemFromCachedPage()
2948 {
2949     DocumentLoader* provisionalLoader = provisionalDocumentLoader();
2950     LOG(PageCache, "WebCorePageCache: Loading provisional DocumentLoader %p with URL '%s' from CachedPage", provisionalDocumentLoader(), provisionalDocumentLoader()->url().string().utf8().data());
2951
2952     prepareForLoadStart();
2953
2954     m_loadingFromCachedPage = true;
2955
2956     // Should have timing data from previous time(s) the page was shown.
2957     ASSERT(provisionalLoader->timing()->navigationStart());
2958     provisionalLoader->resetTiming();
2959     provisionalLoader->timing()->markNavigationStart();
2960
2961     provisionalLoader->setCommitted(true);
2962     commitProvisionalLoad();
2963 }
2964
2965 bool FrameLoader::shouldTreatURLAsSameAsCurrent(const KURL& url) const
2966 {
2967     if (!history()->currentItem())
2968         return false;
2969     return url == history()->currentItem()->url() || url == history()->currentItem()->originalURL();
2970 }
2971
2972 bool FrameLoader::shouldTreatURLAsSrcdocDocument(const KURL& url) const
2973 {
2974     if (!equalIgnoringCase(url.string(), "about:srcdoc"))
2975         return false;
2976     HTMLFrameOwnerElement* ownerElement = m_frame->ownerElement();
2977     if (!ownerElement)
2978         return false;
2979     if (!ownerElement->hasTagName(iframeTag))
2980         return false;
2981     return ownerElement->fastHasAttribute(srcdocAttr);
2982 }
2983
2984 void FrameLoader::checkDidPerformFirstNavigation()
2985 {
2986     Page* page = m_frame->page();
2987     if (!page)
2988         return;
2989
2990     if (!m_didPerformFirstNavigation && page->backForward()->currentItem() && !page->backForward()->backItem() && !page->backForward()->forwardItem()) {
2991         m_didPerformFirstNavigation = true;
2992         m_client->didPerformFirstNavigation();
2993     }
2994 }
2995
2996 Frame* FrameLoader::findFrameForNavigation(const AtomicString& name, Document* activeDocument)
2997 {
2998     Frame* frame = m_frame->tree()->find(name);
2999
3000     // From http://www.whatwg.org/specs/web-apps/current-work/#seamlessLinks:
3001     //
3002     // If the source browsing context is the same as the browsing context
3003     // being navigated, and this browsing context has its seamless browsing
3004     // context flag set, and the browsing context being navigated was not
3005     // chosen using an explicit self-navigation override, then find the
3006     // nearest ancestor browsing context that does not have its seamless
3007     // browsing context flag set, and continue these steps as if that
3008     // browsing context was the one that was going to be navigated instead.
3009     if (frame == m_frame && name != "_self" && m_frame->document()->shouldDisplaySeamlesslyWithParent()) {
3010         for (Frame* ancestor = m_frame; ancestor; ancestor = ancestor->tree()->parent()) {
3011             if (!ancestor->document()->shouldDisplaySeamlesslyWithParent()) {
3012                 frame = ancestor;
3013                 break;
3014             }
3015         }
3016         ASSERT(frame != m_frame);
3017     }
3018
3019     if (activeDocument) {
3020         if (!activeDocument->canNavigate(frame))
3021             return 0;
3022     } else {
3023         // FIXME: Eventually all callers should supply the actual activeDocument
3024         // so we can call canNavigate with the right document.
3025         if (!m_frame->document()->canNavigate(frame))
3026             return 0;
3027     }
3028
3029     return frame;
3030 }
3031
3032 void FrameLoader::loadSameDocumentItem(HistoryItem* item)
3033 {
3034     ASSERT(item->documentSequenceNumber() == history()->currentItem()->documentSequenceNumber());
3035
3036     // Save user view state to the current history item here since we don't do a normal load.
3037     // FIXME: Does form state need to be saved here too?
3038     history()->saveScrollPositionAndViewStateToItem(history()->currentItem());
3039     if (FrameView* view = m_frame->view())
3040         view->setWasScrolledByUser(false);
3041
3042     history()->setCurrentItem(item);
3043         
3044     // loadInSameDocument() actually changes the URL and notifies load delegates of a "fake" load
3045     loadInSameDocument(item->url(), item->stateObject(), false);
3046
3047     // Restore user view state from the current history item here since we don't do a normal load.
3048     history()->restoreScrollPositionAndViewState();
3049 }
3050
3051 // FIXME: This function should really be split into a couple pieces, some of
3052 // which should be methods of HistoryController and some of which should be
3053 // methods of FrameLoader.
3054 void FrameLoader::loadDifferentDocumentItem(HistoryItem* item, FrameLoadType loadType, FormSubmissionCacheLoadPolicy cacheLoadPolicy)
3055 {
3056     // Remember this item so we can traverse any child items as child frames load
3057     history()->setProvisionalItem(item);
3058
3059     if (CachedPage* cachedPage = pageCache()->get(item)) {
3060         loadWithDocumentLoader(cachedPage->documentLoader(), loadType, 0);   
3061         return;
3062     }
3063
3064     KURL itemURL = item->url();
3065     KURL itemOriginalURL = item->originalURL();
3066     KURL currentURL;
3067     if (documentLoader())
3068         currentURL = documentLoader()->url();
3069     RefPtr<FormData> formData = item->formData();
3070
3071     ResourceRequest request(itemURL);
3072
3073     if (!item->referrer().isNull())
3074         request.setHTTPReferrer(item->referrer());
3075     
3076     // If this was a repost that failed the page cache, we might try to repost the form.
3077     NavigationAction action;
3078     if (formData) {
3079         formData->generateFiles(m_frame->document());
3080
3081         request.setHTTPMethod("POST");
3082         request.setHTTPBody(formData);
3083         request.setHTTPContentType(item->formContentType());
3084         RefPtr<SecurityOrigin> securityOrigin = SecurityOrigin::createFromString(item->referrer());
3085         addHTTPOriginIfNeeded(request, securityOrigin->toString());
3086
3087         // Make sure to add extra fields to the request after the Origin header is added for the FormData case.
3088         // See https://bugs.webkit.org/show_bug.cgi?id=22194 for more discussion.
3089         addExtraFieldsToRequest(request, loadType, true);
3090         
3091         // FIXME: Slight hack to test if the NSURL cache contains the page we're going to.
3092         // We want to know this before talking to the policy delegate, since it affects whether 
3093         // we show the DoYouReallyWantToRepost nag.
3094         //
3095         // This trick has a small bug (3123893) where we might find a cache hit, but then
3096         // have the item vanish when we try to use it in the ensuing nav.  This should be
3097         // extremely rare, but in that case the user will get an error on the navigation.
3098         
3099         if (cacheLoadPolicy == MayAttemptCacheOnlyLoadForFormSubmissionItem) {
3100             request.setCachePolicy(ReturnCacheDataDontLoad);
3101             action = NavigationAction(request, loadType, false);
3102         } else {
3103             request.setCachePolicy(ReturnCacheDataElseLoad);
3104             action = NavigationAction(request, NavigationTypeFormResubmitted);
3105         }
3106     } else {
3107         switch (loadType) {
3108             case FrameLoadTypeReload:
3109             case FrameLoadTypeReloadFromOrigin:
3110                 request.setCachePolicy(ReloadIgnoringCacheData);
3111                 break;
3112             case FrameLoadTypeBack:
3113             case FrameLoadTypeForward:
3114             case FrameLoadTypeIndexedBackForward:
3115                 // If the first load within a frame is a navigation within a back/forward list that was attached 
3116                 // without any of the items being loaded then we should use the default caching policy (<rdar://problem/8131355>).
3117                 if (m_stateMachine.committedFirstRealDocumentLoad())
3118                     request.setCachePolicy(ReturnCacheDataElseLoad);
3119                 break;
3120             case FrameLoadTypeStandard:
3121             case FrameLoadTypeRedirectWithLockedBackForwardList:
3122                 break;
3123             case FrameLoadTypeSame:
3124             default:
3125                 ASSERT_NOT_REACHED();
3126         }
3127
3128         addExtraFieldsToRequest(request, loadType, true);
3129
3130         ResourceRequest requestForOriginalURL(request);
3131         requestForOriginalURL.setURL(itemOriginalURL);
3132         action = NavigationAction(requestForOriginalURL, loadType, false);
3133     }
3134
3135     loadWithNavigationAction(request, action, false, loadType, 0);
3136 }
3137
3138 // Loads content into this frame, as specified by history item
3139 void FrameLoader::loadItem(HistoryItem* item, FrameLoadType loadType)
3140 {
3141     m_requestedHistoryItem = item;
3142     HistoryItem* currentItem = history()->currentItem();
3143     bool sameDocumentNavigation = currentItem && item->shouldDoSameDocumentNavigationTo(currentItem);
3144
3145     if (sameDocumentNavigation)
3146         loadSameDocumentItem(item);
3147     else
3148         loadDifferentDocumentItem(item, loadType, MayAttemptCacheOnlyLoadForFormSubmissionItem);
3149 }
3150
3151 void FrameLoader::retryAfterFailedCacheOnlyMainResourceLoad()
3152 {
3153     ASSERT(m_state == FrameStateProvisional);
3154     ASSERT(!m_loadingFromCachedPage);
3155     // We only use cache-only loads to avoid resubmitting forms.
3156     ASSERT(isBackForwardLoadType(m_loadType));
3157     ASSERT(m_history.provisionalItem()->formData());
3158     ASSERT(m_history.provisionalItem() == m_requestedHistoryItem.get());
3159
3160     FrameLoadType loadType = m_loadType;
3161     HistoryItem* item = m_history.provisionalItem();
3162
3163     stopAllLoaders(ShouldNotClearProvisionalItem);
3164     loadDifferentDocumentItem(item, loadType, MayNotAttemptCacheOnlyLoadForFormSubmissionItem);
3165 }
3166
3167 ResourceError FrameLoader::cancelledError(const ResourceRequest& request) const
3168 {
3169     ResourceError error = m_client->cancelledError(request);
3170     error.setIsCancellation(true);
3171     return error;
3172 }
3173
3174 void FrameLoader::setTitle(const StringWithDirection& title)
3175 {
3176     documentLoader()->setTitle(title);
3177 }
3178
3179 String FrameLoader::referrer() const
3180 {
3181     return m_documentLoader ? m_documentLoader->request().httpReferrer() : "";
3182 }
3183
3184 void FrameLoader::dispatchDocumentElementAvailable()
3185 {
3186     m_frame->injectUserScripts(InjectAtDocumentStart);
3187     m_client->documentElementAvailable();
3188 }
3189
3190 void FrameLoader::dispatchDidClearWindowObjectsInAllWorlds()
3191 {
3192     if (!m_frame->script()->canExecuteScripts(NotAboutToExecuteScript))
3193         return;
3194
3195     Vector<RefPtr<DOMWrapperWorld> > worlds;
3196     ScriptController::getAllWorlds(worlds);
3197     for (size_t i = 0; i < worlds.size(); ++i)
3198         dispatchDidClearWindowObjectInWorld(worlds[i].get());
3199 }
3200
3201 void FrameLoader::dispatchDidClearWindowObjectInWorld(DOMWrapperWorld* world)
3202 {
3203     if (!m_frame->script()->canExecuteScripts(NotAboutToExecuteScript) || !m_frame->script()->existingWindowShell(world))
3204         return;
3205
3206     m_client->dispatchDidClearWindowObjectInWorld(world);
3207
3208 #if ENABLE(INSPECTOR)
3209     if (Page* page = m_frame->page())
3210         page->inspectorController()->didClearWindowObjectInWorld(m_frame, world);
3211 #endif
3212
3213     InspectorInstrumentation::didClearWindowObjectInWorld(m_frame, world);
3214 }
3215
3216 void FrameLoader::dispatchGlobalObjectAvailableInAllWorlds()
3217 {
3218     Vector<RefPtr<DOMWrapperWorld> > worlds;
3219     ScriptController::getAllWorlds(worlds);
3220     for (size_t i = 0; i < worlds.size(); ++i)
3221         m_client->dispatchGlobalObjectAvailable(worlds[i].get());
3222 }
3223
3224 SandboxFlags FrameLoader::effectiveSandboxFlags() const
3225 {
3226     SandboxFlags flags = m_forcedSandboxFlags;
3227     if (Frame* parentFrame = m_frame->tree()->parent())
3228         flags |= parentFrame->document()->sandboxFlags();
3229     if (HTMLFrameOwnerElement* ownerElement = m_frame->ownerElement())
3230         flags |= ownerElement->sandboxFlags();
3231     return flags;
3232 }
3233
3234 void FrameLoader::didChangeTitle(DocumentLoader* loader)
3235 {
3236     m_client->didChangeTitle(loader);
3237
3238     if (loader == m_documentLoader) {
3239         // Must update the entries in the back-forward list too.
3240         history()->setCurrentItemTitle(loader->title());
3241         // This must go through the WebFrame because it has the right notion of the current b/f item.
3242         m_client->setTitle(loader->title(), loader->urlForHistory());
3243         m_client->setMainFrameDocumentReady(true); // update observers with new DOMDocument
3244         m_client->dispatchDidReceiveTitle(loader->title());
3245     }
3246 }
3247
3248 void FrameLoader::didChangeIcons(IconType type)
3249 {
3250     m_client->dispatchDidChangeIcons(type);
3251 }
3252
3253 void FrameLoader::dispatchDidCommitLoad()
3254 {
3255     if (m_stateMachine.creatingInitialEmptyDocument())
3256         return;
3257
3258     m_client->dispatchDidCommitLoad();
3259
3260     if (isLoadingMainFrame()) {
3261         m_frame->page()->resetSeenPlugins();
3262         m_frame->page()->resetSeenMediaEngines();
3263     }
3264
3265     InspectorInstrumentation::didCommitLoad(m_frame, m_documentLoader.get());
3266
3267     if (m_frame->page()->mainFrame() == m_frame)
3268         m_frame->page()->featureObserver()->didCommitLoad();
3269
3270 }
3271
3272 void FrameLoader::tellClientAboutPastMemoryCacheLoads()
3273 {
3274     ASSERT(m_frame->page());
3275     ASSERT(m_frame->page()->areMemoryCacheClientCallsEnabled());
3276
3277     if (!m_documentLoader)
3278         return;
3279
3280     Vector<ResourceRequest> pastLoads;
3281     m_documentLoader->takeMemoryCacheLoadsForClientNotification(pastLoads);
3282
3283     size_t size = pastLoads.size();
3284     for (size_t i = 0; i < size; ++i) {
3285         CachedResource* resource = memoryCache()->resourceForRequest(pastLoads[i]);
3286
3287         // FIXME: These loads, loaded from cache, but now gone from the cache by the time
3288         // Page::setMemoryCacheClientCallsEnabled(true) is called, will not be seen by the client.
3289         // Consider if there's some efficient way of remembering enough to deliver this client call.
3290         // We have the URL, but not the rest of the response or the length.
3291         if (!resource)
3292             continue;
3293
3294         ResourceRequest request(resource->url());
3295         m_client->dispatchDidLoadResourceFromMemoryCache(m_documentLoader.get(), request, resource->response(), resource->encodedSize());
3296     }
3297 }
3298
3299 NetworkingContext* FrameLoader::networkingContext() const
3300 {
3301     return m_networkingContext.get();
3302 }
3303
3304 void FrameLoader::reportMemoryUsage(MemoryObjectInfo* memoryObjectInfo) const
3305 {
3306     MemoryClassInfo info(memoryObjectInfo, this, WebCoreMemoryTypes::Loader);
3307     info.addMember(m_frame, "frame");
3308     info.ignoreMember(m_client);
3309     info.addMember(m_progressTracker, "progressTracker");
3310     info.addMember(m_documentLoader, "documentLoader");
3311     info.addMember(m_provisionalDocumentLoader, "provisionalDocumentLoader");
3312     info.addMember(m_policyDocumentLoader, "policyDocumentLoader");
3313     info.addMember(m_pendingStateObject, "pendingStateObject");
3314     info.addMember(m_submittedFormURL, "submittedFormURL");
3315     info.addMember(m_checkTimer, "checkTimer");
3316     info.addMember(m_opener, "opener");
3317     info.addMember(m_openedFrames, "openedFrames");
3318     info.addMember(m_outgoingReferrer, "outgoingReferrer");
3319     info.addMember(m_networkingContext, "networkingContext");
3320     info.addMember(m_previousUrl, "previousUrl");
3321     info.addMember(m_requestedHistoryItem, "requestedHistoryItem");
3322 }
3323
3324 bool FrameLoaderClient::hasHTMLView() const
3325 {
3326     return true;
3327 }
3328
3329 Frame* createWindow(Frame* openerFrame, Frame* lookupFrame, const FrameLoadRequest& request, const WindowFeatures& features, bool& created)
3330 {
3331     ASSERT(!features.dialog || request.frameName().isEmpty());
3332
3333     if (!request.frameName().isEmpty() && request.frameName() != "_blank") {
3334         if (Frame* frame = lookupFrame->loader()->findFrameForNavigation(request.frameName(), openerFrame->document())) {
3335             if (Page* page = frame->page())
3336                 page->chrome()->focus();
3337             created = false;
3338             return frame;
3339         }
3340     }
3341
3342     // Sandboxed frames cannot open new auxiliary browsing contexts.
3343     if (isDocumentSandboxed(openerFrame, SandboxPopups)) {
3344         // FIXME: This message should be moved off the console once a solution to https://bugs.webkit.org/show_bug.cgi?id=103274 exists.
3345         openerFrame->document()->addConsoleMessage(HTMLMessageSource, ErrorMessageLevel, "Blocked opening '" + request.resourceRequest().url().string() + "' in a new window because the request was made in a sandboxed frame whose 'allow-popups' permission is not set.");
3346         return 0;
3347     }
3348
3349     // FIXME: Setting the referrer should be the caller's responsibility.
3350     FrameLoadRequest requestWithReferrer = request;
3351     String referrer = SecurityPolicy::generateReferrerHeader(openerFrame->document()->referrerPolicy(), request.resourceRequest().url(), openerFrame->loader()->outgoingReferrer());
3352     if (!referrer.isEmpty())
3353         requestWithReferrer.resourceRequest().setHTTPReferrer(referrer);
3354     FrameLoader::addHTTPOriginIfNeeded(requestWithReferrer.resourceRequest(), openerFrame->loader()->outgoingOrigin());
3355
3356     if (openerFrame->settings() && !openerFrame->settings()->supportsMultipleWindows()) {
3357         created = false;
3358         return openerFrame;
3359     }
3360
3361     Page* oldPage = openerFrame->page();
3362     if (!oldPage)
3363         return 0;
3364
3365     NavigationAction action(requestWithReferrer.resourceRequest());
3366     Page* page = oldPage->chrome()->createWindow(openerFrame, requestWithReferrer, features, action);
3367     if (!page)
3368         return 0;
3369
3370     Frame* frame = page->mainFrame();
3371
3372     frame->loader()->forceSandboxFlags(openerFrame->document()->sandboxFlags());
3373
3374     if (request.frameName() != "_blank")
3375         frame->tree()->setName(request.frameName());
3376
3377     page->chrome()->setToolbarsVisible(features.toolBarVisible || features.locationBarVisible);
3378     page->chrome()->setStatusbarVisible(features.statusBarVisible);
3379     page->chrome()->setScrollbarsVisible(features.scrollbarsVisible);
3380     page->chrome()->setMenubarVisible(features.menuBarVisible);
3381     page->chrome()->setResizable(features.resizable);
3382
3383     // 'x' and 'y' specify the location of the window, while 'width' and 'height'
3384     // specify the size of the viewport. We can only resize the window, so adjust
3385     // for the difference between the window size and the viewport size.
3386
3387     FloatRect windowRect = page->chrome()->windowRect();
3388     FloatSize viewportSize = page->chrome()->pageRect().size();
3389
3390     if (features.xSet)
3391         windowRect.setX(features.x);
3392     if (features.ySet)
3393         windowRect.setY(features.y);
3394     if (features.widthSet)
3395         windowRect.setWidth(features.width + (windowRect.width() - viewportSize.width()));
3396     if (features.heightSet)
3397         windowRect.setHeight(features.height + (windowRect.height() - viewportSize.height()));
3398
3399     // Ensure non-NaN values, minimum size as well as being within valid screen area.
3400     FloatRect newWindowRect = DOMWindow::adjustWindowRect(page, windowRect);
3401
3402     page->chrome()->setWindowRect(newWindowRect);
3403     page->chrome()->show();
3404
3405     created = true;
3406     return frame;
3407 }
3408
3409 } // namespace WebCore