941bd13ab07a9ddb0f46323e02b92f6b79315370
[WebKit-https.git] / Source / WebCore / loader / FrameLoader.cpp
1 /*
2  * Copyright (C) 2006, 2007, 2008, 2009, 2010, 2011 Apple Inc. All rights reserved.
3  * Copyright (C) 2008 Nokia Corporation and/or its subsidiary(-ies)
4  * Copyright (C) 2008, 2009 Torch Mobile Inc. All rights reserved. (http://www.torchmobile.com/)
5  * Copyright (C) 2008 Alp Toker <alp@atoker.com>
6  * Copyright (C) Research In Motion Limited 2009. All rights reserved.
7  * Copyright (C) 2011 Kris Jordan <krisjordan@gmail.com>
8  * Copyright (C) 2011 Google Inc. All rights reserved.
9  *
10  * Redistribution and use in source and binary forms, with or without
11  * modification, are permitted provided that the following conditions
12  * are met:
13  *
14  * 1.  Redistributions of source code must retain the above copyright
15  *     notice, this list of conditions and the following disclaimer. 
16  * 2.  Redistributions in binary form must reproduce the above copyright
17  *     notice, this list of conditions and the following disclaimer in the
18  *     documentation and/or other materials provided with the distribution. 
19  * 3.  Neither the name of Apple Computer, Inc. ("Apple") nor the names of
20  *     its contributors may be used to endorse or promote products derived
21  *     from this software without specific prior written permission. 
22  *
23  * THIS SOFTWARE IS PROVIDED BY APPLE AND ITS CONTRIBUTORS "AS IS" AND ANY
24  * EXPRESS OR IMPLIED WARRANTIES, INCLUDING, BUT NOT LIMITED TO, THE IMPLIED
25  * WARRANTIES OF MERCHANTABILITY AND FITNESS FOR A PARTICULAR PURPOSE ARE
26  * DISCLAIMED. IN NO EVENT SHALL APPLE OR ITS CONTRIBUTORS BE LIABLE FOR ANY
27  * DIRECT, INDIRECT, INCIDENTAL, SPECIAL, EXEMPLARY, OR CONSEQUENTIAL DAMAGES
28  * (INCLUDING, BUT NOT LIMITED TO, PROCUREMENT OF SUBSTITUTE GOODS OR SERVICES;
29  * LOSS OF USE, DATA, OR PROFITS; OR BUSINESS INTERRUPTION) HOWEVER CAUSED AND
30  * ON ANY THEORY OF LIABILITY, WHETHER IN CONTRACT, STRICT LIABILITY, OR TORT
31  * (INCLUDING NEGLIGENCE OR OTHERWISE) ARISING IN ANY WAY OUT OF THE USE OF
32  * THIS SOFTWARE, EVEN IF ADVISED OF THE POSSIBILITY OF SUCH DAMAGE.
33  */
34
35 #include "config.h"
36 #include "FrameLoader.h"
37
38 #include "AXObjectCache.h"
39 #include "ApplicationCacheHost.h"
40 #include "BackForwardController.h"
41 #include "BeforeUnloadEvent.h"
42 #include "MemoryCache.h"
43 #include "CachedPage.h"
44 #include "CachedResourceLoader.h"
45 #include "Chrome.h"
46 #include "ChromeClient.h"
47 #include "Console.h"
48 #include "ContentSecurityPolicy.h"
49 #include "DatabaseContext.h"
50 #include "DOMImplementation.h"
51 #include "DOMWindow.h"
52 #include "Document.h"
53 #include "DocumentLoadTiming.h"
54 #include "DocumentLoader.h"
55 #include "Editor.h"
56 #include "EditorClient.h"
57 #include "Element.h"
58 #include "Event.h"
59 #include "EventNames.h"
60 #include "FloatRect.h"
61 #include "FormState.h"
62 #include "FormSubmission.h"
63 #include "Frame.h"
64 #include "FrameLoadRequest.h"
65 #include "FrameLoaderClient.h"
66 #include "FrameNetworkingContext.h"
67 #include "FrameTree.h"
68 #include "FrameView.h"
69 #include "HTMLAnchorElement.h"
70 #include "HTMLFormElement.h"
71 #include "HTMLNames.h"
72 #include "HTMLObjectElement.h"
73 #include "HTTPParsers.h"
74 #include "HistoryItem.h"
75 #include "InspectorController.h"
76 #include "InspectorInstrumentation.h"
77 #include "Logging.h"
78 #include "MIMETypeRegistry.h"
79 #include "MainResourceLoader.h"
80 #include "Page.h"
81 #include "PageCache.h"
82 #include "PageGroup.h"
83 #include "PageTransitionEvent.h"
84 #include "PluginData.h"
85 #include "PluginDatabase.h"
86 #include "PluginDocument.h"
87 #include "ProgressTracker.h"
88 #include "ResourceHandle.h"
89 #include "ResourceRequest.h"
90 #include "SchemeRegistry.h"
91 #include "ScriptCallStack.h"
92 #include "ScriptCallStackFactory.h"
93 #include "ScriptController.h"
94 #include "ScriptSourceCode.h"
95 #include "ScrollAnimator.h"
96 #include "SecurityOrigin.h"
97 #include "SecurityPolicy.h"
98 #include "SegmentedString.h"
99 #include "SerializedScriptValue.h"
100 #include "Settings.h"
101 #include "TextResourceDecoder.h"
102 #include "WindowFeatures.h"
103 #include "XMLDocumentParser.h"
104 #include <wtf/CurrentTime.h>
105 #include <wtf/StdLibExtras.h>
106 #include <wtf/text/CString.h>
107 #include <wtf/text/WTFString.h>
108
109 #if ENABLE(SHARED_WORKERS)
110 #include "SharedWorkerRepository.h"
111 #endif
112
113 #if ENABLE(SVG)
114 #include "SVGDocument.h"
115 #include "SVGLocatable.h"
116 #include "SVGNames.h"
117 #include "SVGPreserveAspectRatio.h"
118 #include "SVGSVGElement.h"
119 #include "SVGViewElement.h"
120 #include "SVGViewSpec.h"
121 #endif
122
123 #if ENABLE(WEB_ARCHIVE) || ENABLE(MHTML)
124 #include "Archive.h"
125 #endif
126
127 namespace WebCore {
128
129 using namespace HTMLNames;
130
131 #if ENABLE(SVG)
132 using namespace SVGNames;
133 #endif
134
135 static const char defaultAcceptHeader[] = "text/html,application/xhtml+xml,application/xml;q=0.9,*/*;q=0.8";
136 static double storedTimeOfLastCompletedLoad;
137
138 bool isBackForwardLoadType(FrameLoadType type)
139 {
140     switch (type) {
141         case FrameLoadTypeStandard:
142         case FrameLoadTypeReload:
143         case FrameLoadTypeReloadFromOrigin:
144         case FrameLoadTypeSame:
145         case FrameLoadTypeRedirectWithLockedBackForwardList:
146         case FrameLoadTypeReplace:
147             return false;
148         case FrameLoadTypeBack:
149         case FrameLoadTypeForward:
150         case FrameLoadTypeIndexedBackForward:
151             return true;
152     }
153     ASSERT_NOT_REACHED();
154     return false;
155 }
156
157 // This is not in the FrameLoader class to emphasize that it does not depend on
158 // private FrameLoader data, and to avoid increasing the number of public functions
159 // with access to private data.  Since only this .cpp file needs it, making it
160 // non-member lets us exclude it from the header file, thus keeping FrameLoader.h's
161 // API simpler.
162 //
163 static bool isDocumentSandboxed(Frame* frame, SandboxFlags mask)
164 {
165     return frame->document() && frame->document()->isSandboxed(mask);
166 }
167
168 FrameLoader::FrameLoader(Frame* frame, FrameLoaderClient* client)
169     : m_frame(frame)
170     , m_client(client)
171     , m_policyChecker(frame)
172     , m_history(frame)
173     , m_notifer(frame)
174     , m_subframeLoader(frame)
175     , m_icon(frame)
176     , m_state(FrameStateCommittedPage)
177     , m_loadType(FrameLoadTypeStandard)
178     , m_delegateIsHandlingProvisionalLoadError(false)
179     , m_quickRedirectComing(false)
180     , m_sentRedirectNotification(false)
181     , m_inStopAllLoaders(false)
182     , m_isExecutingJavaScriptFormAction(false)
183     , m_didCallImplicitClose(false)
184     , m_wasUnloadEventEmitted(false)
185     , m_pageDismissalEventBeingDispatched(NoDismissal)
186     , m_isComplete(false)
187     , m_hasReceivedFirstData(false)
188     , m_needsClear(false)
189     , m_checkTimer(this, &FrameLoader::checkTimerFired)
190     , m_shouldCallCheckCompleted(false)
191     , m_shouldCallCheckLoadComplete(false)
192     , m_opener(0)
193     , m_didPerformFirstNavigation(false)
194     , m_loadingFromCachedPage(false)
195     , m_suppressOpenerInNewFrame(false)
196     , m_forcedSandboxFlags(SandboxNone)
197 {
198 }
199
200 FrameLoader::~FrameLoader()
201 {
202     setOpener(0);
203
204     HashSet<Frame*>::iterator end = m_openedFrames.end();
205     for (HashSet<Frame*>::iterator it = m_openedFrames.begin(); it != end; ++it)
206         (*it)->loader()->m_opener = 0;
207
208     m_client->frameLoaderDestroyed();
209
210     if (m_networkingContext)
211         m_networkingContext->invalidate();
212 }
213
214 void FrameLoader::init()
215 {
216     // This somewhat odd set of steps gives the frame an initial empty document.
217     // It would be better if this could be done with even fewer steps.
218     m_stateMachine.advanceTo(FrameLoaderStateMachine::CreatingInitialEmptyDocument);
219     setPolicyDocumentLoader(m_client->createDocumentLoader(ResourceRequest(KURL(ParsedURLString, emptyString())), SubstituteData()).get());
220     // FIXME: Make this an ASSERT() instead once we figured out what's going wrong.
221     if (!m_policyDocumentLoader.get())
222         CRASH();
223     setProvisionalDocumentLoader(m_policyDocumentLoader.get());
224     setState(FrameStateProvisional);
225     m_provisionalDocumentLoader->setResponse(ResourceResponse(KURL(), "text/html", 0, String(), String()));
226     m_provisionalDocumentLoader->finishedLoading();
227     ASSERT(!m_frame->document());
228     m_documentLoader->writer()->begin(KURL(), false);
229     m_documentLoader->writer()->end();
230     m_frame->document()->cancelParsing();
231     m_stateMachine.advanceTo(FrameLoaderStateMachine::DisplayingInitialEmptyDocument);
232     m_didCallImplicitClose = true;
233
234     m_networkingContext = m_client->createNetworkingContext();
235 }
236
237 void FrameLoader::setDefersLoading(bool defers)
238 {
239     if (m_documentLoader)
240         m_documentLoader->setDefersLoading(defers);
241     if (m_provisionalDocumentLoader)
242         m_provisionalDocumentLoader->setDefersLoading(defers);
243     if (m_policyDocumentLoader)
244         m_policyDocumentLoader->setDefersLoading(defers);
245     history()->setDefersLoading(defers);
246
247     if (!defers) {
248         m_frame->navigationScheduler()->startTimer();
249         startCheckCompleteTimer();
250     }
251 }
252
253 void FrameLoader::changeLocation(SecurityOrigin* securityOrigin, const KURL& url, const String& referrer, bool lockHistory, bool lockBackForwardList, bool refresh)
254 {
255     urlSelected(FrameLoadRequest(securityOrigin, ResourceRequest(url, referrer, refresh ? ReloadIgnoringCacheData : UseProtocolCachePolicy), "_self"),
256         0, lockHistory, lockBackForwardList, MaybeSendReferrer, ReplaceDocumentIfJavaScriptURL);
257 }
258
259 void FrameLoader::urlSelected(const KURL& url, const String& passedTarget, PassRefPtr<Event> triggeringEvent, bool lockHistory, bool lockBackForwardList, ShouldSendReferrer shouldSendReferrer)
260 {
261     urlSelected(FrameLoadRequest(m_frame->document()->securityOrigin(), ResourceRequest(url), passedTarget),
262         triggeringEvent, lockHistory, lockBackForwardList, shouldSendReferrer, DoNotReplaceDocumentIfJavaScriptURL);
263 }
264
265 // The shouldReplaceDocumentIfJavaScriptURL parameter will go away when the FIXME to eliminate the
266 // corresponding parameter from ScriptController::executeIfJavaScriptURL() is addressed.
267 void FrameLoader::urlSelected(const FrameLoadRequest& passedRequest, PassRefPtr<Event> triggeringEvent, bool lockHistory, bool lockBackForwardList, ShouldSendReferrer shouldSendReferrer, ShouldReplaceDocumentIfJavaScriptURL shouldReplaceDocumentIfJavaScriptURL)
268 {
269     ASSERT(!m_suppressOpenerInNewFrame);
270
271     RefPtr<Frame> protect(m_frame);
272     FrameLoadRequest frameRequest(passedRequest);
273
274     if (m_frame->script()->executeIfJavaScriptURL(frameRequest.resourceRequest().url(), shouldReplaceDocumentIfJavaScriptURL))
275         return;
276
277     if (frameRequest.frameName().isEmpty())
278         frameRequest.setFrameName(m_frame->document()->baseTarget());
279
280     if (shouldSendReferrer == NeverSendReferrer)
281         m_suppressOpenerInNewFrame = true;
282     if (frameRequest.resourceRequest().httpReferrer().isEmpty())
283         frameRequest.resourceRequest().setHTTPReferrer(outgoingReferrer());
284     addHTTPOriginIfNeeded(frameRequest.resourceRequest(), outgoingOrigin());
285
286     loadFrameRequest(frameRequest, lockHistory, lockBackForwardList, triggeringEvent, 0, shouldSendReferrer);
287
288     m_suppressOpenerInNewFrame = false;
289 }
290
291 void FrameLoader::submitForm(PassRefPtr<FormSubmission> submission)
292 {
293     ASSERT(submission->method() == FormSubmission::PostMethod || submission->method() == FormSubmission::GetMethod);
294
295     // FIXME: Find a good spot for these.
296     ASSERT(submission->data());
297     ASSERT(submission->state());
298     ASSERT(!submission->state()->sourceDocument()->frame() || submission->state()->sourceDocument()->frame() == m_frame);
299     
300     if (!m_frame->page())
301         return;
302     
303     if (submission->action().isEmpty())
304         return;
305
306     if (isDocumentSandboxed(m_frame, SandboxForms))
307         return;
308
309     if (protocolIsJavaScript(submission->action())) {
310         m_isExecutingJavaScriptFormAction = true;
311         m_frame->script()->executeIfJavaScriptURL(submission->action(), DoNotReplaceDocumentIfJavaScriptURL);
312         m_isExecutingJavaScriptFormAction = false;
313         return;
314     }
315
316     Frame* targetFrame = findFrameForNavigation(submission->target(), submission->state()->sourceDocument());
317     if (!targetFrame) {
318         if (!DOMWindow::allowPopUp(m_frame) && !ScriptController::processingUserGesture())
319             return;
320
321         targetFrame = m_frame;
322     } else
323         submission->clearTarget();
324
325     if (!targetFrame->page())
326         return;
327
328     // FIXME: We'd like to remove this altogether and fix the multiple form submission issue another way.
329
330     // We do not want to submit more than one form from the same page, nor do we want to submit a single
331     // form more than once. This flag prevents these from happening; not sure how other browsers prevent this.
332     // The flag is reset in each time we start handle a new mouse or key down event, and
333     // also in setView since this part may get reused for a page from the back/forward cache.
334     // The form multi-submit logic here is only needed when we are submitting a form that affects this frame.
335
336     // FIXME: Frame targeting is only one of the ways the submission could end up doing something other
337     // than replacing this frame's content, so this check is flawed. On the other hand, the check is hardly
338     // needed any more now that we reset m_submittedFormURL on each mouse or key down event.
339
340     if (m_frame->tree()->isDescendantOf(targetFrame)) {
341         if (m_submittedFormURL == submission->action())
342             return;
343         m_submittedFormURL = submission->action();
344     }
345
346     submission->data()->generateFiles(m_frame->document());
347     submission->setReferrer(outgoingReferrer());
348     submission->setOrigin(outgoingOrigin());
349
350     targetFrame->navigationScheduler()->scheduleFormSubmission(submission);
351 }
352
353 void FrameLoader::stopLoading(UnloadEventPolicy unloadEventPolicy)
354 {
355     if (m_frame->document() && m_frame->document()->parser())
356         m_frame->document()->parser()->stopParsing();
357
358     if (unloadEventPolicy != UnloadEventPolicyNone) {
359         if (m_frame->document()) {
360             if (m_didCallImplicitClose && !m_wasUnloadEventEmitted) {
361                 Node* currentFocusedNode = m_frame->document()->focusedNode();
362                 if (currentFocusedNode)
363                     currentFocusedNode->aboutToUnload();
364                 if (m_frame->domWindow() && m_pageDismissalEventBeingDispatched == NoDismissal) {
365                     if (unloadEventPolicy == UnloadEventPolicyUnloadAndPageHide) {
366                         m_pageDismissalEventBeingDispatched = PageHideDismissal;
367                         m_frame->domWindow()->dispatchEvent(PageTransitionEvent::create(eventNames().pagehideEvent, m_frame->document()->inPageCache()), m_frame->document());
368                     }
369                     if (!m_frame->document()->inPageCache()) {
370                         RefPtr<Event> unloadEvent(Event::create(eventNames().unloadEvent, false, false));
371                         // The DocumentLoader (and thus its DocumentLoadTiming) might get destroyed
372                         // while dispatching the event, so protect it to prevent writing the end
373                         // time into freed memory.
374                         RefPtr<DocumentLoader> documentLoader = m_provisionalDocumentLoader;
375                         m_pageDismissalEventBeingDispatched = UnloadDismissal;
376                         if (documentLoader && !documentLoader->timing()->unloadEventStart() && !documentLoader->timing()->unloadEventEnd()) {
377                             DocumentLoadTiming* timing = documentLoader->timing();
378                             ASSERT(timing->navigationStart());
379                             timing->markUnloadEventStart();
380                             m_frame->domWindow()->dispatchEvent(unloadEvent, m_frame->domWindow()->document());
381                             timing->markUnloadEventEnd();
382                         } else
383                             m_frame->domWindow()->dispatchEvent(unloadEvent, m_frame->domWindow()->document());
384                     }
385                 }
386                 m_pageDismissalEventBeingDispatched = NoDismissal;
387                 if (m_frame->document())
388                     m_frame->document()->updateStyleIfNeeded();
389                 m_wasUnloadEventEmitted = true;
390             }
391         }
392
393         // Dispatching the unload event could have made m_frame->document() null.
394         if (m_frame->document() && !m_frame->document()->inPageCache()) {
395             // Don't remove event listeners from a transitional empty document (see bug 28716 for more information).
396             bool keepEventListeners = m_stateMachine.isDisplayingInitialEmptyDocument() && m_provisionalDocumentLoader
397                 && m_frame->document()->isSecureTransitionTo(m_provisionalDocumentLoader->url());
398
399             if (!keepEventListeners)
400                 m_frame->document()->removeAllEventListeners();
401         }
402     }
403
404     m_isComplete = true; // to avoid calling completed() in finishedParsing()
405     m_didCallImplicitClose = true; // don't want that one either
406
407     if (m_frame->document() && m_frame->document()->parsing()) {
408         finishedParsing();
409         m_frame->document()->setParsing(false);
410     }
411
412     m_hasReceivedFirstData = true;
413
414     if (Document* doc = m_frame->document()) {
415         // FIXME: HTML5 doesn't tell us to set the state to complete when aborting, but we do anyway to match legacy behavior.
416         // http://www.w3.org/Bugs/Public/show_bug.cgi?id=10537
417         doc->setReadyState(Document::Complete);
418
419 #if ENABLE(SQL_DATABASE)
420         // FIXME: Should the DatabaseContext watch for something like ActiveDOMObject::stop() rather than being special-cased here?
421         DatabaseContext::stopDatabases(doc, 0);
422 #endif
423     }
424
425     // FIXME: This will cancel redirection timer, which really needs to be restarted when restoring the frame from b/f cache.
426     m_frame->navigationScheduler()->cancel();
427 }
428
429 void FrameLoader::stop()
430 {
431     // http://bugs.webkit.org/show_bug.cgi?id=10854
432     // The frame's last ref may be removed and it will be deleted by checkCompleted().
433     RefPtr<Frame> protector(m_frame);
434
435     if (DocumentParser* parser = m_frame->document()->parser()) {
436         parser->stopParsing();
437         parser->finish();
438     }
439     
440     icon()->stopLoader();
441 }
442
443 bool FrameLoader::closeURL()
444 {
445     history()->saveDocumentState();
446     
447     // Should only send the pagehide event here if the current document exists and has not been placed in the page cache.    
448     Document* currentDocument = m_frame->document();
449     stopLoading(currentDocument && !currentDocument->inPageCache() ? UnloadEventPolicyUnloadAndPageHide : UnloadEventPolicyUnloadOnly);
450     
451     m_frame->editor()->clearUndoRedoOperations();
452     return true;
453 }
454
455 bool FrameLoader::didOpenURL()
456 {
457     if (m_frame->navigationScheduler()->redirectScheduledDuringLoad()) {
458         // A redirect was scheduled before the document was created.
459         // This can happen when one frame changes another frame's location.
460         return false;
461     }
462
463     m_frame->navigationScheduler()->cancel();
464     m_frame->editor()->clearLastEditCommand();
465
466     m_isComplete = false;
467     m_didCallImplicitClose = false;
468
469     // If we are still in the process of initializing an empty document then
470     // its frame is not in a consistent state for rendering, so avoid setJSStatusBarText
471     // since it may cause clients to attempt to render the frame.
472     if (!m_stateMachine.creatingInitialEmptyDocument()) {
473         if (DOMWindow* window = m_frame->existingDOMWindow()) {
474             window->setStatus(String());
475             window->setDefaultStatus(String());
476         }
477     }
478     m_hasReceivedFirstData = false;
479
480     started();
481
482     return true;
483 }
484
485 void FrameLoader::didExplicitOpen()
486 {
487     m_isComplete = false;
488     m_didCallImplicitClose = false;
489
490     // Calling document.open counts as committing the first real document load.
491     if (!m_stateMachine.committedFirstRealDocumentLoad())
492         m_stateMachine.advanceTo(FrameLoaderStateMachine::DisplayingInitialEmptyDocumentPostCommit);
493     
494     // Prevent window.open(url) -- eg window.open("about:blank") -- from blowing away results
495     // from a subsequent window.document.open / window.document.write call. 
496     // Canceling redirection here works for all cases because document.open 
497     // implicitly precedes document.write.
498     m_frame->navigationScheduler()->cancel();
499 }
500
501
502 void FrameLoader::cancelAndClear()
503 {
504     m_frame->navigationScheduler()->cancel();
505
506     if (!m_isComplete)
507         closeURL();
508
509     clear(false);
510     m_frame->script()->updatePlatformScriptObjects();
511 }
512
513 void FrameLoader::clear(bool clearWindowProperties, bool clearScriptObjects, bool clearFrameView)
514 {
515     m_frame->editor()->clear();
516
517     if (!m_needsClear)
518         return;
519     m_needsClear = false;
520     
521     if (!m_frame->document()->inPageCache()) {
522         m_frame->document()->cancelParsing();
523         m_frame->document()->stopActiveDOMObjects();
524         if (m_frame->document()->attached()) {
525             m_frame->document()->willRemove();
526             m_frame->document()->detach();
527             
528             m_frame->document()->removeFocusedNodeOfSubtree(m_frame->document());
529         }
530     }
531
532     // Do this after detaching the document so that the unload event works.
533     if (clearWindowProperties) {
534         m_frame->clearDOMWindow();
535         m_frame->script()->clearWindowShell(m_frame->document()->inPageCache());
536     }
537
538     m_frame->selection()->clear();
539     m_frame->eventHandler()->clear();
540     if (clearFrameView && m_frame->view())
541         m_frame->view()->clear();
542
543     // Do not drop the document before the ScriptController and view are cleared
544     // as some destructors might still try to access the document.
545     m_frame->setDocument(0);
546
547     m_subframeLoader.clear();
548
549     if (clearScriptObjects)
550         m_frame->script()->clearScriptObjects();
551
552     m_frame->navigationScheduler()->clear();
553
554     m_checkTimer.stop();
555     m_shouldCallCheckCompleted = false;
556     m_shouldCallCheckLoadComplete = false;
557
558     if (m_stateMachine.isDisplayingInitialEmptyDocument() && m_stateMachine.committedFirstRealDocumentLoad())
559         m_stateMachine.advanceTo(FrameLoaderStateMachine::CommittedFirstRealLoad);
560 }
561
562 void FrameLoader::receivedFirstData()
563 {
564     KURL workingURL = activeDocumentLoader()->documentURL();
565     activeDocumentLoader()->writer()->begin(workingURL, false);
566     activeDocumentLoader()->writer()->setDocumentWasLoadedAsPartOfNavigation();
567
568 #if ENABLE(MHTML)
569     // The origin is the MHTML file, we need to set the base URL to the document encoded in the MHTML so
570     // relative URLs are resolved properly.
571     if (activeDocumentLoader()->archive() && activeDocumentLoader()->archive()->type() == Archive::MHTML)
572         m_frame->document()->setBaseURLOverride(activeDocumentLoader()->archive()->mainResource()->url());
573 #endif
574
575     dispatchDidCommitLoad();
576     dispatchDidClearWindowObjectsInAllWorlds();
577     dispatchGlobalObjectAvailableInAllWorlds();
578
579     if (m_documentLoader) {
580         StringWithDirection ptitle = m_documentLoader->title();
581         // If we have a title let the WebView know about it.
582         if (!ptitle.isNull())
583             m_client->dispatchDidReceiveTitle(ptitle);
584     }
585
586     m_hasReceivedFirstData = true;
587
588     if (!m_documentLoader)
589         return;
590     if (m_frame->document()->isViewSource())
591         return;
592
593     double delay;
594     String url;
595     if (!parseHTTPRefresh(m_documentLoader->response().httpHeaderField("Refresh"), false, delay, url))
596         return;
597     if (url.isEmpty())
598         url = m_frame->document()->url().string();
599     else
600         url = m_frame->document()->completeURL(url).string();
601
602     m_frame->navigationScheduler()->scheduleRedirect(delay, url);
603 }
604
605 void FrameLoader::setOutgoingReferrer(const KURL& url)
606 {
607     m_outgoingReferrer = url.strippedForUseAsReferrer();
608 }
609
610 void FrameLoader::didBeginDocument(bool dispatch)
611 {
612     m_needsClear = true;
613     m_isComplete = false;
614     m_didCallImplicitClose = false;
615     m_frame->document()->setReadyState(Document::Loading);
616
617     if (m_pendingStateObject) {
618         m_frame->document()->statePopped(m_pendingStateObject.get());
619         m_pendingStateObject.clear();
620     }
621
622     if (dispatch)
623         dispatchDidClearWindowObjectsInAllWorlds();
624
625     updateFirstPartyForCookies();
626
627     Settings* settings = m_frame->document()->settings();
628     m_frame->document()->cachedResourceLoader()->setAutoLoadImages(settings && settings->loadsImagesAutomatically());
629
630     if (m_documentLoader) {
631         String dnsPrefetchControl = m_documentLoader->response().httpHeaderField("X-DNS-Prefetch-Control");
632         if (!dnsPrefetchControl.isEmpty())
633             m_frame->document()->parseDNSPrefetchControlHeader(dnsPrefetchControl);
634
635         String contentSecurityPolicy = m_documentLoader->response().httpHeaderField("X-WebKit-CSP");
636         if (!contentSecurityPolicy.isEmpty())
637             m_frame->document()->contentSecurityPolicy()->didReceiveHeader(contentSecurityPolicy, ContentSecurityPolicy::EnforcePolicy);
638
639         String reportOnlyContentSecurityPolicy = m_documentLoader->response().httpHeaderField("X-WebKit-CSP-Report-Only");
640         if (!reportOnlyContentSecurityPolicy.isEmpty())
641             m_frame->document()->contentSecurityPolicy()->didReceiveHeader(reportOnlyContentSecurityPolicy, ContentSecurityPolicy::ReportOnly);
642     }
643
644     history()->restoreDocumentState();
645 }
646
647 void FrameLoader::finishedParsing()
648 {
649     m_frame->injectUserScripts(InjectAtDocumentEnd);
650
651     if (m_stateMachine.creatingInitialEmptyDocument())
652         return;
653
654     // This can be called from the Frame's destructor, in which case we shouldn't protect ourselves
655     // because doing so will cause us to re-enter the destructor when protector goes out of scope.
656     // Null-checking the FrameView indicates whether or not we're in the destructor.
657     RefPtr<Frame> protector = m_frame->view() ? m_frame : 0;
658
659     m_client->dispatchDidFinishDocumentLoad();
660
661     checkCompleted();
662
663     if (!m_frame->view())
664         return; // We are being destroyed by something checkCompleted called.
665
666     // Check if the scrollbars are really needed for the content.
667     // If not, remove them, relayout, and repaint.
668     m_frame->view()->restoreScrollbar();
669     scrollToFragmentWithParentBoundary(m_frame->document()->url());
670 }
671
672 void FrameLoader::loadDone()
673 {
674     checkCompleted();
675 }
676
677 bool FrameLoader::allChildrenAreComplete() const
678 {
679     for (Frame* child = m_frame->tree()->firstChild(); child; child = child->tree()->nextSibling()) {
680         if (!child->loader()->m_isComplete)
681             return false;
682     }
683     return true;
684 }
685
686 bool FrameLoader::allAncestorsAreComplete() const
687 {
688     for (Frame* ancestor = m_frame; ancestor; ancestor = ancestor->tree()->parent()) {
689         if (!ancestor->loader()->m_isComplete)
690             return false;
691     }
692     return true;
693 }
694
695 void FrameLoader::checkCompleted()
696 {
697     m_shouldCallCheckCompleted = false;
698
699     if (m_frame->view())
700         m_frame->view()->checkStopDelayingDeferredRepaints();
701
702     // Have we completed before?
703     if (m_isComplete)
704         return;
705
706     // Are we still parsing?
707     if (m_frame->document()->parsing())
708         return;
709
710     // Still waiting for images/scripts?
711     if (m_frame->document()->cachedResourceLoader()->requestCount())
712         return;
713
714     // Still waiting for elements that don't go through a FrameLoader?
715     if (m_frame->document()->isDelayingLoadEvent())
716         return;
717
718     // Any frame that hasn't completed yet?
719     if (!allChildrenAreComplete())
720         return;
721
722     // OK, completed.
723     m_isComplete = true;
724     m_requestedHistoryItem = 0;
725     m_frame->document()->setReadyState(Document::Complete);
726
727     RefPtr<Frame> protect(m_frame);
728     checkCallImplicitClose(); // if we didn't do it before
729
730     m_frame->navigationScheduler()->startTimer();
731
732     completed();
733     if (m_frame->page())
734         checkLoadComplete();
735 }
736
737 void FrameLoader::checkTimerFired(Timer<FrameLoader>*)
738 {
739     RefPtr<Frame> protect(m_frame);
740
741     if (Page* page = m_frame->page()) {
742         if (page->defersLoading())
743             return;
744     }
745     if (m_shouldCallCheckCompleted)
746         checkCompleted();
747     if (m_shouldCallCheckLoadComplete)
748         checkLoadComplete();
749 }
750
751 void FrameLoader::startCheckCompleteTimer()
752 {
753     if (!(m_shouldCallCheckCompleted || m_shouldCallCheckLoadComplete))
754         return;
755     if (m_checkTimer.isActive())
756         return;
757     m_checkTimer.startOneShot(0);
758 }
759
760 void FrameLoader::scheduleCheckCompleted()
761 {
762     m_shouldCallCheckCompleted = true;
763     startCheckCompleteTimer();
764 }
765
766 void FrameLoader::scheduleCheckLoadComplete()
767 {
768     m_shouldCallCheckLoadComplete = true;
769     startCheckCompleteTimer();
770 }
771
772 void FrameLoader::checkCallImplicitClose()
773 {
774     if (m_didCallImplicitClose || m_frame->document()->parsing() || m_frame->document()->isDelayingLoadEvent())
775         return;
776
777     if (!allChildrenAreComplete())
778         return; // still got a frame running -> too early
779
780     m_didCallImplicitClose = true;
781     m_wasUnloadEventEmitted = false;
782     m_frame->document()->implicitClose();
783 }
784
785 void FrameLoader::loadURLIntoChildFrame(const KURL& url, const String& referer, Frame* childFrame)
786 {
787     ASSERT(childFrame);
788
789 #if ENABLE(WEB_ARCHIVE) || ENABLE(MHTML)
790     RefPtr<Archive> subframeArchive = activeDocumentLoader()->popArchiveForSubframe(childFrame->tree()->uniqueName(), url);    
791     if (subframeArchive) {
792         childFrame->loader()->loadArchive(subframeArchive.release());
793         return;
794     }
795 #endif // ENABLE(WEB_ARCHIVE)
796
797     HistoryItem* parentItem = history()->currentItem();
798     // If we're moving in the back/forward list, we might want to replace the content
799     // of this child frame with whatever was there at that point.
800     if (parentItem && parentItem->children().size() && isBackForwardLoadType(loadType()) 
801         && !m_frame->document()->loadEventFinished()) {
802         HistoryItem* childItem = parentItem->childItemWithTarget(childFrame->tree()->uniqueName());
803         if (childItem) {
804             childFrame->loader()->loadDifferentDocumentItem(childItem, loadType());
805             return;
806         }
807     }
808
809     childFrame->loader()->loadURL(url, referer, "_self", false, FrameLoadTypeRedirectWithLockedBackForwardList, 0, 0);
810 }
811
812 #if ENABLE(WEB_ARCHIVE) || ENABLE(MHTML)
813 void FrameLoader::loadArchive(PassRefPtr<Archive> archive)
814 {
815     ArchiveResource* mainResource = archive->mainResource();
816     ASSERT(mainResource);
817     if (!mainResource)
818         return;
819         
820     SubstituteData substituteData(mainResource->data(), mainResource->mimeType(), mainResource->textEncoding(), KURL());
821     
822     ResourceRequest request(mainResource->url());
823 #if PLATFORM(MAC)
824     request.applyWebArchiveHackForMail();
825 #endif
826
827     RefPtr<DocumentLoader> documentLoader = m_client->createDocumentLoader(request, substituteData);
828     documentLoader->setArchive(archive.get());
829     load(documentLoader.get());
830 }
831 #endif // ENABLE(WEB_ARCHIVE) || ENABLE(MHTML)
832
833 ObjectContentType FrameLoader::defaultObjectContentType(const KURL& url, const String& mimeTypeIn, bool shouldPreferPlugInsForImages)
834 {
835     String mimeType = mimeTypeIn;
836     String decodedPath = decodeURLEscapeSequences(url.path());
837     String extension = decodedPath.substring(decodedPath.reverseFind('.') + 1);
838
839     // We don't use MIMETypeRegistry::getMIMETypeForPath() because it returns "application/octet-stream" upon failure
840     if (mimeType.isEmpty())
841         mimeType = MIMETypeRegistry::getMIMETypeForExtension(extension);
842
843 #if !PLATFORM(MAC) && !PLATFORM(CHROMIUM) && !PLATFORM(EFL) // Mac has no PluginDatabase, nor does Chromium or EFL
844     if (mimeType.isEmpty())
845         mimeType = PluginDatabase::installedPlugins()->MIMETypeForExtension(extension);
846 #endif
847
848     if (mimeType.isEmpty())
849         return ObjectContentFrame; // Go ahead and hope that we can display the content.
850
851 #if !PLATFORM(MAC) && !PLATFORM(CHROMIUM) && !PLATFORM(EFL) // Mac has no PluginDatabase, nor does Chromium or EFL
852     bool plugInSupportsMIMEType = PluginDatabase::installedPlugins()->isMIMETypeRegistered(mimeType);
853 #else
854     bool plugInSupportsMIMEType = false;
855 #endif
856
857     if (MIMETypeRegistry::isSupportedImageMIMEType(mimeType))
858         return shouldPreferPlugInsForImages && plugInSupportsMIMEType ? WebCore::ObjectContentNetscapePlugin : WebCore::ObjectContentImage;
859
860     if (plugInSupportsMIMEType)
861         return WebCore::ObjectContentNetscapePlugin;
862
863     if (MIMETypeRegistry::isSupportedNonImageMIMEType(mimeType))
864         return WebCore::ObjectContentFrame;
865
866     return WebCore::ObjectContentNone;
867 }
868
869 String FrameLoader::outgoingReferrer() const
870 {
871     // See http://www.whatwg.org/specs/web-apps/current-work/#fetching-resources
872     // for why we walk the parent chain for srcdoc documents.
873     Frame* frame = m_frame;
874     while (frame->document()->isSrcdocDocument()) {
875         frame = frame->tree()->parent();
876         // Srcdoc documents cannot be top-level documents, by definition,
877         // because they need to be contained in iframes with the srcdoc.
878         ASSERT(frame);
879     }
880     return frame->loader()->m_outgoingReferrer;
881 }
882
883 String FrameLoader::outgoingOrigin() const
884 {
885     return m_frame->document()->securityOrigin()->toString();
886 }
887
888 bool FrameLoader::isMixedContent(SecurityOrigin* context, const KURL& url)
889 {
890     if (context->protocol() != "https")
891         return false;  // We only care about HTTPS security origins.
892
893     if (!url.isValid() || SchemeRegistry::shouldTreatURLSchemeAsSecure(url.protocol()))
894         return false;  // Loading these protocols is secure.
895
896     return true;
897 }
898
899 bool FrameLoader::checkIfDisplayInsecureContent(SecurityOrigin* context, const KURL& url)
900 {
901     if (!isMixedContent(context, url))
902         return true;
903
904     Settings* settings = m_frame->settings();
905     bool allowed = m_client->allowDisplayingInsecureContent(settings && settings->allowDisplayOfInsecureContent(), context, url);
906     String message = (allowed ? emptyString() : "[blocked] ") + "The page at " +
907         m_frame->document()->url().string() + " displayed insecure content from " + url.string() + ".\n";
908         
909     m_frame->domWindow()->console()->addMessage(HTMLMessageSource, LogMessageType, WarningMessageLevel, message);
910
911     if (allowed)
912         m_client->didDisplayInsecureContent();
913
914     return allowed;
915 }
916
917 bool FrameLoader::checkIfRunInsecureContent(SecurityOrigin* context, const KURL& url)
918 {
919     if (!isMixedContent(context, url))
920         return true;
921
922     Settings* settings = m_frame->settings();
923     bool allowed = m_client->allowRunningInsecureContent(settings && settings->allowRunningOfInsecureContent(), context, url);
924     String message = (allowed ? emptyString() : "[blocked] ") + "The page at " +
925         m_frame->document()->url().string() + " ran insecure content from " + url.string() + ".\n";
926        
927     m_frame->domWindow()->console()->addMessage(HTMLMessageSource, LogMessageType, WarningMessageLevel, message);
928
929     if (allowed)
930         m_client->didRunInsecureContent(context, url);
931
932     return allowed;
933 }
934
935 Frame* FrameLoader::opener()
936 {
937     return m_opener;
938 }
939
940 void FrameLoader::setOpener(Frame* opener)
941 {
942     if (m_opener)
943         m_opener->loader()->m_openedFrames.remove(m_frame);
944     if (opener)
945         opener->loader()->m_openedFrames.add(m_frame);
946     m_opener = opener;
947
948     if (m_frame->document()) {
949         m_frame->document()->initSecurityContext();
950         m_frame->domWindow()->setSecurityOrigin(m_frame->document()->securityOrigin());
951     }
952 }
953
954 // FIXME: This does not belong in FrameLoader!
955 void FrameLoader::handleFallbackContent()
956 {
957     HTMLFrameOwnerElement* owner = m_frame->ownerElement();
958     if (!owner || !owner->hasTagName(objectTag))
959         return;
960     static_cast<HTMLObjectElement*>(owner)->renderFallbackContent();
961 }
962
963 void FrameLoader::provisionalLoadStarted()
964 {
965     if (m_stateMachine.firstLayoutDone())
966         m_stateMachine.advanceTo(FrameLoaderStateMachine::CommittedFirstRealLoad);
967     m_frame->navigationScheduler()->cancel(true);
968     m_client->provisionalLoadStarted();
969 }
970
971 void FrameLoader::resetMultipleFormSubmissionProtection()
972 {
973     m_submittedFormURL = KURL();
974 }
975
976 void FrameLoader::willSetEncoding()
977 {
978     if (!m_hasReceivedFirstData)
979         receivedFirstData();
980 }
981
982 void FrameLoader::updateFirstPartyForCookies()
983 {
984     if (m_frame->tree()->parent())
985         setFirstPartyForCookies(m_frame->tree()->parent()->document()->firstPartyForCookies());
986     else
987         setFirstPartyForCookies(m_frame->document()->url());
988 }
989
990 void FrameLoader::setFirstPartyForCookies(const KURL& url)
991 {
992     for (Frame* frame = m_frame; frame; frame = frame->tree()->traverseNext(m_frame))
993         frame->document()->setFirstPartyForCookies(url);
994 }
995
996 // This does the same kind of work that didOpenURL does, except it relies on the fact
997 // that a higher level already checked that the URLs match and the scrolling is the right thing to do.
998 void FrameLoader::loadInSameDocument(const KURL& url, SerializedScriptValue* stateObject, bool isNewNavigation)
999 {
1000     // If we have a state object, we cannot also be a new navigation.
1001     ASSERT(!stateObject || (stateObject && !isNewNavigation));
1002
1003     // Update the data source's request with the new URL to fake the URL change
1004     KURL oldURL = m_frame->document()->url();
1005     m_frame->document()->setURL(url);
1006     documentLoader()->replaceRequestURLForSameDocumentNavigation(url);
1007     if (isNewNavigation && !shouldTreatURLAsSameAsCurrent(url) && !stateObject) {
1008         // NB: must happen after replaceRequestURLForSameDocumentNavigation(), since we add 
1009         // based on the current request. Must also happen before we openURL and displace the 
1010         // scroll position, since adding the BF item will save away scroll state.
1011         
1012         // NB2: If we were loading a long, slow doc, and the user fragment navigated before
1013         // it was done, currItem is now set the that slow doc, and prevItem is whatever was
1014         // before it.  Adding the b/f item will bump the slow doc down to prevItem, even
1015         // though its load is not yet done.  I think this all works out OK, for one because
1016         // we have already saved away the scroll and doc state for the long slow load,
1017         // but it's not an obvious case.
1018
1019         history()->updateBackForwardListForFragmentScroll();
1020     }
1021     
1022     bool hashChange = equalIgnoringFragmentIdentifier(url, oldURL) && url.fragmentIdentifier() != oldURL.fragmentIdentifier();
1023     
1024     history()->updateForSameDocumentNavigation();
1025
1026     // If we were in the autoscroll/panScroll mode we want to stop it before following the link to the anchor
1027     if (hashChange)
1028         m_frame->eventHandler()->stopAutoscrollTimer();
1029     
1030     // It's important to model this as a load that starts and immediately finishes.
1031     // Otherwise, the parent frame may think we never finished loading.
1032     started();
1033
1034     // We need to scroll to the fragment whether or not a hash change occurred, since
1035     // the user might have scrolled since the previous navigation.
1036     scrollToFragmentWithParentBoundary(url);
1037     
1038     m_isComplete = false;
1039     checkCompleted();
1040
1041     if (isNewNavigation) {
1042         // This will clear previousItem from the rest of the frame tree that didn't
1043         // doing any loading. We need to make a pass on this now, since for fragment
1044         // navigation we'll not go through a real load and reach Completed state.
1045         checkLoadComplete();
1046     }
1047
1048     m_client->dispatchDidNavigateWithinPage();
1049
1050     m_frame->document()->statePopped(stateObject ? stateObject : SerializedScriptValue::nullValue());
1051     m_client->dispatchDidPopStateWithinPage();
1052     
1053     if (hashChange) {
1054         m_frame->document()->enqueueHashchangeEvent(oldURL, url);
1055         m_client->dispatchDidChangeLocationWithinPage();
1056     }
1057     
1058     // FrameLoaderClient::didFinishLoad() tells the internal load delegate the load finished with no error
1059     m_client->didFinishLoad();
1060 }
1061
1062 bool FrameLoader::isComplete() const
1063 {
1064     return m_isComplete;
1065 }
1066
1067 void FrameLoader::completed()
1068 {
1069     RefPtr<Frame> protect(m_frame);
1070
1071     for (Frame* descendant = m_frame->tree()->traverseNext(m_frame); descendant; descendant = descendant->tree()->traverseNext(m_frame))
1072         descendant->navigationScheduler()->startTimer();
1073
1074     if (Frame* parent = m_frame->tree()->parent())
1075         parent->loader()->checkCompleted();
1076
1077     if (m_frame->view())
1078         m_frame->view()->maintainScrollPositionAtAnchor(0);
1079 }
1080
1081 void FrameLoader::started()
1082 {
1083     for (Frame* frame = m_frame; frame; frame = frame->tree()->parent())
1084         frame->loader()->m_isComplete = false;
1085 }
1086
1087 void FrameLoader::prepareForHistoryNavigation()
1088 {
1089     // If there is no currentItem, but we still want to engage in 
1090     // history navigation we need to manufacture one, and update
1091     // the state machine of this frame to impersonate having
1092     // loaded it.
1093     RefPtr<HistoryItem> currentItem = history()->currentItem();
1094     if (!currentItem) {
1095         currentItem = HistoryItem::create();
1096         currentItem->setLastVisitWasFailure(true);
1097         history()->setCurrentItem(currentItem.get());
1098         frame()->page()->backForward()->setCurrentItem(currentItem.get());
1099
1100         ASSERT(stateMachine()->isDisplayingInitialEmptyDocument());
1101         stateMachine()->advanceTo(FrameLoaderStateMachine::DisplayingInitialEmptyDocumentPostCommit);
1102         stateMachine()->advanceTo(FrameLoaderStateMachine::CommittedFirstRealLoad);
1103     }
1104 }
1105
1106 void FrameLoader::prepareForLoadStart()
1107 {
1108     if (Page* page = m_frame->page())
1109         page->progress()->progressStarted(m_frame);
1110     m_client->dispatchDidStartProvisionalLoad();
1111
1112     // Notify accessibility.
1113     if (AXObjectCache::accessibilityEnabled()) {
1114         AXObjectCache::AXLoadingEvent loadingEvent = loadType() == FrameLoadTypeReload ? AXObjectCache::AXLoadingReloaded : AXObjectCache::AXLoadingStarted;
1115         m_frame->document()->axObjectCache()->frameLoadingEventNotification(m_frame, loadingEvent);
1116     }
1117 }
1118
1119 void FrameLoader::setupForReplace()
1120 {
1121     // FIXME: Make this an ASSERT() instead once we figured out what's going wrong.
1122     if (!m_documentLoader.get())
1123         CRASH();
1124     setState(FrameStateProvisional);
1125     m_provisionalDocumentLoader = m_documentLoader;
1126     m_documentLoader = 0;
1127     detachChildren();
1128 }
1129
1130 void FrameLoader::loadFrameRequest(const FrameLoadRequest& request, bool lockHistory, bool lockBackForwardList,
1131     PassRefPtr<Event> event, PassRefPtr<FormState> formState, ShouldSendReferrer shouldSendReferrer)
1132 {    
1133     // Protect frame from getting blown away inside dispatchBeforeLoadEvent in loadWithDocumentLoader.
1134     RefPtr<Frame> protect(m_frame);
1135
1136     KURL url = request.resourceRequest().url();
1137
1138     ASSERT(m_frame->document());
1139     if (!request.requester()->canDisplay(url)) {
1140         reportLocalLoadFailed(m_frame, url.string());
1141         return;
1142     }
1143
1144     String argsReferrer = request.resourceRequest().httpReferrer();
1145     if (argsReferrer.isEmpty())
1146         argsReferrer = outgoingReferrer();
1147
1148     String referrer = SecurityPolicy::generateReferrerHeader(m_frame->document()->referrerPolicy(), url, argsReferrer);
1149     if (shouldSendReferrer == NeverSendReferrer)
1150         referrer = String();
1151     
1152     FrameLoadType loadType;
1153     if (request.resourceRequest().cachePolicy() == ReloadIgnoringCacheData)
1154         loadType = FrameLoadTypeReload;
1155     else if (lockBackForwardList)
1156         loadType = FrameLoadTypeRedirectWithLockedBackForwardList;
1157     else
1158         loadType = FrameLoadTypeStandard;
1159
1160     if (request.resourceRequest().httpMethod() == "POST")
1161         loadPostRequest(request.resourceRequest(), referrer, request.frameName(), lockHistory, loadType, event, formState.get());
1162     else
1163         loadURL(request.resourceRequest().url(), referrer, request.frameName(), lockHistory, loadType, event, formState.get());
1164
1165     // FIXME: It's possible this targetFrame will not be the same frame that was targeted by the actual
1166     // load if frame names have changed.
1167     Frame* sourceFrame = formState ? formState->sourceDocument()->frame() : m_frame;
1168     if (!sourceFrame)
1169         sourceFrame = m_frame;
1170     Frame* targetFrame = sourceFrame->loader()->findFrameForNavigation(request.frameName());
1171     if (targetFrame && targetFrame != sourceFrame) {
1172         if (Page* page = targetFrame->page())
1173             page->chrome()->focus();
1174     }
1175 }
1176
1177 void FrameLoader::loadURL(const KURL& newURL, const String& referrer, const String& frameName, bool lockHistory, FrameLoadType newLoadType,
1178     PassRefPtr<Event> event, PassRefPtr<FormState> prpFormState)
1179 {
1180     if (m_inStopAllLoaders)
1181         return;
1182
1183     RefPtr<FormState> formState = prpFormState;
1184     bool isFormSubmission = formState;
1185     
1186     ResourceRequest request(newURL);
1187     if (!referrer.isEmpty()) {
1188         request.setHTTPReferrer(referrer);
1189         RefPtr<SecurityOrigin> referrerOrigin = SecurityOrigin::createFromString(referrer);
1190         addHTTPOriginIfNeeded(request, referrerOrigin->toString());
1191     }
1192     addExtraFieldsToRequest(request, newLoadType, true);
1193     if (newLoadType == FrameLoadTypeReload || newLoadType == FrameLoadTypeReloadFromOrigin)
1194         request.setCachePolicy(ReloadIgnoringCacheData);
1195
1196     ASSERT(newLoadType != FrameLoadTypeSame);
1197
1198     // The search for a target frame is done earlier in the case of form submission.
1199     Frame* targetFrame = isFormSubmission ? 0 : findFrameForNavigation(frameName);
1200     if (targetFrame && targetFrame != m_frame) {
1201         targetFrame->loader()->loadURL(newURL, referrer, "_self", lockHistory, newLoadType, event, formState.release());
1202         return;
1203     }
1204
1205     if (m_pageDismissalEventBeingDispatched != NoDismissal)
1206         return;
1207
1208     NavigationAction action(request, newLoadType, isFormSubmission, event);
1209
1210     if (!targetFrame && !frameName.isEmpty()) {
1211         policyChecker()->checkNewWindowPolicy(action, FrameLoader::callContinueLoadAfterNewWindowPolicy,
1212             request, formState.release(), frameName, this);
1213         return;
1214     }
1215
1216     RefPtr<DocumentLoader> oldDocumentLoader = m_documentLoader;
1217
1218     bool sameURL = shouldTreatURLAsSameAsCurrent(newURL);
1219     const String& httpMethod = request.httpMethod();
1220     
1221     // Make sure to do scroll to fragment processing even if the URL is
1222     // exactly the same so pages with '#' links and DHTML side effects
1223     // work properly.
1224     if (shouldPerformFragmentNavigation(isFormSubmission, httpMethod, newLoadType, newURL)) {
1225         oldDocumentLoader->setTriggeringAction(action);
1226         policyChecker()->stopCheck();
1227         policyChecker()->setLoadType(newLoadType);
1228         policyChecker()->checkNavigationPolicy(request, oldDocumentLoader.get(), formState.release(),
1229             callContinueFragmentScrollAfterNavigationPolicy, this);
1230     } else {
1231         // must grab this now, since this load may stop the previous load and clear this flag
1232         bool isRedirect = m_quickRedirectComing;
1233         loadWithNavigationAction(request, action, lockHistory, newLoadType, formState.release());
1234         if (isRedirect) {
1235             m_quickRedirectComing = false;
1236             if (m_provisionalDocumentLoader)
1237                 m_provisionalDocumentLoader->setIsClientRedirect(true);
1238         } else if (sameURL && newLoadType != FrameLoadTypeReload && newLoadType != FrameLoadTypeReloadFromOrigin)
1239             // Example of this case are sites that reload the same URL with a different cookie
1240             // driving the generated content, or a master frame with links that drive a target
1241             // frame, where the user has clicked on the same link repeatedly.
1242             m_loadType = FrameLoadTypeSame;
1243     }
1244 }
1245
1246 SubstituteData FrameLoader::defaultSubstituteDataForURL(const KURL& url)
1247 {
1248     if (!shouldTreatURLAsSrcdocDocument(url))
1249         return SubstituteData();
1250     String srcdoc = m_frame->ownerElement()->fastGetAttribute(srcdocAttr);
1251     ASSERT(!srcdoc.isNull());
1252     CString encodedSrcdoc = srcdoc.utf8();
1253     return SubstituteData(SharedBuffer::create(encodedSrcdoc.data(), encodedSrcdoc.length()), "text/html", "UTF-8", KURL());
1254 }
1255
1256 void FrameLoader::load(const ResourceRequest& request, bool lockHistory)
1257 {
1258     load(request, defaultSubstituteDataForURL(request.url()), lockHistory);
1259 }
1260
1261 void FrameLoader::load(const ResourceRequest& request, const SubstituteData& substituteData, bool lockHistory)
1262 {
1263     if (m_inStopAllLoaders)
1264         return;
1265         
1266     // FIXME: is this the right place to reset loadType? Perhaps this should be done after loading is finished or aborted.
1267     m_loadType = FrameLoadTypeStandard;
1268     RefPtr<DocumentLoader> loader = m_client->createDocumentLoader(request, substituteData);
1269     if (lockHistory && m_documentLoader)
1270         loader->setClientRedirectSourceForHistory(m_documentLoader->didCreateGlobalHistoryEntry() ? m_documentLoader->urlForHistory().string() : m_documentLoader->clientRedirectSourceForHistory());
1271     load(loader.get());
1272 }
1273
1274 void FrameLoader::load(const ResourceRequest& request, const String& frameName, bool lockHistory)
1275 {
1276     if (frameName.isEmpty()) {
1277         load(request, lockHistory);
1278         return;
1279     }
1280
1281     Frame* frame = findFrameForNavigation(frameName);
1282     if (frame) {
1283         frame->loader()->load(request, lockHistory);
1284         return;
1285     }
1286
1287     policyChecker()->checkNewWindowPolicy(NavigationAction(request, NavigationTypeOther), FrameLoader::callContinueLoadAfterNewWindowPolicy, request, 0, frameName, this);
1288 }
1289
1290 void FrameLoader::loadWithNavigationAction(const ResourceRequest& request, const NavigationAction& action, bool lockHistory, FrameLoadType type, PassRefPtr<FormState> formState)
1291 {
1292     RefPtr<DocumentLoader> loader = m_client->createDocumentLoader(request, defaultSubstituteDataForURL(request.url()));
1293     if (lockHistory && m_documentLoader)
1294         loader->setClientRedirectSourceForHistory(m_documentLoader->didCreateGlobalHistoryEntry() ? m_documentLoader->urlForHistory().string() : m_documentLoader->clientRedirectSourceForHistory());
1295
1296     loader->setTriggeringAction(action);
1297     if (m_documentLoader)
1298         loader->setOverrideEncoding(m_documentLoader->overrideEncoding());
1299
1300     loadWithDocumentLoader(loader.get(), type, formState);
1301 }
1302
1303 void FrameLoader::load(DocumentLoader* newDocumentLoader)
1304 {
1305     ResourceRequest& r = newDocumentLoader->request();
1306     addExtraFieldsToMainResourceRequest(r);
1307     FrameLoadType type;
1308
1309     if (shouldTreatURLAsSameAsCurrent(newDocumentLoader->originalRequest().url())) {
1310         r.setCachePolicy(ReloadIgnoringCacheData);
1311         type = FrameLoadTypeSame;
1312     } else
1313         type = FrameLoadTypeStandard;
1314
1315     if (m_documentLoader)
1316         newDocumentLoader->setOverrideEncoding(m_documentLoader->overrideEncoding());
1317     
1318     // When we loading alternate content for an unreachable URL that we're
1319     // visiting in the history list, we treat it as a reload so the history list 
1320     // is appropriately maintained.
1321     //
1322     // FIXME: This seems like a dangerous overloading of the meaning of "FrameLoadTypeReload" ...
1323     // shouldn't a more explicit type of reload be defined, that means roughly 
1324     // "load without affecting history" ? 
1325     if (shouldReloadToHandleUnreachableURL(newDocumentLoader)) {
1326         // shouldReloadToHandleUnreachableURL() returns true only when the original load type is back-forward.
1327         // In this case we should save the document state now. Otherwise the state can be lost because load type is
1328         // changed and updateForBackForwardNavigation() will not be called when loading is committed.
1329         history()->saveDocumentAndScrollState();
1330
1331         ASSERT(type == FrameLoadTypeStandard);
1332         type = FrameLoadTypeReload;
1333     }
1334
1335     loadWithDocumentLoader(newDocumentLoader, type, 0);
1336 }
1337
1338 void FrameLoader::loadWithDocumentLoader(DocumentLoader* loader, FrameLoadType type, PassRefPtr<FormState> prpFormState)
1339 {
1340     // Retain because dispatchBeforeLoadEvent may release the last reference to it.
1341     RefPtr<Frame> protect(m_frame);
1342
1343     ASSERT(m_client->hasWebView());
1344
1345     // Unfortunately the view must be non-nil, this is ultimately due
1346     // to parser requiring a FrameView.  We should fix this dependency.
1347
1348     ASSERT(m_frame->view());
1349
1350     if (m_pageDismissalEventBeingDispatched != NoDismissal)
1351         return;
1352
1353     if (m_frame->document())
1354         m_previousUrl = m_frame->document()->url();
1355
1356     policyChecker()->setLoadType(type);
1357     RefPtr<FormState> formState = prpFormState;
1358     bool isFormSubmission = formState;
1359
1360     const KURL& newURL = loader->request().url();
1361     const String& httpMethod = loader->request().httpMethod();
1362
1363     if (shouldPerformFragmentNavigation(isFormSubmission, httpMethod, policyChecker()->loadType(), newURL)) {
1364         RefPtr<DocumentLoader> oldDocumentLoader = m_documentLoader;
1365         NavigationAction action(loader->request(), policyChecker()->loadType(), isFormSubmission);
1366
1367         oldDocumentLoader->setTriggeringAction(action);
1368         policyChecker()->stopCheck();
1369         policyChecker()->checkNavigationPolicy(loader->request(), oldDocumentLoader.get(), formState,
1370             callContinueFragmentScrollAfterNavigationPolicy, this);
1371     } else {
1372         if (Frame* parent = m_frame->tree()->parent())
1373             loader->setOverrideEncoding(parent->loader()->documentLoader()->overrideEncoding());
1374
1375         policyChecker()->stopCheck();
1376         setPolicyDocumentLoader(loader);
1377         if (loader->triggeringAction().isEmpty())
1378             loader->setTriggeringAction(NavigationAction(loader->request(), policyChecker()->loadType(), isFormSubmission));
1379
1380         if (Element* ownerElement = m_frame->ownerElement()) {
1381             // We skip dispatching the beforeload event if we've already
1382             // committed a real document load because the event would leak
1383             // subsequent activity by the frame which the parent frame isn't
1384             // supposed to learn. For example, if the child frame navigated to
1385             // a new URL, the parent frame shouldn't learn the URL.
1386             if (!m_stateMachine.committedFirstRealDocumentLoad()
1387                 && !ownerElement->dispatchBeforeLoadEvent(loader->request().url().string())) {
1388                 continueLoadAfterNavigationPolicy(loader->request(), formState, false);
1389                 return;
1390             }
1391         }
1392
1393         policyChecker()->checkNavigationPolicy(loader->request(), loader, formState,
1394             callContinueLoadAfterNavigationPolicy, this);
1395     }
1396 }
1397
1398 void FrameLoader::reportLocalLoadFailed(Frame* frame, const String& url)
1399 {
1400     ASSERT(!url.isEmpty());
1401     if (!frame)
1402         return;
1403
1404     frame->domWindow()->console()->addMessage(JSMessageSource, LogMessageType, ErrorMessageLevel, "Not allowed to load local resource: " + url);
1405 }
1406
1407 const ResourceRequest& FrameLoader::initialRequest() const
1408 {
1409     return activeDocumentLoader()->originalRequest();
1410 }
1411
1412 bool FrameLoader::willLoadMediaElementURL(KURL& url)
1413 {
1414     ResourceRequest request(url);
1415
1416     unsigned long identifier;
1417     ResourceError error;
1418     requestFromDelegate(request, identifier, error);
1419     notifier()->sendRemainingDelegateMessages(m_documentLoader.get(), identifier, ResourceResponse(url, String(), -1, String(), String()), 0, -1, -1, error);
1420
1421     url = request.url();
1422
1423     return error.isNull();
1424 }
1425
1426 bool FrameLoader::shouldReloadToHandleUnreachableURL(DocumentLoader* docLoader)
1427 {
1428     KURL unreachableURL = docLoader->unreachableURL();
1429
1430     if (unreachableURL.isEmpty())
1431         return false;
1432
1433     if (!isBackForwardLoadType(policyChecker()->loadType()))
1434         return false;
1435
1436     // We only treat unreachableURLs specially during the delegate callbacks
1437     // for provisional load errors and navigation policy decisions. The former
1438     // case handles well-formed URLs that can't be loaded, and the latter
1439     // case handles malformed URLs and unknown schemes. Loading alternate content
1440     // at other times behaves like a standard load.
1441     DocumentLoader* compareDocumentLoader = 0;
1442     if (policyChecker()->delegateIsDecidingNavigationPolicy() || policyChecker()->delegateIsHandlingUnimplementablePolicy())
1443         compareDocumentLoader = m_policyDocumentLoader.get();
1444     else if (m_delegateIsHandlingProvisionalLoadError)
1445         compareDocumentLoader = m_provisionalDocumentLoader.get();
1446
1447     return compareDocumentLoader && unreachableURL == compareDocumentLoader->request().url();
1448 }
1449
1450 void FrameLoader::reloadWithOverrideEncoding(const String& encoding)
1451 {
1452     if (!m_documentLoader)
1453         return;
1454
1455     ResourceRequest request = m_documentLoader->request();
1456     KURL unreachableURL = m_documentLoader->unreachableURL();
1457     if (!unreachableURL.isEmpty())
1458         request.setURL(unreachableURL);
1459
1460     request.setCachePolicy(ReturnCacheDataElseLoad);
1461
1462     RefPtr<DocumentLoader> loader = m_client->createDocumentLoader(request, defaultSubstituteDataForURL(request.url()));
1463     setPolicyDocumentLoader(loader.get());
1464
1465     loader->setOverrideEncoding(encoding);
1466
1467     loadWithDocumentLoader(loader.get(), FrameLoadTypeReload, 0);
1468 }
1469
1470 void FrameLoader::reload(bool endToEndReload)
1471 {
1472     if (!m_documentLoader)
1473         return;
1474
1475     // If a window is created by javascript, its main frame can have an empty but non-nil URL.
1476     // Reloading in this case will lose the current contents (see 4151001).
1477     if (m_documentLoader->request().url().isEmpty())
1478         return;
1479
1480     ResourceRequest initialRequest = m_documentLoader->request();
1481
1482     // Replace error-page URL with the URL we were trying to reach.
1483     KURL unreachableURL = m_documentLoader->unreachableURL();
1484     if (!unreachableURL.isEmpty())
1485         initialRequest.setURL(unreachableURL);
1486     
1487     // Create a new document loader for the reload, this will become m_documentLoader eventually,
1488     // but first it has to be the "policy" document loader, and then the "provisional" document loader.
1489     RefPtr<DocumentLoader> loader = m_client->createDocumentLoader(initialRequest, defaultSubstituteDataForURL(initialRequest.url()));
1490
1491     ResourceRequest& request = loader->request();
1492
1493     // FIXME: We don't have a mechanism to revalidate the main resource without reloading at the moment.
1494     request.setCachePolicy(ReloadIgnoringCacheData);
1495
1496     // If we're about to re-post, set up action so the application can warn the user.
1497     if (request.httpMethod() == "POST")
1498         loader->setTriggeringAction(NavigationAction(request, NavigationTypeFormResubmitted));
1499
1500     loader->setOverrideEncoding(m_documentLoader->overrideEncoding());
1501     
1502     loadWithDocumentLoader(loader.get(), endToEndReload ? FrameLoadTypeReloadFromOrigin : FrameLoadTypeReload, 0);
1503 }
1504
1505 void FrameLoader::stopAllLoaders(ClearProvisionalItemPolicy clearProvisionalItemPolicy)
1506 {
1507     ASSERT(!m_frame->document() || !m_frame->document()->inPageCache());
1508     if (m_pageDismissalEventBeingDispatched != NoDismissal)
1509         return;
1510
1511     // If this method is called from within this method, infinite recursion can occur (3442218). Avoid this.
1512     if (m_inStopAllLoaders)
1513         return;
1514
1515     m_inStopAllLoaders = true;
1516
1517     policyChecker()->stopCheck();
1518
1519     // If no new load is in progress, we should clear the provisional item from history
1520     // before we call stopLoading.
1521     if (clearProvisionalItemPolicy == ShouldClearProvisionalItem)
1522         history()->setProvisionalItem(0);
1523
1524     for (RefPtr<Frame> child = m_frame->tree()->firstChild(); child; child = child->tree()->nextSibling())
1525         child->loader()->stopAllLoaders(clearProvisionalItemPolicy);
1526     if (m_provisionalDocumentLoader)
1527         m_provisionalDocumentLoader->stopLoading();
1528     if (m_documentLoader)
1529         m_documentLoader->stopLoading();
1530
1531     setProvisionalDocumentLoader(0);
1532     if (m_state == FrameStateProvisional)
1533         setState(FrameStateComplete);
1534
1535     m_checkTimer.stop();
1536
1537     m_inStopAllLoaders = false;    
1538 }
1539
1540 void FrameLoader::stopForUserCancel(bool deferCheckLoadComplete)
1541 {
1542     stopAllLoaders();
1543     
1544     if (deferCheckLoadComplete)
1545         scheduleCheckLoadComplete();
1546     else if (m_frame->page())
1547         checkLoadComplete();
1548 }
1549
1550 DocumentLoader* FrameLoader::activeDocumentLoader() const
1551 {
1552     if (m_state == FrameStateProvisional)
1553         return m_provisionalDocumentLoader.get();
1554     return m_documentLoader.get();
1555 }
1556
1557 bool FrameLoader::isLoading() const
1558 {
1559     DocumentLoader* docLoader = activeDocumentLoader();
1560     if (!docLoader)
1561         return false;
1562     return docLoader->isLoading();
1563 }
1564
1565 bool FrameLoader::frameHasLoaded() const
1566 {
1567     return m_stateMachine.committedFirstRealDocumentLoad() || (m_provisionalDocumentLoader && !m_stateMachine.creatingInitialEmptyDocument()); 
1568 }
1569
1570 void FrameLoader::setDocumentLoader(DocumentLoader* loader)
1571 {
1572     if (!loader && !m_documentLoader)
1573         return;
1574     
1575     ASSERT(loader != m_documentLoader);
1576     ASSERT(!loader || loader->frameLoader() == this);
1577
1578     m_client->prepareForDataSourceReplacement();
1579     detachChildren();
1580     if (m_documentLoader)
1581         m_documentLoader->detachFromFrame();
1582
1583     m_documentLoader = loader;
1584
1585     // The following abomination is brought to you by the unload event.
1586     // The detachChildren() call above may trigger a child frame's unload event,
1587     // which could do something obnoxious like call document.write("") on
1588     // the main frame, which results in detaching children while detaching children.
1589     // This can cause the new m_documentLoader to be detached from its Frame*, but still
1590     // be alive. To make matters worse, DocumentLoaders with a null Frame* aren't supposed
1591     // to happen when they're still alive (and many places below us on the stack think the
1592     // DocumentLoader is still usable). Ergo, we reattach loader to its Frame, and pretend
1593     // like nothing ever happened.
1594     if (m_documentLoader && !m_documentLoader->frame()) {
1595         ASSERT(!m_documentLoader->isLoading());
1596         m_documentLoader->setFrame(m_frame);
1597     }
1598 }
1599
1600 void FrameLoader::setPolicyDocumentLoader(DocumentLoader* loader)
1601 {
1602     if (m_policyDocumentLoader == loader)
1603         return;
1604
1605     ASSERT(m_frame);
1606     if (loader)
1607         loader->setFrame(m_frame);
1608     if (m_policyDocumentLoader
1609             && m_policyDocumentLoader != m_provisionalDocumentLoader
1610             && m_policyDocumentLoader != m_documentLoader)
1611         m_policyDocumentLoader->detachFromFrame();
1612
1613     m_policyDocumentLoader = loader;
1614 }
1615
1616 void FrameLoader::setProvisionalDocumentLoader(DocumentLoader* loader)
1617 {
1618     ASSERT(!loader || !m_provisionalDocumentLoader);
1619     ASSERT(!loader || loader->frameLoader() == this);
1620
1621     if (m_provisionalDocumentLoader && m_provisionalDocumentLoader != m_documentLoader)
1622         m_provisionalDocumentLoader->detachFromFrame();
1623
1624     m_provisionalDocumentLoader = loader;
1625 }
1626
1627 double FrameLoader::timeOfLastCompletedLoad()
1628 {
1629     return storedTimeOfLastCompletedLoad;
1630 }
1631
1632 void FrameLoader::setState(FrameState newState)
1633 {    
1634     m_state = newState;
1635     
1636     if (newState == FrameStateProvisional)
1637         provisionalLoadStarted();
1638     else if (newState == FrameStateComplete) {
1639         frameLoadCompleted();
1640         storedTimeOfLastCompletedLoad = currentTime();
1641         if (m_documentLoader)
1642             m_documentLoader->stopRecordingResponses();
1643     }
1644 }
1645
1646 void FrameLoader::clearProvisionalLoad()
1647 {
1648     if (Page* page = m_frame->page())
1649         page->progress()->progressCompleted(m_frame);
1650     setProvisionalDocumentLoader(0);
1651     setState(FrameStateComplete);
1652 }
1653
1654 void FrameLoader::commitProvisionalLoad()
1655 {
1656     RefPtr<CachedPage> cachedPage = m_loadingFromCachedPage ? pageCache()->get(history()->provisionalItem()) : 0;
1657     RefPtr<DocumentLoader> pdl = m_provisionalDocumentLoader;
1658
1659     LOG(PageCache, "WebCoreLoading %s: About to commit provisional load from previous URL '%s' to new URL '%s'", m_frame->tree()->uniqueName().string().utf8().data(),
1660         m_frame->document() ? m_frame->document()->url().string().utf8().data() : "", 
1661         pdl ? pdl->url().string().utf8().data() : "<no provisional DocumentLoader>");
1662
1663     // Check to see if we need to cache the page we are navigating away from into the back/forward cache.
1664     // We are doing this here because we know for sure that a new page is about to be loaded.
1665     HistoryItem* item = history()->currentItem();
1666     if (!m_frame->tree()->parent() && PageCache::canCache(m_frame->page()) && !item->isInPageCache())
1667         pageCache()->add(item, m_frame->page());
1668
1669     if (m_loadType != FrameLoadTypeReplace)
1670         closeOldDataSources();
1671
1672     if (!cachedPage && !m_stateMachine.creatingInitialEmptyDocument())
1673         m_client->makeRepresentation(pdl.get());
1674
1675     transitionToCommitted(cachedPage);
1676
1677     if (pdl) {
1678         // Check if the destination page is allowed to access the previous page's timing information.
1679         RefPtr<SecurityOrigin> securityOrigin = SecurityOrigin::create(pdl->request().url());
1680         m_documentLoader->timing()->setHasSameOriginAsPreviousDocument(securityOrigin->canRequest(m_previousUrl));
1681     }
1682
1683     // Call clientRedirectCancelledOrFinished() here so that the frame load delegate is notified that the redirect's
1684     // status has changed, if there was a redirect.  The frame load delegate may have saved some state about
1685     // the redirect in its -webView:willPerformClientRedirectToURL:delay:fireDate:forFrame:.  Since we are
1686     // just about to commit a new page, there cannot possibly be a pending redirect at this point.
1687     if (m_sentRedirectNotification)
1688         clientRedirectCancelledOrFinished(false);
1689     
1690     if (cachedPage && cachedPage->document()) {
1691         prepareForCachedPageRestore();
1692         cachedPage->restore(m_frame->page());
1693
1694         dispatchDidCommitLoad();
1695
1696         // If we have a title let the WebView know about it. 
1697         StringWithDirection title = m_documentLoader->title();
1698         if (!title.isNull())
1699             m_client->dispatchDidReceiveTitle(title);
1700
1701         checkCompleted();
1702     } else
1703         didOpenURL();
1704
1705     LOG(Loading, "WebCoreLoading %s: Finished committing provisional load to URL %s", m_frame->tree()->uniqueName().string().utf8().data(),
1706         m_frame->document() ? m_frame->document()->url().string().utf8().data() : "");
1707
1708     if (m_loadType == FrameLoadTypeStandard && m_documentLoader->isClientRedirect())
1709         history()->updateForClientRedirect();
1710
1711     if (m_loadingFromCachedPage) {
1712         m_frame->document()->documentDidResumeFromPageCache();
1713         
1714         // Force a layout to update view size and thereby update scrollbars.
1715         m_frame->view()->forceLayout();
1716
1717         const ResponseVector& responses = m_documentLoader->responses();
1718         size_t count = responses.size();
1719         for (size_t i = 0; i < count; i++) {
1720             const ResourceResponse& response = responses[i];
1721             // FIXME: If the WebKit client changes or cancels the request, this is not respected.
1722             ResourceError error;
1723             unsigned long identifier;
1724             ResourceRequest request(response.url());
1725             requestFromDelegate(request, identifier, error);
1726             // FIXME: If we get a resource with more than 2B bytes, this code won't do the right thing.
1727             // However, with today's computers and networking speeds, this won't happen in practice.
1728             // Could be an issue with a giant local file.
1729             notifier()->sendRemainingDelegateMessages(m_documentLoader.get(), identifier, response, 0, static_cast<int>(response.expectedContentLength()), 0, error);
1730         }
1731         
1732         pageCache()->remove(history()->currentItem());
1733
1734         // FIXME: Why only this frame and not parent frames?
1735         checkLoadCompleteForThisFrame();
1736     }
1737 }
1738
1739 void FrameLoader::transitionToCommitted(PassRefPtr<CachedPage> cachedPage)
1740 {
1741     ASSERT(m_client->hasWebView());
1742     ASSERT(m_state == FrameStateProvisional);
1743
1744     if (m_state != FrameStateProvisional)
1745         return;
1746
1747     if (FrameView* view = m_frame->view()) {
1748         if (ScrollAnimator* scrollAnimator = view->existingScrollAnimator())
1749             scrollAnimator->cancelAnimations();
1750     }
1751
1752     m_client->setCopiesOnScroll();
1753     history()->updateForCommit();
1754
1755     // The call to closeURL() invokes the unload event handler, which can execute arbitrary
1756     // JavaScript. If the script initiates a new load, we need to abandon the current load,
1757     // or the two will stomp each other.
1758     DocumentLoader* pdl = m_provisionalDocumentLoader.get();
1759     if (m_documentLoader)
1760         closeURL();
1761     if (pdl != m_provisionalDocumentLoader)
1762         return;
1763
1764     // Nothing else can interupt this commit - set the Provisional->Committed transition in stone
1765     if (m_documentLoader)
1766         m_documentLoader->stopLoadingSubresources();
1767     if (m_documentLoader)
1768         m_documentLoader->stopLoadingPlugIns();
1769
1770     setDocumentLoader(m_provisionalDocumentLoader.get());
1771     setProvisionalDocumentLoader(0);
1772     setState(FrameStateCommittedPage);
1773
1774 #if ENABLE(TOUCH_EVENTS)
1775     if (isLoadingMainFrame())
1776         m_frame->page()->chrome()->client()->needTouchEvents(false);
1777 #endif
1778
1779     // Handle adding the URL to the back/forward list.
1780     DocumentLoader* dl = m_documentLoader.get();
1781
1782     switch (m_loadType) {
1783         case FrameLoadTypeForward:
1784         case FrameLoadTypeBack:
1785         case FrameLoadTypeIndexedBackForward:
1786             if (m_frame->page()) {
1787                 // If the first load within a frame is a navigation within a back/forward list that was attached
1788                 // without any of the items being loaded then we need to update the history in a similar manner as
1789                 // for a standard load with the exception of updating the back/forward list (<rdar://problem/8091103>).
1790                 if (!m_stateMachine.committedFirstRealDocumentLoad() && isLoadingMainFrame())
1791                     history()->updateForStandardLoad(HistoryController::UpdateAllExceptBackForwardList);
1792
1793                 history()->updateForBackForwardNavigation();
1794
1795                 // For cached pages, CachedFrame::restore will take care of firing the popstate event with the history item's state object
1796                 if (history()->currentItem() && !cachedPage)
1797                     m_pendingStateObject = history()->currentItem()->stateObject();
1798
1799                 // Create a document view for this document, or used the cached view.
1800                 if (cachedPage) {
1801                     DocumentLoader* cachedDocumentLoader = cachedPage->documentLoader();
1802                     ASSERT(cachedDocumentLoader);
1803                     cachedDocumentLoader->setFrame(m_frame);
1804                     m_client->transitionToCommittedFromCachedFrame(cachedPage->cachedMainFrame());
1805
1806                 } else
1807                     m_client->transitionToCommittedForNewPage();
1808             }
1809             break;
1810
1811         case FrameLoadTypeReload:
1812         case FrameLoadTypeReloadFromOrigin:
1813         case FrameLoadTypeSame:
1814         case FrameLoadTypeReplace:
1815             history()->updateForReload();
1816             m_client->transitionToCommittedForNewPage();
1817             break;
1818
1819         case FrameLoadTypeStandard:
1820             history()->updateForStandardLoad();
1821             if (m_frame->view())
1822                 m_frame->view()->setScrollbarsSuppressed(true);
1823             m_client->transitionToCommittedForNewPage();
1824             break;
1825
1826         case FrameLoadTypeRedirectWithLockedBackForwardList:
1827             history()->updateForRedirectWithLockedBackForwardList();
1828             m_client->transitionToCommittedForNewPage();
1829             break;
1830
1831         // FIXME Remove this check when dummy ds is removed (whatever "dummy ds" is).
1832         // An exception should be thrown if we're in the FrameLoadTypeUninitialized state.
1833         default:
1834             ASSERT_NOT_REACHED();
1835     }
1836
1837     m_documentLoader->writer()->setMIMEType(dl->responseMIMEType());
1838
1839     // Tell the client we've committed this URL.
1840     ASSERT(m_frame->view());
1841
1842     if (m_stateMachine.creatingInitialEmptyDocument())
1843         return;
1844
1845     if (!m_stateMachine.committedFirstRealDocumentLoad())
1846         m_stateMachine.advanceTo(FrameLoaderStateMachine::DisplayingInitialEmptyDocumentPostCommit);
1847
1848     if (!m_client->hasHTMLView())
1849         receivedFirstData();
1850 }
1851
1852 void FrameLoader::clientRedirectCancelledOrFinished(bool cancelWithLoadInProgress)
1853 {
1854     // Note that -webView:didCancelClientRedirectForFrame: is called on the frame load delegate even if
1855     // the redirect succeeded.  We should either rename this API, or add a new method, like
1856     // -webView:didFinishClientRedirectForFrame:
1857     m_client->dispatchDidCancelClientRedirect();
1858
1859     if (!cancelWithLoadInProgress)
1860         m_quickRedirectComing = false;
1861
1862     m_sentRedirectNotification = false;
1863 }
1864
1865 void FrameLoader::clientRedirected(const KURL& url, double seconds, double fireDate, bool lockBackForwardList)
1866 {
1867     m_client->dispatchWillPerformClientRedirect(url, seconds, fireDate);
1868     
1869     // Remember that we sent a redirect notification to the frame load delegate so that when we commit
1870     // the next provisional load, we can send a corresponding -webView:didCancelClientRedirectForFrame:
1871     m_sentRedirectNotification = true;
1872     
1873     // If a "quick" redirect comes in, we set a special mode so we treat the next
1874     // load as part of the original navigation. If we don't have a document loader, we have
1875     // no "original" load on which to base a redirect, so we treat the redirect as a normal load.
1876     // Loads triggered by JavaScript form submissions never count as quick redirects.
1877     m_quickRedirectComing = (lockBackForwardList || history()->currentItemShouldBeReplaced()) && m_documentLoader && !m_isExecutingJavaScriptFormAction;
1878 }
1879
1880 bool FrameLoader::shouldReload(const KURL& currentURL, const KURL& destinationURL)
1881 {
1882     // This function implements the rule: "Don't reload if navigating by fragment within
1883     // the same URL, but do reload if going to a new URL or to the same URL with no
1884     // fragment identifier at all."
1885     if (!destinationURL.hasFragmentIdentifier())
1886         return true;
1887     return !equalIgnoringFragmentIdentifier(currentURL, destinationURL);
1888 }
1889
1890 void FrameLoader::closeOldDataSources()
1891 {
1892     // FIXME: Is it important for this traversal to be postorder instead of preorder?
1893     // If so, add helpers for postorder traversal, and use them. If not, then lets not
1894     // use a recursive algorithm here.
1895     for (Frame* child = m_frame->tree()->firstChild(); child; child = child->tree()->nextSibling())
1896         child->loader()->closeOldDataSources();
1897     
1898     if (m_documentLoader)
1899         m_client->dispatchWillClose();
1900
1901     m_client->setMainFrameDocumentReady(false); // stop giving out the actual DOMDocument to observers
1902 }
1903
1904 void FrameLoader::prepareForCachedPageRestore()
1905 {
1906     ASSERT(!m_frame->tree()->parent());
1907     ASSERT(m_frame->page());
1908     ASSERT(m_frame->page()->mainFrame() == m_frame);
1909
1910     m_frame->navigationScheduler()->cancel();
1911
1912     // We still have to close the previous part page.
1913     closeURL();
1914     
1915     // Delete old status bar messages (if it _was_ activated on last URL).
1916     if (m_frame->script()->canExecuteScripts(NotAboutToExecuteScript)) {
1917         if (DOMWindow* window = m_frame->existingDOMWindow()) {
1918             window->setStatus(String());
1919             window->setDefaultStatus(String());
1920         }
1921     }
1922 }
1923
1924 void FrameLoader::open(CachedFrameBase& cachedFrame)
1925 {
1926     m_isComplete = false;
1927     
1928     // Don't re-emit the load event.
1929     m_didCallImplicitClose = true;
1930
1931     KURL url = cachedFrame.url();
1932
1933     // FIXME: I suspect this block of code doesn't do anything.
1934     if (url.protocolIsInHTTPFamily() && !url.host().isEmpty() && url.path().isEmpty())
1935         url.setPath("/");
1936
1937     m_hasReceivedFirstData = false;
1938
1939     started();
1940     clear(true, true, cachedFrame.isMainFrame());
1941
1942     Document* document = cachedFrame.document();
1943     ASSERT(document);
1944     document->setInPageCache(false);
1945
1946     m_needsClear = true;
1947     m_isComplete = false;
1948     m_didCallImplicitClose = false;
1949     m_outgoingReferrer = url.string();
1950
1951     FrameView* view = cachedFrame.view();
1952     
1953     // When navigating to a CachedFrame its FrameView should never be null.  If it is we'll crash in creative ways downstream.
1954     ASSERT(view);
1955     view->setWasScrolledByUser(false);
1956
1957     // Use the current ScrollView's frame rect.
1958     if (m_frame->view())
1959         view->setFrameRect(m_frame->view()->frameRect());
1960     m_frame->setView(view);
1961     
1962     m_frame->setDocument(document);
1963     m_frame->setDOMWindow(cachedFrame.domWindow());
1964     m_frame->domWindow()->resumeFromPageCache();
1965     m_frame->domWindow()->setURL(document->url());
1966     m_frame->domWindow()->setSecurityOrigin(document->securityOrigin());
1967
1968     updateFirstPartyForCookies();
1969
1970     cachedFrame.restore();
1971 }
1972
1973 bool FrameLoader::isHostedByObjectElement() const
1974 {
1975     HTMLFrameOwnerElement* owner = m_frame->ownerElement();
1976     return owner && owner->hasTagName(objectTag);
1977 }
1978
1979 bool FrameLoader::isLoadingMainFrame() const
1980 {
1981     Page* page = m_frame->page();
1982     return page && m_frame == page->mainFrame();
1983 }
1984
1985 bool FrameLoader::isReplacing() const
1986 {
1987     return m_loadType == FrameLoadTypeReplace;
1988 }
1989
1990 void FrameLoader::setReplacing()
1991 {
1992     m_loadType = FrameLoadTypeReplace;
1993 }
1994
1995 bool FrameLoader::subframeIsLoading() const
1996 {
1997     // It's most likely that the last added frame is the last to load so we walk backwards.
1998     for (Frame* child = m_frame->tree()->lastChild(); child; child = child->tree()->previousSibling()) {
1999         FrameLoader* childLoader = child->loader();
2000         DocumentLoader* documentLoader = childLoader->documentLoader();
2001         if (documentLoader && documentLoader->isLoadingInAPISense())
2002             return true;
2003         documentLoader = childLoader->provisionalDocumentLoader();
2004         if (documentLoader && documentLoader->isLoadingInAPISense())
2005             return true;
2006         documentLoader = childLoader->policyDocumentLoader();
2007         if (documentLoader)
2008             return true;
2009     }
2010     return false;
2011 }
2012
2013 void FrameLoader::willChangeTitle(DocumentLoader* loader)
2014 {
2015     m_client->willChangeTitle(loader);
2016 }
2017
2018 FrameLoadType FrameLoader::loadType() const
2019 {
2020     return m_loadType;
2021 }
2022     
2023 CachePolicy FrameLoader::subresourceCachePolicy() const
2024 {
2025     if (m_isComplete)
2026         return CachePolicyVerify;
2027
2028     if (m_loadType == FrameLoadTypeReloadFromOrigin)
2029         return CachePolicyReload;
2030
2031     if (Frame* parentFrame = m_frame->tree()->parent()) {
2032         CachePolicy parentCachePolicy = parentFrame->loader()->subresourceCachePolicy();
2033         if (parentCachePolicy != CachePolicyVerify)
2034             return parentCachePolicy;
2035     }
2036     
2037     if (m_loadType == FrameLoadTypeReload)
2038         return CachePolicyRevalidate;
2039
2040     const ResourceRequest& request(documentLoader()->request());
2041 #if PLATFORM(MAC)
2042     if (request.cachePolicy() == ReloadIgnoringCacheData && !equalIgnoringCase(request.httpMethod(), "post") && ResourceRequest::useQuickLookResourceCachingQuirks())
2043         return CachePolicyRevalidate;
2044 #endif
2045
2046     if (request.cachePolicy() == ReturnCacheDataElseLoad)
2047         return CachePolicyHistoryBuffer;
2048
2049     return CachePolicyVerify;
2050 }
2051
2052 void FrameLoader::checkLoadCompleteForThisFrame()
2053 {
2054     ASSERT(m_client->hasWebView());
2055
2056     switch (m_state) {
2057         case FrameStateProvisional: {
2058             if (m_delegateIsHandlingProvisionalLoadError)
2059                 return;
2060
2061             RefPtr<DocumentLoader> pdl = m_provisionalDocumentLoader;
2062             if (!pdl)
2063                 return;
2064                 
2065             // If we've received any errors we may be stuck in the provisional state and actually complete.
2066             const ResourceError& error = pdl->mainDocumentError();
2067             if (error.isNull())
2068                 return;
2069
2070             // Check all children first.
2071             RefPtr<HistoryItem> item;
2072             if (Page* page = m_frame->page())
2073                 if (isBackForwardLoadType(loadType()))
2074                     // Reset the back forward list to the last committed history item at the top level.
2075                     item = page->mainFrame()->loader()->history()->currentItem();
2076                 
2077             // Only reset if we aren't already going to a new provisional item.
2078             bool shouldReset = !history()->provisionalItem();
2079             if (!pdl->isLoadingInAPISense() || pdl->isStopping()) {
2080                 m_delegateIsHandlingProvisionalLoadError = true;
2081                 m_client->dispatchDidFailProvisionalLoad(error);
2082                 m_delegateIsHandlingProvisionalLoadError = false;
2083
2084                 ASSERT(!pdl->isLoading());
2085
2086                 // If we're in the middle of loading multipart data, we need to restore the document loader.
2087                 if (isReplacing() && !m_documentLoader.get())
2088                     setDocumentLoader(m_provisionalDocumentLoader.get());
2089
2090                 // Finish resetting the load state, but only if another load hasn't been started by the
2091                 // delegate callback.
2092                 if (pdl == m_provisionalDocumentLoader)
2093                     clearProvisionalLoad();
2094                 else if (activeDocumentLoader()) {
2095                     KURL unreachableURL = activeDocumentLoader()->unreachableURL();
2096                     if (!unreachableURL.isEmpty() && unreachableURL == pdl->request().url())
2097                         shouldReset = false;
2098                 }
2099             }
2100             if (shouldReset && item)
2101                 if (Page* page = m_frame->page()) {
2102                     page->backForward()->setCurrentItem(item.get());
2103                     m_frame->loader()->client()->updateGlobalHistoryItemForPage();
2104                 }
2105             return;
2106         }
2107         
2108         case FrameStateCommittedPage: {
2109             DocumentLoader* dl = m_documentLoader.get();            
2110             if (!dl || (dl->isLoadingInAPISense() && !dl->isStopping()))
2111                 return;
2112
2113             setState(FrameStateComplete);
2114
2115             // FIXME: Is this subsequent work important if we already navigated away?
2116             // Maybe there are bugs because of that, or extra work we can skip because
2117             // the new page is ready.
2118
2119             m_client->forceLayoutForNonHTML();
2120              
2121             // If the user had a scroll point, scroll to it, overriding the anchor point if any.
2122             if (m_frame->page()) {
2123                 if (isBackForwardLoadType(m_loadType) || m_loadType == FrameLoadTypeReload || m_loadType == FrameLoadTypeReloadFromOrigin)
2124                     history()->restoreScrollPositionAndViewState();
2125             }
2126
2127             if (m_stateMachine.creatingInitialEmptyDocument() || !m_stateMachine.committedFirstRealDocumentLoad())
2128                 return;
2129
2130             if (Page* page = m_frame->page())
2131                 page->progress()->progressCompleted(m_frame);
2132
2133             const ResourceError& error = dl->mainDocumentError();
2134
2135             AXObjectCache::AXLoadingEvent loadingEvent;
2136             if (!error.isNull()) {
2137                 m_client->dispatchDidFailLoad(error);
2138                 loadingEvent = AXObjectCache::AXLoadingFailed;
2139             } else {
2140                 m_client->dispatchDidFinishLoad();
2141                 loadingEvent = AXObjectCache::AXLoadingFinished;
2142             }
2143
2144             // Notify accessibility.
2145             if (AXObjectCache::accessibilityEnabled())
2146                 m_frame->document()->axObjectCache()->frameLoadingEventNotification(m_frame, loadingEvent);
2147
2148             return;
2149         }
2150         
2151         case FrameStateComplete:
2152             frameLoadCompleted();
2153             return;
2154     }
2155
2156     ASSERT_NOT_REACHED();
2157 }
2158
2159 void FrameLoader::continueLoadAfterWillSubmitForm()
2160 {
2161     if (!m_provisionalDocumentLoader)
2162         return;
2163
2164     prepareForLoadStart();
2165     
2166     // The load might be cancelled inside of prepareForLoadStart(), nulling out the m_provisionalDocumentLoader, 
2167     // so we need to null check it again.
2168     if (!m_provisionalDocumentLoader)
2169         return;
2170
2171     DocumentLoader* activeDocLoader = activeDocumentLoader();
2172     if (activeDocLoader && activeDocLoader->isLoadingMainResource())
2173         return;
2174
2175     m_loadingFromCachedPage = false;
2176     m_provisionalDocumentLoader->startLoadingMainResource();
2177 }
2178
2179 static KURL originatingURLFromBackForwardList(Page* page)
2180 {
2181     // FIXME: Can this logic be replaced with m_frame->document()->firstPartyForCookies()?
2182     // It has the same meaning of "page a user thinks is the current one".
2183
2184     KURL originalURL;
2185     int backCount = page->backForward()->backCount();
2186     for (int backIndex = 0; backIndex <= backCount; backIndex++) {
2187         // FIXME: At one point we had code here to check a "was user gesture" flag.
2188         // Do we need to restore that logic?
2189         HistoryItem* historyItem = page->backForward()->itemAtIndex(-backIndex);
2190         if (!historyItem)
2191             continue;
2192
2193         originalURL = historyItem->originalURL(); 
2194         if (!originalURL.isNull()) 
2195             return originalURL;
2196     }
2197
2198     return KURL();
2199 }
2200
2201 void FrameLoader::setOriginalURLForDownloadRequest(ResourceRequest& request)
2202 {
2203     KURL originalURL;
2204     
2205     // If there is no referrer, assume that the download was initiated directly, so current document is
2206     // completely unrelated to it. See <rdar://problem/5294691>.
2207     // FIXME: Referrer is not sent in many other cases, so we will often miss this important information.
2208     // Find a better way to decide whether the download was unrelated to current document.
2209     if (!request.httpReferrer().isNull()) {
2210         // find the first item in the history that was originated by the user
2211         originalURL = originatingURLFromBackForwardList(m_frame->page());
2212     }
2213
2214     if (originalURL.isNull())
2215         originalURL = request.url();
2216
2217     if (!originalURL.protocol().isEmpty() && !originalURL.host().isEmpty()) {
2218         unsigned port = originalURL.port();
2219
2220         // Original URL is needed to show the user where a file was downloaded from. We should make a URL that won't result in downloading the file again.
2221         // FIXME: Using host-only URL is a very heavy-handed approach. We should attempt to provide the actual page where the download was initiated from, as a reminder to the user.
2222         String hostOnlyURLString;
2223         if (port)
2224             hostOnlyURLString = makeString(originalURL.protocol(), "://", originalURL.host(), ":", String::number(port));
2225         else
2226             hostOnlyURLString = makeString(originalURL.protocol(), "://", originalURL.host());
2227
2228         // FIXME: Rename firstPartyForCookies back to mainDocumentURL. It was a mistake to think that it was only used for cookies.
2229         request.setFirstPartyForCookies(KURL(KURL(), hostOnlyURLString));
2230     }
2231 }
2232
2233 void FrameLoader::didFirstLayout()
2234 {
2235     if (m_frame->page() && isBackForwardLoadType(m_loadType))
2236         history()->restoreScrollPositionAndViewState();
2237
2238     if (m_stateMachine.committedFirstRealDocumentLoad() && !m_stateMachine.isDisplayingInitialEmptyDocument() && !m_stateMachine.firstLayoutDone())
2239         m_stateMachine.advanceTo(FrameLoaderStateMachine::FirstLayoutDone);
2240
2241     m_client->dispatchDidFirstLayout();
2242 }
2243
2244 void FrameLoader::didFirstVisuallyNonEmptyLayout()
2245 {
2246     m_client->dispatchDidFirstVisuallyNonEmptyLayout();
2247 }
2248
2249 void FrameLoader::didNewFirstVisuallyNonEmptyLayout()
2250 {
2251     m_client->dispatchDidNewFirstVisuallyNonEmptyLayout();
2252 }
2253
2254 void FrameLoader::frameLoadCompleted()
2255 {
2256     // Note: Can be called multiple times.
2257
2258     m_client->frameLoadCompleted();
2259
2260     history()->updateForFrameLoadCompleted();
2261
2262     // After a canceled provisional load, firstLayoutDone is false.
2263     // Reset it to true if we're displaying a page.
2264     if (m_documentLoader && m_stateMachine.committedFirstRealDocumentLoad() && !m_stateMachine.isDisplayingInitialEmptyDocument() && !m_stateMachine.firstLayoutDone())
2265         m_stateMachine.advanceTo(FrameLoaderStateMachine::FirstLayoutDone);
2266 }
2267
2268 void FrameLoader::detachChildren()
2269 {
2270     typedef Vector<RefPtr<Frame> > FrameVector;
2271     FrameVector childrenToDetach;
2272     childrenToDetach.reserveCapacity(m_frame->tree()->childCount());
2273     for (Frame* child = m_frame->tree()->lastChild(); child; child = child->tree()->previousSibling())
2274         childrenToDetach.append(child);
2275     FrameVector::iterator end = childrenToDetach.end();
2276     for (FrameVector::iterator it = childrenToDetach.begin(); it != end; it++)
2277         (*it)->loader()->detachFromParent();
2278 }
2279
2280 void FrameLoader::closeAndRemoveChild(Frame* child)
2281 {
2282     child->tree()->detachFromParent();
2283
2284     child->setView(0);
2285     if (child->ownerElement() && child->page())
2286         child->page()->decrementFrameCount();
2287     child->willDetachPage();
2288     child->detachFromPage();
2289
2290     m_frame->tree()->removeChild(child);
2291 }
2292
2293 // Called every time a resource is completely loaded or an error is received.
2294 void FrameLoader::checkLoadComplete()
2295 {
2296     ASSERT(m_client->hasWebView());
2297     
2298     m_shouldCallCheckLoadComplete = false;
2299
2300     // FIXME: Always traversing the entire frame tree is a bit inefficient, but 
2301     // is currently needed in order to null out the previous history item for all frames.
2302     if (Page* page = m_frame->page()) {
2303         Vector<RefPtr<Frame>, 10> frames;
2304         for (RefPtr<Frame> frame = page->mainFrame(); frame; frame = frame->tree()->traverseNext())
2305             frames.append(frame);
2306         // To process children before their parents, iterate the vector backwards.
2307         for (size_t i = frames.size(); i; --i)
2308             frames[i - 1]->loader()->checkLoadCompleteForThisFrame();
2309     }
2310 }
2311
2312 int FrameLoader::numPendingOrLoadingRequests(bool recurse) const
2313 {
2314     if (!recurse)
2315         return m_frame->document()->cachedResourceLoader()->requestCount();
2316
2317     int count = 0;
2318     for (Frame* frame = m_frame; frame; frame = frame->tree()->traverseNext(m_frame))
2319         count += frame->document()->cachedResourceLoader()->requestCount();
2320     return count;
2321 }
2322
2323 String FrameLoader::userAgent(const KURL& url) const
2324 {
2325     String userAgent = m_client->userAgent(url);
2326     InspectorInstrumentation::applyUserAgentOverride(m_frame, &userAgent);
2327     return userAgent;
2328 }
2329
2330 void FrameLoader::handledOnloadEvents()
2331 {
2332     m_client->dispatchDidHandleOnloadEvents();
2333
2334     if (documentLoader())
2335         documentLoader()->handledOnloadEvents();
2336 }
2337
2338 void FrameLoader::frameDetached()
2339 {
2340     stopAllLoaders();
2341     m_frame->document()->stopActiveDOMObjects();
2342     detachFromParent();
2343 }
2344
2345 void FrameLoader::detachFromParent()
2346 {
2347     RefPtr<Frame> protect(m_frame);
2348
2349     closeURL();
2350     history()->saveScrollPositionAndViewStateToItem(history()->currentItem());
2351     detachChildren();
2352     // stopAllLoaders() needs to be called after detachChildren(), because detachedChildren()
2353     // will trigger the unload event handlers of any child frames, and those event
2354     // handlers might start a new subresource load in this frame.
2355     stopAllLoaders();
2356
2357     InspectorInstrumentation::frameDetachedFromParent(m_frame);
2358
2359     detachViewsAndDocumentLoader();
2360
2361     if (Frame* parent = m_frame->tree()->parent()) {
2362         parent->loader()->closeAndRemoveChild(m_frame);
2363         parent->loader()->scheduleCheckCompleted();
2364     } else {
2365         m_frame->setView(0);
2366         m_frame->willDetachPage();
2367         m_frame->detachFromPage();
2368     }
2369 }
2370
2371 void FrameLoader::detachViewsAndDocumentLoader()
2372 {
2373     m_client->detachedFromParent2();
2374     setDocumentLoader(0);
2375     m_client->detachedFromParent3();
2376 }
2377     
2378 void FrameLoader::addExtraFieldsToSubresourceRequest(ResourceRequest& request)
2379 {
2380     addExtraFieldsToRequest(request, m_loadType, false);
2381 }
2382
2383 void FrameLoader::addExtraFieldsToMainResourceRequest(ResourceRequest& request)
2384 {
2385     addExtraFieldsToRequest(request, m_loadType, true);
2386 }
2387
2388 void FrameLoader::addExtraFieldsToRequest(ResourceRequest& request, FrameLoadType loadType, bool mainResource)
2389 {
2390     // Don't set the cookie policy URL if it's already been set.
2391     // But make sure to set it on all requests, as it has significance beyond the cookie policy for all protocols (<rdar://problem/6616664>).
2392     if (request.firstPartyForCookies().isEmpty()) {
2393         if (mainResource && isLoadingMainFrame())
2394             request.setFirstPartyForCookies(request.url());
2395         else if (Document* document = m_frame->document())
2396             request.setFirstPartyForCookies(document->firstPartyForCookies());
2397     }
2398
2399     // The remaining modifications are only necessary for HTTP and HTTPS.
2400     if (!request.url().isEmpty() && !request.url().protocolIsInHTTPFamily())
2401         return;
2402
2403     applyUserAgent(request);
2404     
2405     // If we inherit cache policy from a main resource, we use the DocumentLoader's 
2406     // original request cache policy for two reasons:
2407     // 1. For POST requests, we mutate the cache policy for the main resource,
2408     //    but we do not want this to apply to subresources
2409     // 2. Delegates that modify the cache policy using willSendRequest: should
2410     //    not affect any other resources. Such changes need to be done
2411     //    per request.
2412     if (!mainResource) {
2413         if (request.isConditional())
2414             request.setCachePolicy(ReloadIgnoringCacheData);
2415         else if (documentLoader()->isLoadingInAPISense())
2416             request.setCachePolicy(documentLoader()->originalRequest().cachePolicy());
2417         else
2418             request.setCachePolicy(UseProtocolCachePolicy);
2419     } else if (loadType == FrameLoadTypeReload || loadType == FrameLoadTypeReloadFromOrigin || request.isConditional())
2420         request.setCachePolicy(ReloadIgnoringCacheData);
2421     else if (isBackForwardLoadType(loadType) && m_stateMachine.committedFirstRealDocumentLoad())
2422         request.setCachePolicy(ReturnCacheDataElseLoad);
2423         
2424     if (request.cachePolicy() == ReloadIgnoringCacheData) {
2425         if (loadType == FrameLoadTypeReload)
2426             request.setHTTPHeaderField("Cache-Control", "max-age=0");
2427         else if (loadType == FrameLoadTypeReloadFromOrigin) {
2428             request.setHTTPHeaderField("Cache-Control", "no-cache");
2429             request.setHTTPHeaderField("Pragma", "no-cache");
2430         }
2431     }
2432     
2433     if (mainResource)
2434         request.setHTTPAccept(defaultAcceptHeader);
2435
2436     // Make sure we send the Origin header.
2437     addHTTPOriginIfNeeded(request, String());
2438
2439     // Always try UTF-8. If that fails, try frame encoding (if any) and then the default.
2440     Settings* settings = m_frame->settings();
2441     request.setResponseContentDispositionEncodingFallbackArray("UTF-8", m_frame->document()->encoding(), settings ? settings->defaultTextEncodingName() : String());
2442 }
2443
2444 void FrameLoader::addHTTPOriginIfNeeded(ResourceRequest& request, const String& origin)
2445 {
2446     if (!request.httpOrigin().isEmpty())
2447         return;  // Request already has an Origin header.
2448
2449     // Don't send an Origin header for GET or HEAD to avoid privacy issues.
2450     // For example, if an intranet page has a hyperlink to an external web
2451     // site, we don't want to include the Origin of the request because it
2452     // will leak the internal host name. Similar privacy concerns have lead
2453     // to the widespread suppression of the Referer header at the network
2454     // layer.
2455     if (request.httpMethod() == "GET" || request.httpMethod() == "HEAD")
2456         return;
2457
2458     // For non-GET and non-HEAD methods, always send an Origin header so the
2459     // server knows we support this feature.
2460
2461     if (origin.isEmpty()) {
2462         // If we don't know what origin header to attach, we attach the value
2463         // for an empty origin.
2464         request.setHTTPOrigin(SecurityOrigin::createUnique()->toString());
2465         return;
2466     }
2467
2468     request.setHTTPOrigin(origin);
2469 }
2470
2471 void FrameLoader::loadPostRequest(const ResourceRequest& inRequest, const String& referrer, const String& frameName, bool lockHistory, FrameLoadType loadType, PassRefPtr<Event> event, PassRefPtr<FormState> prpFormState)
2472 {
2473     RefPtr<FormState> formState = prpFormState;
2474
2475     // Previously when this method was reached, the original FrameLoadRequest had been deconstructed to build a 
2476     // bunch of parameters that would come in here and then be built back up to a ResourceRequest.  In case
2477     // any caller depends on the immutability of the original ResourceRequest, I'm rebuilding a ResourceRequest
2478     // from scratch as it did all along.
2479     const KURL& url = inRequest.url();
2480     RefPtr<FormData> formData = inRequest.httpBody();
2481     const String& contentType = inRequest.httpContentType();
2482     String origin = inRequest.httpOrigin();
2483
2484     ResourceRequest workingResourceRequest(url);    
2485
2486     if (!referrer.isEmpty())
2487         workingResourceRequest.setHTTPReferrer(referrer);
2488     workingResourceRequest.setHTTPOrigin(origin);
2489     workingResourceRequest.setHTTPMethod("POST");
2490     workingResourceRequest.setHTTPBody(formData);
2491     workingResourceRequest.setHTTPContentType(contentType);
2492     addExtraFieldsToRequest(workingResourceRequest, loadType, true);
2493
2494     NavigationAction action(workingResourceRequest, loadType, true, event);
2495
2496     if (!frameName.isEmpty()) {
2497         // The search for a target frame is done earlier in the case of form submission.
2498         if (Frame* targetFrame = formState ? 0 : findFrameForNavigation(frameName))
2499             targetFrame->loader()->loadWithNavigationAction(workingResourceRequest, action, lockHistory, loadType, formState.release());
2500         else
2501             policyChecker()->checkNewWindowPolicy(action, FrameLoader::callContinueLoadAfterNewWindowPolicy, workingResourceRequest, formState.release(), frameName, this);
2502     } else {
2503         // must grab this now, since this load may stop the previous load and clear this flag
2504         bool isRedirect = m_quickRedirectComing;
2505         loadWithNavigationAction(workingResourceRequest, action, lockHistory, loadType, formState.release());    
2506         if (isRedirect) {
2507             m_quickRedirectComing = false;
2508             if (m_provisionalDocumentLoader)
2509                 m_provisionalDocumentLoader->setIsClientRedirect(true);
2510         }
2511     }
2512 }
2513
2514 unsigned long FrameLoader::loadResourceSynchronously(const ResourceRequest& request, StoredCredentials storedCredentials, ResourceError& error, ResourceResponse& response, Vector<char>& data)
2515 {
2516     ASSERT(m_frame->document());
2517     String referrer = SecurityPolicy::generateReferrerHeader(m_frame->document()->referrerPolicy(), request.url(), outgoingReferrer());
2518     
2519     ResourceRequest initialRequest = request;
2520     initialRequest.setTimeoutInterval(10);
2521     
2522     if (!referrer.isEmpty())
2523         initialRequest.setHTTPReferrer(referrer);
2524     addHTTPOriginIfNeeded(initialRequest, outgoingOrigin());
2525
2526     if (Page* page = m_frame->page())
2527         initialRequest.setFirstPartyForCookies(page->mainFrame()->loader()->documentLoader()->request().url());
2528     
2529     addExtraFieldsToSubresourceRequest(initialRequest);
2530
2531     unsigned long identifier = 0;    
2532     ResourceRequest newRequest(initialRequest);
2533     requestFromDelegate(newRequest, identifier, error);
2534
2535     if (error.isNull()) {
2536         ASSERT(!newRequest.isNull());
2537         
2538         if (!documentLoader()->applicationCacheHost()->maybeLoadSynchronously(newRequest, error, response, data)) {
2539             ResourceHandle::loadResourceSynchronously(networkingContext(), newRequest, storedCredentials, error, response, data);
2540             documentLoader()->applicationCacheHost()->maybeLoadFallbackSynchronously(newRequest, error, response, data);
2541         }
2542     }
2543     int encodedDataLength = response.resourceLoadInfo() ? static_cast<int>(response.resourceLoadInfo()->encodedDataLength) : -1;
2544     notifier()->sendRemainingDelegateMessages(m_documentLoader.get(), identifier, response, data.data(), data.size(), encodedDataLength, error);
2545     return identifier;
2546 }
2547
2548 const ResourceRequest& FrameLoader::originalRequest() const
2549 {
2550     return activeDocumentLoader()->originalRequestCopy();
2551 }
2552
2553 void FrameLoader::receivedMainResourceError(const ResourceError& error)
2554 {
2555     // Retain because the stop may release the last reference to it.
2556     RefPtr<Frame> protect(m_frame);
2557
2558     RefPtr<DocumentLoader> loader = activeDocumentLoader();
2559     // FIXME: Don't want to do this if an entirely new load is going, so should check
2560     // that both data sources on the frame are either this or nil.
2561     stop();
2562     if (m_client->shouldFallBack(error))
2563         handleFallbackContent();
2564
2565     if (m_state == FrameStateProvisional && m_provisionalDocumentLoader) {
2566         if (m_submittedFormURL == m_provisionalDocumentLoader->originalRequestCopy().url())
2567             m_submittedFormURL = KURL();
2568             
2569         // We might have made a page cache item, but now we're bailing out due to an error before we ever
2570         // transitioned to the new page (before WebFrameState == commit).  The goal here is to restore any state
2571         // so that the existing view (that wenever got far enough to replace) can continue being used.
2572         history()->invalidateCurrentItemCachedPage();
2573         
2574         // Call clientRedirectCancelledOrFinished here so that the frame load delegate is notified that the redirect's
2575         // status has changed, if there was a redirect. The frame load delegate may have saved some state about
2576         // the redirect in its -webView:willPerformClientRedirectToURL:delay:fireDate:forFrame:. Since we are definitely
2577         // not going to use this provisional resource, as it was cancelled, notify the frame load delegate that the redirect
2578         // has ended.
2579         if (m_sentRedirectNotification)
2580             clientRedirectCancelledOrFinished(false);
2581     }
2582
2583     checkCompleted();
2584     if (m_frame->page())
2585         checkLoadComplete();
2586 }
2587
2588 void FrameLoader::callContinueFragmentScrollAfterNavigationPolicy(void* argument,
2589     const ResourceRequest& request, PassRefPtr<FormState>, bool shouldContinue)
2590 {
2591     FrameLoader* loader = static_cast<FrameLoader*>(argument);
2592     loader->continueFragmentScrollAfterNavigationPolicy(request, shouldContinue);
2593 }
2594
2595 void FrameLoader::continueFragmentScrollAfterNavigationPolicy(const ResourceRequest& request, bool shouldContinue)
2596 {
2597     m_quickRedirectComing = false;
2598
2599     if (!shouldContinue)
2600         return;
2601
2602     // If we have a provisional request for a different document, a fragment scroll should cancel it.
2603     if (m_provisionalDocumentLoader && !equalIgnoringFragmentIdentifier(m_provisionalDocumentLoader->request().url(), request.url())) {
2604         m_provisionalDocumentLoader->stopLoading();
2605         setProvisionalDocumentLoader(0);
2606         // FIXME: Make this an ASSERT() instead once we figured out what's going wrong.
2607         if (m_state == FrameStateProvisional)
2608             CRASH();
2609     }
2610
2611     bool isRedirect = m_quickRedirectComing || policyChecker()->loadType() == FrameLoadTypeRedirectWithLockedBackForwardList;    
2612     loadInSameDocument(request.url(), 0, !isRedirect);
2613 }
2614
2615 bool FrameLoader::shouldPerformFragmentNavigation(bool isFormSubmission, const String& httpMethod, FrameLoadType loadType, const KURL& url)
2616 {
2617     // We don't do this if we are submitting a form with method other than "GET", explicitly reloading,
2618     // currently displaying a frameset, or if the URL does not have a fragment.
2619     // These rules were originally based on what KHTML was doing in KHTMLPart::openURL.
2620
2621     // FIXME: What about load types other than Standard and Reload?
2622
2623     return (!isFormSubmission || equalIgnoringCase(httpMethod, "GET"))
2624         && loadType != FrameLoadTypeReload
2625         && loadType != FrameLoadTypeReloadFromOrigin
2626         && loadType != FrameLoadTypeSame
2627         && !shouldReload(m_frame->document()->url(), url)
2628         // We don't want to just scroll if a link from within a
2629         // frameset is trying to reload the frameset into _top.
2630         && !m_frame->document()->isFrameSet();
2631 }
2632
2633 void FrameLoader::scrollToFragmentWithParentBoundary(const KURL& url)
2634 {
2635     FrameView* view = m_frame->view();
2636     if (!view)
2637         return;
2638
2639     // Leaking scroll position to a cross-origin ancestor would permit the so-called "framesniffing" attack.
2640     RefPtr<Frame> boundaryFrame(url.hasFragmentIdentifier() ? m_frame->document()->findUnsafeParentScrollPropagationBoundary() : 0);
2641
2642     if (boundaryFrame)
2643         boundaryFrame->view()->setSafeToPropagateScrollToParent(false);
2644
2645     view->scrollToFragment(url);
2646
2647     if (boundaryFrame)
2648         boundaryFrame->view()->setSafeToPropagateScrollToParent(true);
2649 }
2650
2651 void FrameLoader::callContinueLoadAfterNavigationPolicy(void* argument,
2652     const ResourceRequest& request, PassRefPtr<FormState> formState, bool shouldContinue)
2653 {
2654     FrameLoader* loader = static_cast<FrameLoader*>(argument);
2655     loader->continueLoadAfterNavigationPolicy(request, formState, shouldContinue);
2656 }
2657
2658 bool FrameLoader::shouldClose()
2659 {
2660     Page* page = m_frame->page();
2661     Chrome* chrome = page ? page->chrome() : 0;
2662     if (!chrome || !chrome->canRunBeforeUnloadConfirmPanel())
2663         return true;
2664
2665     // Store all references to each subframe in advance since beforeunload's event handler may modify frame
2666     Vector<RefPtr<Frame> > targetFrames;
2667     targetFrames.append(m_frame);
2668     for (Frame* child = m_frame->tree()->firstChild(); child; child = child->tree()->traverseNext(m_frame))
2669         targetFrames.append(child);
2670
2671     bool shouldClose = false;
2672     {
2673         NavigationDisablerForBeforeUnload navigationDisabler;
2674         size_t i;
2675
2676         for (i = 0; i < targetFrames.size(); i++) {
2677             if (!targetFrames[i]->tree()->isDescendantOf(m_frame))
2678                 continue;
2679             if (!targetFrames[i]->loader()->fireBeforeUnloadEvent(chrome))
2680                 break;
2681         }
2682
2683         if (i == targetFrames.size())
2684             shouldClose = true;
2685     }
2686
2687     if (!shouldClose)
2688         m_submittedFormURL = KURL();
2689
2690     return shouldClose;
2691 }
2692
2693 bool FrameLoader::fireBeforeUnloadEvent(Chrome* chrome)
2694 {
2695     DOMWindow* domWindow = m_frame->existingDOMWindow();
2696     if (!domWindow)
2697         return true;
2698
2699     RefPtr<Document> document = m_frame->document();
2700     if (!document->body())
2701         return true;
2702
2703     RefPtr<BeforeUnloadEvent> beforeUnloadEvent = BeforeUnloadEvent::create();
2704     m_pageDismissalEventBeingDispatched = BeforeUnloadDismissal;
2705     domWindow->dispatchEvent(beforeUnloadEvent.get(), domWindow->document());
2706     m_pageDismissalEventBeingDispatched = NoDismissal;
2707
2708     if (!beforeUnloadEvent->defaultPrevented())
2709         document->defaultEventHandler(beforeUnloadEvent.get());
2710     if (beforeUnloadEvent->result().isNull())
2711         return true;
2712
2713     String text = document->displayStringModifiedByEncoding(beforeUnloadEvent->result());
2714     return chrome->runBeforeUnloadConfirmPanel(text, m_frame);
2715 }
2716
2717 void FrameLoader::continueLoadAfterNavigationPolicy(const ResourceRequest&, PassRefPtr<FormState> formState, bool shouldContinue)
2718 {
2719     // If we loaded an alternate page to replace an unreachableURL, we'll get in here with a
2720     // nil policyDataSource because loading the alternate page will have passed
2721     // through this method already, nested; otherwise, policyDataSource should still be set.
2722     ASSERT(m_policyDocumentLoader || !m_provisionalDocumentLoader->unreachableURL().isEmpty());
2723
2724     bool isTargetItem = history()->provisionalItem() ? history()->provisionalItem()->isTargetItem() : false;
2725
2726     // Two reasons we can't continue:
2727     //    1) Navigation policy delegate said we can't so request is nil. A primary case of this 
2728     //       is the user responding Cancel to the form repost nag sheet.
2729     //    2) User responded Cancel to an alert popped up by the before unload event handler.
2730     bool canContinue = shouldContinue && shouldClose();
2731
2732     if (!canContinue) {
2733         // If we were waiting for a quick redirect, but the policy delegate decided to ignore it, then we 
2734         // need to report that the client redirect was cancelled.
2735         if (m_quickRedirectComing)
2736             clientRedirectCancelledOrFinished(false);
2737
2738         setPolicyDocumentLoader(0);
2739
2740         // If the navigation request came from the back/forward menu, and we punt on it, we have the 
2741         // problem that we have optimistically moved the b/f cursor already, so move it back.  For sanity, 
2742         // we only do this when punting a navigation for the target frame or top-level frame.  
2743         if ((isTargetItem || isLoadingMainFrame()) && isBackForwardLoadType(policyChecker()->loadType())) {
2744             if (Page* page = m_frame->page()) {
2745                 Frame* mainFrame = page->mainFrame();
2746                 if (HistoryItem* resetItem = mainFrame->loader()->history()->currentItem()) {
2747                     page->backForward()->setCurrentItem(resetItem);
2748                     m_frame->loader()->client()->updateGlobalHistoryItemForPage();
2749                 }
2750             }
2751         }
2752         return;
2753     }
2754
2755     FrameLoadType type = policyChecker()->loadType();
2756     // A new navigation is in progress, so don't clear the history's provisional item.
2757     stopAllLoaders(ShouldNotClearProvisionalItem);
2758     
2759     // <rdar://problem/6250856> - In certain circumstances on pages with multiple frames, stopAllLoaders()
2760     // might detach the current FrameLoader, in which case we should bail on this newly defunct load. 
2761     if (!m_frame->page())
2762         return;
2763
2764 #if ENABLE(JAVASCRIPT_DEBUGGER) && ENABLE(INSPECTOR)
2765     if (Page* page = m_frame->page()) {
2766         if (page->mainFrame() == m_frame)
2767             m_frame->page()->inspectorController()->resume();
2768     }
2769 #endif
2770
2771     // FIXME: Make this an ASSERT() instead once we figured out what's going wrong.
2772     if (!m_policyDocumentLoader.get())
2773         CRASH();
2774     setProvisionalDocumentLoader(m_policyDocumentLoader.get());
2775     m_loadType = type;
2776     setState(FrameStateProvisional);
2777
2778     setPolicyDocumentLoader(0);
2779
2780     if (isBackForwardLoadType(type) && history()->provisionalItem()->isInPageCache()) {
2781         loadProvisionalItemFromCachedPage();
2782         return;
2783     }
2784
2785     if (formState)
2786         m_client->dispatchWillSubmitForm(&PolicyChecker::continueLoadAfterWillSubmitForm, formState);
2787     else
2788         continueLoadAfterWillSubmitForm();
2789 }
2790
2791 void FrameLoader::callContinueLoadAfterNewWindowPolicy(void* argument,
2792     const ResourceRequest& request, PassRefPtr<FormState> formState, const String& frameName, const NavigationAction& action, bool shouldContinue)
2793 {
2794     FrameLoader* loader = static_cast<FrameLoader*>(argument);
2795     loader->continueLoadAfterNewWindowPolicy(request, formState, frameName, action, shouldContinue);
2796 }
2797
2798 void FrameLoader::continueLoadAfterNewWindowPolicy(const ResourceRequest& request,
2799     PassRefPtr<FormState> formState, const String& frameName, const NavigationAction& action, bool shouldContinue)
2800 {
2801     if (!shouldContinue)
2802         return;
2803
2804     RefPtr<Frame> frame = m_frame;
2805     RefPtr<Frame> mainFrame = m_client->dispatchCreatePage(action);
2806     if (!mainFrame)
2807         return;
2808
2809     if (frameName != "_blank")
2810         mainFrame->tree()->setName(frameName);
2811
2812     mainFrame->page()->setOpenedByDOM();
2813     mainFrame->loader()->m_client->dispatchShow();
2814     if (!m_suppressOpenerInNewFrame)
2815         mainFrame->loader()->setOpener(frame.get());
2816     mainFrame->loader()->loadWithNavigationAction(request, NavigationAction(request), false, FrameLoadTypeStandard, formState);
2817 }
2818
2819 void FrameLoader::requestFromDelegate(ResourceRequest& request, unsigned long& identifier, ResourceError& error)
2820 {
2821     ASSERT(!request.isNull());
2822
2823     identifier = 0;
2824     if (Page* page = m_frame->page()) {
2825         identifier = page->progress()->createUniqueIdentifier();
2826         notifier()->assignIdentifierToInitialRequest(identifier, m_documentLoader.get(), request);
2827     }
2828
2829     ResourceRequest newRequest(request);
2830     notifier()->dispatchWillSendRequest(m_documentLoader.get(), identifier, newRequest, ResourceResponse());
2831
2832     if (newRequest.isNull())
2833         error = cancelledError(request);
2834     else
2835         error = ResourceError();
2836
2837     request = newRequest;
2838 }
2839
2840 void FrameLoader::loadedResourceFromMemoryCache(CachedResource* resource)
2841 {
2842     Page* page = m_frame->page();
2843     if (!page)
2844         return;
2845
2846     if (!resource->sendResourceLoadCallbacks() || m_documentLoader->haveToldClientAboutLoad(resource->url()))
2847         return;
2848
2849     if (!page->areMemoryCacheClientCallsEnabled()) {
2850         InspectorInstrumentation::didLoadResourceFromMemoryCache(page, m_documentLoader.get(), resource);
2851         m_documentLoader->recordMemoryCacheLoadForFutureClientNotification(resource->url());
2852         m_documentLoader->didTellClientAboutLoad(resource->url());
2853         return;
2854     }
2855
2856     ResourceRequest request(resource->url());
2857     if (m_client->dispatchDidLoadResourceFromMemoryCache(m_documentLoader.get(), request, resource->response(), resource->encodedSize())) {
2858         InspectorInstrumentation::didLoadResourceFromMemoryCache(page, m_documentLoader.get(), resource);
2859         m_documentLoader->didTellClientAboutLoad(resource->url());
2860         return;
2861     }
2862
2863     unsigned long identifier;
2864     ResourceError error;
2865     requestFromDelegate(request, identifier, error);
2866     InspectorInstrumentation::markResourceAsCached(page, identifier);
2867     notifier()->sendRemainingDelegateMessages(m_documentLoader.get(), identifier, resource->response(), 0, resource->encodedSize(), 0, error);
2868 }
2869
2870 void FrameLoader::applyUserAgent(ResourceRequest& request)
2871 {
2872     String userAgent = this->userAgent(request.url());
2873     ASSERT(!userAgent.isNull());
2874     request.setHTTPUserAgent(userAgent);
2875 }
2876
2877 bool FrameLoader::shouldInterruptLoadForXFrameOptions(const String& content, const KURL& url)
2878 {
2879     Frame* topFrame = m_frame->tree()->top();
2880     if (m_frame == topFrame)
2881         return false;
2882
2883     if (equalIgnoringCase(content, "deny"))
2884         return true;
2885
2886     if (equalIgnoringCase(content, "sameorigin")) {
2887         RefPtr<SecurityOrigin> origin = SecurityOrigin::create(url);
2888         if (!origin->isSameSchemeHostPort(topFrame->document()->securityOrigin()))
2889             return true;
2890     }
2891
2892     return false;
2893 }
2894
2895 void FrameLoader::loadProvisionalItemFromCachedPage()
2896 {
2897     DocumentLoader* provisionalLoader = provisionalDocumentLoader();
2898     LOG(PageCache, "WebCorePageCache: Loading provisional DocumentLoader %p with URL '%s' from CachedPage", provisionalDocumentLoader(), provisionalDocumentLoader()->url().string().utf8().data());
2899
2900     prepareForLoadStart();
2901
2902     m_loadingFromCachedPage = true;
2903
2904     // Should have timing data from previous time(s) the page was shown.
2905     ASSERT(provisionalLoader->timing()->navigationStart());
2906     provisionalLoader->resetTiming();
2907     provisionalLoader->timing()->markNavigationStart(frame());
2908
2909     provisionalLoader->setCommitted(true);
2910     commitProvisionalLoad();
2911 }
2912
2913 bool FrameLoader::shouldTreatURLAsSameAsCurrent(const KURL& url) const
2914 {
2915     if (!history()->currentItem())
2916         return false;
2917     return url == history()->currentItem()->url() || url == history()->currentItem()->originalURL();
2918 }
2919
2920 bool FrameLoader::shouldTreatURLAsSrcdocDocument(const KURL& url) const
2921 {
2922     if (!equalIgnoringCase(url.string(), "about:srcdoc"))
2923         return false;
2924     HTMLFrameOwnerElement* ownerElement = m_frame->ownerElement();
2925     if (!ownerElement)
2926         return false;
2927     if (!ownerElement->hasTagName(iframeTag))
2928         return false;
2929     return ownerElement->fastHasAttribute(srcdocAttr);
2930 }
2931
2932 void FrameLoader::checkDidPerformFirstNavigation()
2933 {
2934     Page* page = m_frame->page();
2935     if (!page)
2936         return;
2937
2938     if (!m_didPerformFirstNavigation && page->backForward()->currentItem() && !page->backForward()->backItem() && !page->backForward()->forwardItem()) {
2939         m_didPerformFirstNavigation = true;
2940         m_client->didPerformFirstNavigation();
2941     }
2942 }
2943
2944 Frame* FrameLoader::findFrameForNavigation(const AtomicString& name, Document* activeDocument)
2945 {
2946     Frame* frame = m_frame->tree()->find(name);
2947
2948     if (activeDocument) {
2949         if (!activeDocument->canNavigate(frame))
2950             return 0;
2951     } else {
2952         // FIXME: Eventually all callers should supply the actual activeDocument
2953         // so we can call canNavigate with the right document.
2954         if (!m_frame->document()->canNavigate(frame))
2955             return 0;
2956     }
2957
2958     return frame;
2959 }
2960
2961 void FrameLoader::loadSameDocumentItem(HistoryItem* item)
2962 {
2963     ASSERT(item->documentSequenceNumber() == history()->currentItem()->documentSequenceNumber());
2964
2965     // Save user view state to the current history item here since we don't do a normal load.
2966     // FIXME: Does form state need to be saved here too?
2967     history()->saveScrollPositionAndViewStateToItem(history()->currentItem());
2968     if (FrameView* view = m_frame->view())
2969         view->setWasScrolledByUser(false);
2970
2971     history()->setCurrentItem(item);
2972         
2973     // loadInSameDocument() actually changes the URL and notifies load delegates of a "fake" load
2974     loadInSameDocument(item->url(), item->stateObject(), false);
2975
2976     // Restore user view state from the current history item here since we don't do a normal load.
2977     history()->restoreScrollPositionAndViewState();
2978 }
2979
2980 // FIXME: This function should really be split into a couple pieces, some of
2981 // which should be methods of HistoryController and some of which should be
2982 // methods of FrameLoader.
2983 void FrameLoader::loadDifferentDocumentItem(HistoryItem* item, FrameLoadType loadType)
2984 {
2985     // Remember this item so we can traverse any child items as child frames load
2986     history()->setProvisionalItem(item);
2987
2988     if (CachedPage* cachedPage = pageCache()->get(item)) {
2989         loadWithDocumentLoader(cachedPage->documentLoader(), loadType, 0);   
2990         return;
2991     }
2992
2993     KURL itemURL = item->url();
2994     KURL itemOriginalURL = item->originalURL();
2995     KURL currentURL;
2996     if (documentLoader())
2997         currentURL = documentLoader()->url();
2998     RefPtr<FormData> formData = item->formData();
2999
3000     ResourceRequest request(itemURL);
3001
3002     if (!item->referrer().isNull())
3003         request.setHTTPReferrer(item->referrer());
3004     
3005     // If this was a repost that failed the page cache, we might try to repost the form.
3006     NavigationAction action;
3007     if (formData) {
3008         formData->generateFiles(m_frame->document());
3009
3010         request.setHTTPMethod("POST");
3011         request.setHTTPBody(formData);
3012         request.setHTTPContentType(item->formContentType());
3013         RefPtr<SecurityOrigin> securityOrigin = SecurityOrigin::createFromString(item->referrer());
3014         addHTTPOriginIfNeeded(request, securityOrigin->toString());
3015
3016         // Make sure to add extra fields to the request after the Origin header is added for the FormData case.
3017         // See https://bugs.webkit.org/show_bug.cgi?id=22194 for more discussion.
3018         addExtraFieldsToRequest(request, m_loadType, true);
3019         
3020         // FIXME: Slight hack to test if the NSURL cache contains the page we're going to.
3021         // We want to know this before talking to the policy delegate, since it affects whether 
3022         // we show the DoYouReallyWantToRepost nag.
3023         //
3024         // This trick has a small bug (3123893) where we might find a cache hit, but then
3025         // have the item vanish when we try to use it in the ensuing nav.  This should be
3026         // extremely rare, but in that case the user will get an error on the navigation.
3027         
3028         if (ResourceHandle::willLoadFromCache(request, m_frame))
3029             action = NavigationAction(request, loadType, false);
3030         else {
3031             request.setCachePolicy(ReloadIgnoringCacheData);
3032             action = NavigationAction(request, NavigationTypeFormResubmitted);
3033         }
3034     } else {
3035         switch (loadType) {
3036             case FrameLoadTypeReload:
3037             case FrameLoadTypeReloadFromOrigin:
3038                 request.setCachePolicy(ReloadIgnoringCacheData);
3039                 break;
3040             case FrameLoadTypeBack:
3041             case FrameLoadTypeForward:
3042             case FrameLoadTypeIndexedBackForward:
3043                 // If the first load within a frame is a navigation within a back/forward list that was attached 
3044                 // without any of the items being loaded then we should use the default caching policy (<rdar://problem/8131355>).
3045                 if (m_stateMachine.committedFirstRealDocumentLoad() && !itemURL.protocolIs("https"))
3046                     request.setCachePolicy(ReturnCacheDataElseLoad);
3047                 break;
3048             case FrameLoadTypeStandard:
3049             case FrameLoadTypeRedirectWithLockedBackForwardList:
3050                 break;
3051             case FrameLoadTypeSame:
3052             default:
3053                 ASSERT_NOT_REACHED();
3054         }
3055
3056         addExtraFieldsToRequest(request, m_loadType, true);
3057
3058         ResourceRequest requestForOriginalURL(request);
3059         requestForOriginalURL.setURL(itemOriginalURL);
3060         action = NavigationAction(requestForOriginalURL, loadType, false);
3061     }
3062
3063     loadWithNavigationAction(request, action, false, loadType, 0);
3064 }
3065
3066 // Loads content into this frame, as specified by history item
3067 void FrameLoader::loadItem(HistoryItem* item, FrameLoadType loadType)
3068 {
3069     m_requestedHistoryItem = item;
3070     HistoryItem* currentItem = history()->currentItem();
3071     bool sameDocumentNavigation = currentItem && item->shouldDoSameDocumentNavigationTo(currentItem);
3072
3073     if (sameDocumentNavigation)
3074         loadSameDocumentItem(item);
3075     else
3076         loadDifferentDocumentItem(item, loadType);
3077 }
3078
3079 ResourceError FrameLoader::cancelledError(const ResourceRequest& request) const
3080 {
3081     ResourceError error = m_client->cancelledError(request);
3082     error.setIsCancellation(true);
3083     return error;
3084 }
3085
3086 void FrameLoader::setTitle(const StringWithDirection& title)
3087 {
3088     documentLoader()->setTitle(title);
3089 }
3090
3091 String FrameLoader::referrer() const
3092 {
3093     return m_documentLoader ? m_documentLoader->request().httpReferrer() : "";
3094 }
3095
3096 void FrameLoader::dispatchDocumentElementAvailable()
3097 {
3098     m_frame->injectUserScripts(InjectAtDocumentStart);
3099     m_client->documentElementAvailable();
3100 }
3101
3102 void FrameLoader::dispatchDidClearWindowObjectsInAllWorlds()
3103 {
3104     if (!m_frame->script()->canExecuteScripts(NotAboutToExecuteScript))
3105         return;
3106
3107     Vector<RefPtr<DOMWrapperWorld> > worlds;
3108     ScriptController::getAllWorlds(worlds);
3109     for (size_t i = 0; i < worlds.size(); ++i)
3110         dispatchDidClearWindowObjectInWorld(worlds[i].get());
3111 }
3112
3113 void FrameLoader::dispatchDidClearWindowObjectInWorld(DOMWrapperWorld* world)
3114 {
3115     if (!m_frame->script()->canExecuteScripts(NotAboutToExecuteScript) || !m_frame->script()->existingWindowShell(world))
3116         return;
3117
3118     m_client->dispatchDidClearWindowObjectInWorld(world);
3119
3120 #if ENABLE(INSPECTOR)
3121     if (Page* page = m_frame->page())
3122         page->inspectorController()->didClearWindowObjectInWorld(m_frame, world);
3123 #endif
3124
3125     InspectorInstrumentation::didClearWindowObjectInWorld(m_frame, world);
3126 }
3127
3128 void FrameLoader::dispatchGlobalObjectAvailableInAllWorlds()
3129 {
3130     Vector<RefPtr<DOMWrapperWorld> > worlds;
3131     ScriptController::getAllWorlds(worlds);
3132     for (size_t i = 0; i < worlds.size(); ++i)
3133         m_client->dispatchGlobalObjectAvailable(worlds[i].get());
3134 }
3135
3136 SandboxFlags FrameLoader::effectiveSandboxFlags() const
3137 {
3138     SandboxFlags flags = m_forcedSandboxFlags;
3139     if (Frame* parentFrame = m_frame->tree()->parent())
3140         flags |= parentFrame->document()->sandboxFlags();
3141     if (HTMLFrameOwnerElement* ownerElement = m_frame->ownerElement())
3142         flags |= ownerElement->sandboxFlags();
3143     return flags;
3144 }
3145
3146 void FrameLoader::didChangeTitle(DocumentLoader* loader)
3147 {
3148     m_client->didChangeTitle(loader);
3149
3150     if (loader == m_documentLoader) {
3151         // Must update the entries in the back-forward list too.
3152         history()->setCurrentItemTitle(loader->title());
3153         // This must go through the WebFrame because it has the right notion of the current b/f item.
3154         m_client->setTitle(loader->title(), loader->urlForHistory());
3155         m_client->setMainFrameDocumentReady(true); // update observers with new DOMDocument
3156         m_client->dispatchDidReceiveTitle(loader->title());
3157     }
3158 }
3159
3160 void FrameLoader::didChangeIcons(IconType type)
3161 {
3162     m_client->dispatchDidChangeIcons(type);
3163 }
3164
3165 void FrameLoader::dispatchDidCommitLoad()
3166 {
3167     if (m_stateMachine.creatingInitialEmptyDocument())
3168         return;
3169
3170     m_client->dispatchDidCommitLoad();
3171
3172     InspectorInstrumentation::didCommitLoad(m_frame, m_documentLoader.get());
3173 }
3174
3175 void FrameLoader::tellClientAboutPastMemoryCacheLoads()
3176 {
3177     ASSERT(m_frame->page());
3178     ASSERT(m_frame->page()->areMemoryCacheClientCallsEnabled());
3179
3180     if (!m_documentLoader)
3181         return;
3182
3183     Vector<String> pastLoads;
3184     m_documentLoader->takeMemoryCacheLoadsForClientNotification(pastLoads);
3185
3186     size_t size = pastLoads.size();
3187     for (size_t i = 0; i < size; ++i) {
3188         CachedResource* resource = memoryCache()->resourceForURL(KURL(ParsedURLString, pastLoads[i]));
3189
3190         // FIXME: These loads, loaded from cache, but now gone from the cache by the time
3191         // Page::setMemoryCacheClientCallsEnabled(true) is called, will not be seen by the client.
3192         // Consider if there's some efficient way of remembering enough to deliver this client call.
3193         // We have the URL, but not the rest of the response or the length.
3194         if (!resource)
3195             continue;
3196
3197         ResourceRequest request(resource->url());
3198         m_client->dispatchDidLoadResourceFromMemoryCache(m_documentLoader.get(), request, resource->response(), resource->encodedSize());
3199     }
3200 }
3201
3202 NetworkingContext* FrameLoader::networkingContext() const
3203 {
3204     return m_networkingContext.get();
3205 }
3206
3207 bool FrameLoaderClient::hasHTMLView() const
3208 {
3209     return true;
3210 }
3211
3212 Frame* createWindow(Frame* openerFrame, Frame* lookupFrame, const FrameLoadRequest& request, const WindowFeatures& features, bool& created)
3213 {
3214     ASSERT(!features.dialog || request.frameName().isEmpty());
3215
3216     if (!request.frameName().isEmpty() && request.frameName() != "_blank") {
3217         if (Frame* frame = lookupFrame->loader()->findFrameForNavigation(request.frameName(), openerFrame->document())) {
3218             if (Page* page = frame->page())
3219                 page->chrome()->focus();
3220             created = false;
3221             return frame;
3222         }
3223     }
3224
3225     // Sandboxed frames cannot open new auxiliary browsing contexts.
3226     if (isDocumentSandboxed(openerFrame, SandboxPopups))
3227         return 0;
3228
3229     // FIXME: Setting the referrer should be the caller's responsibility.
3230     FrameLoadRequest requestWithReferrer = request;
3231     requestWithReferrer.resourceRequest().setHTTPReferrer(openerFrame->loader()->outgoingReferrer());
3232     FrameLoader::addHTTPOriginIfNeeded(requestWithReferrer.resourceRequest(), openerFrame->loader()->outgoingOrigin());
3233
3234     Page* oldPage = openerFrame->page();
3235     if (!oldPage)
3236         return 0;
3237
3238     NavigationAction action(requestWithReferrer.resourceRequest());
3239     Page* page = oldPage->chrome()->createWindow(openerFrame, requestWithReferrer, features, action);
3240     if (!page)
3241         return 0;
3242
3243     Frame* frame = page->mainFrame();
3244
3245     frame->loader()->forceSandboxFlags(openerFrame->document()->sandboxFlags());
3246
3247     if (request.frameName() != "_blank")
3248         frame->tree()->setName(request.frameName());
3249
3250     page->chrome()->setToolbarsVisible(features.toolBarVisible || features.locationBarVisible);
3251     page->chrome()->setStatusbarVisible(features.statusBarVisible);
3252     page->chrome()->setScrollbarsVisible(features.scrollbarsVisible);
3253     page->chrome()->setMenubarVisible(features.menuBarVisible);
3254     page->chrome()->setResizable(features.resizable);
3255
3256     // 'x' and 'y' specify the location of the window, while 'width' and 'height'
3257     // specify the size of the page. We can only resize the window, so
3258     // adjust for the difference between the window size and the page size.
3259
3260     FloatRect windowRect = page->chrome()->windowRect();
3261     FloatSize pageSize = page->chrome()->pageRect().size();
3262     if (features.xSet)
3263         windowRect.setX(features.x);
3264     if (features.ySet)
3265         windowRect.setY(features.y);
3266     if (features.widthSet)
3267         windowRect.setWidth(features.width + (windowRect.width() - pageSize.width()));
3268     if (features.heightSet)
3269         windowRect.setHeight(features.height + (windowRect.height() - pageSize.height()));
3270     page->chrome()->setWindowRect(windowRect);
3271
3272     page->chrome()->show();
3273
3274     created = true;
3275     return frame;
3276 }
3277
3278 } // namespace WebCore