Upstream version 6.35.121.0
[platform/framework/web/crosswalk.git] / src / net / url_request / url_request_job.h
1 // Copyright (c) 2012 The Chromium Authors. All rights reserved.
2 // Use of this source code is governed by a BSD-style license that can be
3 // found in the LICENSE file.
4
5 #ifndef NET_URL_REQUEST_URL_REQUEST_JOB_H_
6 #define NET_URL_REQUEST_URL_REQUEST_JOB_H_
7
8 #include <string>
9 #include <vector>
10
11 #include "base/memory/ref_counted.h"
12 #include "base/memory/scoped_ptr.h"
13 #include "base/memory/weak_ptr.h"
14 #include "base/message_loop/message_loop.h"
15 #include "base/power_monitor/power_observer.h"
16 #include "net/base/host_port_pair.h"
17 #include "net/base/load_states.h"
18 #include "net/base/net_export.h"
19 #include "net/base/request_priority.h"
20 #include "net/base/upload_progress.h"
21 #include "net/cookies/canonical_cookie.h"
22 #include "url/gurl.h"
23
24 namespace net {
25
26 class AuthChallengeInfo;
27 class AuthCredentials;
28 class CookieOptions;
29 class CookieStore;
30 class Filter;
31 class HttpRequestHeaders;
32 class HttpResponseInfo;
33 class IOBuffer;
34 struct LoadTimingInfo;
35 class NetworkDelegate;
36 class SSLCertRequestInfo;
37 class SSLInfo;
38 class URLRequest;
39 class UploadDataStream;
40 class URLRequestStatus;
41 class X509Certificate;
42
43 class NET_EXPORT URLRequestJob
44     : public base::RefCounted<URLRequestJob>,
45       public base::PowerObserver {
46  public:
47   explicit URLRequestJob(URLRequest* request,
48                          NetworkDelegate* network_delegate);
49
50   // Returns the request that owns this job. THIS POINTER MAY BE NULL if the
51   // request was destroyed.
52   URLRequest* request() const {
53     return request_;
54   }
55
56   // Sets the upload data, most requests have no upload data, so this is a NOP.
57   // Job types supporting upload data will override this.
58   virtual void SetUpload(UploadDataStream* upload_data_stream);
59
60   // Sets extra request headers for Job types that support request
61   // headers. Called once before Start() is called.
62   virtual void SetExtraRequestHeaders(const HttpRequestHeaders& headers);
63
64   // Sets the priority of the job. Called once before Start() is
65   // called, but also when the priority of the parent request changes.
66   virtual void SetPriority(RequestPriority priority);
67
68   // If any error occurs while starting the Job, NotifyStartError should be
69   // called.
70   // This helps ensure that all errors follow more similar notification code
71   // paths, which should simplify testing.
72   virtual void Start() = 0;
73
74   // This function MUST somehow call NotifyDone/NotifyCanceled or some requests
75   // will get leaked. Certain callers use that message to know when they can
76   // delete their URLRequest object, even when doing a cancel. The default
77   // Kill implementation calls NotifyCanceled, so it is recommended that
78   // subclasses call URLRequestJob::Kill() after doing any additional work.
79   //
80   // The job should endeavor to stop working as soon as is convenient, but must
81   // not send and complete notifications from inside this function. Instead,
82   // complete notifications (including "canceled") should be sent from a
83   // callback run from the message loop.
84   //
85   // The job is not obliged to immediately stop sending data in response to
86   // this call, nor is it obliged to fail with "canceled" unless not all data
87   // was sent as a result. A typical case would be where the job is almost
88   // complete and can succeed before the canceled notification can be
89   // dispatched (from the message loop).
90   //
91   // The job should be prepared to receive multiple calls to kill it, but only
92   // one notification must be issued.
93   virtual void Kill();
94
95   // Called to detach the request from this Job.  Results in the Job being
96   // killed off eventually. The job must not use the request pointer any more.
97   void DetachRequest();
98
99   // Called to read post-filtered data from this Job, returning the number of
100   // bytes read, 0 when there is no more data, or -1 if there was an error.
101   // This is just the backend for URLRequest::Read, see that function for
102   // more info.
103   bool Read(IOBuffer* buf, int buf_size, int* bytes_read);
104
105   // Stops further caching of this request, if any. For more info, see
106   // URLRequest::StopCaching().
107   virtual void StopCaching();
108
109   virtual bool GetFullRequestHeaders(HttpRequestHeaders* headers) const;
110
111   // Get the number of bytes received from network.
112   virtual int64 GetTotalReceivedBytes() const;
113
114   // Called to fetch the current load state for the job.
115   virtual LoadState GetLoadState() const;
116
117   // Called to get the upload progress in bytes.
118   virtual UploadProgress GetUploadProgress() const;
119
120   // Called to fetch the charset for this request.  Only makes sense for some
121   // types of requests. Returns true on success.  Calling this on a type that
122   // doesn't have a charset will return false.
123   virtual bool GetCharset(std::string* charset);
124
125   // Called to get response info.
126   virtual void GetResponseInfo(HttpResponseInfo* info);
127
128   // This returns the times when events actually occurred, rather than the time
129   // each event blocked the request.  See FixupLoadTimingInfo in url_request.h
130   // for more information on the difference.
131   virtual void GetLoadTimingInfo(LoadTimingInfo* load_timing_info) const;
132
133   // Returns the cookie values included in the response, if applicable.
134   // Returns true if applicable.
135   // NOTE: This removes the cookies from the job, so it will only return
136   //       useful results once per job.
137   virtual bool GetResponseCookies(std::vector<std::string>* cookies);
138
139   // Called to setup a stream filter for this request. An example of filter is
140   // content encoding/decoding.
141   // Subclasses should return the appropriate Filter, or NULL for no Filter.
142   // This class takes ownership of the returned Filter.
143   //
144   // The default implementation returns NULL.
145   virtual Filter* SetupFilter() const;
146
147   // Called to determine if this response is a redirect.  Only makes sense
148   // for some types of requests.  This method returns true if the response
149   // is a redirect, and fills in the location param with the URL of the
150   // redirect.  The HTTP status code (e.g., 302) is filled into
151   // |*http_status_code| to signify the type of redirect.
152   //
153   // The caller is responsible for following the redirect by setting up an
154   // appropriate replacement Job. Note that the redirected location may be
155   // invalid, the caller should be sure it can handle this.
156   //
157   // The default implementation inspects the response_info_.
158   virtual bool IsRedirectResponse(GURL* location, int* http_status_code);
159
160   // Called to determine if it is okay to redirect this job to the specified
161   // location.  This may be used to implement protocol-specific restrictions.
162   // If this function returns false, then the URLRequest will fail
163   // reporting ERR_UNSAFE_REDIRECT.
164   virtual bool IsSafeRedirect(const GURL& location);
165
166   // Called to determine if this response is asking for authentication.  Only
167   // makes sense for some types of requests.  The caller is responsible for
168   // obtaining the credentials passing them to SetAuth.
169   virtual bool NeedsAuth();
170
171   // Fills the authentication info with the server's response.
172   virtual void GetAuthChallengeInfo(
173       scoped_refptr<AuthChallengeInfo>* auth_info);
174
175   // Resend the request with authentication credentials.
176   virtual void SetAuth(const AuthCredentials& credentials);
177
178   // Display the error page without asking for credentials again.
179   virtual void CancelAuth();
180
181   virtual void ContinueWithCertificate(X509Certificate* client_cert);
182
183   // Continue processing the request ignoring the last error.
184   virtual void ContinueDespiteLastError();
185
186   // Continue with the network request.
187   virtual void ResumeNetworkStart();
188
189   void FollowDeferredRedirect();
190
191   // Returns true if the Job is done producing response data and has called
192   // NotifyDone on the request.
193   bool is_done() const { return done_; }
194
195   // Get/Set expected content size
196   int64 expected_content_size() const { return expected_content_size_; }
197   void set_expected_content_size(const int64& size) {
198     expected_content_size_ = size;
199   }
200
201   // Whether we have processed the response for that request yet.
202   bool has_response_started() const { return has_handled_response_; }
203
204   // These methods are not applicable to all connections.
205   virtual bool GetMimeType(std::string* mime_type) const;
206   virtual int GetResponseCode() const;
207
208   // Returns the socket address for the connection.
209   // See url_request.h for details.
210   virtual HostPortPair GetSocketAddress() const;
211
212   // base::PowerObserver methods:
213   // We invoke URLRequestJob::Kill on suspend (crbug.com/4606).
214   virtual void OnSuspend() OVERRIDE;
215
216   // Called after a NetworkDelegate has been informed that the URLRequest
217   // will be destroyed. This is used to track that no pending callbacks
218   // exist at destruction time of the URLRequestJob, unless they have been
219   // canceled by an explicit NetworkDelegate::NotifyURLRequestDestroyed() call.
220   virtual void NotifyURLRequestDestroyed();
221
222  protected:
223   friend class base::RefCounted<URLRequestJob>;
224   virtual ~URLRequestJob();
225
226   // Notifies the job that a certificate is requested.
227   void NotifyCertificateRequested(SSLCertRequestInfo* cert_request_info);
228
229   // Notifies the job about an SSL certificate error.
230   void NotifySSLCertificateError(const SSLInfo& ssl_info, bool fatal);
231
232   // Delegates to URLRequest::Delegate.
233   bool CanGetCookies(const CookieList& cookie_list) const;
234
235   // Delegates to URLRequest::Delegate.
236   bool CanSetCookie(const std::string& cookie_line,
237                     CookieOptions* options) const;
238
239   // Delegates to URLRequest::Delegate.
240   bool CanEnablePrivacyMode() const;
241
242   // Returns the cookie store to be used for the request.
243   CookieStore* GetCookieStore() const;
244
245   // Notifies the job that the network is about to be used.
246   void NotifyBeforeNetworkStart(bool* defer);
247
248   // Notifies the job that headers have been received.
249   void NotifyHeadersComplete();
250
251   // Notifies the request that the job has completed a Read operation.
252   void NotifyReadComplete(int bytes_read);
253
254   // Notifies the request that a start error has occurred.
255   void NotifyStartError(const URLRequestStatus& status);
256
257   // NotifyDone marks when we are done with a request.  It is really
258   // a glorified set_status, but also does internal state checking and
259   // job tracking.  It should be called once per request, when the job is
260   // finished doing all IO.
261   void NotifyDone(const URLRequestStatus& status);
262
263   // Some work performed by NotifyDone must be completed on a separate task
264   // so as to avoid re-entering the delegate.  This method exists to perform
265   // that work.
266   void CompleteNotifyDone();
267
268   // Used as an asynchronous callback for Kill to notify the URLRequest
269   // that we were canceled.
270   void NotifyCanceled();
271
272   // Notifies the job the request should be restarted.
273   // Should only be called if the job has not started a response.
274   void NotifyRestartRequired();
275
276   // See corresponding functions in url_request.h.
277   void OnCallToDelegate();
278   void OnCallToDelegateComplete();
279
280   // Called to read raw (pre-filtered) data from this Job.
281   // If returning true, data was read from the job.  buf will contain
282   // the data, and bytes_read will receive the number of bytes read.
283   // If returning true, and bytes_read is returned as 0, there is no
284   // additional data to be read.
285   // If returning false, an error occurred or an async IO is now pending.
286   // If async IO is pending, the status of the request will be
287   // URLRequestStatus::IO_PENDING, and buf must remain available until the
288   // operation is completed.  See comments on URLRequest::Read for more
289   // info.
290   virtual bool ReadRawData(IOBuffer* buf, int buf_size, int *bytes_read);
291
292   // Called to tell the job that a filter has successfully reached the end of
293   // the stream.
294   virtual void DoneReading();
295
296   // Called to tell the job that the body won't be read because it's a redirect.
297   // This is needed so that redirect headers can be cached even though their
298   // bodies are never read.
299   virtual void DoneReadingRedirectResponse();
300
301   // Informs the filter that data has been read into its buffer
302   void FilteredDataRead(int bytes_read);
303
304   // Reads filtered data from the request.  Returns true if successful,
305   // false otherwise.  Note, if there is not enough data received to
306   // return data, this call can issue a new async IO request under
307   // the hood.
308   bool ReadFilteredData(int *bytes_read);
309
310   // Whether the response is being filtered in this job.
311   // Only valid after NotifyHeadersComplete() has been called.
312   bool HasFilter() { return filter_ != NULL; }
313
314   // At or near destruction time, a derived class may request that the filters
315   // be destroyed so that statistics can be gathered while the derived class is
316   // still present to assist in calculations.  This is used by URLRequestHttpJob
317   // to get SDCH to emit stats.
318   void DestroyFilters();
319
320   // Provides derived classes with access to the request's network delegate.
321   NetworkDelegate* network_delegate() { return network_delegate_; }
322
323   // The status of the job.
324   const URLRequestStatus GetStatus();
325
326   // Set the status of the job.
327   void SetStatus(const URLRequestStatus& status);
328
329   // The number of bytes read before passing to the filter.
330   int prefilter_bytes_read() const { return prefilter_bytes_read_; }
331
332   // The number of bytes read after passing through the filter.
333   int postfilter_bytes_read() const { return postfilter_bytes_read_; }
334
335   // Total number of bytes read from network (or cache) and typically handed
336   // to filter to process.  Used to histogram compression ratios, and error
337   // recovery scenarios in filters.
338   int64 filter_input_byte_count() const { return filter_input_byte_count_; }
339
340   // The request that initiated this job. This value MAY BE NULL if the
341   // request was released by DetachRequest().
342   URLRequest* request_;
343
344  private:
345   // When data filtering is enabled, this function is used to read data
346   // for the filter.  Returns true if raw data was read.  Returns false if
347   // an error occurred (or we are waiting for IO to complete).
348   bool ReadRawDataForFilter(int *bytes_read);
349
350   // Invokes ReadRawData and records bytes read if the read completes
351   // synchronously.
352   bool ReadRawDataHelper(IOBuffer* buf, int buf_size, int* bytes_read);
353
354   // Called in response to a redirect that was not canceled to follow the
355   // redirect. The current job will be replaced with a new job loading the
356   // given redirect destination.
357   void FollowRedirect(const GURL& location, int http_status_code);
358
359   // Called after every raw read. If |bytes_read| is > 0, this indicates
360   // a successful read of |bytes_read| unfiltered bytes. If |bytes_read|
361   // is 0, this indicates that there is no additional data to read. If
362   // |bytes_read| is < 0, an error occurred and no bytes were read.
363   void OnRawReadComplete(int bytes_read);
364
365   // Updates the profiling info and notifies observers that an additional
366   // |bytes_read| unfiltered bytes have been read for this job.
367   void RecordBytesRead(int bytes_read);
368
369   // Called to query whether there is data available in the filter to be read
370   // out.
371   bool FilterHasData();
372
373   // Subclasses may implement this method to record packet arrival times.
374   // The default implementation does nothing.
375   virtual void UpdatePacketReadTimes();
376
377   // Indicates that the job is done producing data, either it has completed
378   // all the data or an error has been encountered. Set exclusively by
379   // NotifyDone so that it is kept in sync with the request.
380   bool done_;
381
382   int prefilter_bytes_read_;
383   int postfilter_bytes_read_;
384   int64 filter_input_byte_count_;
385
386   // The data stream filter which is enabled on demand.
387   scoped_ptr<Filter> filter_;
388
389   // If the filter filled its output buffer, then there is a change that it
390   // still has internal data to emit, and this flag is set.
391   bool filter_needs_more_output_space_;
392
393   // When we filter data, we receive data into the filter buffers.  After
394   // processing the filtered data, we return the data in the caller's buffer.
395   // While the async IO is in progress, we save the user buffer here, and
396   // when the IO completes, we fill this in.
397   scoped_refptr<IOBuffer> filtered_read_buffer_;
398   int filtered_read_buffer_len_;
399
400   // We keep a pointer to the read buffer while asynchronous reads are
401   // in progress, so we are able to pass those bytes to job observers.
402   scoped_refptr<IOBuffer> raw_read_buffer_;
403
404   // Used by HandleResponseIfNecessary to track whether we've sent the
405   // OnResponseStarted callback and potentially redirect callbacks as well.
406   bool has_handled_response_;
407
408   // Expected content size
409   int64 expected_content_size_;
410
411   // Set when a redirect is deferred.
412   GURL deferred_redirect_url_;
413   int deferred_redirect_status_code_;
414
415   // The network delegate to use with this request, if any.
416   NetworkDelegate* network_delegate_;
417
418   base::WeakPtrFactory<URLRequestJob> weak_factory_;
419
420   DISALLOW_COPY_AND_ASSIGN(URLRequestJob);
421 };
422
423 }  // namespace net
424
425 #endif  // NET_URL_REQUEST_URL_REQUEST_JOB_H_