二十五、爬取毛豆新車的數據
918
2025-04-02
瀏覽器常識:
Sources:查看項目源碼
Network:查看當前網站所有資源的請求信息(包括和服務器傳輸的HTTP報文信息)、加載時間等(根據加載時間進行項目優化)
Application:查看當前網站的數據存儲和資源文件
常用瀏覽器內核:
webkit:谷歌Chrome,蘋果Safari,歐朋14+,大部分國產
gecko:火狐
presto:歐朋14版本以前
trident:IE
常見HTTP錯誤碼:HttpWatch狀態碼Result is
詳細分解:
1xx(臨時響應)
表示臨時響應并需要請求者繼續執行操作的狀態代碼。
代碼 說明
100 (繼續) 請求者應當繼續提出請求。服務器返回此代碼表示已收到請求的第一部分,正在等待其余部分。
101 (切換協議) 請求者已要求服務器切換協議,服務器已確認并準備切換。
2xx (成功)
表示成功處理了請求的狀態代碼。
代碼 說明
200 (成功) 服務器已成功處理了請求。通常,這表示服務器提供了請求的網頁。
201 (已創建) 請求成功并且服務器創建了新的資源。
202 (已接受) 服務器已接受請求,但尚未處理。
203 (非授權信息) 服務器已成功處理了請求,但返回的信息可能來自另一來源。
204 (無內容) 服務器成功處理了請求,但沒有返回任何內容。
205 (重置內容) 服務器成功處理了請求,但沒有返回任何內容。
206 (部分內容) 服務器成功處理了部分 GET 請求。
3xx (重定向)
表示要完成請求,需要進一步操作。 通常,這些狀態代碼用來重定向。
代碼 說明
300 (多種選擇) 針對請求,服務器可執行多種操作。服務器可根據請求者 (user agent) 選擇一項操作,或提供操作列表供請求者選擇。
301 (永久移動) 請求的網頁已永久移動到新位置。服務器返回此響應(對 GET 或 HEAD 請求的響應)時,會自動將請求者轉到新位置。
302 (臨時移動) 服務器目前從不同位置的網頁響應請求,但請求者應繼續使用原有位置來進行以后的請求。
303 (查看其他位置) 請求者應當對不同的位置使用單獨的 GET 請求來檢索響應時,服務器返回此代碼。
304 (未修改) 自從上次請求后,請求的網頁未修改過。服務器返回此響應時,不會返回網頁內容。
305 (使用代理) 請求者只能使用代理訪問請求的網頁。如果服務器返回此響應,還表示請求者應使用代理。
307 (臨時重定向) 服務器目前從不同位置的網頁響應請求,但請求者應繼續使用原有位置來進行以后的請求。
4xx(請求錯誤)
碼表示請求可能出錯,妨礙了服務器的處理。
解決辦法:檢查HTTP請求中可能發生的語法錯誤,確保請求的URL或者Post語法沒有錯誤。
代碼 說明
400 (Bad?Request錯誤請求) 服務器不理解請求的語法。
401 ( Unauthorized未授權) 請求要求身份驗證。 對于需要登錄的網頁,服務器可能返回此響應。
解決:嘗試清除瀏覽器的cookie和緩存后再試。
提供正確的身份驗證或者憑據(賬號或者token等)。
403 (請求被拒絕) 服務器拒絕請求。
解決:當用戶沒有訪問所請求資源的權限時,通常會發生403錯誤。通常可能是客戶端IP、Agent等被WEB服務器拒絕訪問了,比如觸發了WAF,反扒策略等,這時候可以通過修改Agent內容,更換IP等來解決。
404 (Not?Found請求地址錯誤) 服務器找不到請求的網頁。
解決:是否犯了類型錯誤。
文件是否存在于服務器上,或者已移動或已刪除?
要查詢的目錄中是否有請求的文件。
405 (方法禁用) 禁用請求中指定的方法。
406 (不接受) 無法使用請求的內容特性響應請求的網頁。
407 (需要代理授權) 此狀態代碼與 401(未授權)類似,但指定請求者應當授權使用代理。
408 (請求超時) 服務器等候請求時發生超時。
解決:當服務器關閉連接時會發送此響應,因為客戶端需要很長時間才能發送請求。當客戶端連接速度較慢或服務器上存在巨大負載時,會發生這種情況。請注意,即使沒有客戶端先前的任何請求,此錯誤響應也經常由服務器發送。這意味著服務器希望關閉此未使用的連接。現代任何現代瀏覽器(例如chrome和firefox)都使用預連接來加速Web,如果它長時間未使用,則服務器會斷開連接。即使沒有發送消息,服務器也經常斷開連接
409 (沖突) 服務器在完成請求時發生沖突。服務器必須在響應中包含有關沖突的信息。
410 (已刪除) 如果請求的資源已永久刪除,服務器就會返回此響應。
411 (需要有效長度) 服務器不接受不含有效內容長度標頭字段的請求。
412 (未滿足前提條件) 服務器未滿足請求者在請求中設置的其中一個前提條件。
413 (請求實體過大) 服務器無法處理請求,因為請求實體過大,超出服務器的處理能力。
414 (請求的 URI 過長) 請求的 URI(通常為網址)過長,服務器無法處理。
415 (不支持的媒體類型) 請求的格式不受請求頁面的支持。
416 (請求范圍不符合要求) 如果頁面無法提供請求的范圍,則服務器會返回此狀態代碼。
417 (未滿足期望值) 服務器未滿足"期望"請求標頭字段的要求。
429??用戶在給定的時間內發送了太多請求。這通常作為速率限制措施來完成。通常,免費API的時間提供者(例如:免費天氣API等)限制了免費用戶訪問數據的速率。
解決:等待一段時間,然后重試或閱讀與API訪問限制有關文檔來解決。
5xx(服務器錯誤)
這些狀態代碼表示服務器在嘗試處理請求時發生內部錯誤。 這些錯誤可能是服務器本身的錯誤,而不是請求出錯。常常會返回HTTP狀態碼5xx類型的以及更具體的錯誤。
代碼 說明
500 (服務器內部錯誤) 服務器遇到錯誤,無法完成請求。
501 (尚未實施) 服務器不具備完成請求的功能。例如,服務器無法識別請求方法時可能會返回此代碼。
502 (錯誤網關) 服務器作為網關或代理,從上游服務器收到無效響應。最常見的原因是服務器配置錯誤。缺少軟件包或不正確的負載平衡服務器可能會導致這些錯誤
503 (服務不可用) 服務器目前無法使用(由于超載或停機維護)。通常,這只是暫時狀態。
注意:如果你在重載時間或其他原因發送此響應,則還應發送用戶友好的html頁面或消息,說明問題以及解決問題的估計時間范圍,可以使用Retry-After:HTTP頭來說明。不要發送與緩存相關的標頭。
504 (網關超時) 服務器作為網關或代理,無法在規定的時間段內從代理服務器獲得響應時,將收到此錯誤。
原因:服務負載很大
505 (HTTP 版本不受支持) 服務器不支持請求中所用的 HTTP 協議版本。
導致此類錯誤的最常見原因是服務器配置錯誤。
出現這種報錯,要去查詢服務器詳細的錯誤日志,或者相關應用服務器的日志(比如PHP,java日志)來得到詳細原因,在具體問題具體解決。
HTTP NAT
版權聲明:本文內容由網絡用戶投稿,版權歸原作者所有,本站不擁有其著作權,亦不承擔相應法律責任。如果您發現本站中有涉嫌抄襲或描述失實的內容,請聯系我們jiasou666@gmail.com 處理,核實后本網站將在24小時內刪除侵權內容。
版權聲明:本文內容由網絡用戶投稿,版權歸原作者所有,本站不擁有其著作權,亦不承擔相應法律責任。如果您發現本站中有涉嫌抄襲或描述失實的內容,請聯系我們jiasou666@gmail.com 處理,核實后本網站將在24小時內刪除侵權內容。