基于python爬取有道翻譯過程圖解
1.準(zhǔn)備工作
先來到有道在線翻譯的界面http://fanyi.youdao.com/
F12 審查元素 ->選Network一欄,然后F5刷新 (如果看不到Method一欄,右鍵Name欄,選中Method)

輸入文字自動翻譯后發(fā)現(xiàn)Method一欄有GET還有POST;GET是指從服務(wù)器請求和獲得數(shù)據(jù),POST是向指定服務(wù)器提交被處理的數(shù)據(jù)、
隨便打開一個POST,找到preview可以看到我們輸入的“我愛你一生一世”數(shù)據(jù),可以證明post的提交數(shù)據(jù)的

下面分析一下Headers各個字段的意義;User-agent字段很重要


下面來看一下request模塊中urlopen方法,查看文檔;
發(fā)現(xiàn)urlopen有一個data參數(shù),如果參數(shù)沒賦值(默認None)就是GET形式,如果data參數(shù)被賦值了,就以POST形式提交

在這里,data參數(shù)其實是一個字典 ;就是源代碼中From Data的數(shù)據(jù)
下面一篇文章是對urlencode與unquote的詳細解釋:(urllib庫里可惜沒有urldecode函數(shù))
https://www.jb51.net/article/183857.htm
為什么要進行編碼和解碼呢?------》對于一些中文或者字符,url是不識別的,需要進行編碼轉(zhuǎn)換!encode(’utf-8’)把unicode的形式變成utf-8decode(’utf-8’)把utf-8形式變成Unicode編碼形式2.下面進行敲!
以上就是本文的全部內(nèi)容,希望對大家的學(xué)習(xí)有所幫助,也希望大家多多支持好吧啦網(wǎng)。
相關(guān)文章:
1. 基于android studio的layout的xml文件的創(chuàng)建方式2. 解決Android studio xml界面無法預(yù)覽問題3. 詳解Android studio 動態(tài)fragment的用法4. 圖文詳解vue中proto文件的函數(shù)調(diào)用5. 什么是python的自省6. Spring Boot和Thymeleaf整合結(jié)合JPA實現(xiàn)分頁效果(實例代碼)7. Android如何加載Base64編碼格式圖片8. 使用Android studio查看Kotlin的字節(jié)碼教程9. Vuex localStorage的具體使用10. Vue封裝一個TodoList的案例與瀏覽器本地緩存的應(yīng)用實現(xiàn)

網(wǎng)公網(wǎng)安備