爬虫有道词典

import time
import random
import json
#调用自己的拓展包，
from Day1.tuozhan_all import post
#此函数，设置MD5把数据转换成bytes类型
def md5_my(need_str):
    import hashlib

    # 创建md5对象
    md5_o = hashlib.md5()
    # 需要有bytes, 作为参数
    # 由str, 转换成 bytes encode-------str.encode('utf-8')
    # 由bytes转换成 str, decode---------bytes.decode('utf-8')
    #此处由字符串转换为二进制
    sign_bytes = need_str.encode('utf-8')
    #用type关键字，输出看一眼sign_bytes的类型
    print(type(sign_bytes))
    # 更新md5 object的值,用来修改md5_o里的数据
    md5_o.update(sign_bytes)
    sign_str = md5_o.hexdigest()
    return sign_str

def translate(kw):
    #设置url
    url = 'http://fanyi.youdao.com/translate_o?smartresult=dict&smartresult=rule'
    #设置cookie和伪装
    headers = {
        'Accept': 'application/json, text/javascript, */*; q=0.01',
        #'Accept-Encoding': 'gzip, deflate',
        'Accept-Language': 'zh-CN,zh;q=0.9,en;q=0.8',
        'Connection': 'keep-alive',
        #'Content-Length': '223',
        'Content-Type': 'application/x-www-form-urlencoded; charset=UTF-8',
        'Cookie': '[email protected]; OUTFOX_SEARCH_USER_ID_NCOO=38624120.26076847; SESSION_FROM_COOKIE=unknown; JSESSIONID=aaabYcV4ZOU-JbQUha2uw; ___rl__test__cookies=1534210912076',
        'Host': 'fanyi.youdao.com',
        'Origin': 'http://fanyi.youdao.com',
        'Referer': 'http://fanyi.youdao.com/',
        'User-Agent': 'Mozilla/5.0 (Windows NT 6.1; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/67.0.3396.99 Safari/537.36',
        'X-Requested-With': 'XMLHttpRequest',
    }


    # form 的生成1. i 需要确定, 2, salt, 3, sign
   #创建key接收要翻译的词语，
    key= kw
   #此行为Js代码，(new Date).getTime()代表获取当前时间，parseInt(10 * Math.random(), 10)获取零到十的随机数
   # salt : ((new Date).getTime() + parseInt(10 * Math.random(), 10))
   #此行把上行的js代码解析为python代码，time time() 返回当前时间的时间戳，random.randint(0,10)为获取0-10的随机整数
    salt = int(time.time()*1000 + random.randint(0,10))
    print(salt)
   #把解析过的代码转化为字符串类型
    salt_str = str(salt)

    # sign : o = u.md5(S + n + r + D);
    # S = "fanyideskweb"
    # D = "ebSeFb%=XZ%T[KZ)c(sy!"
    # n = key
    # r = salt_str
    S = "fanyideskweb"
    D = "ebSeFb%=XZ%T[KZ)c(sy!"
    sign_str = S + key + salt_str + D
    # md5 加密的方法
    sign_md5_str = md5_my(sign_str)

    form = {
    'i': key,
    'from': 'AUTO',
    'to': 'AUTO',
    'smartresult': 'dict',
    'client': 'fanyideskweb',
    'salt': salt_str,
    'sign': sign_md5_str,
    'doctype': 'json',
    'version': '2.1',
    'keyfrom': 'fanyi.web',
    'action': 'FY_BY_REALTIME',
    'typoResult': 'false',
    }
   #调用post函数
    html_bytes = post(url, form, headers=headers)

    # 将 json 类型的 str, 转化成, 字典
    res_dict = json.loads(html_bytes.decode('utf-8'))
    #print(html_bytes.decode('utf-8'))
   #过滤出翻译后的结果
    translate_res = res_dict['translateResult'][0][0]['tgt']

    return translate_res


#此代码只可在当前模板使用，不会被外部模板调用
if __name__ == '__main__':
    #启动tarnslate函数
    ret = translate('青青河边草')
    #输出结果
    print('青青河边草的翻译是:' + ret)