爬取金山词霸词典

╰半夏微凉° 2022-11-14 00:52 243阅读 0赞

#### **我们首先观察 Query String Parameters，发现 timestamp 、 word 和 signature 三个参数发生变化，前两个参数好办，分别是时间戳和要查询的单词，第三个参数推测可能是经md5加密的字符串** ####

![在这里插入图片描述][watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L0tZdXJ1eWFu_size_16_color_FFFFFF_t_70]

#### **经过调试断点，可以看到  g 函数是我们需要关注的函数** ####

![在这里插入图片描述][watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L0tZdXJ1eWFu_size_16_color_FFFFFF_t_70 1]

#### **找到 g 函数，参数 signature  在第1053行生成，变量 r 很关键** ####

![在这里插入图片描述][watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L0tZdXJ1eWFu_size_16_color_FFFFFF_t_70 2]

#### 继续调试，找到 m  函数，e.params 结构为 ####

{ 
        client: 6,
        key: 1000006, 
        timestamp: 时间戳, 
        word: 单词
    }

![在这里插入图片描述][watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L0tZdXJ1eWFu_size_16_color_FFFFFF_t_70 3]

#### 继续调试，来到904行，方框中的函数返回一个与实参一样的对象，貌似没什么用 ####

![在这里插入图片描述][watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L0tZdXJ1eWFu_size_16_color_FFFFFF_t_70 4]

#### 1071行执行完毕，可以看到 t 的值即为 e.params 的各个 key 对应的 value 相拼接。1018行的参数为一个字符串，url + t + 常量字符串，即 ####

'/dictionary/word/query/web' + t + '7ece94d9f9c202b0d2ec557dg4r9bc'

![在这里插入图片描述][watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L0tZdXJ1eWFu_size_16_color_FFFFFF_t_70 5]

#### 形参 t 的值上文已经生成，我们继续再跳进函数 ####

![在这里插入图片描述][watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L0tZdXJ1eWFu_size_16_color_FFFFFF_t_70 6]

#### **继续跳进函数，发现是MD5加密** ####

![在这里插入图片描述][watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L0tZdXJ1eWFu_size_16_color_FFFFFF_t_70 7]

#### 我们再回到1058行，参数 signature 的值已经生成，经检验，加密方式为md5加密。至此，我们得到了 signature 的生成方法。见上文形参 t 的生成 ####

![在这里插入图片描述][watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L0tZdXJ1eWFu_size_16_color_FFFFFF_t_70 8]

#### python 代码如下 ####

import requests
    from hashlib import md5
    import urllib.parse as parse
    import time
    
    
    class CiBa:
        def generate_signature(self, params: dict) -> str:
            ''' 生成signature '''
            value_array = []
            keys = sorted(list(params.keys())) # 对key进行排序
            for value in keys:
                value_array.append(str(params[value]))
            return md5(('/dictionary/word/query/web' + ''.join(value_array) + '7ece94d9f9c202b0d2ec557dg4r9bc').encode('utf-8')).hexdigest()
    
        
        def get_meaning(self, word: str) -> str:
            headers = { 
                'Origin': 'https://www.iciba.com',
                'Referer': 'https://www.iciba.com/',
                'User-Agent': 'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/89.0.4389.90 Safari/537.36 Edg/89.0.774.57'
            }
            params = { 
                'client': 6,
                'key': 1000006,
                'timestamp': int(time.time() * 1000),
                'word': parse.quote(word)
            }
            params['signature'] = self.generate_signature(params)
            url = 'https://dict.iciba.com/dictionary/word/query/web'
            # url = 'https://dict.iciba.com/dictionary/word/query/web?' + parse.urlencode(params)
            resp = requests.get(url, params=params, headers=headers)
            return resp.text
    
    
    if __name__ == "__main__":
        print(CiBa().get_meaning('hello'))

[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L0tZdXJ1eWFu_size_16_color_FFFFFF_t_70]: /images/20221022/3f937a9bbe3043dab3bcebb6f6a0fd10.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L0tZdXJ1eWFu_size_16_color_FFFFFF_t_70 1]: /images/20221022/f5757583671a4f9091b08d6f708406bb.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L0tZdXJ1eWFu_size_16_color_FFFFFF_t_70 2]: /images/20221022/718e8a95243048a79d94457121f75498.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L0tZdXJ1eWFu_size_16_color_FFFFFF_t_70 3]: /images/20221022/9136e3710c254af5853033a0629ce9c9.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L0tZdXJ1eWFu_size_16_color_FFFFFF_t_70 4]: /images/20221022/3c375cf6b8e940e79382ae4ed8030e89.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L0tZdXJ1eWFu_size_16_color_FFFFFF_t_70 5]: /images/20221022/0cf8f43682b643f1b81d10c0f7daee42.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L0tZdXJ1eWFu_size_16_color_FFFFFF_t_70 6]: /images/20221022/b85f208c0b1543b3967fb2cf6395cc11.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L0tZdXJ1eWFu_size_16_color_FFFFFF_t_70 7]: /images/20221022/1f3aadb908ad4bdd85540f3d2683ceaa.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L0tZdXJ1eWFu_size_16_color_FFFFFF_t_70 8]: /images/20221022/d7e6c6310a304d5298d8d9f326d9b725.png