23行python代码爬取知乎全部回答

淡淡的烟草味﹌ 2023-02-27 12:09 34阅读 0赞

## 前言 ##

本文的文字及图片来源于网络,仅供学习、交流使用,不具有任何商业用途,版权归原作者所有,如有问题请及时联系我们以作处理。

作者：一行数据

PS：如有需要Python学习资料的小伙伴可以加点击下方链接自行获取

[python免费学习资料以及群交流解答点击即可加入][python]

--------------------

**代码逻辑**

这个核心代码是直接对上篇推文中使用的代码进行修改，删去了对书籍名称的提取，添加了爬取内容的写入文件，小伙伴只要把getAnswers(问题号)里的传入参数改成想爬取回答的问题号，剩下的事情就只需要等待了

**什么是知乎问题号？**

*  查看知乎网页地址，question后的一串数字就是问题号  
    ![在这里插入图片描述][20200717141806355.png]

def getAnswers(qid):
        offset = 0
        num = 1
        f = open("知乎回答%s.txt" % qid, "a")
        while True:
            qid = qid
            print('Offset =', offset)
            # 知乎api请求
            data = getAnser(qid, offset)
            print(data)
            if len(data['data']) == 0:
                break
            for line in data['data']:
                # 保存回答数据
                content = line['content']
                pattern = re.compile(r'<[^>]+>', re.S)
                result = pattern.sub('', content)
                print(result)
                f.write("\n【第%d个回答】" % num)
                num += 1
                f.write(result)
            offset += 20
            time.sleep(1)
        f.close()
    
    getAnswers(62096167)

![在这里插入图片描述][watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2ZlaTM0Nzc5NTc5MA_size_16_color_FFFFFF_t_70]

[python]: https://jq.qq.com/?_wv=1027&k=ThcV4SNF
[20200717141806355.png]: /images/20230209/6a0517a960554cea838339bca5123b12.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2ZlaTM0Nzc5NTc5MA_size_16_color_FFFFFF_t_70]: /images/20230209/102a561b9f45485c8a4c60b018402d3b.png