某查查app爬虫

淡淡的烟草味﹌ 2022-10-02 11:49 128阅读 0赞

最近闲来无聊，接到一个面试题，爬某查查新增企业数据  
乍一看很简单哇，打开网页，一顿操作猛如虎，一看战绩，这怎么限制了,网页版只有100条数据，打开app看下，新增企事业数据这么多，但是得开会员啊。![在这里插入图片描述][watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3FxXzM0MDY3ODIx_size_16_color_FFFFFF_t_70]

淘宝买吧，买好之后就开始搞，各种手段，安卓模拟器抓包，模拟各种参数，  
这次真的是一顿操作猛如虎啊。

{'Value': 1101, 'Desc': '北京市', 'Count': 6725, 'provinceName': '北京', 'provinceCode': 'BJ'}
    {'Value': 3401, 'Desc': '合肥市', 'Count': 7917, 'provinceName': '安徽', 'provinceCode': 'AH'}
    这是要用到城市信息
    {'name': '甘肃', 'province': 'GS', 'cityCode': '', 'hasNext': True}
    {'name': '广东', 'province': 'GD', 'cityCode': '', 'hasNext': True}
    {'name': '广西', 'province': 'GX', 'cityCode': '', 'hasNext': True}
    省份信息

数据目前不是很全，只有公司名称，创建时间，地址等,后期还要努力努力，多多学习，  
这些数据只用于学习。  
![在这里插入图片描述][watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3FxXzM0MDY3ODIx_size_16_color_FFFFFF_t_70 1]  
[github链接][github]

[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3FxXzM0MDY3ODIx_size_16_color_FFFFFF_t_70]: /images/20220112/cf572f80ed9848018ced6a4696f89e63.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3FxXzM0MDY3ODIx_size_16_color_FFFFFF_t_70 1]: /images/20220112/6b0688bfd7044a96972755a6b054276a.png
[github]: https://github.com/zhaoboy9692

发表评论取消回复

表情：

评论列表（有 0 条评论，128人围观）

还没有评论，来说两句吧...

相关阅读

相关某吧爬虫第二步

上次开了个头，一直没时间继续下一步。这不抽空赶紧整理了一下。废话不多说，直接开始，附主要步骤截图、思路及关键词。 -------------------- 一、观察正常

绝地灬酷狼/ 2024年03月26日 21:20/ 0 赞/ 14 阅读

相关某吧爬虫第一步

爬虫很多，可以试着自己整一个。三言两语，走出第一步。 -------------------- 首先浏览器打开某吧登录页面 http://www.\\\\\\.com

怼烎@/ 2024年03月26日 21:17/ 0 赞/ 11 阅读

相关 app逆向|某酒店app注册参数分析

前言 Android逆向是一个很大很深的话题，我们这个系列探讨的是爬虫工程师日常的逆向需求，比如签名算法啊，post请求中的加密啊，乱七八糟的随机字段等,下面看看我们每次要分

深碍√TFBOYSˉ_/ 2022年12月19日 03:46/ 0 赞/ 80 阅读

相关某查查app爬虫

最近闲来无聊，接到一个面试题，爬某查查新增企业数据乍一看很简单哇，打开网页，一顿操作猛如虎，一看战绩，这怎么限制了,网页版只有100条数据，打开app看下，新增企事业数据

淡淡的烟草味﹌/ 2022年10月02日 11:49/ 0 赞/ 129 阅读

相关爬虫爬取某数字app的房屋信息

爬虫爬取某数字app的房屋信息声明：本文只是用来学习交流，并不是用来使用爬虫恶意爬去别人劳动成果，本文只是用来作为研究分享爬虫的思路，加强开发人员在日常开发工作中的安全

偏执的太偏执、/ 2022年06月01日 02:50/ 0 赞/ 143 阅读

相关某查查 sign和token研究

某查查app sign研究从上次抓取某查查app数据之后，一直有一个问题昨天一个偶然机会，得到某查查的sign算法，并未进行脱壳和逆向，是使用js的方式找到相关算法

末蓝、/ 2021年12月15日 16:51/ 0 赞/ 204 阅读

相关某查查app sign算法研究（二）

上次把sign加密其中的一个参数找到了时间戳，这次继续找其他参数。就找这个`cOI`。 [某查查app sign研究研究初步探索][app sign] 继续同样的套路`

柔情只为你懂/ 2021年12月12日 16:34/ 0 赞/ 255 阅读

相关某查查app sign算法初步探索

某查查app sign算法研究初步探索之前有说过某查查的sign的解密，但这次是企查查app的sign算法破解，目前是初步进程。 [某查查token研究][token

旧城等待，/ 2021年12月12日 16:13/ 0 赞/ 429 阅读

相关企查查app新增企业数据抓取

企查查每日新增企业数据抓取尚未完成的工作：需要自行抓包获取设备id，appid，sign等等 sign和时间戳保持一致即可把所有的数据

我就是我/ 2021年12月11日 14:09/ 0 赞/ 273 阅读

相关关于企查查app sign研究

目前写的四篇文章已经被删除，且无法再次通过审核。 ![在这里插入图片描述][watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_tex

╰+哭是因爲堅強的太久メ/ 2021年11月29日 22:02/ 0 赞/ 288 阅读