pyppeteer的环境搭建，常见参数及2个案例

左手的ㄟ右手 2023-02-21 04:59 1阅读 0赞

#### 一. pyppeteer介绍 ####

Puppeteer是谷歌出品的一款基于Node.js开发的一款工具，主要是用来操纵Chrome浏览器的 API，通过Javascript代码来操纵Chrome浏览器，完成数据爬取、Web程序自动测试等任务。

Puppeteer 默认以 headless 模式运行，但是可以通过修改配置文件运行“有头”模式。

Pyppeteer的两大特点，chromium浏览器和asyncio框架：

*  Chromium是一款独立的浏览器，是Google为发展自家的浏览器Google Chrome而开启的计划，相当于Chrome的实验版，Chromium的稳定性不如Chrome但是功能更加丰富，而且更新速度很快，通常每隔数小时就有新的开发版本发布。
 *  asyncio是Python的一个异步协程库，自3.4版本引入的标准库，直接内置了对异步IO的支持。

github地址：[https://github.com/puppeteer/puppeteer/blob/v2.1.1/docs/api.md][https_github.com_puppeteer_puppeteer_blob_v2.1.1_docs_api.md]

中文版教程：[https://zhaoqize.github.io/puppeteer-api-zh\_CN/][https_zhaoqize.github.io_puppeteer-api-zh_CN]

##### 二. 环境搭建 #####

1.  国内无法访问 可以使用国内镜像

pip install pyppeteer -i https://pypi.douban.com/simple

1.  chromium下载地址：[https://npm.taobao.org/mirrors/chromium-browser-snapshots/][https_npm.taobao.org_mirrors_chromium-browser-snapshots]，下载之后解压之后，通过executablePath属性指定运行浏览器了

#### 三. 常见参数 ####

<table> 
 <thead> 
  <tr> 
   <th>属性</th> 
   <th>数据类型</th> 
   <th>描述</th> 
  </tr> 
 </thead> 
 <tbody> 
  <tr> 
   <td>executablePath</td> 
   <td>str</td> 
   <td>chrome.exe运行的路径</td> 
  </tr> 
  <tr> 
   <td>ignorehttpserrrors</td> 
   <td>bool</td> 
   <td>忽略https错误，默认false</td> 
  </tr> 
  <tr> 
   <td>headless</td> 
   <td>bool</td> 
   <td>True 开始无头浏览器 False关闭无头</td> 
  </tr> 
  <tr> 
   <td>dumpio</td> 
   <td>bool</td> 
   <td>设置True 解决浏览器多开卡死</td> 
  </tr> 
 </tbody> 
</table>

args的参数设置：

<table> 
 <thead> 
  <tr> 
   <th>属性</th> 
   <th>数据类型</th> 
   <th>描述</th> 
  </tr> 
 </thead> 
 <tbody> 
  <tr> 
   <td>–disable-infobars</td> 
   <td>-</td> 
   <td>关闭自动化提示框</td> 
  </tr> 
  <tr> 
   <td>–window-size=1920,1080</td> 
   <td>str</td> 
   <td>设置浏览器大小吗，1920是宽，1080是宽</td> 
  </tr> 
  <tr> 
   <td>–log-level=30</td> 
   <td>str</td> 
   <td>日志保存等级</td> 
  </tr> 
  <tr> 
   <td>–start-maximized</td> 
   <td>-</td> 
   <td>窗口最大化模式</td> 
  </tr> 
  <tr> 
   <td>–proxy-server=http://localhost:1080</td> 
   <td>str</td> 
   <td>设置代理</td> 
  </tr> 
  <tr> 
   <td>userDataDir=D:\userData\</td> 
   <td>str</td> 
   <td>用户文件保存地址</td> 
  </tr> 
 </tbody> 
</table>

#### 四. 使用案例 ####

##### 4.1 案例1 #####

#!/usr/bin/python
    # -*- coding: UTF-8 -*-
    
    import asyncio
    from pyppeteer import launch
    
    
    async def main():
        # 浏览器 启动参数
        start_parm = { 
            # 启动chrome的路径
            "executablePath": r"E:\tmp\chrome-win\chrome.exe",
            # 关闭无头浏览器 默认是无头启动的
            "headless": False,
        }
        # 创建浏览器对象，可以传入 字典形式参数
        browser = await launch(**start_parm)
    
        # 创建一个页面对象， 页面操作在该对象上执行
        page = await browser.newPage()
    
        await page.goto('http://www.nows.fun/')  # 页面跳转
        page_text = await page.content()  # 页面内容
        print(page_text)
        await browser.close()  # 关闭浏览器对象
    
    
    asyncio.get_event_loop().run_until_complete(main())   # 创建异步池并执行main函数。

执行结果如下图：  
![在这里插入图片描述][watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2N1aV95b25naHVh_size_16_color_FFFFFF_t_70]

##### 4.2 案例2: 设置可视化参数，代码如下 #####

# !/usr/bin/python
    # -*- coding: UTF-8 -*-
    
    import asyncio
    import tkinter
    
    from pyppeteer import launcher
    
    # 注意 在导入launch之前先把默认参数改了
    # 去除自动化 启动参数
    launcher.AUTOMATION_ARGS.remove("--enable-automation")
    from pyppeteer import launch
    
    
    async def main():
        # 浏览器 启动参数
        start_parm = { 
            # 启动chrome的路径
            "executablePath": r"E:\tmp\chrome-win\chrome.exe",
            # 关闭无头浏览器
            "headless": False,
            "args": [
                '--disable-infobars',  # 关闭自动化提示框
                '--no-sandbox',  # 关闭沙盒模式
                '--start-maximized',  # 窗口最大化模式
            ],
        }
        browser = await launch(**start_parm)
        page = await browser.newPage()
    
        # 查看当前 桌面视图大小
        tk = tkinter.Tk()
        width = tk.winfo_screenwidth()
        height = tk.winfo_screenheight()
        tk.quit()
        print(f'设置窗口为：width：{width} height：{height}')
    
        # 设置网页 视图大小
        await page.setViewport(viewport={ 'width': width, 'height': height})
        await page.goto('http://www.nows.fun/')
        page_text = await page.content()
        print(page_text)
        await browser.close()
    
    
    asyncio.get_event_loop().run_until_complete(main())

[https_github.com_puppeteer_puppeteer_blob_v2.1.1_docs_api.md]: https://github.com/puppeteer/puppeteer/blob/v2.1.1/docs/api.md
[https_zhaoqize.github.io_puppeteer-api-zh_CN]: https://zhaoqize.github.io/puppeteer-api-zh_CN/
[https_npm.taobao.org_mirrors_chromium-browser-snapshots]: https://npm.taobao.org/mirrors/chromium-browser-snapshots/
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2N1aV95b25naHVh_size_16_color_FFFFFF_t_70]: https://img-blog.csdnimg.cn/20200628190652622.png?x-oss-process=image/watermark,type_ZmFuZ3poZW5naGVpdGk,shadow_10,text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2N1aV95b25naHVh,size_16,color_FFFFFF,t_70