中国天气网爬虫之获取站名信息

妖狐艹你老母 2023-06-13 11:10 17阅读 0赞

'''设定编码初始值并递增（直到最大值则终止），发送请求，
    若有效，则将编码和对应的站名存入json文件中。'''
    import os
    import requests
    import json
    import re
    
    def write_to_json(key,value):
        content_dict = json.load(open('number2city.json','r'))
        content_dict[key] = value
        json.dump(content_dict,open('number2city.json','w'),indent=4)
    
    number = 101000000 # 编码初始值
    number2 = 101000000
    count = 0   # 用于计次
    f = open('number2city.json','w')
    f.write('{}')
    f.close()
    while True:
        url = "http://www.weather.com.cn/weather/"+str(number)+".shtml"
        r = requests.get(url) # 获取请求数据
        r.encoding = 'utf-8'
        r = r.text
        if r == '':# 如果请求为空
            count+=1 # 计次
            if count >200:# 如果连续200次请求为空
                number = number2+10000# 自增10000（也就是跳到下一个省份）
                number2 += 10000
                count =0
        else:
            count = 0 # 计次清零
            print(number) # 有效的编码
            city_name = re.search('<title>(.*?)天气预报', r).group(1)
            write_to_json(number,city_name)
        if number>101350000:# 如果编码数超过101350000,则终止
            break
        number+=1 # 编码数自增1
    print("Data saved!")# 打印成功

发表评论取消回复

表情：

评论列表（有 0 条评论，17人围观）

还没有评论，来说两句吧...

相关阅读

相关中国天气网爬虫之获取站名信息

'''设定编码初始值并递增（直到最大值则终止），发送请求，若有效，则将编码和对应的站名存入json文件中。''' import os impo

妖狐艹你老母/ 2023年06月13日 11:10/ 0 赞/ 18 阅读

相关中国天气网爬虫

import wx import wx.grid import sqlite3 import requests from bs4 imp

╰+哭是因爲堅強的太久メ/ 2023年06月13日 09:59/ 0 赞/ 38 阅读

相关中国天气网实时天气api自定义ui

![请输入图片描述][img20210223102612.png] 需求：展示当前地区的天气和温度 `api`采用中国天气网的Api接口，天气网只提供了自定义的插件，没

柔光的暖阳◎/ 2022年11月14日 12:00/ 0 赞/ 244 阅读

相关 java程序获取天气预报_java调用中国天气网api获得天气预报信息的方法

本文实例讲述了java调用中国天气网api获得天气预报信息的方法。分享给大家供大家参考。具体实现方法如下： //以冰城哈尔滨为例通过中国天气api调用天气信息 privat

快来打我*/ 2022年11月04日 00:56/ 0 赞/ 380 阅读

相关天气信息获取

文章目录前言一、api接口二、接口调用 1.查询省份代码 2.查询城市代码 3.查询城市天气总结

末蓝、/ 2022年10月27日 12:17/ 0 赞/ 355 阅读

相关中国天气网城市代码（JSON）获取实现(二)

接着上一篇 [http://blog.csdn.net/huoer\_12/article/details/17381991][http_blog.csdn.net_h

深藏阁楼爱情的钟/ 2022年09月19日 05:17/ 0 赞/ 400 阅读

相关中国天气网城市代码（JSON）获取实现(一)

城市代码：[http://blog.csdn.net/huoer\_12/article/details/17357281][http_blog.csdn.net_huoer_

ゝ一世哀愁。/ 2022年09月19日 04:30/ 0 赞/ 564 阅读

相关中国天气网天气预报API接口城市代码(XML格式，信息全)

说到开发天气预报，就需要找一个开放接口了，接口有很多，中国天气网的数据比较准确，而且也有权威性。访问地址如：[http://m.weather.com.cn/dat

小咪咪/ 2022年07月13日 10:52/ 0 赞/ 286 阅读

相关关于中国天气网API接口

一、中央气象台API接口： 1. XML接口 http://flash.weather.com.cn/wmaps/xml/china.xml 这个是全国天气的根节点，列

偏执的太偏执、/ 2022年04月01日 06:27/ 0 赞/ 820 阅读

相关 C#获取中国天气网免费天气预报信息

中国天气网接口地址：”http://wthrcdn.etouch.cn/WeatherApi?citykey=” + weatherCityCode（为城市code）; ![

古城微笑少年丶/ 2021年12月24日 14:09/ 0 赞/ 584 阅读