快捷導(dǎo)航

使用python獲取(宜賓市地震信息)地震信息

更新時間：2019年06月20日 09:47:37 作者：stormwen

今天這個項目用到了Python的爬蟲知識，沒有用大家討厭的正則表達式，而是用一種新的方式解析庫，實現(xiàn)對HTML的解析和提取信息，最后又用到前面項目用過的wxpy庫，實現(xiàn)了全部功能

6月17日22分25分，四川省宜賓市長寧縣發(fā)生了6.0級地震，成都高新減災(zāi)研究所與應(yīng)急管理部門聯(lián)合建設(shè)的大陸地震預(yù)警網(wǎng)成功預(yù)警本次地震，提前10秒向宜賓市預(yù)警，提前61秒向成都預(yù)警。

雖然自己還不能寫出這么牛逼的系統(tǒng)，但是今天我想結(jié)合自己學(xué)到的Python知識，用Python獲取地震信息，然后微信實時推送給你的群組或你的朋友。

1.前期準(zhǔn)備

1.爬蟲基本知識，比如requests庫，以及l(fā)xml庫；

2.利用Xpath進行HTML的解析；

之前寫的一些簡單項目，提取頁面信息時使用的是正則表達式，但當(dāng)項目復(fù)雜時，用正則表達式比較煩瑣，萬一有地方寫錯了，可能導(dǎo)致匹配失敗，所以使用正則表達式提取頁面信息多多少少還是有些不方便。

通過最近學(xué)習(xí)，我知道了在網(wǎng)頁中可以通過Xpath或CSS選擇器來定位一個或多個節(jié)點，再調(diào)用相應(yīng)的方法獲取它的正文內(nèi)容或者屬性，可以很方便快捷的提取到我們想要的信息。

3.要實現(xiàn)微信實時推送肯定需要用到wxpy庫；

4.本次項目從中國地震臺網(wǎng)爬取地震信息，鏈接為： http:// news.ceic.ac.cn/index.h tml?time= {int(time.time())}。

2.代碼整合

import requests, time
from lxml import etree
from wxpy import *
# 微信登陸
bot = Bot()
# 查找好友
my_friend = bot.friends().search(u'stormwen')[0] # 寫自己的討論組名稱
with open('log.txt', 'r') as f:
  rember = f.readline()
headers = {
  'User-agent': 'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/70.0.3538.110 Safari/537.36',
  'cookie': 'Hm_lvt_e0025cd5d352165f8a646ccea5beb27d=1543211803; Hm_lpvt_e0025cd5d352165f8a646ccea5beb27d=1543211803',
}
while True:
  try:
    url = f'http://news.ceic.ac.cn/index.html?time={int(time.time())}'
    # 請求數(shù)據(jù)
    res = requests.get(url, headers=headers).text.encode('ISO-8859-1').decode('utf8')
    html_ele = etree.HTML(res)
    # 返回列表
    res = html_ele.xpath('//*[@id="news"]//td//text()')
    # 如果日志為空,發(fā)送最新的一條地震信息
    if rember == '':
      msg = f'北京時間:{res[1]},在緯度:{res[2]} ,經(jīng)度{res[3]} 處發(fā)生了{res[0]}級地震,震源深度{res[4]}千米,參考位置:{res[5]}(5分鐘更新一次)'
      # 發(fā)送信息
      my_friend.send(msg)
      print('日志為空,msg:', msg)
    # 如果日志非空,就判斷是否是最新的,發(fā)送日志之后的所有新的數(shù)據(jù)
    else:
      i = res.index(rember)
      while i > 1:
        i -= 6
        msg = f'北京時間:{res[i]},在緯度:{res[i+1]} ,經(jīng)度{res[i+2]} 處發(fā)生了{res[i-1]}級地震,震源深度{res[i+3]}千米,參考位置:{res[i+4]}(5分鐘更新一次)'
        # 發(fā)送信息
        my_friend.send(msg)
        print('日志非空,msg:', msg)
    time.sleep(300)
    rember = res[1]
    # 更新日志(記錄最新發(fā)送的地震信息)
    with open('log.txt', 'w') as f:
      f.write(res[1])
  except:
    time.sleep(60)

3.結(jié)果展示