婷婷综合国产,91蜜桃婷婷狠狠久久综合9色 ,九九九九九精品,国产综合av

主頁 > 知識庫 > 如何用python爬取微博熱搜數據并保存

如何用python爬取微博熱搜數據并保存

熱門標簽:高德地圖標注字母 騰訊地圖標注有什么版本 400電話辦理費用收費 千呼ai電話機器人免費 鎮江人工外呼系統供應商 深圳網絡外呼系統代理商 申請辦個400電話號碼 外呼系統前面有錄音播放嗎 柳州正規電銷機器人收費

主要用到requests和bf4兩個庫
將獲得的信息保存在d://hotsearch.txt下

import requests;
import bs4
mylist=[]
r = requests.get(url='https://s.weibo.com/top/summary?Refer=top_hottopnav=1wvr=6',timeout=10)
print(r.status_code) # 獲取返回狀態
r.encoding=r.apparent_encoding
demo = r.text
from bs4 import BeautifulSoup
soup = BeautifulSoup(demo,"html.parser")
for link in soup.find('tbody') :
 hotnumber=''
 if isinstance(link,bs4.element.Tag):
#  print(link('td'))
  lis=link('td')
  hotrank=lis[1]('a')[0].string#熱搜排名
  hotname=lis[1].find('span')#熱搜名稱
  if isinstance(hotname,bs4.element.Tag):
   hotnumber=hotname.string#熱搜指數
   pass
  mylist.append([lis[0].string,hotrank,hotnumber,lis[2].string])
f=open("d://hotsearch.txt","w+")
for line in mylist:
 f.write('%s %s %s %s\n'%(line[0],line[1],line[2],line[3]))

知識點擴展:利用python爬取微博熱搜并進行數據分析

爬取微博熱搜

import schedule
import pandas as pd
from datetime import datetime
import requests
from bs4 import BeautifulSoup

url = "https://s.weibo.com/top/summary?cate=realtimehotsudaref=s.weibo.comdisplay=0retcode=6102"
get_info_dict = {}
count = 0

def main():
  global url, get_info_dict, count
  get_info_list = []
  print("正在爬取數據~~~")
  html = requests.get(url).text
  soup = BeautifulSoup(html, 'lxml')
  for tr in soup.find_all(name='tr', class_=''):
    get_info = get_info_dict.copy()
    get_info['title'] = tr.find(class_='td-02').find(name='a').text
    try:
      get_info['num'] = eval(tr.find(class_='td-02').find(name='span').text)
    except AttributeError:
      get_info['num'] = None
    get_info['time'] = datetime.now().strftime("%Y/%m/%d %H:%M")
    get_info_list.append(get_info)
  get_info_list = get_info_list[1:16]
  df = pd.DataFrame(get_info_list)
  if count == 0:
    df.to_csv('datas.csv', mode='a+', index=False, encoding='gbk')
    count += 1
  else:
    df.to_csv('datas.csv', mode='a+', index=False, header=False, encoding='gbk')

# 定時爬蟲
schedule.every(1).minutes.do(main)

while True:
  schedule.run_pending()

pyecharts數據分析

import pandas as pd
from pyecharts import options as opts
from pyecharts.charts import Bar, Timeline, Grid
from pyecharts.globals import ThemeType, CurrentConfig

df = pd.read_csv('datas.csv', encoding='gbk')
print(df)
t = Timeline(init_opts=opts.InitOpts(theme=ThemeType.MACARONS)) # 定制主題
for i in range(int(df.shape[0]/15)):
  bar = (
    Bar()
      .add_xaxis(list(df['title'][i*15: i*15+15][::-1])) # x軸數據
      .add_yaxis('num', list(df['num'][i*15: i*15+15][::-1])) # y軸數據
      .reversal_axis() # 翻轉
      .set_global_opts( # 全局配置項
      title_opts=opts.TitleOpts( # 標題配置項
        title=f"{list(df['time'])[i * 15]}",
        pos_right="5%", pos_bottom="15%",
        title_textstyle_opts=opts.TextStyleOpts(
          font_family='KaiTi', font_size=24, color='#FF1493'
        )
      ),
      xaxis_opts=opts.AxisOpts( # x軸配置項
        splitline_opts=opts.SplitLineOpts(is_show=True),
      ),
      yaxis_opts=opts.AxisOpts( # y軸配置項
        splitline_opts=opts.SplitLineOpts(is_show=True),
        axislabel_opts=opts.LabelOpts(color='#DC143C')
      )
    )
      .set_series_opts( # 系列配置項
      label_opts=opts.LabelOpts( # 標簽配置
        position="right", color='#9400D3')
    )
  )
  grid = (
    Grid()
      .add(bar, grid_opts=opts.GridOpts(pos_left="24%"))
  )
  t.add(grid, "")
  t.add_schema(
    play_interval=1000, # 輪播速度
    is_timeline_show=False, # 是否顯示 timeline 組件
    is_auto_play=True, # 是否自動播放
  )

t.render('時間輪播圖.html')

到此這篇關于如何用python爬取微博熱搜數據并保存的文章就介紹到這了,更多相關python爬取微博熱搜數據內容請搜索腳本之家以前的文章或繼續瀏覽下面的相關文章希望大家以后多多支持腳本之家!

您可能感興趣的文章:
  • python爬取天氣數據的實例詳解
  • 用python爬取歷史天氣數據的方法示例
  • python爬取哈爾濱天氣信息
  • python3爬取各類天氣信息
  • Python爬取國外天氣預報網站的方法
  • Python爬蟲爬取微博熱搜保存為 Markdown 文件的源碼
  • python+selenium爬取微博熱搜存入Mysql的實現方法
  • Python網絡爬蟲之爬取微博熱搜
  • python趣味挑戰之爬取天氣與微博熱搜并自動發給微信好友

標簽:烏蘭察布 平頂山 合肥 大慶 郴州 烏蘭察布 哈爾濱 海南

巨人網絡通訊聲明:本文標題《如何用python爬取微博熱搜數據并保存》,本文關鍵詞  如,何用,python,爬取,微博,;如發現本文內容存在版權問題,煩請提供相關信息告之我們,我們將及時溝通與處理。本站內容系統采集于網絡,涉及言論、版權與本站無關。
  • 相關文章
  • 下面列出與本文章《如何用python爬取微博熱搜數據并保存》相關的同類信息!
  • 本頁收集關于如何用python爬取微博熱搜數據并保存的相關信息資訊供網民參考!
  • 推薦文章
    婷婷综合国产,91蜜桃婷婷狠狠久久综合9色 ,九九九九九精品,国产综合av
    91在线视频观看| 久久久不卡网国产精品二区| 欧美激情一区二区三区蜜桃视频| 三级欧美韩日大片在线看| 色哟哟一区二区在线观看 | 97久久精品人人爽人人爽蜜臀| 日韩午夜激情视频| 亚洲国产精品自拍| 色噜噜狠狠色综合中国| 亚洲三级视频在线观看| 不卡视频一二三四| 国产精品国产三级国产普通话蜜臀| 国产精品一卡二卡在线观看| 精品国产青草久久久久福利| 久久99精品国产麻豆婷婷洗澡| 日韩一级片在线播放| 美女性感视频久久| 日韩免费高清av| 久久精品国产亚洲a| 精品久久久久久久人人人人传媒| 九九在线精品视频| 国产午夜精品一区二区| 成人激情图片网| 国产日产亚洲精品系列| 国产精品1区二区.| 国产精品午夜在线| 成人免费视频网站在线观看| 久久久久久久久久电影| 国产成人亚洲精品青草天美| 午夜视频在线观看一区二区| 91精品国产福利| 国产成人av一区| 亚洲综合小说图片| 欧美亚洲精品一区| 免费在线观看视频一区| 久久青草欧美一区二区三区| 成人午夜在线视频| 亚洲一区二区三区在线看| 在线观看av不卡| 久久99国产精品久久| 久久综合狠狠综合| 成人美女视频在线观看| 亚洲制服丝袜在线| 欧美日韩视频第一区| 国产乱子伦视频一区二区三区| 亚洲人成精品久久久久| 日韩欧美电影一区| 成人动漫在线一区| 亚洲v中文字幕| 国产精品视频线看| 欧美少妇bbb| 国产精品一二三四五| 一区二区三区在线免费观看| 欧美变态tickling挠脚心| 色综合久久综合网97色综合| 日日夜夜免费精品视频| 日韩免费一区二区| 不卡的av电影| 午夜国产不卡在线观看视频| 国产日韩视频一区二区三区| 欧美日韩另类一区| 国产传媒日韩欧美成人| 国产精品大尺度| 日韩美女在线视频 | 日韩二区三区在线观看| 日韩精品一区二区三区老鸭窝| 日本不卡免费在线视频| 国产午夜精品一区二区三区视频 | 欧美在线一区二区| 国产黄人亚洲片| 日韩不卡一二三区| 亚洲欧美视频在线观看视频| 久久久久国产精品麻豆| 欧美一区二区三区公司| 色网站国产精品| 成人中文字幕在线| 美日韩一区二区三区| 亚洲二区视频在线| 亚洲特黄一级片| 中文字幕欧美激情一区| 欧美一卡2卡3卡4卡| 欧美三级日本三级少妇99| a亚洲天堂av| 久久久久久久久岛国免费| 在线不卡免费av| 欧美日韩精品免费| 欧美日韩国产区一| 99精品视频在线播放观看| 国产精品 日产精品 欧美精品| 天天免费综合色| 亚洲综合免费观看高清完整版 | 日本亚洲视频在线| 亚洲综合免费观看高清在线观看| 2021国产精品久久精品| 欧美日韩在线播放| 欧美三级电影一区| 99精品国产视频| 国产乱妇无码大片在线观看| 久久精品国产77777蜜臀| 午夜精品久久久久| 亚洲成人在线免费| 午夜一区二区三区视频| 一区二区三区中文字幕在线观看| 亚洲欧美激情在线| 亚洲国产一区二区视频| 婷婷成人综合网| 麻豆久久久久久| 国产成人鲁色资源国产91色综| 国产精品一二三| 国产原创一区二区| 国产成人精品亚洲777人妖| 国产精品白丝jk黑袜喷水| 成人精品国产福利| 日本精品视频一区二区三区| 在线观看亚洲一区| 日韩欧美高清在线| 日韩欧美中文一区二区| 精品第一国产综合精品aⅴ| 国产欧美综合色| 一区二区三区在线播| 一区二区三区国产豹纹内裤在线| 日韩中文字幕区一区有砖一区| 亚洲h在线观看| 久久99精品久久久| 91在线云播放| 欧美妇女性影城| 国产亚洲短视频| 亚洲精选免费视频| 亚洲自拍偷拍网站| 日本视频一区二区三区| 极品少妇xxxx精品少妇偷拍| 国产91清纯白嫩初高中在线观看| 91丨porny丨在线| 91丝袜高跟美女视频| 欧美日韩一区视频| 一区二区三区视频在线观看| 亚洲日本在线天堂| 天堂资源在线中文精品| 亚洲制服丝袜在线| 狠狠色伊人亚洲综合成人| 99视频超级精品| 日韩欧美精品三级| 亚洲欧美国产毛片在线| 乱一区二区av| 欧美色中文字幕| 国产在线精品免费| 欧美视频一区二区三区在线观看 | 丝袜亚洲另类欧美综合| 国产综合成人久久大片91| 91一区二区在线| 欧美va在线播放| 婷婷成人综合网| 91福利视频网站| 国产精品乱码久久久久久| 日韩av电影免费观看高清完整版 | 麻豆精品视频在线观看视频| 972aa.com艺术欧美| 久久免费国产精品| 麻豆91精品91久久久的内涵| 色综合亚洲欧洲| 国产日产精品1区| 国内精品国产三级国产a久久| 欧美性色欧美a在线播放| 国产精品第一页第二页第三页| 激情六月婷婷久久| 日韩欧美视频一区| 日韩激情在线观看| 91精品1区2区| 亚洲丝袜精品丝袜在线| 不卡的av网站| 久久久久亚洲综合| 日韩激情一二三区| 欧美性生活久久| 亚洲综合自拍偷拍| 91老司机福利 在线| 久久精品综合网| 国产美女精品人人做人人爽| 欧美一区二区三区在| 性做久久久久久免费观看欧美| 99精品久久99久久久久| 国产精品剧情在线亚洲| 成人综合婷婷国产精品久久| 日韩精品一区二区三区在线播放 | 亚洲色图欧美偷拍| 99精品久久久久久| 久久精品人人做| 成人综合婷婷国产精品久久 | 91精品国产综合久久精品性色| 一区二区三区日本| 91免费观看视频在线| 国产精品的网站| 色综合av在线| 亚洲欧洲av另类| 国产福利一区二区三区| 国产人成一区二区三区影院| 国产经典欧美精品| 日韩久久久久久| 麻豆成人久久精品二区三区小说| 91视频免费看| 亚洲一区日韩精品中文字幕|