婷婷综合国产,91蜜桃婷婷狠狠久久综合9色 ,九九九九九精品,国产综合av

主頁 > 知識庫 > 如何用python爬取微博熱搜數據并保存

如何用python爬取微博熱搜數據并保存

熱門標簽:高德地圖標注字母 騰訊地圖標注有什么版本 400電話辦理費用收費 千呼ai電話機器人免費 鎮江人工外呼系統供應商 深圳網絡外呼系統代理商 申請辦個400電話號碼 外呼系統前面有錄音播放嗎 柳州正規電銷機器人收費

主要用到requests和bf4兩個庫
將獲得的信息保存在d://hotsearch.txt下

import requests;
import bs4
mylist=[]
r = requests.get(url='https://s.weibo.com/top/summary?Refer=top_hottopnav=1wvr=6',timeout=10)
print(r.status_code) # 獲取返回狀態
r.encoding=r.apparent_encoding
demo = r.text
from bs4 import BeautifulSoup
soup = BeautifulSoup(demo,"html.parser")
for link in soup.find('tbody') :
 hotnumber=''
 if isinstance(link,bs4.element.Tag):
#  print(link('td'))
  lis=link('td')
  hotrank=lis[1]('a')[0].string#熱搜排名
  hotname=lis[1].find('span')#熱搜名稱
  if isinstance(hotname,bs4.element.Tag):
   hotnumber=hotname.string#熱搜指數
   pass
  mylist.append([lis[0].string,hotrank,hotnumber,lis[2].string])
f=open("d://hotsearch.txt","w+")
for line in mylist:
 f.write('%s %s %s %s\n'%(line[0],line[1],line[2],line[3]))

知識點擴展:利用python爬取微博熱搜并進行數據分析

爬取微博熱搜

import schedule
import pandas as pd
from datetime import datetime
import requests
from bs4 import BeautifulSoup

url = "https://s.weibo.com/top/summary?cate=realtimehotsudaref=s.weibo.comdisplay=0retcode=6102"
get_info_dict = {}
count = 0

def main():
  global url, get_info_dict, count
  get_info_list = []
  print("正在爬取數據~~~")
  html = requests.get(url).text
  soup = BeautifulSoup(html, 'lxml')
  for tr in soup.find_all(name='tr', class_=''):
    get_info = get_info_dict.copy()
    get_info['title'] = tr.find(class_='td-02').find(name='a').text
    try:
      get_info['num'] = eval(tr.find(class_='td-02').find(name='span').text)
    except AttributeError:
      get_info['num'] = None
    get_info['time'] = datetime.now().strftime("%Y/%m/%d %H:%M")
    get_info_list.append(get_info)
  get_info_list = get_info_list[1:16]
  df = pd.DataFrame(get_info_list)
  if count == 0:
    df.to_csv('datas.csv', mode='a+', index=False, encoding='gbk')
    count += 1
  else:
    df.to_csv('datas.csv', mode='a+', index=False, header=False, encoding='gbk')

# 定時爬蟲
schedule.every(1).minutes.do(main)

while True:
  schedule.run_pending()

pyecharts數據分析

import pandas as pd
from pyecharts import options as opts
from pyecharts.charts import Bar, Timeline, Grid
from pyecharts.globals import ThemeType, CurrentConfig

df = pd.read_csv('datas.csv', encoding='gbk')
print(df)
t = Timeline(init_opts=opts.InitOpts(theme=ThemeType.MACARONS)) # 定制主題
for i in range(int(df.shape[0]/15)):
  bar = (
    Bar()
      .add_xaxis(list(df['title'][i*15: i*15+15][::-1])) # x軸數據
      .add_yaxis('num', list(df['num'][i*15: i*15+15][::-1])) # y軸數據
      .reversal_axis() # 翻轉
      .set_global_opts( # 全局配置項
      title_opts=opts.TitleOpts( # 標題配置項
        title=f"{list(df['time'])[i * 15]}",
        pos_right="5%", pos_bottom="15%",
        title_textstyle_opts=opts.TextStyleOpts(
          font_family='KaiTi', font_size=24, color='#FF1493'
        )
      ),
      xaxis_opts=opts.AxisOpts( # x軸配置項
        splitline_opts=opts.SplitLineOpts(is_show=True),
      ),
      yaxis_opts=opts.AxisOpts( # y軸配置項
        splitline_opts=opts.SplitLineOpts(is_show=True),
        axislabel_opts=opts.LabelOpts(color='#DC143C')
      )
    )
      .set_series_opts( # 系列配置項
      label_opts=opts.LabelOpts( # 標簽配置
        position="right", color='#9400D3')
    )
  )
  grid = (
    Grid()
      .add(bar, grid_opts=opts.GridOpts(pos_left="24%"))
  )
  t.add(grid, "")
  t.add_schema(
    play_interval=1000, # 輪播速度
    is_timeline_show=False, # 是否顯示 timeline 組件
    is_auto_play=True, # 是否自動播放
  )

t.render('時間輪播圖.html')

到此這篇關于如何用python爬取微博熱搜數據并保存的文章就介紹到這了,更多相關python爬取微博熱搜數據內容請搜索腳本之家以前的文章或繼續瀏覽下面的相關文章希望大家以后多多支持腳本之家!

您可能感興趣的文章:
  • python爬取天氣數據的實例詳解
  • 用python爬取歷史天氣數據的方法示例
  • python爬取哈爾濱天氣信息
  • python3爬取各類天氣信息
  • Python爬取國外天氣預報網站的方法
  • Python爬蟲爬取微博熱搜保存為 Markdown 文件的源碼
  • python+selenium爬取微博熱搜存入Mysql的實現方法
  • Python網絡爬蟲之爬取微博熱搜
  • python趣味挑戰之爬取天氣與微博熱搜并自動發給微信好友

標簽:烏蘭察布 平頂山 合肥 大慶 郴州 烏蘭察布 哈爾濱 海南

巨人網絡通訊聲明:本文標題《如何用python爬取微博熱搜數據并保存》,本文關鍵詞  如,何用,python,爬取,微博,;如發現本文內容存在版權問題,煩請提供相關信息告之我們,我們將及時溝通與處理。本站內容系統采集于網絡,涉及言論、版權與本站無關。
  • 相關文章
  • 下面列出與本文章《如何用python爬取微博熱搜數據并保存》相關的同類信息!
  • 本頁收集關于如何用python爬取微博熱搜數據并保存的相關信息資訊供網民參考!
  • 推薦文章
    婷婷综合国产,91蜜桃婷婷狠狠久久综合9色 ,九九九九九精品,国产综合av
    久久久久久久久蜜桃| 午夜激情一区二区| 五月婷婷久久丁香| 成人蜜臀av电影| 国产视频一区二区在线观看| 日韩精品三区四区| 91精品欧美久久久久久动漫 | 亚洲一二三四区| 91老司机福利 在线| 欧美国产精品专区| 欧美午夜片在线看| 亚洲蜜臀av乱码久久精品蜜桃| 懂色av一区二区夜夜嗨| 国产欧美精品一区二区三区四区 | 亚洲电影视频在线| 91亚洲永久精品| 一区二区三区欧美久久| 色屁屁一区二区| 日本成人在线看| 26uuu另类欧美亚洲曰本| 久久99精品国产91久久来源| 一区二区三区日韩精品视频| 在线播放中文一区| 高清国产一区二区三区| 免费成人在线网站| 一区二区三区在线视频免费| 久久久777精品电影网影网| 国产91在线|亚洲| 亚洲蜜臀av乱码久久精品蜜桃| 色哟哟一区二区| 麻豆精品一区二区av白丝在线| 亚洲视频免费在线| 精品国产一区二区三区不卡| 欧美片在线播放| 欧美亚洲日本国产| 成人免费高清在线| 九九久久精品视频| 九色|91porny| 精品一区二区在线观看| 黑人精品欧美一区二区蜜桃| 视频在线观看国产精品| 天天影视涩香欲综合网| 亚洲宅男天堂在线观看无病毒| 国产日韩欧美电影| 久久久久久久久久久久久女国产乱| 欧美日韩精品一区二区三区四区| 94-欧美-setu| 欧美丝袜自拍制服另类| 欧美午夜理伦三级在线观看| 欧美在线观看禁18| 在线播放亚洲一区| 久久精品亚洲一区二区三区浴池 | 悠悠色在线精品| 亚洲国产精品久久人人爱 | 亚洲第一主播视频| 亚洲一区中文日韩| 亚洲国产综合视频在线观看| 日韩一区有码在线| 久久久夜色精品亚洲| 久久只精品国产| 中文字幕一区二区三区不卡| 亚洲女同一区二区| 激情文学综合插| 处破女av一区二区| 在线看一区二区| 国产精品入口麻豆九色| 日本一二三四高清不卡| 一区二区三区资源| 国产不卡高清在线观看视频| 欧美三级韩国三级日本三斤| 一区二区三区自拍| 国产91在线看| www国产成人免费观看视频 深夜成人网| 国产精品丝袜91| 男女男精品视频网| 91久久国产综合久久| 久久久精品黄色| 日韩av电影免费观看高清完整版 | 欧美在线观看禁18| 中文字幕欧美国产| 国产在线精品一区二区不卡了 | 亚洲色图视频免费播放| 精品一区二区在线看| 欧美三级视频在线观看| 中文字幕一区二区三区四区不卡| 久久99热99| 日韩欧美专区在线| 日韩专区中文字幕一区二区| 欧美精品亚洲一区二区在线播放| 一区二区欧美国产| 欧美综合一区二区| 亚洲一区二区三区四区在线| www.欧美精品一二区| 中文字幕精品三区| 国产成人超碰人人澡人人澡| 国产精品电影院| 欧亚一区二区三区| 精品一区二区三区不卡| 337p粉嫩大胆色噜噜噜噜亚洲| 久久99久久精品| 久久国产日韩欧美精品| 日韩一级黄色片| 国产成人精品免费视频网站| 国产精品色婷婷| 欧美三级中文字幕在线观看| 免费日韩伦理电影| 亚洲人成伊人成综合网小说| 欧美乱妇20p| 国产精品自拍毛片| 亚洲一区免费在线观看| 久久久久久久电影| 欧美日韩国产影片| 成人av网站免费| 亚洲高清不卡在线观看| 国产欧美精品一区二区色综合| 91国产免费观看| 成人午夜在线播放| 国产揄拍国内精品对白| 日韩一区精品视频| 亚洲欧美日韩精品久久久久| 精品国偷自产国产一区| 欧美在线视频不卡| 成人免费毛片aaaaa**| 国内成人免费视频| 日本美女视频一区二区| 亚洲无人区一区| 一区二区高清免费观看影视大全 | 亚洲综合999| 亚洲欧洲精品一区二区精品久久久 | 欧美人妇做爰xxxⅹ性高电影| 粉嫩一区二区三区性色av| 蜜桃视频免费观看一区| 日韩在线播放一区二区| 三级一区在线视频先锋| 丝袜脚交一区二区| 亚洲国产精品欧美一二99| 亚洲成在线观看| 日韩综合在线视频| 美国欧美日韩国产在线播放| 久草精品在线观看| 国产精品996| 欧美性生活影院| 日韩精品一区二| 久久久久国产免费免费| 国产女同互慰高潮91漫画| 亚洲视频电影在线| 亚洲成人免费视| 精品久久久久av影院| 久久久亚洲午夜电影| 伊人一区二区三区| 精品一区二区三区日韩| yourporn久久国产精品| 制服丝袜中文字幕亚洲| 亚洲国产精品av| 捆绑调教一区二区三区| jizzjizzjizz欧美| 日韩免费高清电影| 亚洲制服丝袜av| 成人午夜视频网站| 精品国产成人系列| 亚洲一区在线观看网站| 国产永久精品大片wwwapp| 欧美日韩精品福利| 欧美乱熟臀69xxxxxx| 国产精品资源在线看| 午夜欧美2019年伦理| 久久精品亚洲麻豆av一区二区| 在线观看一区不卡| 国产精一品亚洲二区在线视频| 亚洲国产三级在线| 久久免费精品国产久精品久久久久| 国产精品美女久久久久久久| ...xxx性欧美| 国产精品久久久99| 5858s免费视频成人| 成人激情校园春色| 国产精品2024| 日韩av不卡一区二区| 中文字幕+乱码+中文字幕一区| 久久久亚洲精品一区二区三区| 国产欧美日韩亚州综合| 一色屋精品亚洲香蕉网站| 亚洲精品一卡二卡| 香蕉久久一区二区不卡无毒影院| 国产一区中文字幕| 日韩欧美色电影| 日日骚欧美日韩| 精品视频在线免费观看| 麻豆国产精品视频| 26uuu精品一区二区三区四区在线| 亚洲一区二区在线免费观看视频| 91碰在线视频| 亚洲国产一区二区视频| 一本久久精品一区二区| 一区二区三区在线看| 欧美久久一二区| 国产成人午夜片在线观看高清观看| 欧美中文字幕不卡| 麻豆国产一区二区| 中文字幕一区二区三区蜜月|