主页 > 知识库 > python基于selenium爬取斗鱼弹幕

python基于selenium爬取斗鱼弹幕

热门标签:千呼ai电话机器人免费 申请办个400电话号码 400电话办理费用收费 高德地图标注字母 镇江人工外呼系统供应商 外呼系统前面有录音播放吗 柳州正规电销机器人收费 深圳网络外呼系统代理商 腾讯地图标注有什么版本

针对弹幕的爬取我们如果只需要获取看到的网页里面的而数据,使用selenium就能实现,对于直播平台来说,往往有第三方平台api让你获取数据(可以获取发弹幕,发弹幕者的名字礼物等等,这需要客户端向弹幕服务器发送登录请求,心跳信息的发送等等)只获取弹幕信息储存到txt文件中,上代码,上图片

代码如下:

import time
from selenium import webdriver

chrome_options = webdriver.ChromeOptions()
# 使用headless无界面浏览器模式
# chrome_options.add_argument('--headless')
# chrome_options.add_argument('--disable-gpu')
prefs = {"profile.managed_default_content_settings.images": 2}
chrome_options.add_experimental_option("prefs", prefs)
browser = webdriver.Chrome(chrome_options=chrome_options)
url = 'https://www.douyu.com/'


def getDanmu(homeId):
  homeHref = url+str(homeId)
  browser.get(homeHref)

  while 1: 
    time.sleep(2)
    try:
      for i in browser.find_elements_by_xpath('.//div[@class=" danmu-6e95c1"]/div/div'):
        if len(i.text) > 0:
          try:
            print(i.text)
          except:
            pass
          saveDanmu(i.text)
        else:
          continue
    except:
      time.sleep(2)
      for i in browser.find_elements_by_xpath('.//div[@class=" danmu-6e95c1"]/div/div'):
        if len(i.text) > 0:
          try:
            print(i.text)
          except:
            pass
          saveDanmu(i.text)
        else:
          continue


def saveDanmu(danmu):
  with open('danmu.txt', 'a+', encoding='utf-8')as f:
    f.write(danmu+'\n')

if __name__ == '__main__':
  num = input('请输入需要查询的房间号:')
  getDanmu(num)

以上就是python基于selenium爬取斗鱼弹幕的详细内容,更多关于python 爬取斗鱼弹幕的资料请关注脚本之家其它相关文章!

您可能感兴趣的文章:
  • Python基于Tkinter开发一个爬取B站直播弹幕的工具
  • 使用python tkinter开发一个爬取B站直播弹幕工具的实现代码
  • Python爬虫自动化爬取b站实时弹幕实例方法
  • 详解python爬取弹幕与数据分析
  • Python爬虫爬取Bilibili弹幕过程解析
  • python3写爬取B站视频弹幕功能
  • Python绘制词云图之可视化神器pyecharts的方法
  • python中实现词云图的示例
  • Python实现Wordcloud生成词云图的示例
  • Python爬取英雄联盟MSI直播间弹幕并生成词云图

标签:海南 平顶山 哈尔滨 合肥 乌兰察布 乌兰察布 大庆 郴州

巨人网络通讯声明:本文标题《python基于selenium爬取斗鱼弹幕》,本文关键词  python,基于,selenium,爬取,;如发现本文内容存在版权问题,烦请提供相关信息告之我们,我们将及时沟通与处理。本站内容系统采集于网络,涉及言论、版权与本站无关。
  • 相关文章
  • 下面列出与本文章《python基于selenium爬取斗鱼弹幕》相关的同类信息!
  • 本页收集关于python基于selenium爬取斗鱼弹幕的相关信息资讯供网民参考!
  • 推荐文章