主页 > 知识库 > python基于selenium爬取斗鱼弹幕

python基于selenium爬取斗鱼弹幕

热门标签:电话运营中心 硅谷的囚徒呼叫中心 百度AI接口 企业做大做强 呼叫中心市场需求 客户服务 语音系统 Win7旗舰版

针对弹幕的爬取我们如果只需要获取看到的网页里面的而数据,使用selenium就能实现,对于直播平台来说,往往有第三方平台api让你获取数据(可以获取发弹幕,发弹幕者的名字礼物等等,这需要客户端向弹幕服务器发送登录请求,心跳信息的发送等等)只获取弹幕信息储存到txt文件中,上代码,上图片

代码如下:

import time
from selenium import webdriver

chrome_options = webdriver.ChromeOptions()
# 使用headless无界面浏览器模式
# chrome_options.add_argument('--headless')
# chrome_options.add_argument('--disable-gpu')
prefs = {"profile.managed_default_content_settings.images": 2}
chrome_options.add_experimental_option("prefs", prefs)
browser = webdriver.Chrome(chrome_options=chrome_options)
url = 'https://www.douyu.com/'


def getDanmu(homeId):
  homeHref = url+str(homeId)
  browser.get(homeHref)

  while 1: 
    time.sleep(2)
    try:
      for i in browser.find_elements_by_xpath('.//div[@class=" danmu-6e95c1"]/div/div'):
        if len(i.text) > 0:
          try:
            print(i.text)
          except:
            pass
          saveDanmu(i.text)
        else:
          continue
    except:
      time.sleep(2)
      for i in browser.find_elements_by_xpath('.//div[@class=" danmu-6e95c1"]/div/div'):
        if len(i.text) > 0:
          try:
            print(i.text)
          except:
            pass
          saveDanmu(i.text)
        else:
          continue


def saveDanmu(danmu):
  with open('danmu.txt', 'a+', encoding='utf-8')as f:
    f.write(danmu+'\n')

if __name__ == '__main__':
  num = input('请输入需要查询的房间号:')
  getDanmu(num)

以上就是python基于selenium爬取斗鱼弹幕的详细内容,更多关于python 爬取斗鱼弹幕的资料请关注脚本之家其它相关文章!

您可能感兴趣的文章:
  • Python基于Tkinter开发一个爬取B站直播弹幕的工具
  • 使用python tkinter开发一个爬取B站直播弹幕工具的实现代码
  • Python爬虫自动化爬取b站实时弹幕实例方法
  • 详解python爬取弹幕与数据分析
  • Python爬虫爬取Bilibili弹幕过程解析
  • python3写爬取B站视频弹幕功能
  • Python绘制词云图之可视化神器pyecharts的方法
  • python中实现词云图的示例
  • Python实现Wordcloud生成词云图的示例
  • Python爬取英雄联盟MSI直播间弹幕并生成词云图

标签:喀什 海南 山西 长沙 安康 崇左 山西 济南

巨人网络通讯声明:本文标题《python基于selenium爬取斗鱼弹幕》,本文关键词  ;如发现本文内容存在版权问题,烦请提供相关信息告之我们,我们将及时沟通与处理。本站内容系统采集于网络,涉及言论、版权与本站无关。
  • 相关文章
  • 收缩
    • 微信客服
    • 微信二维码
    • 电话咨询

    • 400-1100-266