推广 热搜: 公司  快速  上海  中国    未来  企业  政策  教师  系统 

【Python】控制浏览器自动把歌词评论下载下来,做成好看的词云图(1)

   日期:2024-11-17     作者:xinet    caijiyuan   评论:0    移动:http://keair.bhha.com.cn/mobile/news/1050.html
核心提示:1.需要用的模块2.驱动安装三、下载歌词四、词云图用selenium自动把歌词评论下载下来,做成好看的词云图 ===&#
    • 1.需要用的模块
  • 2.驱动安装

    【Python】控制浏览器自动把歌词评论下载下来,做成好看的词云图(1)

  • 三、下载歌词

  • 四、词云图

用selenium自动把歌词评论下载下来,做成好看的词云图

=============================================================================================

一、哔哔两句

======================================================================

一首歌热门了,参与评论的人也很多,那我们有时候想看看评论,也只能看看热门的评论,大部分人都说的什么,咱也不知道呀~

那本次咱们就把歌词给自动下载保存到电脑上,做成词云图给它分析分析…

【Python】控制浏览器自动把歌词评论下载下来,做成好看的词云图(1)

二、准备工作

======================================================================

1.需要用的模块


本次用到的模块和包

re # 正则表达式 内置模块

selenium # 实现浏览器自动操作的

jieba # 中文分词库

wordcloud # 词云图库

imageio # 图像模块

time # 内置模块

需要安装的模块安装方法

以 selenium 为例,直接

下载速度慢就用镜像源下载

具体步骤不清楚可以看我主页置顶文章,有详细写过一次。

【Python】控制浏览器自动把歌词评论下载下来,做成好看的词云图(1)

2.驱动安装


那么要实现浏览器自动操作,咱们得安装一个浏览器驱动。

网址我就不发了,网上直接搜谷歌浏览器驱动就可以找到,实在找不到的话在左侧扫一下,文章看不懂也有视频在左侧扫码。

建议用谷歌浏览器,以谷歌浏览器为例,首先看一下咱们浏览器的的版本。

浏览器右上角三个点,点开后点击设置。

【Python】控制浏览器自动把歌词评论下载下来,做成好看的词云图(1)然后点击关于Chrome ,右边的那一串数字就是版本号了。

【Python】控制浏览器自动把歌词评论下载下来,做成好看的词云图(1)

然后找到跟你的版本号相同的版本下载,没有相同的就下载最相近的版本也可以。

【Python】控制浏览器自动把歌词评论下载下来,做成好看的词云图(1)然后把驱动跟你的代码放到一起,跟代码放一起的话,缺点是你每次要使用,没保存的话都得去下载。

还有一种办法是直接放到你的python目录,这种的优点是一次搞定可以用很多次。缺点是每次版本更新,你还是得去下载新的。

我反正每次都是去下载新的,又不是经常用。

【Python】控制浏览器自动把歌词评论下载下来,做成好看的词云图(1)

三、下载歌词

======================================================================

先把要用的模块给导入一下

from selenium import webdriver

import re

import time

Python文件名或者包名不要命名为selenium,会导致无法导入。

webdriver可以认为是浏览器的驱动器,要驱动浏览器必须用到webdriver,支持多种浏览器。

  1. 创建一个浏览器对象

driver = webdriver.Chrome()

  1. 请求页面

driver.get(‘https://music.163.com/#/song?id=569213220’)

driver.implicitly_wait(10) # 隐式等待 浏览器渲染页面 智能化等待

driver.maximize_window() # 最大化浏览器

网页嵌套, 进入嵌套网页。

driver.switch_to.frame(0)

下拉页面 js 是一门可以直接运行在浏览器中的语言

js = ‘document.documentElement.scrollTop = document.documentElement.scrollHeight’

driver.execute_script(js)

获取评论数据/保存/点击下一页

网上学习资料一大堆,但如果学到的知识不成体系,遇到问题时只是浅尝辄止,不再深入研究,那么很难做到真正的技术提升。

需要这份系统化学习资料的朋友,可以戳这里无偿获取

本文地址:http://keair.bhha.com.cn/news/1050.html    康宝晨 http://keair.bhha.com.cn/ , 查看更多

特别提示:本信息由相关用户自行提供,真实性未证实,仅供参考。请谨慎采用,风险自负。

 
 
更多>同类最新资讯
0相关评论

文章列表
相关文章
最新动态
推荐图文
最新资讯
点击排行
网站首页  |  关于我们  |  联系方式  |  使用协议  |  版权隐私  |  网站地图  |  排名推广  |  广告服务  |  积分换礼  |  网站留言  |  RSS订阅  |  违规举报  |  粤ICP备2023022329号