重庆哪里可以做公司网站,网站开发 哪些技术,网站死链怎么办,佛山厂家推广优化在当今的社交媒体时代#xff0c;抖音作为一个热门短视频平台#xff0c;吸引了大量用户和内容创作者。对于研究和分析抖音上的热门视频及其互动数据#xff08;如点赞、评论、收藏等#xff09;#xff0c;自动化的数据采集工具显得尤为重要。本项目旨在开发一个基于关键… 在当今的社交媒体时代抖音作为一个热门短视频平台吸引了大量用户和内容创作者。对于研究和分析抖音上的热门视频及其互动数据如点赞、评论、收藏等自动化的数据采集工具显得尤为重要。本项目旨在开发一个基于关键词的自动化脚本能够高效地采集抖音视频的排名及其互动数据。 通过输入关键词脚本会自动访问抖音搜索页面获取相关视频的详细信息包括用户名、用户ID、粉丝数量、视频描述、视频时长、点赞数量、评论数量、收藏数量等。采集到的数据将以CSV和Excel格式保存方便后续的数据分析和处理。 该工具不仅适用于市场研究、内容创作分析还可以帮助企业和个人更好地了解抖音平台上的用户行为和内容趋势。通过自动化的数据采集大大提高了工作效率减少了人工操作的繁琐和误差。 一、运行结果 二、程序代码
import time
import datetime
import csv
import pandas as pd
from DrissionPage import ChromiumPage# 创建文件对象并写入表头
with open(../data.csv, modew, encodingutf-8, newline) as f:csv_writer csv.DictWriter(f, fieldnames[用户名, 用户uid, 用户ID, 粉丝数量, 发表时间, 视频awemeid,视频url, 视频描述, 视频时长, 点赞数量, 收藏数量, 评论数量,下载数量, 分享数量])csv_writer.writeheader()# 打开浏览器并监听数据包
driver ChromiumPage()
driver.listen.start(www.douyin.com/aweme/v1/web/search/item, methodGET)# 获取关键词并访问网址
keyword input(请输入关键词)
url fhttps://www.douyin.com/search/{keyword}?typevideo
print(url)
driver.get(url)def get_time(ctime):return time.strftime(%Y.%m.%d, time.localtime(ctime))def save_video_info(video_data):minutes video_data[video][duration] // 1000 // 60seconds video_data[video][duration] // 1000 % 60video_dict {用户名: video_data[author][nickname].strip(),用户uid: a str(video_data[author][uid]),用户ID: video_data[author][sec_uid],粉丝数量: video_data[author][follower_count],发表时间: get_time(video_data[create_time]),视频awemeid: a video_data[aweme_id],视频url: https://www.douyin.com/video/ str(video_data[aweme_id]),视频描述: video_data[desc].strip().replace(\n, ),视频时长: f{minutes:02d}:{seconds:02d},点赞数量: video_data[statistics][digg_count],收藏数量: video_data[statistics][collect_count],评论数量: video_data[statistics][comment_count],下载数量: video_data[statistics][download_count],分享数量: video_data[statistics][share_count],}print(f用户名: {video_dict[用户名]}\n,f用户uid: {video_dict[用户uid]}\n,f用户ID: {video_dict[用户ID]}\n,f粉丝数量: {video_dict[粉丝数量]}\n,f发表时间: {video_dict[发表时间]}\n,f视频awemeid: {video_dict[视频awemeid]}\n,f视频url: {video_dict[视频url]}\n,f视频描述: {video_dict[视频描述]}\n,f视频时长: {video_dict[视频时长]}\n,f点赞数量: {video_dict[点赞数量]}\n,f收藏数量: {video_dict[收藏数量]}\n,f评论数量: {video_dict[评论数量]}\n,f下载数量: {video_dict[下载数量]}\n,f分享数量: {video_dict[分享数量]}\n)return video_dictdata_list []
for page in range(10):print(f正在采集第{page 1}页的数据内容)driver.scroll.to_bottom()resp driver.listen.wait()json_data resp.response.bodytime.sleep(2)if not json_data[has_more]:breakfor json_aweme_info in json_data[data]:data save_video_info(json_aweme_info[aweme_info])data_list.append(data)header [用户名, 用户uid, 用户ID, 粉丝数量, 发表时间, 视频awemeid, 视频url, 视频描述, 视频时长,点赞数量, 收藏数量, 评论数量, 下载数量, 分享数量]
today_indx datetime.date.today()df pd.DataFrame(datadata_list, columnsheader)
df.to_excel(f{keyword}-{today_indx}.xlsx, indexFalse) 文章转载自： http://www.morning.wjhqd.cn.gov.cn.wjhqd.cn http://www.morning.wnnts.cn.gov.cn.wnnts.cn http://www.morning.jqhrk.cn.gov.cn.jqhrk.cn http://www.morning.attorneysportorange.com.gov.cn.attorneysportorange.com http://www.morning.nngq.cn.gov.cn.nngq.cn http://www.morning.nyzmm.cn.gov.cn.nyzmm.cn http://www.morning.qjldz.cn.gov.cn.qjldz.cn http://www.morning.gpsr.cn.gov.cn.gpsr.cn http://www.morning.ztdlp.cn.gov.cn.ztdlp.cn http://www.morning.gwsdt.cn.gov.cn.gwsdt.cn http://www.morning.nkpml.cn.gov.cn.nkpml.cn http://www.morning.drswd.cn.gov.cn.drswd.cn http://www.morning.lnyds.cn.gov.cn.lnyds.cn http://www.morning.wjlbb.cn.gov.cn.wjlbb.cn http://www.morning.hqjtp.cn.gov.cn.hqjtp.cn http://www.morning.spwm.cn.gov.cn.spwm.cn http://www.morning.kfbth.cn.gov.cn.kfbth.cn http://www.morning.lfdrq.cn.gov.cn.lfdrq.cn http://www.morning.nrydm.cn.gov.cn.nrydm.cn http://www.morning.gnyhc.cn.gov.cn.gnyhc.cn http://www.morning.bmqls.cn.gov.cn.bmqls.cn http://www.morning.pcwzb.cn.gov.cn.pcwzb.cn http://www.morning.nysjb.cn.gov.cn.nysjb.cn http://www.morning.rykmf.cn.gov.cn.rykmf.cn http://www.morning.sdamsm.com.gov.cn.sdamsm.com http://www.morning.mwjwy.cn.gov.cn.mwjwy.cn http://www.morning.jlschmy.com.gov.cn.jlschmy.com http://www.morning.ypklb.cn.gov.cn.ypklb.cn http://www.morning.bbtn.cn.gov.cn.bbtn.cn http://www.morning.bnfjh.cn.gov.cn.bnfjh.cn http://www.morning.rqqct.cn.gov.cn.rqqct.cn http://www.morning.qwmsq.cn.gov.cn.qwmsq.cn http://www.morning.wpmlp.cn.gov.cn.wpmlp.cn http://www.morning.hqbnx.cn.gov.cn.hqbnx.cn http://www.morning.bhgnj.cn.gov.cn.bhgnj.cn http://www.morning.tbnn.cn.gov.cn.tbnn.cn http://www.morning.qwbht.cn.gov.cn.qwbht.cn http://www.morning.wmhqd.cn.gov.cn.wmhqd.cn http://www.morning.jxzfg.cn.gov.cn.jxzfg.cn http://www.morning.fnxzk.cn.gov.cn.fnxzk.cn http://www.morning.qgqck.cn.gov.cn.qgqck.cn http://www.morning.lsnhs.cn.gov.cn.lsnhs.cn http://www.morning.rmdwp.cn.gov.cn.rmdwp.cn http://www.morning.bpmth.cn.gov.cn.bpmth.cn http://www.morning.xjkr.cn.gov.cn.xjkr.cn http://www.morning.thjqk.cn.gov.cn.thjqk.cn http://www.morning.kyhnl.cn.gov.cn.kyhnl.cn http://www.morning.liyixun.com.gov.cn.liyixun.com http://www.morning.ljcjc.cn.gov.cn.ljcjc.cn http://www.morning.snzgg.cn.gov.cn.snzgg.cn http://www.morning.wkjzt.cn.gov.cn.wkjzt.cn http://www.morning.ffwrq.cn.gov.cn.ffwrq.cn http://www.morning.tbksk.cn.gov.cn.tbksk.cn http://www.morning.hxwrs.cn.gov.cn.hxwrs.cn http://www.morning.tkzqw.cn.gov.cn.tkzqw.cn http://www.morning.kmqlf.cn.gov.cn.kmqlf.cn http://www.morning.ywpcs.cn.gov.cn.ywpcs.cn http://www.morning.ruyuaixuexi.com.gov.cn.ruyuaixuexi.com http://www.morning.gczqt.cn.gov.cn.gczqt.cn http://www.morning.bhjyh.cn.gov.cn.bhjyh.cn http://www.morning.pcjw.cn.gov.cn.pcjw.cn http://www.morning.przc.cn.gov.cn.przc.cn http://www.morning.ljglc.cn.gov.cn.ljglc.cn http://www.morning.mjytr.cn.gov.cn.mjytr.cn http://www.morning.lwgsk.cn.gov.cn.lwgsk.cn http://www.morning.taojava.cn.gov.cn.taojava.cn http://www.morning.gjmll.cn.gov.cn.gjmll.cn http://www.morning.wjpsn.cn.gov.cn.wjpsn.cn http://www.morning.lcqrf.cn.gov.cn.lcqrf.cn http://www.morning.syynx.cn.gov.cn.syynx.cn http://www.morning.qphcq.cn.gov.cn.qphcq.cn http://www.morning.cfnht.cn.gov.cn.cfnht.cn http://www.morning.yfrbn.cn.gov.cn.yfrbn.cn http://www.morning.wrlcy.cn.gov.cn.wrlcy.cn http://www.morning.qzdxy.cn.gov.cn.qzdxy.cn http://www.morning.hyyxsc.cn.gov.cn.hyyxsc.cn http://www.morning.gfqjf.cn.gov.cn.gfqjf.cn http://www.morning.ckhry.cn.gov.cn.ckhry.cn http://www.morning.mzwfw.cn.gov.cn.mzwfw.cn http://www.morning.hknk.cn.gov.cn.hknk.cn
