登录  |  注册
当前位置：网站首页 > 更多 > 编程开发 > 正文

[Python] 易班易瞄瞄指定话题用户动态自动爬取并保存

作者：CC下载站 日期：2020-06-19 00:00:00 浏览：67 分类：编程开发

因为最近有需要统计易瞄瞄指定话题下的用户发表的动态内容，还需要统计点赞数，发表时间等信息，因此随手写了一个小脚本，这个呢就不写教程了，直接放代码和效果图，需要自己手动获取易班的login_token，抓客户端包即可，或者浏览器F12，以前也写过易班登录JS。修改topicid既可切换话题

importre
importtime

importrequests

print('正在获取秘钥！')
info=input("请输入Token")
url=f'https://ymm.yiban.cn/news/list/news?loginToken={info}&page=1&size=100&topicId=2'
res=requests.get(url=url).json()
ifres['message']=="操作成功"andinfo['version']=="暂无":
data=res['data']['list']
print('正在下载数据！')
withopen('易喵喵点赞数量.csv','w',encoding='utf8')asf:
f.write('用户id,学号,用户名,文字内容,11点,赞数,发布时间
')
print("正在写入数据！")
foriindata:
title=i['title'].replace('
','').replace(',','，')
likenum=i['likeNum']
time_local=time.localtime(int(i['createTime']))
date=time.strftime("%Y-%m-%d%H:%M:%S",time_local)
riqi=time.strftime('%H',time_local)
ifint(riqi)>11:
riqi="11点前"
else:
riqi="11点后"
xuehao=re.findall('([2][0][1][1-9]d*)',title)
ifxuehao:
xuehao=xuehao[0]
userid=i['origin']['User_id']
usernick=i['origin']['usernick'].replace(',','，')
f.write(f'{userid},{xuehao},{usernick},{title},{riqi},{likenum},{date}
')
print(f'{userid},{xuehao},{usernick},{title},{riqi},{likenum},{date}')
print("作者：Lan，www.lanol.cn")
input("结果已生成在软件目录下")
else:
input("获取失败，请联系Lan")


猜你还喜欢

您需要 登录账户 后才能发表评论

取消回复欢迎 你 发表评论:

精品推荐！
欢迎 访客 登录没有账号？
  • 最新文章
  • 热门文章
  • 热评文章
最新评论
热门tag
友情链接

关灯