成都网站建设优化推,企业推广文案,wordpress多页面统一头部,dz和wordpress论坛前言
嗨喽~大家好呀#xff0c;这里是魔王呐 ❤ ~! 再我们缺少素材的时候#xff0c;我们第一反应
我们肯定会去网上寻找#xff0c;但是#xff01;#xff01;
有的素材需要VIP#xff01;这可咋整呢#xff1f; 看我利用python大展神通#xff0c;采集某图网图片…前言
嗨喽~大家好呀这里是魔王呐 ❤ ~! 再我们缺少素材的时候我们第一反应
我们肯定会去网上寻找但是
有的素材需要VIP这可咋整呢 看我利用python大展神通采集某图网图片数据 完整源码、python资料: 点击此处跳转文末名片获取 本次目标 利用知识点: 动态页面分析 动态数据抓包 requests 开发环境: 版 本: python 3.8 编辑器: pycharm 2022.3.2 requests pip install requests
如何安装python第三方模块: win R 输入 cmd 点击确定, 输入安装命令 pip install 模块名 (pip install requests) 回车 在pycharm中点击Terminal(终端) 输入安装命令 代码展示
图片的构建规律
https://photo.***.com/{作者id}/f/{当前图片id}.jpg完整代码、教程、学习可点击此群 免费领
导入模块
import requests
import parsel网址放出来就过不了审啦大家自行添加吧
headers {cookie: PHPSESSIDa6phn4ue7180gv3lu9ptdefu15; webp_enabled1; langzh; log_web_id6142749383; ttcid33eb5efe64ce4d7ab777615d594b674c35; tt_scidiiNP.JKSffhMzg6Ij8Wvc1QUUUp34mxhxh8tTbKXVDKz.iGDujlYmC9Y8vT-OaVDdb39,referer: https://****.com/tags/Cosplay/,user-agent: Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/110.0.0.0 Safari/537.36,
}
main_url https://*****.com/explore/
html_data requests.get(main_url).text
select parsel.Selector(html_data)
two_url_list select.css(.tags-all-link::attr(href)).getall()
for two_url in two_url_list:# https://****.com/categories/subject/three_url https://****g.com/rest/tag-categories/ two_url.split(/)[-2]print(three_url)pages requests.get(three_url).json()[data][pages]for page in range(1, pages1):three_url https://****.com/rest/tag-categories/ two_url.split(/)[-2] f?page{page}count20tag_list requests.get(three_url).json()[data][tag_list]for tag in tag_list:tag_url tag[url]tag_name tag_url.split(/)[-2]for page in range(1, 101):# 请求与响应url fhttps://***.com/rest/tags/{tag_name}/posts?page{page}count20orderweeklyjson_data requests.get(urlurl, headersheaders).json()postList json_data[postList]for post in postList:author_id post[author_id]for img in post[images]:img_id_str img[img_id_str]img_url fhttps:/***.com/{author_id}/f/{img_id_str}.jpgprint(img_url)效果展示 、 尾语
要成功先发疯下定决心往前冲
学习是需要长期坚持的一步一个脚印地走向未来
未来的你一定会感谢今天学习的你。
—— 心灵鸡汤
本文章到这里就结束啦~感兴趣的小伙伴可以复制代码去试试哦 问题解答 · 源码获取 · 技术交流 · 抱团学习请联系
