温州住房与城乡建设部网站,google 网站推广,国网典型设计最新版,小影 wordpress完整代码#xff1a;https://download.csdn.net/download/weixin_55771290/87471350概述这里简单说明一下项目下下来直接跑起的方法。前提先搞好python环境和vue环境,保证你有一个账户密码连上数据库mysql。1、pip install requirements.txt 安装python包2、修改mysql数据库的…完整代码https://download.csdn.net/download/weixin_55771290/87471350概述这里简单说明一下项目下下来直接跑起的方法。前提先搞好python环境和vue环境,保证你有一个账户密码连上数据库mysql。1、pip install requirements.txt 安装python包2、修改mysql数据库的账户密码weibosystem/ssettings里面3、创建数据库 python manage.py makemigrations python manage.py migrate4、创建后台xadmin账户python manage.py createsuperuser5、登录后台http://localhost:8000/xadmin/SpiderAPI/target/ 在爬虫API里面的爬虫设置输入一个用户uid cookie然后即可开始在首页localhost:8000数据爬虫id爬虫系统介绍extra_appsxadmin后台管理系统scrapydserverScrapy爬虫srcdjango app里面写接口webview前端Vue代码weibosystemdjango wsgi/url等配置前端使用vue-cli vue vuex axios后端使用python django xadmin request scrapy scrapyd snownlp模型已训练好但并不是特别准确系统功能介绍① 输入微博oid爬取个人微博信息情感分析处理后并展示oid获取方式进入个人微博首页如 https://weibo.com/u/1797112632 其中1797112632就是oid。有些用户自定义了域名右击查看网页源代码搜索[‘oid’]即可找到oid。下图是本系统爬取个人信息界面② 输入单条微博id爬取个人微博信息获取单条微博id的方式打开微博客户端随便找到一条微博进入微博正文点击右上角三个点然后可以看到分享给微信好友QQ好友等在下面一栏有收藏等往右边拖找到复制链接复制并粘贴出来。如 https://m.weibo.cn/1769965211/4366947749433348 其中4366947749433348就是单条微博id。情感分析处理后并展示。本系统展示单条微博例子如下③ 输入微博id或者多个微博id和Cookie启动持续爬虫。前提先运行Scrapyd服务。这个功能使用Scrpay爬虫然后把数据存到Django的Model中。④ 独立出来的文本情感分析API输入任意一段中文返回情感分析值词频关键词。⑤ 数据库已爬虫的用户其中持续爬虫模块点击进去就是③中的多用户爬虫默认设置了组别是1如需修改进入xadmin后台修改即可上面的点击个人账号点击单条微博也是进入信息展示界面。点击组别进入的多用户爬虫界面如下图⑥ xadmin后台管理系统系统启动注意事项按照技术文档操作完了之后workon进入虚拟环境1、数据库自动生成使用如下命令python manage.py makemigrationspython manage.py migrate2、初始化Cookies爬虫之前一定要先进入xadmin后台使用数据库自动生成后xadmin的登录账号密码就没了参考这里初始化账号https://blog.csdn.net/a_little_snail/article/details/76984933 然后重设Cookie获取新浪微博Cookie可参考 https://blog.csdn.net/A_xiao_mili/article/details/77947802 这里。
