




版权说明:本文档由用户提供并上传,收益归属内容提供方,若内容存在侵权,请进行举报或认领
文档简介
1、使用八爪鱼v7采集知乎发现话题的信息本文介绍使用八爪鱼采集知乎-发现-话题为例采集网站:/#signin使用功能点:八爪鱼7.0教程AJAX滚动教程cookie登陆方法(7.0版本)相关采集教程:新浪微博数据采集豆瓣电影短评采集搜狗微信文章采集步骤1:创建采集任务1)进入主界面,选择“自定义模式”使用八爪鱼v7采集知乎发现话题的信息图1将要采集的网址复制粘贴到网站输入框中,点击“保存网址”使用八爪鱼v7采集知乎发现话题的信息图2步骤2:登录知乎1)系统自动打开网页,进入知乎登录页面。系统默认停留在扫描二维码登录页面。点击“使用密码登录”,选择“更多操作”使用八爪鱼v7采集知乎发现话题的信息图3
2、2)选择“点击该元素”,进入“使用密码登录”页面使用八爪鱼v7采集知乎发现话题的信息图43)依次点击账号和密码输入框,输入账号和密码(直接输入,可忽视操作提示框)使用八爪鱼v7采集知乎发现话题的信息图54)点击“登录”按钮,选择“点击该按钮”使用八爪鱼v7采集知乎发现话题的信息图65)在页面右上角,打开“流程”,以展现出“流程设计器”和“定制当前操作”两个板块。系统会自动登录知乎。再次选中“打开网页”步骤,打开“高级选项”,打开“缓存设置”,勾选“打开网页时使用指定Cookie”。八爪鱼会记住这个cookie状态,下次打开这个页面的时候,就会以登陆之后的状态打开使用八爪鱼v7采集知乎发现话题的
3、信息图7注意:由于cookie是有生命周期的,这个周期多长时间取决于采集的网站。如果cookie到期了,就需要再重新获取一次登陆之后的cookie。另外,如果需要切换账号,可以勾选“打开浏览器前清理缓存”,然后再取消cookie,重新设置其他账号即可。步骤3:设置Ajax下拉加载点击“发现”按钮,在操作提示框中,选择“点击该链接”使用八爪鱼v7采集知乎发现话题的信息图8系统自动挡进入“发现”栏目下的话题页面。我们发现,下拉页面,会出现“加载中”的字样,等待约2秒,会有新的数据加载出来。经过约40次下拉加载,页面达到最底部使用八爪鱼v7采集知乎发现话题的信息图9“点击元素”步骤涉及Ajax下拉加
4、载。打开“高级选项”,勾选“页面加载完成后向下滚动”,设置滚动次数为“40次”,每次间隔“2秒”,滚动方式为“直接滚动到底部”,最后点击“确定”使用八爪鱼v7采集知乎发现话题的信息图10注意,这里的滚动次数、间隔时间,需要针对网站进行设置,可根据相关功能点教程进行学习步骤4:创建列表循环1)移动鼠标,选中页面里的第一条话题链接。选中后,系统会自动识别页面里的其他相似链接。在右侧操作提示框中,选择“选中全部”使用八爪鱼v7采集知乎发现话题的信息图11选择“采集以下链接地址”使用八爪鱼v7采集知乎发现话题的信息图12再次选中页面里的第一条话题链接,选择“采集该链接的文本”使用八爪鱼v7采集知乎发现
5、话题的信息图13选择“启动本地采集”使用八爪鱼v7采集知乎发现话题的信息图14步骤5:数据采集及导出1)采集完成后,会跳出提示,选择“导出数据”。选择“合适的导出方式”,将采集好的数据导出使用八爪鱼v7采集知乎发现话题的信息图152)这里我们选择excel作为导出为格式,数据导出后如下图使用八爪鱼v7采集知乎发现话题的信息图16八爪鱼70万用户选择的网页数据采集器。1、操作简单,任何人都可以用:无需技术背景,会上网就能采集。完全可视化流程,点击鼠标完成操作,2分钟即可快速入门。2、功能强大,任何网站都可以采:对于点击、登陆、翻页、识别验证码、瀑布流、Ajax脚本异步加载数据的网页,均可经过简单设置进行采集。3、云采集,关机也可以。配置好采集任务后可关机,任务可在云端执行。庞大云采集集群24*7不间断运行,不用担心IP
温馨提示
- 1. 本站所有资源如无特殊说明,都需要本地电脑安装OFFICE2007和PDF阅读器。图纸软件为CAD,CAXA,PROE,UG,SolidWorks等.压缩文件请下载最新的WinRAR软件解压。
- 2. 本站的文档不包含任何第三方提供的附件图纸等,如果需要附件,请联系上传者。文件的所有权益归上传用户所有。
- 3. 本站RAR压缩包中若带图纸,网页内容里面会有图纸预览,若没有图纸预览就没有图纸。
- 4. 未经权益所有人同意不得将文件中的内容挪作商业或盈利用途。
- 5. 人人文库网仅提供信息存储空间,仅对用户上传内容的表现方式做保护处理,对用户上传分享的文档内容本身不做任何修改或编辑,并不能对任何下载内容负责。
- 6. 下载文件中如有侵权或不适当内容,请与我们联系,我们立即纠正。
- 7. 本站不保证下载资源的准确性、安全性和完整性, 同时也不承担用户因使用这些下载资源对自己和他人造成任何形式的伤害或损失。
最新文档
- 中考说明文相关知识点
- 如何加强供电所管理
- 技术类实习生合同范本
- 培训出差报告
- 会员权益转让合同
- 彩妆创业财务分析报告
- 房地产拍卖合同示范
- 教学设计人物课件
- 6S管理在医院药品管理中的应用
- 技术部经理履新述职报告
- 华为变更管理培训资料
- 拉赫玛尼诺夫钢琴作品和声的结合与表现
- 高三英语语法填空专项训练及答案含解析
- (完整版)S312防水套管图集
- 常用仪器设备和抢救物品使用的制度及流程
- 2023年浙江省杭州市余杭区径山镇招聘村务工作者招聘14人(共500题含答案解析)笔试历年难、易错考点试题含答案附详解
- 妊娠滋养细胞肿瘤课件
- 个人原因动物检产品检疫合格证明丢失情况说明
- 中国的预算管理
- 如坐针毡:我与通用电气的风雨16年
- 部编小学语文四年级下册第四单元教材分析解读课件
评论
0/150
提交评论