QQ邮箱采集器教程.docx

QQ邮箱采集器教程
本文介绍使用八爪鱼采集QQ邮箱的方法
采集网站:
http://qun./
使用功能点:
Cookie登录
Ajax点击
修改Xpath
步骤1:创建QQ邮箱采集任务
进入主界面,选择“自定义采集”
QQ邮箱采集步骤1
将要采集的网站URL复制粘贴到输入框中,点击“保存网址”
QQ邮箱采集步骤2
步骤2:Cookie登录
1)打开网页后,需要先登录,可以先在手机登录QQ, 采集时点击登录按钮,之后扫码就可以成功登录。或者电脑登录,点击二维码右边的头像进行登录。
QQ邮箱采集步骤3
2)登陆后,在高级选项中选择自定义cookie,勾选打开网页时使用固定cookie,再点击获取当前页面cookie,最后点击“确定”,这样以后再采集时就不用重复登录QQ了。(cookie有效时间以具体情况为准,到一定时间会失效,失效需重新登录获取cookie,另外如果是点击头像(电脑登录的)需要把之前的点击头像登录的点击元素删除)
QQ邮箱采集步骤4
步骤3:Ajax点击
登录后,选择需要采集的QQ群,然后在右面的提示框中选择“点击该元素”
QQ邮箱采集步骤5
由于网页涉及Ajax技术。所以需要选中点击元素,打开“高级选项”,勾选“Ajax加载数据”,设置时间为“15秒”。执行前等待设置7秒, 因为页面打开后需要向下滑动才可以出现更多内容,所以还需要设置页面滚动,滚动次数选择20次,(滚动次数具体看群成员的数量,如果500个人,一般来说选择25次能全部加载完)每次间隔1秒,完成后,点击“确定”。
QQ邮箱采集步骤6
步骤4:提取元素
1)选择第一个QQ号码,然后在右面的提示框中选择“选中全部”,随后选择“采集元素”。
QQ邮箱采集步骤7
步骤5:修改Xpath
1)手动执行规则,发现循环列表里并没有定位到所有元素,所以需要修改xpath,在循环方式中选择不固定元素列表,修改xpath为//tbody[***@class="list"]/tr
QQ邮箱采集步骤8
2)因为提取到的数据是QQ号,所以要修改一下,转化成邮箱
选中QQ号字段→点击高级选项中自定义数据字段(如下图)→格式化数据→
QQ邮箱采集步骤9
添加步骤→添加后缀