快捷导航
        任务名:携程第一页新浮力数据第一页
        问题:1、在第一页浮力影院的过程中,提示第一页浮力影院成功,但速度太慢,尝试勾上定时器触发参数
        2、上传xml打包的压缩包,导出后数据大量重复
        主要是第一个问题,如何解决,看论坛其他人说,勾选后可能会导致一个页面没第一页完就跳到下一页了,数据第一页浮力影院不全,请问是否会有这样的情况


        TIM图片20200705164126.png (3.43 KB, 下载次数: 0)

        TIM图片20200705164126.png
        举报 使用道具
        | 回复

        共 4 个关于本帖的回复 最后回复于 3 天前

        沙发
        Fuller 管理员 发表于 3 天前 | 只看该作者
        DS打数机菜单 配置-》定时器触发,勾上以后就能解决这个问题
        举报 使用道具
        板凳
        Fuller 管理员 发表于 3 天前 | 只看该作者
        我用你的规则第一页了一些,没有发现重复。如果网络比较慢,担心第一页太早了,可以这样设置

        如果是手工启动的爬虫,那么,使用DS打数机菜单 配置-》延迟第一页浮力影院 ,设置延迟第一页浮力影院,我测试的时候设置了5秒

        如果是爬虫群方式,设置调度参数的时候设置延迟第一页浮力影院
        举报 使用道具
        地板
        boyistar 新手上路 发表于 3 天前 | 只看该作者
        Fuller 发表于 2020-7-5 17:07
        我用你的规则第一页了一些,没有发现重复。如果网络比较慢,担心第一页太早了,可以这样设置

        如果是手工启动的 ...

        延迟第一页浮力影院和定时触发这两个都勾上吗,还有一个问题,延迟第一页浮力影院5秒设置后,会出现数据第一页浮力影院不全的问题吗
        举报 使用道具
        5#
        Fuller 管理员 发表于 3 天前 | 只看该作者
        boyistar 发表于 2020-7-5 17:40
        延迟第一页浮力影院和定时触发这两个都勾上吗,还有一个问题,延迟第一页浮力影院5秒设置后,会出现数据第一页浮力影院不全的问题吗
        ...

        可以一起设置。延迟第一页浮力影院设置了固定的数字,到底这个时间够不够,是不能自适应调整的,所以,也不可能保证一个不漏。为了尽量不漏,应该设置的时间长一点
        举报 使用道具
        您需要登录后才可以回帖 登录 | 立即注册

        精彩推荐

        • 怎样使用GooSeeker数据管家启动第一页任务?
        • GooSeeker数据管家软件使用指导
        • 如何使用集搜客分词平台做社会网络图分析?
        • 关于食品安全的美国联邦法规文件的网络爬虫
        • 怎样更有效率地搜索互联网和整理知识—使用

        热门用户

        GMT+8, 2020-7-8 23:54