爬取

crifan 5年前 (2020-03-02) 1052浏览 0评论

折腾： 【记录】爬虫 爬数据 义务教育教科书 义教教科书 期间，继续去看看另外2本电子书： 电子样书 点拨 八年级英语下 电子样书 点拔训练 八年级英语下 去chrome中打开，调试看看。 这个是封面： 之后是其他几张图片： 最开始的几张图...

crifan 5年前 (2020-03-02) 846浏览 0评论

折腾： 【记录】爬虫 爬数据 义务教育教科书 义教教科书 期间，先去爬取： 义教教科书英语八年级下册 https://bp.pep.com.cn/ebook/yybanjxc/mobile/index.html 先去用Chrome去分析看看： 是否简...

crifan 6年前 (2019-08-30) 769浏览 0评论

折腾： 【未解决】补全少儿xxx数据逻辑：添加分类标签和标记是否是动画片 期间，对于下面视频： 从视频广场进入后： （1） 动画明星 精选教材 启蒙专区 自然拼读 字母启蒙 对于每一个最底层的视频 加上 前几级别的分类属性 （2） 视...

crifan 6年前 (2019-04-28) 626浏览 0评论

折腾： 【未解决】如何破解大众点评网页爬取时的反扒验证verify.meituan.com 期间，现在只能去： 多次爬取，获得部分数据，然后去合并结果。 效率很低，且不能保证获取到完整的所有的数据。 现在继续想办法，看看能不能获取到完整数据。 考虑：...

crifan 7年前 (2018-10-26) 824浏览 0评论

由于爬取数据，最终发现可能超过4T，所以现有4T硬盘坑你就不够保存了。 所以干脆买更大的，8T的，号称桌面级移动硬盘： 【记录】外置桌面级8T的Seagate Backup Plus Hub移动硬盘 然后继续去使用： 插到Mac或Win上，去格式化...