记一次简单爬取百度贴吧图片记录

  • 2
  • 167 views
  • A+
所属分类:脚本开发

需要一些图片需要从贴吧拽下来,但是一张一张的图片这么保存很麻烦,累的手都抽筋了。

使用一些批量下载的,乱七八糟的下了一堆,决定还是自己手动搞一下吧。

我还是用不惯bs觉得还是scrapy好用,哪怕是scrapy里面的一个插件,主要是习惯了这个套路。用bs流程差不多,自己改改就行了。

Python版本:3.X

Python插件:requests、scrapy

下面的代码随便写的,能达到效果就行,没有做BUG的测试。

PS:注释都是在编辑文章的时候添加的,有问题直接留言就好。

基本上就是这样的了

比如我的运行过程

记一次简单爬取百度贴吧图片记录

再比如我的运行结果

记一次简单爬取百度贴吧图片记录

好了基本上就是这样了,能用。运行了几次都ok。欢迎留言讨论。

发表评论

:?: :razz: :sad: :evil: :!: :smile: :oops: :grin: :eek: :shock: :???: :cool: :lol: :mad: :twisted: :roll: :wink: :idea: :arrow: :neutral: :cry: :mrgreen:

目前评论:2   其中:访客  1   博主  1

    • 挖站否 挖站否 0

      博主也在搞爬虫?

        • trojansun trojansun Admin

          @挖站否 嗯呢,随便写写。资源枯竭!