当前位置: 首页 > 软件库 > Web应用开发 > 网站API >

豆瓣小组图片采集器

授权协议 GPL
开发语言 Python
所属分类 Web应用开发、 网站API
软件类型 开源软件
地区 国产
投 递 者 马和硕
操作系统 跨平台
开源组织
适用人群 未知
 软件概览

豆瓣小组图片采集程序

By 肾虚公子

官网: http://Douban.miaowu.asia

主程序:dou2.py

Mac/Liunx 用户需要创建 Doubanimg 文件夹 然后运行程序(python dou2.py)即可。

Windows用户请下载压缩包: 下载

程序基本功能

  • 用户可以自由选择用户组下载图片支持豆瓣所有小组
  • 本程序自动采集代理
  • 采集代理后随机选择
  • 自动下载图片并保存

获取用户组ID方法 http://www.douban.com/group/264964/ #只需要输入人group/后面的字符 不包括斜杠

  • 注意: 1.为了避免一个页面被采集两次, 链接去重是非常重要的。 2.写代码之前拟个大纲或画个流程图是很好的编程习惯,这么做不仅可以为你后期处理节省 很多时间,更重要的是可以防止自己在爬虫变得越来越复杂时乱了分寸。 3.处理网页重定向 •服务器端重定向,网页在加载之前先改变了 URL; • 客户端重定向,有时你会在网页上看到“10 秒钟后页面自动跳转到……”之类的消息, 表示在跳转到新 URL 之

 相关资料
  • 本文向大家介绍Python制作豆瓣图片的爬虫,包括了Python制作豆瓣图片的爬虫的使用技巧和注意事项,需要的朋友参考一下   前段时间自学了一段时间的Python,想着浓一点项目来练练手。看着大佬们一说就是爬了100W+的数据就非常的羡慕,不过对于我这种初学者来说,也就爬一爬图片。   我相信很多人的第一个爬虫程序都是爬去贴吧的图片,嗯,我平时不玩贴吧,加上我觉得豆瓣挺良心的,我就爬了豆瓣首页上

  • 本文向大家介绍Python实现豆瓣图片下载的方法,包括了Python实现豆瓣图片下载的方法的使用技巧和注意事项,需要的朋友参考一下 本文实例讲述了Python实现豆瓣图片下载的方法。分享给大家供大家参考。具体分析如下: 1 用 tk 封装一下 2 用户可以自己输入图片url 希望本文所述对大家的Python程序设计有所帮助。

  •  XPlayer 豆瓣音乐播放器 特点: 1.自动侦测Douban网页的歌曲 2.Douban网页关闭,歌曲能够继续播放 3.XPlayer是个全功能的播放器,支持播放列表和音量调节

  • 本文向大家介绍Python爬豆瓣电影实例,包括了Python爬豆瓣电影实例的使用技巧和注意事项,需要的朋友参考一下 文件结构 html_downloader.py - 下载网页html内容 html_outputer.py - 输出结果到文件中 html_parser.py: 解析器:解析html的dom树 spider_main.py - 主函数 综述 其实就是使用了urllib2和Beauti

  • 斌哥豆瓣FM桌面版,是一款第三方豆瓣FM客户端(PC版)。 软件使用 AAuto 语言编写,源码下载地址 http://wubin.in/app/source/doubanFM.20140101.7z 斌哥豆瓣FM第三方客户端,可替代豆瓣FM官方桌面版客户端。其除具有豆瓣FM的一般功能(登录、收听红心兆赫、加红心、标记不再听等),还具备如下特点: 1)单文件免安装绿色版(无需.net等运行库),软