神代綺凜

[Pxder] Pixiv 插画下载器
可按根据指定画师 UID 解析并下载插画(包括动图)、一键下载所有你关注的画师的插画或收藏的插画、智能增量更新下载...
扫描右侧二维码阅读全文
24
2018/08

[Pxder] Pixiv 插画下载器

可按根据指定画师 UID 解析并下载插画(包括动图)、一键下载所有你关注的画师的插画或收藏的插画、智能增量更新下载过的画师的插画。

多线程下载,并且支持使用 HTTP 与 SOCKS 代理。

Head Pic: 「五河琴里」/「秋原ノゾミ Sheila」のイラスト [pixiv]

Pxder

运行示例

因为 OX163 解析过慢,功能也不多,并且是龟速单线程下载;而一些油猴解析脚本例如 Pxer 因为浏览器权限原因只能解析而不能帮你下载,于是最终我还是决定自己写个 _(:3」」

此项目基于 Node.js,姑且算自己学习的副产物(实际上是不务正业的产物

最大的缺点是没有 GUI,纯命令行操作,不过也并不难用(信我),GUI 在后续开发计划中(咕咕咕

安装及使用等说明请直接看 Github 项目文档

注意

因P站域名遭到 GFW 的 SNI 阻断,这意味着只要你在大陆内,即便你改了 Hosts 也无法直接使用 pxder,请记得使用pxder --setting设置代理

从现在开始所有在评论中询问因未挂代理而产生的问题都将会被无视

更新日志

v2.7.3 - 20190730
因 API 限制,offset 超过 5000 时将不再继续请求

v2.7.0 - 20190402
加入程序更新检查功能
针对某些有 404 问题的插画调整下载重试逻辑

v2.6.2 - 20181124
优化下载重试逻辑

v2.6.1 - 20181122
抗连接重置
优化下载重试逻辑

v2.6.0 - 20181122
动图压缩包名字加入 delay 信息(帧速)
在收集画师/画作时显示具体进度

v2.5.5 - 20181014
(大概也许可能差不多)修复了按PID下载时的重试问题
支持多参数,流程串行(例如pxder -fFbB

v2.5.4 - 20180920
修复一切因插画标题含有 ASCII 不可见字符引起的非法文件名问题

v2.5.3 - 20180916
修复插画标题含有制表符导致的非法文件名问题
修复按画师下载的问题

v2.5.1 - 20180913
修复下载私密收藏插画功能异常的问题

v2.5.0 - 20180908
使用更可靠的路径存放配置文件,解决权限问题
增加及优化按PID下载功能

v2.4.2 - 20180904
按关注画师下载时无视“Pixiv事務局”

v2.4.1 - 20180831
修复收藏插画下载异常

v2.4.0 - 20180827
增加下载收藏插画的功能
优化按关注画师下载

TODO

  • 开发 GUI

搬瓦工VPS优惠套餐,建站稳如狗,支持支付宝,循环出账94折优惠码BWH26FXH3HIQ
年付$28CN2线路,1核/512M内存/10G硬盘/[email protected]点击购买】(经常售罄,请抓紧机会)
年付$47CN2线路,1核/1G内存/20G硬盘/[email protected]点击购买
Last modification:August 12th, 2019 at 03:46 pm
If you think my article is useful to you, please feel free to appreciate

Leave a Comment

226 comments

  1. Suka  Windows 10 x64 Edition(Windows 10 x64 Edition) / Google Chrome 77.0.3865.90(Google Chrome 77.0.3865.90)
    大佬,可以做到只更新最新的图吗?比如作者有1.2.3张图,1的是早起作品,我并不想收集,删除了1之后,下次下载还会把1下载,能否增加一个指令,只下载3之后的图,之后都接着上次下载(最新的图id >老的图,程序应该是可以判断的)
    1. 神代綺凜  Windows 10 x64 Edition(Windows 10 x64 Edition) / Google Chrome 77.0.3865.120(Google Chrome 77.0.3865.120)
      @Suka 当然是能的,但是这类设计始终无法照顾到所有人,例如下载中途中断了导致中间的某些图没下,如果按你说的逻辑就会直接跳过,这也许不是所有人都想要的结果,单独做开关又很麻烦

      目前的逻辑是当列表某一页的图全都下载了就认为已经找到了最后下载到的位置,不会再继续往后拉取
      特别地,当按关注画师更新的时候,如果某画师的最新三张图从旧到新连续存在至少一张,也不会继续爬取

      1. Suka  Windows 10 x64 Edition(Windows 10 x64 Edition) / Google Chrome 77.0.3865.90(Google Chrome 77.0.3865.90)
        @神代綺凜 了解
  2. AN  Windows 10 x64 Edition(Windows 10 x64 Edition) / Google Chrome 77.0.3865.90(Google Chrome 77.0.3865.90)
    你好,想問pxder -f是否才能測到2773個關注中的畫師?若要用pxder -f下載另外的畫師要怎做?謝謝
    1. 神代綺凜  Windows 10 x64 Edition(Windows 10 x64 Edition) / Google Chrome 77.0.3865.90(Google Chrome 77.0.3865.90)
      @AN -f参数会下载所有已公开关注的画师,上限是 5000,受官方 API 所限制
      下载其他画师可以用-u参数指定 uid,这些在说明中都有写
  3. Buan  Windows 10 x64 Edition(Windows 10 x64 Edition) / Google Chrome 77.0.3865.75(Google Chrome 77.0.3865.75)
    dalao 为什么我在用pxder的时候只能一个一个画师手动下载 ,每次下载完一个画师的作品就得关掉酸酸乳再重开一遍,不然就会报错(一个一个画师手动下载实在是太痛苦了orz)。
    1. 神代綺凜  Windows 10 x64 Edition(Windows 10 x64 Edition) / Google Chrome 76.0.3809.132(Google Chrome 76.0.3809.132)
      @Buan 近期可能**手段会比较多,如果出现卡住的情况可以右击酸酸乳-服务器-断开当前所有连接,pxder 将会自动重试
      1. Buan  Windows 10 x64 Edition(Windows 10 x64 Edition) / Google Chrome 77.0.3865.90(Google Chrome 77.0.3865.90)
        @神代綺凜 dalao我按照你说的试了一下,酸酸乳断开所有连接后npm还是提示SocksClientError: Socket closed(就之前我发的那段代码)我还是过一阵子再试试吧
  4. Ouroboros  Windows 10 x64 Edition(Windows 10 x64 Edition) / Google Chrome 76.0.3809.132(Google Chrome 76.0.3809.132)
    大佬,有没办法把动画下载成webm,gif,之类的格式?
    1. 神代綺凜  Windows 10 x64 Edition(Windows 10 x64 Edition) / Google Chrome 76.0.3809.132(Google Chrome 76.0.3809.132)
      @Ouroboros 之前试过转 gif 但不尽人意,webm 的话也只有 webkit 支持,目前没找到比较完美的方案
      我比较倾向于转 mp4
      https://github.com/Tsuk1ko/pxder/issues/13
      1. Ouroboros  Windows 10 x64 Edition(Windows 10 x64 Edition) / Google Chrome 76.0.3809.132(Google Chrome 76.0.3809.132)
        @神代綺凜 你会把转mp4放到gui版吗?
      2. Ouroboros  Windows 10 x64 Edition(Windows 10 x64 Edition) / Google Chrome 76.0.3809.132(Google Chrome 76.0.3809.132)
        @神代綺凜 你会把转mp4放到gui版吗?
  5. wzxyisme  Windows 10 x64 Edition(Windows 10 x64 Edition) / Google Chrome 76.0.3809.132(Google Chrome 76.0.3809.132)
    你好,我使用的是谷歌在台湾的centos服务器,为什么会登录不了
    1. wzxyisme  Windows 10 x64 Edition(Windows 10 x64 Edition) / Google Chrome 76.0.3809.132(Google Chrome 76.0.3809.132)
      @wzxyisme
      该评论仅登录用户及评论双方可见
  6. SL  Windows 10 x64 Edition(Windows 10 x64 Edition) / Google Chrome 76.0.3809.100(Google Chrome 76.0.3809.100)
    顺便想问一下大佬,收藏插画文件夹会因为图片太多而卡住的问题怎么解决|´・ω・)
    以及如果在收藏下载完前关闭,下次再执行pxder -b命令的话会接着上次的进程下载吗?
    1. 神代綺凜  Mac OS X 10.14.6(Mac OS X 10.14.6) / Google Chrome 76.0.3809.100(Google Chrome 76.0.3809.100)
      @SL 图片太多卡住具体是什么现象,process 不动了还是怎么

      收藏没有做记和缓存,不会接着下载,后续版本会加入缓存功能

      1. SL  Android 7.1.2(Android 7.1.2) / Firefox 68.0(Firefox 68.0)
        @神代綺凜 卡住是说因为收藏的插画都下在同一个文件夹里所以打开时会有资源管理器卡住的问题,想知道能不能按照所在页数或者其他标准给它们分成数个文件夹
        辛苦大佬了~
        1. 神代綺凜  Mac OS X 10.14.6(Mac OS X 10.14.6) / Google Chrome 76.0.3809.100(Google Chrome 76.0.3809.100)
          @SL 下个版本改成按画师分文件夹吧
          1. SL  Android 7.1.2(Android 7.1.2) / Firefox 68.0(Firefox 68.0)
            @神代綺凜 好der,大佬辛苦了~
  7. SL  Windows 10 x64 Edition(Windows 10 x64 Edition) / Google Chrome 76.0.3809.100(Google Chrome 76.0.3809.100)
    感谢分享,终于发现一个可以批量下载收藏的了OuO
  8. flyco  Windows 10 x64 Edition(Windows 10 x64 Edition) / Firefox 53.0(Firefox 53.0)
    感谢您的分享,希望增加一个实用的选项:不再更新比现有图片更旧的图片,或者只更新最近1年内的作品(有一些画师放了大量很旧的图,不合意删除掉,但是用update命令会再下载回来)
    1. 神代綺凜  Mac OS X 10.14.6(Mac OS X 10.14.6) / Google Chrome 76.0.3809.100(Google Chrome 76.0.3809.100)
      @flyco 感谢提议,这个功能会被加到将来的 GUI 版中
  9. lym  Windows 10 x64 Edition(Windows 10 x64 Edition) / Firefox 68.0(Firefox 68.0)
    膜拜~
  10. lym  Windows 10 x64 Edition(Windows 10 x64 Edition) / Firefox 68.0(Firefox 68.0)
    qaq,不求图形界面。。就是希望有gif合成处理qaq
    1. 神代綺凜  Mac OS X 10.14.6(Mac OS X 10.14.6) / Google Chrome 76.0.3809.100(Google Chrome 76.0.3809.100)
      @lym 这个功能还在开发中,因为 node 本身的原因目前没有找到解决方案……
  11. 211  Windows 10 x64 Edition(Windows 10 x64 Edition) / Google Chrome 75.0.3770.142(Google Chrome 75.0.3770.142)
    啊!我下载了一半。但是把文件夹设置在一个废弃软件里了。结果清理垃圾时被当做残留垃圾删掉了。现在发现,之前下载过的三百个画师无法再次下载了。。只剩下还没下载的四百多个。现在不知如何才能把之前的几位重新下载Σ(っ °Д °;)っ
    1. 211  Windows 10 x64 Edition(Windows 10 x64 Edition) / Google Chrome 75.0.3770.142(Google Chrome 75.0.3770.142)
      @211 太好了,pxder又重新检测一遍。把他们下载回来了。赶下唯一的神——神代綺凜٩(ˊᗜˋ*)و
      1. 神代綺凜  Mac OS X(Mac OS X) / Safari(Safari)
        @211 因为按关注画师下载收集画师信息耗时很长所以专门做了进度缓存

        如果以后出现这种情况可以加--force重新收集信息,或者等全下完之后再执行一遍

        1. 211  Windows 10 x64 Edition(Windows 10 x64 Edition) / Google Chrome 75.0.3770.142(Google Chrome 75.0.3770.142)
          @神代綺凜 对了,之前报告说每下载完一两个画师,就会卡死。得CTRL+C重新下载。
          现在发现,如果使用日本的节点挂代理就可以持续下载,不会卡死。
          1. 神代綺凜  Windows 10 x64 Edition(Windows 10 x64 Edition) / Google Chrome 75.0.3770.142(Google Chrome 75.0.3770.142)
            @211 大概是代理问题了……
      2. 211  Windows 10 x64 Edition(Windows 10 x64 Edition) / Google Chrome 75.0.3770.142(Google Chrome 75.0.3770.142)
        @211 感谢,不是赶下、。。。
  12. iopp  Windows 10 x64 Edition(Windows 10 x64 Edition) / uBrowser 6.2.4098.3(uBrowser 6.2.4098.3)
    看了好久这个页面都没有找到下载地址= =
  13. 围巾怪  Windows 10 x64 Edition(Windows 10 x64 Edition) / Google Chrome 75.0.3770.100(Google Chrome 75.0.3770.100)
    发现新大陆!使用体验挺好的!github已star
    不过大大能不能加入下载排行榜前50之类的功能!
    1. 神代綺凜  Windows 10 x64 Edition(Windows 10 x64 Edition) / Google Chrome 75.0.3770.100(Google Chrome 75.0.3770.100)
      @围巾怪 目前的命令行版本不会再加入新功能

      以后做 GUI 版的时候会考虑加入

      1. 秋水连波  Windows 10 x64 Edition(Windows 10 x64 Edition) / Firefox 67.0(Firefox 67.0)
        @神代綺凜 请问为什么一直显示You must login first!
        1. 神代綺凜  Windows 10 x64 Edition(Windows 10 x64 Edition) / Google Chrome 75.0.3770.100(Google Chrome 75.0.3770.100)
          @秋水连波 你不登陆怎么下载嘞,麻烦读一下
          1. 秋水连波  Windows 10 x64 Edition(Windows 10 x64 Edition) / Firefox 67.0(Firefox 67.0)
            @神代綺凜 我登录了好几遍了,但是次次显示需要先登录
            1. 神代綺凜  Windows 10 x64 Edition(Windows 10 x64 Edition) / Google Chrome 75.0.3770.100(Google Chrome 75.0.3770.100)
              @秋水连波 登陆的时候有没有报错没成功……
              1. 秋水连波  Android 9(Android 9) / Google Chrome 57.0.2987.108(Google Chrome 57.0.2987.108)
                @神代綺凜 不知道,看不出来有没有报错
      2. 围巾怪  Windows 10 x64 Edition(Windows 10 x64 Edition) / Google Chrome 75.0.3770.100(Google Chrome 75.0.3770.100)
        @神代綺凜 感谢
  14. brmkai  Windows 10 x64 Edition(Windows 10 x64 Edition) / Sogou Explorer(Sogou Explorer)
    似乎在网络较差的时候会下完一个画师的作品后停止了继续下载其他画师的作品,也不报错,尝试等了一晚也不会动,请问这个能否解决>﹏<
    1. 211  Windows 10 x64 Edition(Windows 10 x64 Edition) / Google Chrome 70.0.3538.110(Google Chrome 70.0.3538.110)
      @brmkai 我也是这个问题
    2. 神代綺凜  Windows 10 x64 Edition(Windows 10 x64 Edition) / Google Chrome 75.0.3770.100(Google Chrome 75.0.3770.100)
      @brmkai 尝试修复了一下问题,请更新到最新版本
      1. 211  Windows 10 x64 Edition(Windows 10 x64 Edition) / Google Chrome 75.0.3770.142(Google Chrome 75.0.3770.142)
        @神代綺凜 网络连接好8时(每秒10MB)也会这样。
        不过还是很感谢楼主做的工具
        1. 神代綺凜  Mac OS X(Mac OS X) / Safari(Safari)
          @211 那真不知道怎么修了555
  15. brmkai  Windows 10 x64 Edition(Windows 10 x64 Edition) / Sogou Explorer(Sogou Explorer)
    请问可以添加高级会员有的文件夹分类下载项吗?因为超出5000关注不知该如何解决QAQ
    1. 神代綺凜  Windows 10 x64 Edition(Windows 10 x64 Edition) / Google Chrome 75.0.3770.100(Google Chrome 75.0.3770.100)
      @brmkai 因为目前使用的 API 具有限制,不能超出 5000,目前我不知道有没有能突破这一限制的官方 API
      v2.7.2-rc2 版已经针对这个问题做了简单的限制,将不再会报错终止
      1. wdrnrgbtahbagr  Windows 10 x64 Edition(Windows 10 x64 Edition) / Google Chrome 75.0.3770.100(Google Chrome 75.0.3770.100)
        @神代綺凜 加油!

        不想分兩個號關注的人如此說

  16. LLLYYYGGG123  Windows 10 x64 Edition(Windows 10 x64 Edition) / Google Chrome 75.0.3770.100(Google Chrome 75.0.3770.100)
    data:
    { error:
    { user_message: '',
    message: '{"offset":["Offset must be no more than 5000"]}',
    reason: '',
    user_message_details: {} } } }
    不能超过5000个收藏画师吗OωO
    1. 神代綺凜  Windows 10 x64 Edition(Windows 10 x64 Edition) / Google Chrome 75.0.3770.100(Google Chrome 75.0.3770.100)
      @LLLYYYGGG123 看起来是的,这是 api 的限制,看来是没办法解决

      我去加个限制避免出错好了

      1. LLLYYYGGG123  Windows 10 x64 Edition(Windows 10 x64 Edition) / Google Chrome 75.0.3770.100(Google Chrome 75.0.3770.100)
        @神代綺凜 嗯嗯,感谢大佬
  17. wshsirin8  Windows 10 x64 Edition(Windows 10 x64 Edition) / Google Chrome 74.0.3729.131(Google Chrome 74.0.3729.131)
    你好,,我想请问一下:为什么我重装系统后再次按照教程安装下载器后,无法登陆p站账号呢?(挂了代理)
    1. 神代綺凜  Windows 10 x64 Edition(Windows 10 x64 Edition) / Google Chrome 75.0.3770.90(Google Chrome 75.0.3770.90)
      @wshsirin8 是否有报错信息输出呢,只靠这样的描述是无法确定问题的
      1. wshsirin8  Windows 10 x64 Edition(Windows 10 x64 Edition) / Google Chrome 74.0.3729.131(Google Chrome 74.0.3729.131)
        @神代綺凜
        该评论仅登录用户及评论双方可见
        1. 神代綺凜  Windows 10 x64 Edition(Windows 10 x64 Edition) / Google Chrome 75.0.3770.90(Google Chrome 75.0.3770.90)
          @wshsirin8 这 IP 是 facebook 的,DNS 污染现象,说明没有(成功)挂上代理

          建议再好好检查下代理设置

          1. wshsirin8  Windows 10 x64 Edition(Windows 10 x64 Edition) / Google Chrome 74.0.3729.131(Google Chrome 74.0.3729.131)
            @神代綺凜 好的,谢谢您
            1. 神代綺凜  Windows 10 x64 Edition(Windows 10 x64 Edition) / Google Chrome 75.0.3770.90(Google Chrome 75.0.3770.90)
              @wshsirin8 或者请尝试运行ipconfig /flushdns清除 DNS 缓存
              1. wshsirin8  Windows 10 x64 Edition(Windows 10 x64 Edition) / Google Chrome 74.0.3729.131(Google Chrome 74.0.3729.131)
                @神代綺凜 万分感谢,已经好了!!ヾ(≧∇≦*)ゝ
                1. 神代綺凜  Windows 10 x64 Edition(Windows 10 x64 Edition) / Google Chrome 75.0.3770.90(Google Chrome 75.0.3770.90)
  18. wdrnrgbtahbagr  Windows 8 x64 Edition(Windows 8 x64 Edition) / Google Chrome 74.0.3729.169(Google Chrome 74.0.3729.169)
    感謝大佬的腳本∠( ᐛ 」∠)_
    用了OX163很久
    OX163致命的是不能自動更新所有画师
    每次都要手動更新
    對了大佬,有沒有興趣開發twitter版的批量下载(手動斜眼)
    現在不少画师走去twitter發圖
    要是能收全就好了
    滿足倉鼠的欲望 (劃掉)
    1. 神代綺凜  Windows 10 x64 Edition(Windows 10 x64 Edition) / Google Chrome 74.0.3729.169(Google Chrome 74.0.3729.169)
      @wdrnrgbtahbagr 推特下图我自己暂时还没有需求,我一般直接在p站关注的,虽然部分画师也有关注推特

      以后再考虑吧

      1. wdrnrgbtahbagr  Windows 8 x64 Edition(Windows 8 x64 Edition) / Google Chrome 74.0.3729.169(Google Chrome 74.0.3729.169)
        @神代綺凜 感谢大佬
  19. ccwwjjcw  Windows 10 x64 Edition(Windows 10 x64 Edition) / Firefox 67.0(Firefox 67.0)
    能不能直接把图片链接提取出来发送至ariac2或者是IDM,这样的话下载效率会很高,ariac2和idm不用翻墙就可以直接下载图片的,pxder很好,但就是受socket速度限制∠( ᐛ 」∠)_
    1. 神代綺凜  Windows 10 x64 Edition(Windows 10 x64 Edition) / Google Chrome 74.0.3729.169(Google Chrome 74.0.3729.169)
      @ccwwjjcw 原图所在的i.pximg.net是不用翻,需要翻的主要是*.pixiv.net

      配合 aria 下载准备在以后要开发的 GUI 版上实现

  20. kirito  Windows 10 x64 Edition(Windows 10 x64 Edition) / Google Chrome 63.0.3239.132(Google Chrome 63.0.3239.132)
    部分png图片抓取有问题,没有把画师全部图片下载下来。重试了几次都是那部分图片无法抓取。((9685977)Nahaki,(1601715)Mvv 的问题特别严重)