m4kur4 / pxv-blkdl Goto Github PK

View Code? Open in Web Editor NEW

0.0 1.0 0.0 79 KB

pixivから指定したユーザーの作品をまとめてダウンロードするツール

Python 95.79% Batchfile 4.21%

pxv-blkdl's Introduction

pxv-blkdl

概要

ユーザーIDを指定してpixiv.netから画像ファイルを一括ダウンロードします。

使い方

注意点

有志作成の非公式ライブラリpixivpyを使用しており、実行に必要なアカウント情報の安全が保証できません。
後述するアカウント設定は必ず不要なものを使用してください。
メールアドレス及びパスワードは普段使っているもの以外の設定を推奨します。
使用するアカウントにR-18の表示を許可していない場合、成人向け作品はダウンロードされません。

前提

Python(及びpip)がインストールされていること(3.7で動作確認)
GoogleChromeがインストールされていること
2のバージョンに対応したchromedriver.exeを/srcに配置していること

セットアップ

アカウント情報の設定

メールアドレスも含めて普段使いしていないものの設定を推奨します。

/src/setting.json.exampleをファイルコピーして、/src/setting.jsonへリネームする
/src/setting.json内へ以下のようにアカウント情報を設定する
- user.email : pixivに登録されているメールアドレス
- user.password : 上記メールアドレスに紐づくパスワード
setup.batを実行する
- virtualenvがローカルにインストールされるため、ローカル環境を汚したくない方はご注意ください

使用方法

Windowsで実行、かつCLI操作に慣れていない場合

run.batを実行する
- 対象のユーザーIDを入力します。
- キャッシュクリアの有無を指定します。
  - 一度保存した画像はIDをキャッシュに保持しています。
    キャッシュに存在するIDの作品はダウンロードがスキップされます。
    複数回ツールを実行した際に先方のサーバーへなるべく負荷を与えたくないためです。
「終了」 と表示されれば実行完了
※処理を中断したい場合はCtrl + Cを押してください。

その他の環境で実行、またはCLI操作に慣れている場合

執筆予定

未実装・実装予定？

必要最低限の実装しかしていないため、以下は追々の対応予定

例外ハンドリング
バリデーション
ネストしたプログレスバー
- 複数画像で構成される作品のDLに時間がかかる場合、フリーズしたように見えてしまう
- tqgmの挙動が思うように行かないので一旦断念
GUI

pxv-blkdl's People

Contributors

Watchers

pxv-blkdl's Issues

CLIから直接pythonコマンドで実行する場合の手順を記載

エラーログを出力させる

バリデーションの実装

ログ出力機能の実装(完全版)

#5 で部分的なエラーログを実装したので、全体に展開する

batファイルの実行時、処理完了後にキーを入力してもウィンドウが閉じない

同じ作品名があったら不具合起きそう

作者名は対策済みなので作品も同じようにIDか何かつけるべき...？
- 全部に振ると邪魔なので重複した場合の対応を考える

認証APIを毎回叩かないようにキャッシュへトークンを追加する

パラメータ不正エラー

Windowsでパスに使用できない文字

https://www.pixiv.net/users/20207215

OSError: [WinError 87] パラメーターが間違っています。: 'images/Nam(20207215)/79444708_p0.jpg' -> 'images/Nam(20207215)/:D.jpg'

During handling of the above exception, another exception occurred:

Traceback (most recent call last):
  File "D:\2021_dev\pxv-blkdl\src\pxv_blkdl.py", line 412, in <module>
    idl.fetch_image_all_by_userid(args.user_id)
  File "D:\2021_dev\pxv-blkdl\src\pxv_blkdl.py", line 228, in fetch_image_all_by_userid
    self.fetch_image(work, save_dir_base)
  File "D:\2021_dev\pxv-blkdl\src\pxv_blkdl.py", line 254, in fetch_image
    self.rename_image(save_dir_base, image_id, image_title, image_url, 0, True)
  File "D:\2021_dev\pxv-blkdl\src\pxv_blkdl.py", line 318, in rename_image
    move(file_name_org, file_name)
  File "C:\Python39\lib\shutil.py", line 820, in move
    copy_function(src, real_dst)
  File "C:\Python39\lib\shutil.py", line 435, in copy2
    copyfile(src, dst, follow_symlinks=follow_symlinks)
  File "C:\Python39\lib\shutil.py", line 264, in copyfile
    with open(src, 'rb') as fsrc, open(dst, 'wb') as fdst:
OSError: [Errno 22] Invalid argument: 'images/Nam(20207215)/:D.jpg'

batファイル実行時のメッセージでエラーが起きている

使えない文字をそのままechoに渡している？

作品タイトルにパス入力不可の文字が入った際の対応漏れ

キャッシュされているユーザー情報の一覧表示機能を追加

いちいちpixivアクセスしてID取ってくるのが面倒(特に差分だけ取りたい場合)

タイトルにダブルクォートが入っているとエラーになる

うごイラの保存に失敗する

2131660
- 58055574_ugoira0.jpg

FileNotFoundError: [WinError 2] 指定されたファイルが見つかりません。: 'images/荻pote＠初画集2／17発売(2131660)/58055574_p0.jpg' -> 'images/荻pote＠初画集2／17発売(2131660)/鉄血にして熱血にして冷血な作業工程.jpg'

During handling of the above exception, another exception occurred:

Traceback (most recent call last):
  File "D:\2021_dev\pxv-blkdl\src\pxv_blkdl.py", line 447, in <module>
    idl.fetch_image_all_by_userid(args.user_id)
  File "D:\2021_dev\pxv-blkdl\src\pxv_blkdl.py", line 228, in fetch_image_all_by_userid
    self.fetch_image(work, save_dir_base)
  File "D:\2021_dev\pxv-blkdl\src\pxv_blkdl.py", line 254, in fetch_image
    self.rename_image(save_dir_base, image_id, image_title, image_url, 0, True)
  File "D:\2021_dev\pxv-blkdl\src\pxv_blkdl.py", line 323, in rename_image
    move(file_name_org, file_name)
  File "C:\Python39\lib\shutil.py", line 820, in move
    copy_function(src, real_dst)
  File "C:\Python39\lib\shutil.py", line 435, in copy2
    copyfile(src, dst, follow_symlinks=follow_symlinks)
  File "C:\Python39\lib\shutil.py", line 264, in copyfile
    with open(src, 'rb') as fsrc, open(dst, 'wb') as fdst:
FileNotFoundError: [Errno 2] No such file or directory: 'images/荻pote＠初画集2／17発売(2131660)/58055574_p0.jpg'