片鱗懐古のブログ: 裏サンデーの画像をダウンロードするツール

2014/06/02 config.xmlの例を現時点で公開されている漫画の情報にあわせて更新しました。ツールのアーカイブの中身は変更してません。使う方はconfig.xmlの例を元に適宜設定ファイルを書き換えてください。

2014/04/24 ちょっと修正。バージョン管理するほどの物ではないのでバージョン番号とか付けてません。ツールの中身は変わってます。

裏サンデーってレイアウトとか画像読み込みとかがアレで読みづらいですよね。画像だけダウンロードして自分で用意したビューアを使って読んだ方がいい。というわけで、ダウンロード用の簡単なツールを作ってみました。

GetUrasundayImage.zip

リンク先のファイルメニューからダウンロードしてください。

コレを使うと、漫画をダウンロードしてzip圧縮するところまで自動でやってくれます。あとは自分で用意したビューアに放り込んで読みましょう。適当に作ったので多分バグ在中でエラー処理も手抜きですが、ダウンロードしかできないので誤動作しても大変なことにはならないでしょう。当然ですが、裏サンデーのサーバで変化があったら使えなくなります。

連載中の漫画のみ対応。連載される漫画が入れ替わったら各自設定ファイルを書き換えましょう。企画で一時的に掲載される漫画とかは未対応です。けどまぁURLテンプレート書けば落とせるかな?

エラー処理が手抜きなので、途中までダウンロードして以降ダメだったときとかのメッセージに不備があるかもしれません。裏サンデーのサーバが混んでいる時間を避け、ダウンロードしたら早めに読んで中身を確認してください。

作った環境はこちら。

Windows7 64bit home
Visual Studio 2012 Express for Desktop
.NET Framework 4.5

使い方を説明します。

まずはアーカイブを適当なところに解凍してください。 2つのファイルが出てきます。

本体 : GetUrasundayImage.exe
設定ファイル : config.xml

インストールは不要です。 (消すときのアンインストールも不要。) そのままGetUrasundayImage.exeを実行してください。こんなウィンドウが表示されます。

必要な項目を入力をしてダウンロードボタンを押すと、ダウンロードして圧縮ファイルを作ります。

ダウンロードを実行して失敗した場合でもディレクトリは残ります。手動で削除してください。

入力項目の内容はこんな感じ。

・ダウンロードディレクトリ

初期値はマイドキュメントです。設定ファイルで初期値の変更をできます。

・対象の漫画

コンボボックスからダウンロードしたい漫画を選択してください。漫画のラインナップが変更された場合、設定ファイルを書き換えればここも変わります。

・URL template

漫画の画像を指すURLを作るためのテンプレートです。普段は触る必要はありません。裏サンデーのサーバでディレクトリ構造が変わったとき、ここを書き換えてください。書き換えがうまくいったら設定ファイルの方に反映しましょう。またしばらくは触らなくてよくなります。

URLは裏サンデーの漫画ページを見て当たりをつけます。それっぽい画像のアドレスをブラウザ付属の開発ツールなどで見つけましょう。 U-2リーグの漫画は開発ツールで見れば全てのURLが確認できます。レギュラー漫画は開発ツールでは最初の2ページくらいしかURLは分かりません。でもそれだけ分かればテンプレートは書けるでしょう。

テンプレートの書き方について、{0:000}は話数、{1:000}は通し番号サブ、{2:00}はページ番号に置き換えられます。コロンの後ろの000は数字の桁数です。今連載中のどれかが将来すごく長寿の漫画になったら4桁目も必要になるかもしれません。 (そのときまでこのツールが使えるとは思えないけど...) そのときは{0:0000}のように書き換えます。まぁ、一言で言えばC#のstring.Formatの第1引数です。分かる人はそれで検索してみてください。

手抜きのため、一時的に書き換えたときのテンプレートは一切記憶されません。対象の漫画を選び直したら書き換え前に戻ります。書き換えることになったら、うまくいったときに即設定ファイルに反映してください。

・第何話

裏サンデーのサイトで現在公開されているものしかダウンロードできません。そちらを見て第何話がダウンロードできるか確認してください。現状ではレギュラー漫画は最初の数話と、最新の方から2話くらいだけが公開されています。 U-2リーグは全部公開されてます。

・通し番号サブ

例えば、世界鬼の最初の方は第7話が3つに分かれています。その補助の番号を指定します。

話が分かれていない場合でも数字は必要です。その場合は0と入れておいてください。ここの数字は0でも1でもダウンロードする画像は同じです。圧縮ファイルの名前だけが変化して、1のとき「世界鬼_第0007-1話」のようにサブ番号が付きます。

最新話とか、話が分かれているかどうかなんて分かりませんよね? 普通はサブ番号0で落として、続きがサブ番号2だったら前のファイルを手動でリネームしましょう。ここに1を入れるのは公開済みの話をまとめてダウンロードするときだけかと。

ツールの入力項目のデフォルト値を変える場合やダウンロードする漫画を入れ替えたいときは設定ファイルを書き換えてください。 C:\Program Files などにファイルを置いたときは書き換えるときに管理者権限が必要なので注意。

設定ファイル config.xml の中身はこんな感じです。

<?xml version="1.0" encoding="utf-8"?>
<config>
    <download_dir value=""/>
    <comic title="世界鬼" save_file_name="世界鬼_"
            url_template="http://img.urasunday.com/eximages/comic/sekaioni/pc/{0:000}/{0:000}_{1:000}_{2:00}.jpg"/>
    <comic title="Helck" save_file_name="Helck_"
            url_template="http://img.urasunday.com/eximages/comic/helck/pc/{0:000}/{0:000}_{1:000}_{2:00}.jpg"/>
    <comic title="ヒト喰イ" save_file_name="ヒト喰イ_"
            url_template="http://img.urasunday.com/eximages/comic/hitokui/pc/{0:000}/{0:000}_{1:000}_{2:00}.jpg"/>
    <comic title="市場クロガネは稼ぎたい" save_file_name="市場クロガネは稼ぎたい_"
            url_template="http://img.urasunday.com/eximages/comic/kurogane/pc/{0:000}/{0:000}_{1:000}_{2:00}.jpg"/>
    <comic title="HANGED MAN" save_file_name="HANGED_MAN_"
            url_template="http://img.urasunday.com/eximages/comic/hangedman/pc/{0:000}/{0:000}_{1:000}_{2:00}.jpg"/>
    <comic title="マギ シンドバッドの冒険" save_file_name="マギ_シンドバッドの冒険_"
            url_template="http://img.urasunday.com/eximages/comic/magi/pc/{0:000}/{0:000}_{1:000}_{2:00}.jpg"/>
    <comic title="猛禽ちゃん" save_file_name="猛禽ちゃん_"
            url_template="http://img.urasunday.com/eximages/comic/moukin/pc/{0:000}/{0:000}_{1:000}_{2:00}.jpg"/>
    <comic title="猛禽ちゃん 猛禽レポート" save_file_name="猛禽ちゃん_猛禽レポート_"
            url_template="http://urasunday.com/comic/moukin_omake/pc/s/s_{0:000}_{1:000}_{2:00}.jpg"/>
    <comic title="ケンガンアシュラ" save_file_name="ケンガンアシュラ_"
            url_template="http://img.urasunday.com/eximages/comic/kengan/pc/{0:000}/{0:000}_{1:000}_{2:00}.jpg"/>
    <comic title="ケンガンアシュラスピンオフ" save_file_name="ケンガンアシュラスピンオフ_"
            url_template="http://urasunday.com/comic/kenganspinoff/pc/s/s_{0:000}_{1:000}_{2:00}.jpg"/>
    <comic title="騎乗戦士モクバさん" save_file_name="騎乗戦士モクバさん_"
            url_template="http://img.urasunday.com/eximages/comic/mokuba/pc/{0:000}/{0:000}_{1:000}_{2:00}.jpg"/>
    <comic title="間宮さんといっしょ" save_file_name="間宮さんといっしょ_"
            url_template="http://img.urasunday.com/eximages/comic/mamiya/pc/{0:000}/{0:000}_{1:000}_{2:00}.jpg"/>
    <comic title="おままごとの終わりかた。" save_file_name="おままごとの終わりかた。_"
            url_template="http://img.urasunday.com/eximages/comic/mamiya/pc/s/s_{0:000}_{1:000}_{2:00}.jpg"/>
    <comic title="モブサイコ100" save_file_name="モブサイコ100_"
            url_template="http://img.urasunday.com/eximages/comic/mobupsycho100/pc/{0:000}/{0:000}_{1:000}_{2:00}.jpg"/>
    <comic title="モブサイコ100休載スペシャル" save_file_name="モブサイコ100休載スペシャル_"
            url_template="http://urasunday.com/comic/mobupsycho100special/pc/s/s_{0:000}_{1:000}_{2:00}.jpg"/>
    <comic title="懲役339年" save_file_name="懲役339年_"
            url_template="http://img.urasunday.com/eximages/comic/p339/pc/{0:000}/{0:000}_{1:000}_{2:00}.jpg"/>
    <comic title="懲役339年 第一部隠しエピソードアーロックとハロー(2代目)" save_file_name="懲役339年_第一部隠しエピソードアーロックとハロー(2代目)_"
            url_template="http://urasunday.com/comic/p339_omake/pc/s/s_{0:000}_{1:000}_{2:00}.jpg"/>

    <comic title="多数欠" save_file_name="多数欠_"
            url_template="http://urasunday.com/comic/u-2_05/pc/{0:000}/{0:000}_{1:000}_{2:00}.jpg"/>
    <comic title="異能力バトルロイヤル" save_file_name="異能力バトルロイヤル_"
            url_template="http://urasunday.com/comic/u-2_01/pc/{0:000}/{0:000}_{1:000}_{2:00}.jpg"/>
    <comic title="勝込学園" save_file_name="勝込学園_"
            url_template="http://urasunday.com/comic/u-2_04/pc/{0:000}/{0:000}_{1:000}_{2:00}.jpg"/>
    <comic title="マビロリウム" save_file_name="マビロリウム_"
            url_template="http://urasunday.com/comic/u-2_02/pc/{0:000}/{0:000}_{1:000}_{2:00}.jpg"/>
    <comic title="パニャップとにかく大冒険" save_file_name="パニャップとにかく大冒険_"
            url_template="http://urasunday.com/comic/u-2_06/pc/{0:000}/{0:000}_{1:000}_{2:00}.jpg"/>
    <comic title="寿司 虚空編" save_file_name="寿司_虚空編_"
            url_template="http://urasunday.com/comic/u-2_09/pc/{0:000}/{0:000}_{1:000}_{2:00}.jpg"/>
    <comic title="ヒロイック紀行" save_file_name="ヒロイック紀行_"
            url_template="http://urasunday.com/comic/u-2_11/pc/{0:000}/{0:000}_{1:000}_{2:00}.jpg"/>

</config>

ちなみに、この設定例には「ヒト喰イ」のおまけ?漫画「誰カノ記オク」は載せてません。なんか、各話のURLが統一されてなかったんですよね。

本題に戻って、設定ファイルを書き換えたときは文字コードutf-8で保存してください。設定項目はこんな感じです。

・download_dir要素

入力項目のダウンロードディレクトリの初期値です。必ず1つ必要になります。値はvalue属性に書いてください。 value属性を空にするとマイドキュメントを指定したことになります。ただし、value属性自体は省略できません。

・comic要素

漫画1つごとに1つ書きます。裏サンデーで公開される漫画が入れ替わったら自分で書き換えてください。 title、save_file_name、url_templateの各属性は必須です。

⋅ title: ツールの漫画選択コンボボックスで表示するタイトルです。
⋅ save_file_name: 保存のときに使われる画像のディレクトリ名 / zipファイル名です。 [save_file_name]題?話の形になります。
⋅ url_template要素: 入力項目の URL template の初期値です。説明は本体の記述を参照。

設定項目の属性には余分な空白は書かないようにしてください。書き方の細かいルールとかはxmlの参考サイトを適当に検索して調べてください。

ソースコードを載せます。「わけの分からんツールなど使えるかっ!!」って人は読んで自分でビルドしてください。ボロボロだけど短いから読めますよね?

・Comic.cs

namespace GetUrasundayImage
{
    class Comic
    {
        public string Title { get; set; }
        public string SaveFileName { get; set; }
        public string UrlTemplate { get; set; }
    }
}

・ConfigLoader.cs

using System;
using System.Collections.Generic;
using System.IO;
using System.Xml;

namespace GetUrasundayImage
{
    class ConfigLoader
    {
        public string DownloadDir { get; private set; }
        public Comic[] Comics { get; private set; }

        public ConfigLoader()
        {
            var doc = new XmlDocument();
            var dir = new FileInfo(Environment.GetCommandLineArgs()[0] ).DirectoryName;
            doc.Load(dir + "\\config.xml");

            var elem = doc.GetElementsByTagName("download_dir")[0] as XmlElement;
            DownloadDir = elem.GetAttribute("value").Trim();
            if (DownloadDir.Length == 0)
                DownloadDir = Environment.GetFolderPath(Environment.SpecialFolder.Personal);
            if (!DownloadDir.EndsWith("\\"))
                DownloadDir = DownloadDir + '\\';

            var comics = new List<Comic>();
            var nodes = doc.GetElementsByTagName("comic");
            foreach (var node in nodes)
            {
                elem = node as XmlElement;
                var c = new Comic();
                c.Title = elem.GetAttribute("title");
                c.SaveFileName = elem.GetAttribute("save_file_name");
                c.UrlTemplate = elem.GetAttribute("url_template");
                comics.Add(c);
            }
            Comics = comics.ToArray();
        }
    }
}

・MainWindow.xaml

<Window x:Class="GetUrasundayImage.MainWindow"
        xmlns="http://schemas.microsoft.com/winfx/2006/xaml/presentation"
        xmlns:x="http://schemas.microsoft.com/winfx/2006/xaml"
        Title="GetUrasundayImage" Height="350" Width="525" Loaded="LoadedHandler">
    <DockPanel>
        <Grid DockPanel.Dock="Top">
            <Grid.ColumnDefinitions>
                <ColumnDefinition Width="160"/>
                <ColumnDefinition/>
            </Grid.ColumnDefinitions>
            <Grid.RowDefinitions>
                <RowDefinition/>
                <RowDefinition/>
                <RowDefinition/>
                <RowDefinition/>
                <RowDefinition/>
                <RowDefinition/>
            </Grid.RowDefinitions>
            <Label Grid.Row="0" >ダウンロードディレクトリ</Label>
            <TextBox Grid.Row="0" Grid.Column="1" Name="textBoxDownloadDir"/>
            <Label Grid.Row="1" >対象の漫画</Label>
            <ComboBox Grid.Row="1" Grid.Column="1" Name="comboBox" DisplayMemberPath="Title" SelectionChanged="ComboBoxSelectionChangedHandler"/>
            <Label Grid.Row="2" ToolTip="{}{0:000}は話数、{1:000}は通し番号サブ、{2:00}はページ番号に置き換えられる。">URL template</Label>
            <TextBox Grid.Row="2" Grid.Column="1" Name="textBoxUrlTemplate"/>
            <Label Grid.Row="3" >第何話</Label>
            <TextBox Grid.Row="3" Grid.Column="1" Name="textBoxStoryNumber"/>
            <Label Grid.Row="4" >通し番号サブ</Label>
            <TextBox Grid.Row="4" Grid.Column="1" Name="textBoxStorySubNumber">0</TextBox>
            <Button Grid.Row="5" Grid.ColumnSpan="2" Name="button" Click="DownloadButtonClickHandler">ダウンロード</Button>
        </Grid>
        <Button DockPanel.Dock="Bottom" Click="ClearLogButtonClickHandler">ログクリア</Button>
        <ListBox Name="listBox"/>
    </DockPanel>
</Window>

・MainWindow.xaml.cs

// 次の参照を追加
// System.Net.Http
// System.IO.Compression
// System.IO.Compression.FileSystem
using System;
using System.IO;
using System.IO.Compression;
using System.Net.Http;
using System.Threading;
using System.Threading.Tasks;
using System.Windows;
using System.Windows.Controls;

namespace GetUrasundayImage
{
    public partial class MainWindow : Window
    {
        private const int RETRY_COUNT_MAX = 3;
        private const int PAGE_COUNT_MAX = 512;
        private const string EXCEPTION_MESSAGE_404 = "Response status code does not indicate success: 404 (Not Found).";

        private readonly byte[] dummy = {0x00};

        private HttpClient _httpClient;
        private ConfigLoader _conf;

        public MainWindow()
        {
            InitializeComponent();

            _httpClient = new HttpClient();
        }

        private async void DownloadButtonClickHandler(object sender, RoutedEventArgs e)
        {
            var comic = comboBox.SelectedItem as Comic;
            if (comic == null)
            {
                Log("ダウンロードする漫画を選んでください。");
                return;
            }

            button.IsEnabled = false;

            try
            {
                var urlTemplate = textBoxUrlTemplate.Text.Trim();
                var downloadDir = textBoxDownloadDir.Text.Trim();
                if (!downloadDir.EndsWith("\\"))
                {
                    downloadDir = downloadDir + '\\';
                    textBoxDownloadDir.Text = downloadDir;
                }
                var number = int.Parse(textBoxStoryNumber.Text);
                var subNum = int.Parse(textBoxStorySubNumber.Text);

                await SaveImages(urlTemplate, downloadDir, comic, number, subNum);
                Log("♪ 全取得成功");
            }
            catch (Exception exc)
            {
                Log("× 取得失敗で途中終了 ... " + exc.Message);
            }
            finally
            {
                button.IsEnabled = true;
            }
        }

        private async Task SaveImages(string urlTemplate, string downloadDir, Comic comic, int number, int subNum)
        {
            var subNumStr = (subNum == 0 ? "" : "-" + subNum);
            if (subNum == 0)
                subNum = 1;
            string fileName = comic.SaveFileName + "第" + number.ToString("D4") + subNumStr + "話";
            string imageDir = downloadDir + fileName + '\\';
            Directory.CreateDirectory(imageDir);

            for(int i = 1; i <= PAGE_COUNT_MAX; i++)
            {
                string imageUrl = string.Format(urlTemplate, number, subNum, i);
                var imageData = await Get(imageUrl);
                if (imageData == dummy)
                {
                    if (i == 1)
                    {
                        throw new Exception("URL間違い? 画像が1つもダウンロードできませんでした。 : " + imageUrl);
                    }
                    break;
                }
                File.WriteAllBytes(imageDir + i.ToString("D4") + ".jpg", imageData);

                Thread.Sleep(200);
            }

            CreateZipArchive(downloadDir, imageDir, fileName);
        }

        private async Task<byte[]> Get(string url)
        {
            for (int i = 0; i < RETRY_COUNT_MAX; i++)
            {
                try
                {
                    var res = await _httpClient.GetByteArrayAsync(url);
                    Log("データ取得成功  ==>  " + url);
                    return res;
                }
                catch (Exception exc)
                {
                    if (exc is HttpRequestException && exc.Message == EXCEPTION_MESSAGE_404)
                    {
                        return dummy;
                    }
                    Log("データ取得失敗(" + (i + 1) + "回目)");
                    Log("    url  =>  " + url);
                    Log("    msg  =>  " + exc.Message);
                }
            }

            throw new Exception(url);
        }

        private void Log(string message)
        {
            var t = DateTime.Now;
            listBox.Items.Add(t.ToString("HH:mm ss\"'\"fff") + "  " + message);
        }

        private void LoadedHandler(object sender, RoutedEventArgs e)
        {
            try
            {
                _conf = new ConfigLoader();
                textBoxDownloadDir.Text = _conf.DownloadDir;
                comboBox.ItemsSource = _conf.Comics;
            }
            catch (Exception exc)
            {
                Log("× 初期化失敗 ... " + exc.Message);
            }
        }

        private void CreateZipArchive(string downloadDir, string imageDir, string fileName)
        {
            try
            {
                using (FileStream ost = new FileStream(downloadDir + fileName + ".zip", FileMode.CreateNew))
                {
                    using (ZipArchive archive = new ZipArchive(ost, ZipArchiveMode.Update))
                    {
                        var files = new DirectoryInfo(imageDir).GetFiles();
                        Array.ForEach(
                                files,
                                file => archive.CreateEntryFromFile(file.FullName, file.Name)
                        );
                    }
                }
            }
            catch (Exception exc)
            {
                Log("× 圧縮失敗 ... " + exc.Message);
            }
        }

        private void ClearLogButtonClickHandler(object sender, RoutedEventArgs e)
        {
            listBox.Items.Clear();
        }

        private void ComboBoxSelectionChangedHandler(object sender, SelectionChangedEventArgs e)
        {
            var comic = comboBox.SelectedItem as Comic;
            if (comic != null)
                textBoxUrlTemplate.Text = comic.UrlTemplate;
        }
    }
}

あれ? usingまとめて書いてないな。 ...まぁいいや。

片鱗懐古のブログ

2014年4月14日月曜日

裏サンデーの画像をダウンロードするツール

閲覧数が多い投稿

ラベル

広告

投稿した動画

ブログアーカイブ