The project of U-WA-
http://uwa.potetihouse.com/
トップページ > 過去ログ > 記事閲覧
アイコン imagegeterの仕様
日時: 2010/11/22 02:37
名前: 感謝

imagegeterを使わせていただいております。

ところで、ダウンロードの「優先度」とありますが、
これをいじることはできないでしょうか。

端的に言うと、
優先度が低く設定されているサイトを優先的にDL・解析したい

推測なのですが、サイト越えが多いサイトの優先度が下がっているように思われます。


例えば、
サイト越えを3と設定した場合、
一階層のサイトを片っ端から開き、数万のサイトを処理するよりも、
一つのサイトをたどり、3サイト超えたところでストップ、次の第一層目のサイトを開く
方が、処理落ちしにくいと思うんですよね。

わかりづらい説明だと思いますが、
要するに優先度が低く設定されているサイトを片っ端から解析していって処理していった方が、
メモリ爆発しにくいと思います。

Page: 1 |

ファイル Re: imagegeterの仕様 ( No.1 )
日時: 2010/11/25 00:08
名前: Toki◆pRU.c9X.EOI

優先度はリンクの深さとページ内でURLの類似性から計算しています。
優先順位をこのようにしているのはダウンロードを途中で中断しても
目的の画像がより早く入手できるようにするためです。

しかし、すべての画像を取得するのならばご指摘のように、
深い階層のものから取得するのも一つの方法かもしれません。

現状では、この優先度を変更することはできませんが、
一度検討してみます。

ファイル Re: imagegeterの仕様 ( No.2 )
日時: 2010/12/04 21:36
名前: 感謝

御返事ありがとうございます。

大変なプログラミングだと思いますが、頑張ってください。

Page: 1 |