vipで踊りたいんです　6巡回目

スレッド自動巡回ソフト vipDANCE　

公式ＨＰ
　http://vip.himegimi.jp/
作者酉
　◆DanceB.V2Y
前スレ
　http://anago.2ch.net/test/read.cgi/software/1265864083/

前スレ落ちたみたい

作者のコメント
◇354氏 に引継ぎ　開発を再開

　熱も冷めて開発を停止しておりましたが、
　その後、ソースも酉も紛失してしまい更新を断念しておりました。

　ところが最近バックアップが見つかったため 354氏 に引継いで頂く事でﾏｻｶの開発再開となりました。

　今まで使って頂いて感謝です。今後は354氏を応援してあげてください。

　himegimi◆DanceB.V2Y

354氏（不在）？

新旧巡回リストのIDを比較して追加分を出力するPowerShellスクリプト

$comp1 = "C:\APP\twMoni\www.dotup.org5222110.txt" # OLDをフルパスで
$comp2 = "C:\APP\twMoni\www.dotup.org5233759.txt" # NEWをフルパスで
$diff = "C:\APP\twMoni\twUserlist_diff.txt" # 差分(NEW-OLD)を出力するファイルをフルパスで

$csv1 = Import-Csv $comp1 -Encoding UTF8 -Header Id,Name,Profile
$csv2 = Import-Csv $comp2 -Encoding UTF8 -Header Id,Name,Profile
$csv2 | ? Id -notin $csv1.Id | % {$array=@()}{$array+=(@($_.Id,$_.Name,$_.$Profile) -join ",")}
$array | sc $diff -Encoding UTF8

>>109
Win8.1で1.1.4でも出ました

これは参考になるのかなあ
IISの事例ぽいけど
Solution to "Underlying connection was closed:Received an unexpected EOF or 0 bytes from the transport stream"
http://social.msdn.microsoft.com/Forums/en-US/37c376a3-f50c-4b57-a1df-83dc43fcddbf/solution-to-underlying-connection-was-closedreceived-an-unexpected-eof-or-0-bytes-from-the?forum=asmxandxml

ほい
　twMoni rel.1.2.1
　twMoni rel.1.2.1 64bit

http://ux.getuploader.com/twMoni/

>>113
ありがとう

修正箇所
「トランスポートストリームから予期しないEOFまたは０バイトを受信しました」
　修正しました

変更点
削除、凍結アカウントが見つかったら、
　twDeadAcount.txtにIDを記録（見つけやすいように行番号を付けてるので、実行時にリセットされます）
　枠の赤色は廃止してIDを赤色表示
　アーカイブのダウンロードをしない場合は一切処理せず高速化

名前の変更があった場合、
　twNameChange.txtに、日付、ID、新しい名前、以前の名前　の１行１IDで変更履歴として保存

twUserList.txtの記述が正しくなくて読み込めなかった場合は、
　エラー内容や追加できなかったIDをtwError.txtに記録

プロフィールが空白になった場合は変更しない
名前が空白になった場合も変更しないですが、
フォルダに名前があればリストが空白でもそれを上書きして名無し阻止（これは以前からの仕様）

>>114
乙です
こんどは>>111でためしてみます

いろんなソフトで絵文字が名前に入ってるフォルダの中身が見れん
外に出せば見れるんだがwindowsにはunicode未対応のソフトも一杯あるんだしフォルダ名はIDにするとか何とかならなかったのかな？

むしろunicode未対応なソフトを使ってる方が不便だろ。
このソフトに限った事じゃないんだし、
codec同様何でも対応できる環境にしとくもんじゃねーの？
IDだけのフォルダにする方が誰だかわからなくて絶対不便だから。

ツイッターに限らず情報源の大半がWebで、それ自体SJIS、UTF8、UTF16混在で、
UTF8だけにしたってWinにない文字コードや後から追加されてる記号も沢山あるんだしさ。

まあ、人それぞれだとは思うけどさ・・・

最新リスト
http://www.dotup.org/uploda/www.dotup.org5239552.txt.html
またJC,JK１００人ほど追加
トータル１２０７人分

こっそりと

3293015
踊ろよ、フィッシュ
23:59:59まで

>>118
>>119
ありがとう

ダウンロードした画像を全部他の場所へコピーして
ゴミ画像を綺麗に省いて〜とか思ったけど、
軽く１２００フォルダで万単位の画像・・・
１回巡回しただけで諦めるレベルｗｗｗ

プロフィール画像の一覧が欲しい

ほい 3種類
　twMoni rel.1.0.3 forXP
　twMoni rel.1.2.2
　twMoni rel.1.2.2 x64

http://ux.getuploader.com/twMoni/

とりあえず、XP版も最新のソースで、圧縮ファイルの処理がないだけ。
重複フォルダの整理で、空のフォルダが残るバグを修正
IDのインポート処理、追加処理の改善
追加ボタンでフォルダがあれば名前も取得
画面右側のサムネ、名前、ID、プロフ　これらの表示タイミングの改善
その他色々改善してみた

>>116
完全ではないですが暫定対応
特殊記号が余りにも多すぎるので、とりあえず正式に追加になった携帯文字、
それから良く使われる一部の特殊記号等、だいたい１０００種類くらいの記号を任意の文字に置換します
置換対象は名前、プロフです
設定画面で項目にチェック入れて置換したい文字をいれればおｋ
チェックしなければ従来通り何もしません

開発環境で扱えない文字もあるのが悩ましくて、
byte配列に入れてマッチングといっても、
unicode自体が、１〜４byteの可変長で他の文字コードも混在なんで、
それなりに面倒な処理です
環境によっては多少重いかも？しれません
ただし、最初に読込んだhtml全体に対して置換するので、
（おそらく時々おきてるであろう）処理できない文字コードによる例外スロー
が無くなると思うので、こっちのほうがしっかり動いてくれる？とは思います。

ありがとー

おつかれさまです

リスト再うｐお願いできないでしょうか

ミス
さげ

JCJKを更に１８０件ほど追加
合計１３８２件
ソートして削除垢、凍結垢は一番下に並べ直した。
http://www.dotup.org/uploda/www.dotup.org5250281.txt.html

急げ

>>127
ありがとうございます！

>>127
トン
リストって上書きでいいの？

>>129
簡単にマージする機能が欲しいけど現状ないみたいだし、
自分でIDとか収集していないなら上書きでおｋ
削除垢も可能な限り名前やプロフも補完してあります。

>>130
ありがトン！

リストには大感謝！

Windows 8.1 update 32bit ですけど
今月のWindowsUpdateしてから
「転送接続からデータを読み取れません： ブロック操作は WSACancelBlockingCall の呼び出しに割り込まれました。。」
というエラーが出るようになりました。

おま環ですかね。

>>133に追記

・うまくいく時間帯とうまくいかない時間帯がある
・うまくいかないときは260-320件あたりでとまる

多分128件で1分半か256件で3分程度Waitを入れたら完走出来そうな気がします。
ですので環境設定で何件かおきに指定した時間だけWaitが入れられるとうれしいです。
(デフォルトは0=Waitなし)

全然別件ですが、チェックボックスの列を増やして休業アカウントをOFFにして巡回対象からはずせるとありがたいです。
(受験のためしばらくお休みみたいな)

>>134
多分ってｗｗｗ
原因もはっきりしない、解決するかもわからない、そういう対応が必要なの？
俺、全然止まった事ないんだけど、アップデートしない方がいいって事？

>>135
雰囲気的に.net使ったソフトがリソース食い合ってる感じかなあ
あとエラーストップし始めたのは今月のWindowsUpdateしてから

OSはWindows 8.1 Pro with Media Center (32bit)

エラーメッセージは
「転送接続からデータを読み取れません: 破棄されたオブジェクトにアクセスできません。オブジェクト名 'System.Net.Socket' です。。」
「転送接続からデータを読み取れません: ブロック操作は WSACancelBlockingCall の呼び出しに割り込まれました。。」
の2種類

twMoni rel 1.2.1でも rel 1.2.2でも発生

エラーメッセージで検索してみた

Re[2]: socket.connect()での初回例外
http://bbs.wankuma.com/index.cgi?mode=al2&;namber=64729&KLOG=109
web client : A blocking operation was interrupted by a call to WSACancelBlockingCall
http://social.msdn.microsoft.com/Forums/en-US/2e7f0c82-1923-4a9f-a35e-0f83ac5ac765/web-client-a-blocking-operation-was-interrupted-by-a-call-to-wsacancelblockingcall?forum=ncl

クローラーと間違えられてパケット破棄されてんだよ

ほい
　twMoni rel.1.3.0 x64
　twMoni rel.1.3.0

http://ux.getuploader.com/twMoni/

えーっと、沢山改造したので、設定画面開いて確認してみてください。

名前をtrimしたので、空白沢山とかは無くなります。
プロフィールの無駄な赤字だらけも無くなるかな。
それから、日次単位で画像の一覧を生成できます。
保存フォルダに、「　保存画像一覧」というフォルダが出来るので、その中に、
日別に保存した画像のリンクですね。htmlなんでブラウザでダウンロードした画像だけサラサラっと確認できます。
htmlはテンプレートを変更可能（サイズや並べ方等自由にやってくれ）
それから、削除垢を後方に並べ替えた一覧 twUserList2.txtも出力（起動毎に書き直し）
名前の変更ログ、削除垢の一覧等、これらは、出す出さないを指定できるようにしてある。

リストのマージ（追加インポート）も実装したので、>>127とか指定してやれば増加分だけ更新してくれる

「ブロック操作は WSACancelBlockingCall の呼び出しに割り込まれました。」が出る人用に、
インターバルを設定可能にしました
ただ、見たことないし再現出来ないので解決されてるかは不明

>>139
おつかれさまです
どんどん作りこまれていくのを見るのってなんかいいですね

こんな便利なモノが！
リストあげてもらうとありがたいですー

JCJK追加
1425件
http://www.dotup.org/uploda/www.dotup.org5263003.txt.html

>>142
ありがとうー設定してみます(・_・)(._.)

削除垢の処理時にプログレスバーとカウンターの更新がなされないようです。
だとしても、1.3.0は素晴らしく安定してますね。
一覧も便利だし、いう事ないです。

ツイッターで画像の自動収集するなら、
もはやこれ以上便利なソフトは無いと思います。

JCJK追加
1508件
http://www.dotup.org/uploda/www.dotup.org5270785.txt.html

試しに>>145のリスト入れて巡回してみたら
一通り終えるまで半日かかった・・・こんな遅いものなの？

最初の１回は時間かかるね。
２回目以降は１０分掛からないで１５００件回ってくるけど。

なんだかんだで、
過去分も全部補完したら　9万枚6.5Ｇ

ソフトのテストが十分おわったら
あげてくれてる1508件から自分の好きなの選別したほうがよさそうだねｗ

http://twitter.com/(Id)/mediaの画像動画数
ダウンロード数の累計
最後にダウンロードした時刻
が表示出来たら捗る

代わりにプロフィールは削ってくれてもいい

>>145
のろまった・・・再して下せえ！

タスクトレイに隠れてくれると嬉しい。

起動しようとすると「このバージョンは使えなくなりました」って出るんだけど・・・

おまたせ
　twMoni rel.1.4.1 x64
　twMoni rel.1.4.1

http://ux.getuploader.com/twMoni/

追加設定項目
・巡回待ち時間
・サムネイルの表示/非表示
・タスクトレイに常に表示/非表示
・タスクトレイに隠す/隠さない
・リトライ回数
・タイムアウト時間
・セルをクリックした時の動作の設定
・セルの色の設定

リストの表示項目の追加
・取得件数
・取得時間
（リストのヘッダーを右クリックで表示したい項目を選べる）

青字の取得件数をそう取得件数に変更

入力項目のエラーチェック
ファイルの出力関係のバグとり

描画まわりとか色々軽量化

結構サクサク動くようになったと思うけど
どうだろうか？

更新おつです！
驚くほど快適に動いてる！

乙ですー
軽くなった感じがします
カラフルになりましたねー

twMoni rel.1.4.2 x64
twMoni rel.1.4.2

ごめん、リトライとか、読み込みの処理をかなりいじったので
ダウンロード件数が少ないうちに上げとく
ついでにタスクトレイの件数が更新されないバグも修正しといた

安定してくれればしばらく更新なしで

>>158
乙です

使用期限なしVerですか？

XPェ・・・

twUserlist.txt
夏休みも終わって余り増えてないけど
JC,JK中心1526件
http://www.dotup.org/uploda/www.dotup.org5293670.txt.html

>>162
いただきました、ありがとう

>>162
ありが�d

[追記あり] 速報: Twitpicが突然のサービス終了宣言、既に一部のデータはアクセス不可能に
http://ggsoku.com/cul-on/twitpic-will-be-shutting-down/

重要なのは追記部分
凍結垢で見れる画像と見れない画像が混在してるけど、
全部見れるようになるのかならないのか。

ほい
　twMoni rel.1.4.3 x64
　twMoni rel.1.4.3

http://ux.getuploader.com/twMoni/

・鍵垢も色分け
　ソートリストにも適用　並び順：通常→鍵→凍結→削除
　色は設定画面で変更可
・右クリックメニューに色々追加
　選択してるＩＤを巡回
　選択してるＩＤから巡回
　コピー、開く、等
・画面右下にＩＤ検索を追加
　見つかればそのＩＤの行へ、見つからなければ追加画面へ
・テンプレートに使える変数を追加 $date $time 等

XP版はもうないんでしょうか

いい加減XP使うの止めろよ？ｗ

>>166
乙です

途中から巡回とか特定のＩＤだけ巡回できるのは有難い

ほい
　twMoni rel.1.4.4 x64
　twMoni rel.1.4.4
　twMoni rel.1.0.3+ forXP

　http://ux.getuploader.com/twMoni/

早々ですまないけど、
鍵垢巡回時にプロフィールが壊れてしまうバグがあったのでとりあえず修正
XP版はおまけということで前回とほぼ同等

わからない事とかないですかね？

がんばった
JS JC JK 追加 1705件
http://www.dotup.org/uploda/www.dotup.org5313362.txt.html

180件ほど増えてますな
乙ですー

>>172
>>171
ありがとう！

さわってみれば分かるから大丈夫

XPだと画像全部の取得はできないんですかね
最新の20枚くらいしか拾わないですorz

今日はじめて>>113のやつがでた
再起動してもまたでた

回線が弱いと頻発するみたいだね

さらに追加 1787件
http://www.dotup.org/uploda/www.dotup.org5324551.txt.html

もういらない？

>>178
�d�d

>>178
�d
助かってるのでぜひ続けて欲しいｗ

>171
終了時のサイズを保持してくれると嬉しい。

今も踊り使ってる人いる？

うん

twMoniの作者がvipDANCEの後継ソフト作ればすべて解決すると思うんだが？

腕も踊りももにも全部同じ作者のような気がしてならない・・・

予定通りなら、
今日2chのDATの新しい取得方法発表じゃなかったっけ？
ツイッターみたいなAPIで取得するようになるのか知らんけど、
２週間もすれば踊りは完全終焉だろう。
作者登録しないとAPIの認証キーもいただけないから開発もできないとか
そんな感じだろ？

Moniってリストから消すのはtxtから直接消さなきゃいけないの？

>>178
再うｐお願いします

ぽつぽつと女神も戻ってきてるから踊りもアップデートされたら嬉しいけど
素人が思うほど簡単じゃないんだろうね

名前がwindowsで認識できない文字コードだけの場合にうまく処理できないバグがありますね。
ちょっとこのバグだけあとで直して出します。

>>187
そうですね。
やっぱ消せたほうがいいかな・・・

>>189
いちいちロダ対応の必要がないなら新たに作ってもいいんだけど・・・
一つの方法は既存のdanceのプラグインを使う代替えアプリですかね。
それなら割と簡単かも？しれないけど今後の2chのDAT取得の仕様次第ですかね。

ほい
　twMoni rel.1.4.5 x64
　twMoni rel.1.4.5

　http://ux.getuploader.com/twMoni/

>>190の名前のバグと削除対応
右クリックから削除メニューがあります。

>>191
ありがとう、今気付きました
使ってみます

１８５０件位
http://momogaku.s17.xrea.com/up/source/up2268.zip

完全な削除垢は復活不可能だから分けてみた

>>193
いただきました、いつもありがとう

>>193
�d�d

twimoni突然巡回しなくなったなあ
復元しても変わらんし仕様変更でもあったのかな

オレだけじゃなかったかｗ
今朝は巡回できたのに

また巡回できるようになった？
サーバー側で何かあったのかな？

なってないぽ

なんか思いっきり対策されてるね。
５０件まで読めて真っ赤→起動しなおして再開→繰り返し
ってのは出来たんだけど、今は１件も読めなくなったぞｗ

画像ある投稿にURLが乗らないようになったから拾えなくなったのかな
起動しなおして読んででも読めてるようで拾えてない

UAとかリファラとかの関係ですかね
どこかしらブラウザからのアクセスと区別がつくところは

Dim wc As New WebClient()
wc.DownloadFile(imageUrl, downloadPath)
こんな感じでVBでサンプルプログラム作ってダウンロードすると、
リファラもUAも何も無しに普通に取ってこれる。
当然C#でも取ってこれる

moniだけ対策されたぽいね

twMoni終了かな

twitter側の仕様変更で画像のURLが読めなくなってるとかでしょ
数十DLのツールで対策はないわ

問題は２つあって、
・ソースが読めなくなる。
リファラは読めない事とは関係ないみたいですが、
UAは厳密でちょっとでも数字変えたり既成品が吐かないUAだとモバイルページは未実装とかいうページにリダイレクト
手の込んだ偽装を繰り返して動くような作りにしても動くのは最初だけ。
keepAliveせずに毎回完全にセッションを破棄しても読めません。

・まったくダウンロードできない。
違うサンプルプログラム作って試すとたしかに簡単に読めるし落とせるんだけど、
結構対策も早くてそればかり連続でやってるとまたすぐ動かなくなりますね。
ちなみに例外のメッセージは
「要求は中止されました: SSL/TLS のセキュリティで保護されているチャネルを作成できませんでした 」

twitterAPI使えって事なんだろうけど、
結局のところAPIで直接画像保存できるわけじゃないダウンロード事態は変わらないわけで、
TL取得は１５分に１５回までの規制…これは酷い

ってことで終了
また機会があれば何かつくります。

他のユーザ数の多そうなやつは普通に動いてるのと、
一度ソフトを立ち上げ直すと最初だけ取得してる感じになるのは不思議だ（取得できてないけど）
SSL/TLSって証明書関係だよなあ

>>207
他のソフトは意外と普通に動いてないよ
API使ってるからみんな制限画面ばっかでてるし
画像保存系はTL使わずに検索API使ったのがほとんどだし
しかもエラーや動かないとかいってる奴が絶えない
そもそもID1500人とかをAPI使って画像保存しようと思ったら
普通には動かないだろ

作者さん今までありがとうございました
パンパンなので画像整理しようと思う

ディスクサイズ: 8.72 GB (9,371,115,520 バイト)
ファイル数: 135,296、フォルダー数: 3,686
ID数: 1863
これ整理するのか…

せめてarchive.todayだけ拾うバージャンを用意すれば
あとは気に入った子をarchive.todayに一度登録するだけで
定期的に拾えるんじゃないかとか…

代わりになるようなソフトはあるんかな