5ちゃんねる⇒ソフトウェア@5ch掲示板
設定
ダークモード
広告表示
画像・外部リンク

UPLIFT会員は外部リンクへ直接移動します。確認は初期設定でオンです。

機能のオン・オフ

このブラウザ・このサーバーのみ。オフにしても保存済みデータは残ります。

UPLIFT

527コメント208KB

2ちゃんねるスレッド全文検索・・・ThreadSearch

■ このスレッドは過去ログ倉庫に格納されています
垢版
返信 [2]
ttp://www.geocities.jp/cen_hp
他の2chブラウザと連携できるといいな
垢版
返信 [1]
あれ、ウインドウステータスが記憶されなくなってる
垢版
返信 [2]
何か最小化して終わるとウインドウの大きさが元に戻る
垢版
レスありがとうございます。

ウインドウステータス(サイズ)は2.00では記憶され、
不具合は>>284のみだと思ってます。
2.00でもウインドウサイズが記憶されてないですか?
(最小化は記憶しません)
垢版
>>282と>>284を直します
垢版
返信 [1]
こんにちは、詳細に検索ができる、と聞きdatEから移行してきました。

少しお聞きしたいのですが、インデックス作成後、検索すると
自動的に既定のブラウザが開き、フレームわけされた検索結果が表示されます。
動作的にはこれでよいものでしょうか?
readme.txtによると検索タブ?で検索結果が開くように見えるのですが…

あと2chブラウザにレスのURLを上手く渡す方法はないかな…。
垢版
返信 [1]
どうも古いの落としてたらしくて、最新版でインデックス再生成してみたのですが、
メモリー食いすぎてスワップしまくって重くなて死ぬかと思いましたww
今の時代はメモリーは安いし、もっとつめ!で済む話といえばそうなのですが。

インデックス作成中500MBくらいメモリーを食ってましたが、
参考までにこのソフトのインデックス作成、検索のアルゴリズムって何をおつかいなのでしょうか?
datEは検索エンジンはHyperEstraierで、N-Gram使用ということみたいですが…。
垢版
ごめん、>>52で

> あと、方法は独自と書きましたがほぼngram法です。

とありますね…。
datEだとインデックスが1GB超えるのに、このソフトだと300MB以下で収まるのびっくり。
datEだと検索は数秒とかなり高速ですが、細かい絞込みができないので使い分けという感じがしますね。
垢版
返信 [1]
>>283
もう一度動きを見ていると、そうかもですね。
起動(非最大化�@)→大きさ変更(非最大化�A)→最大化→終了
→起動(最大化)→最大化解除→非最大化�@の大きさになる
垢版
>>287-289
どうもです。
>>287は結果が正しく表示されていないです。
今でもそうですか?
そうなら環境を教えていただけないでしょうか。

>>288
このソフトだけだとインデックス作成、更新時に約260MBのメモリを使います。
メモリを沢山使っているなとは思っています。
垢版
>>290
ありがとうございます。メニューの設定の保存を実行しておけば大丈夫ぽいです。
垢版
オマイ等ソフトウェア板の1普通に表示出来てる?
昨日OS再インスコ後に今日始めてソフ板に繋いだんだけど、ソフ板の1が

http://pc12.2ch.net/software/1 名前:名無しさん@お腹いっぱい。 [sage] 投稿日:2008/02/27(水) 19:23:59 [夕方] ID:LnN9ZP+r0 (PC)
ttp://www.geocities.jp/cen_hp
他の2chブラウザと連携できるといいな

↓にて上記のように表示されるようになってしまった。
【JaneStyleのバージョン】 Jane Style Version 3.10 (3.1.0.0)
【 Windowsのバージョン 】 WindowsXP Professional [Service Pack 3]
【   IEのバージョン   】 8.0.6001.18702

ま、このスレとは関係無いんだけどね。
垢版
返信 [2]
インデックスのサイズでかくなってきたので別ドライブへ保存できるといいなー
垢版
>>294
ソフトのフォルダごと移動したら?
垢版
返信 [1]
>>250
GbEなら480MbpsのUSB接続HDDよりすでに速いし、
NAS上にインデックス置きたくなっても不思議はないと思う
垢版
返信 [1]
>>294
インデックスだけ別ドライブですか
今はソフトごと別の場所に移動しても問題なく使えます

>>296
NASだとWindowsでネットワークドライブの設定をすると、
普通のドライブと同じように使えるので、今はその方法で使ってください
垢版
こんばんは

スレッド全文検索を更新しました。
Ver 2.01になりました。
http://www.geocities.jp/cen_hp

更新点になります

・ウインドウサイズが記録されない不具合を修正しました。
・スレタイを検索条件に入れると、対象スレッド内の一部のみしか
 検索されない場合がある不具合を修正しました。
・結果のHTMLを保存できるようにしました。
・インデックス読み込みを高速化しました。
・検索語句のハイライト表示をできるようにしました。

インデックスの一部がそれまでと異なるので、
旧バージョンをお使いの方はインデックスを再作成してください。
垢版
乙です!
垢版
うげろろろろろろろろろろろろろろろろろろろっ

2.01気がつかないで一昨日から18時間ほど掛けて
2.00でINDEX作っちゃった・・・

でも
>298
更新おちゅ
垢版
18時間もかかるのかよ。
永杉。30分ですむやつ作ってやるぜ。
垢版
2.01で一からインデックス再構築したら、31000スレ強で50分程度でした
CPUはPhenomX4 9150e
垢版
あれ?アレレレレレレレレレレレレレレ?
何時もステップ1の99%で延々待ってからPCリブート(聞く所によると家の環境が糞)したり
ステップ2に行くのに、今回2.01だとあっさりステップ2に行った。
16時30分から作成開始して今ステップ2の1%
垢版
だがしかーし
今ステップ2で15%になったばかり orz
垢版
返信 [1]
PC落ちた・・・
8時間半パー orz
垢版
>>305
何Gログあるとそうなるんだw
垢版
返信 [1]
時間が出来たので再度index作成に挑戦
本日03時開始後放置睡眠。
起床後13時位から動画鑑賞などPC使ってて15時15分にPCリブート。
うる覚えでステップ2の54%超えで12時間がパー・・・
いつまで経ってもINDEXが出来ない orz

>306
janeログフォルダ(87.4GB)とo2onログフォルダ(76.3GB)の2つを指定。
Q6600でメインメモリ2GB×4枚、XP32BitOS管理外メモリはRAMDISK割り当て。
垢版
みんなログをため込んでいるんだな
300MBしか無い自分は少数派なのか
垢版
俺150Mぐらいだったよ
1年ぐらい使ってタブは常時50ぐらい開いてるかな
垢版
>janeログフォルダ(87.4GB)とo2onログフォルダ(76.3GB)の2つを指定。
すげえ。
サイズにして5GiB強、「ギリギリで無圧縮ではDVD-Rに入らなくなった」とか
嘆いてた自分は甘甘ですわ…
垢版
o2onってことはp2p経由でも自動でログ貯めてるのかな?

うちは、3万1000ファイルで 1.3GBくらいだた。
全然ヘビーに使ってないけど長年使っている成果けっこういくな…
6,7年はやってる気がするから
垢版
返信 [2]
16時から懲りずに作成始めてステップ2の35%位でまたリブート食らった・・・
今からもう一度始めて、これで落ちるようなら使用を諦めるっポ
垢版
>>312
>>307で54%超えてたならログフォルダかたっぽずつやれば成功しそうな希ガス
垢版
>>312
試しに、datEでもインデックス作ってみたらどうかな?
Datファイル全文検索ソフト DatE
http://frozenlib.net/DatE/


datEはインデックス化も検索も爆速なのはいいけど、TreadSearchみたいに絞込みが弱すぎるんだよな。
俺は併用してるよ
垢版
返信 [1]
16時間半
パソコンを一切操作しないでおいたらindex出来たよ出来たよ。
(今まではブラウザをいじってるだけでも落ちてた)
垢版
>>315
勇者超乙w
出来たインデックスは40Gぐらい?
垢版
返信 [2]
>316
正解。
41.6GB
垢版
インデックス40GBwwww
垢版
こんにちは。
近いうちに次のバージョンに更新します。

>>317
インデックス40GBはすごいですね。

垢版
返信 [2]
こんばんは。

スレッド全文検索を更新しました。
Ver 2.02になりました。
http://www.geocities.jp/cen_hp/threadsearch.html

更新点になります

・「メール」「ID」が空欄のままでも、インデックス検索が動作する不具合を修正しました。
・インデックス作成速度が向上しました。(約2倍)
・インデックスサイズを削減しました。(約25%)


インデックス化のプロセスを見直して効率よく動作するようにしました。
それから、インデックスの無駄な部分を削減しました。
垢版
>>320
乙ですた!
作成速度と容量が削減されるとは>>317の泣いて笑う顔がみえますw

作り直して体感してみる?ww
今度は8,9時間、寝てる間か出かけてる間に終わってる(カモ)
垢版
返信 [2]
ちょっと要望があるのですが。

検索結果にスレッドURL、もしくはレスURLを表示(もしくはコピー機能)させることってできませんか?
ある単語で検索して、ヒットすればその周辺で関連の話がされていると思うのですが
ヒットしたレスを専ブラで開く方法がないように思えました。

# すでに実装されている機能でしたらごめんなさい。
垢版
ああそれ欲しかった。
垢版
返信 [2]
>>322
欲しいなー
さらにに検索結果を本文ままにコピー出来たら鼻血でる

例えばこんな感じ
▲> 318 :名無しさん@お腹いっぱい。:2009/06/10(水) 13:10:22 ID:+wGlmcZn0
インデックス40GBwwww
↓
2ちゃんねるスレッド全文検索・・・ThreadSearch
http://pc12.2ch.net/test/read.cgi/software/1204107839/
318 :名無しさん@お腹いっぱい。:2009/06/10(水) 13:10:22 ID:+wGlmcZn0
インデックス40GBwwww

置換すればいいんだけどまとめてメモっておきたいときに楽、視認性アップです
垢版
返信 [1]
ついでに、2.02でインデックス作り直した結果です、、、
2.00時はうろ覚えで不正確

2.00 ログ約210MB index 約42MB
2.02 ログ236MB index 44.8MB

250MBになったらまた確認して正確な結果出します・・ん、2.00に置き換えて作り直せば完璧か!
垢版
あ、作成速度向上・サイズ削減の比較対象が1.00とかだったり?
垢版
失礼しますた、うろ覚えすぎたようです

>>325修正
2.00 ログ236MB index 50.5MB
2.02 ログ236MB index 44.8MB
時間は計ってませんが、約8.9%の削減率(・∀・)
垢版
あれ連投お許しをwww
約11%の削減率ですた(ノ∀・)アチャー
垢版
オレメモ
V2.02にて作成時間が呆けてしまった(01:30から始めたと思ったけど脳ボケが始まったぽい。
ファイルリスト作成が01:30で実際のINDEX作成が2:50なのかな?)
INDEXフォルダのファイル日時02:50最旧時間、最新時間13:47

windowsXPのNTFSフォーマットでフォルダのプロパティにてディスク上のサイズ。
D:\Program Files\Accessories\2ch\2chjanelog\Logsフォルダ内
(画像キャッシュは別フォルダだが、janeのログフォルダは.idx・.db・その他があるのでプロパティ役に立たず)
ファイル数933,931個フォルダ数1,528にて 87.6GB

E:\o2on\datフォルダ内
ファイル数717,165個フォルダ数109,044にて 76.7GB

F:\threadsearch\indexフォルダ内
ファイル数5,852個フォルダ数0にて 32.2GB(41.6GBから随分減った)

threadsearch.exe実行にて詳細設定画面
ファイル数1,496,442個との事

垢版
返信 [1]
>>322-324
その機能は無いです。
すみませんが、ログのフォルダからURLを特定できないのです。
ブラウザによって推測はできますが、特定できる情報が無いのです。
あると便利だと思いますが、推測のURLを表示したりすることになります。


>>324
なるほどです。
そういうメモがあると便利かもしれないですね。

垢版
>>325-329
書き込みどうもです。
ログとインデックスのサイズの参考になりました。
>>320の比較対象は2.01です。
現状ではインデックスサイズが一番大きくなるのが2.01です。
(memory_index_xx.txt などを追加しているため)
垢版
返信 [1]
スレのURLをある程度手動で設定したら、
もしかしたらできるかも?
垢版
返信 [1]
>>332
通常、URLからlogファイルパスを特定する時
ボード一覧からsrv+bbsに一致する部分があれば、そのカテゴリ、板名を取得するって感じだと思うのですが

逆にカテゴリ+板名から srv+bbsを取得するっていうのもできるんじゃないかなぁと。
専ブラのボード一覧とthreadsearchが取得したボード一覧が同じである必要性はありますが。

個人的には推測でもいいのでほしいところです。
垢版
返信 [2]
2.02でまた一から再構築したら、45分に短縮された。
確かに早くなってますな。
垢版
返信 [1]
要望です。

外部ツールから起動させるとDLLをロードしません。
カレントディレクトリをEXEフォルダに再設定する機能とかつけられませんか?
垢版
返信 [1]
外部ツールへの要望かよ。
垢版
>>333
レスどうもです。
実際にするとなるとファイル名も「1204107839.dat」などで同じに
する必要がありますが、できなくはないかもですね。

>>334
どうもです。
もしかしたらCPUの種類で短縮できる時間が
違うかもしれないです。

>>335
指摘ありがとうです。
カレントディレクトリの設定は行っていないので、呼び出し元の
ディレクトリがカレントディレクトリになりますね。
考えて見ます。

>>336
こっちであっています
垢版
>>324
>>322 俺もこの機能はほしす・・・
連携させたい。

同じ全文検索ソフトのdatEは2chブラウザ指定して連携できてその点は使いやすい
しかし、こちらはスレタイトルで絞込みとか全然できないw

>>330
> ブラウザによって推測はできますが、特定できる情報が無いのです。
あれ?そうなんだ…
datEはどうやってんだろ
垢版
返信 [1]
datE参考に適当にアルゴリズムでっちあげた

・thread_number = スレッド番号
・idx_txt = thread_number + ".idx" のファイル名のファイルから中身を読む
・board_uri = idx_txtの6行目を抽出
 ( board_urlの例:http://anchorage.2ch.net/livemarket2 )
・board_uriを以下のように分解
 ・uri_scheme: URIスキーマ(例:http)
 ・uri_host: ホスト名(例:anchorage.2ch.net)
 ・uri_path: パス(例:/livemarket2)
 ※C#なら Uriクラスのnewにboard_uriを渡して生成すれば一発で全部取れる
 Uri クラス (System): http://msdn.microsoft.com/ja-jp/library/system.uri(VS.80).aspx
・tread_uri = board_uriからスレッドURLを組み立てる
 例:tread_uri = sprintf("%s://%s/test/read.cgi%s/%d/", uri_scheme, uri_host, uri_path, thread_number)

あとは、この tread_uri を指定の2chブラウザに渡せばOKのはず
垢版
>>339
はJane依存(.idxファイルが)かもしれないので注意してください
垢版
>>339-340
情報をどうもです。
多分DatEはJane専用のソフト(HPより)なので、その方法で
してるかもしれないですね。
他のブラウザも使えるようにすると、別の方法が必要だと
思っています
垢版
せめて外部プログラムを指定してdatのパスとレス番を渡せれば
スクリプトでもかましてJaneで開くことは出来るんだけど
垢版
返信 [2]
実行ファイルをNAS上に移したらエラーが出て起動できないんですけど…
垢版
>>343
おかなきゃいい
垢版
せめてインデックスだけでも別ドライブに置けませんかね…
垢版
>>343
>>297
垢版
やっぱりエラーが出るんですけど…
垢版
NASで動かしたらどうなるのか、あまり調べてなかったので
調べてみました。NASは持ってないのでPCをNASのように使ってみました。

�@XP PCにThreadsearchをインストール Vista PCで使用
 [Vista]→使用→[XP(Threadsearch)]

 →起動可能、検索できるが検索結果が正しく表示できない

�AVista PCにThreadsearchをインストール XP PCで使用
 [XP]→使用→[Vista(Threadsearch)]

 →起動できない


今のところ、全てローカルでソフトを使用することを想定してます。
垢版
了解しますた
垢版
あげ
垢版
返信 [1]
検索結果にスレ立て日とか最終書き込み日とかスレ数とか情報を出したり
それで並べ替えとかできるようにならないですかね
垢版
返信 [1]
なんか勘違いをしていて、>>334は2.00で計測していたぽいです。
先ほど2.02で再構築した結果(約32500スレ、4.5GB)、30分で終わりました。
インデックスの容量も931MB→836MBと結構圧縮されてますね。

毎度ながら参考まで。
垢版
>>351
なるほどです。
並び替えられると結果が見やすくなりそうですね。

>>352
結果のレスをどうもです
割と容量を抑えられているようですね
垢版
返信 [1]
はげ
垢版
>>354
アデランス行け
垢版
返信 [1]
起動できないって具体的にどう起動できないの?
ネットワークドライブで.NETアプリがダメ、という話なら、グループポリシーかなんかで設定変えられたはず
垢版
あげ
垢版
返信 [1]
>>356
起動できない→exe起動でエラー画面が出ます。
普段使わないので、グループポリシーなど知りませんでした。
垢版
ちょこちょこ更新しています。
どうなるかは分かりませんが、10月半ばまでには
完成させたいです。
垢版
乙です、頑張ってください
垢版
>>358
エラーでたら、エラーくらい晴れよw
グループポリシーエディタはHOMEエディションには付いていない罠
垢版
って、作者さんだった、失礼すぎるw
スマソ…
垢版
素直でよろしい
垢版
ちょww
垢版
返信 [2]
?2BP(0)
BEでは検索出来ないのでしょうか?
垢版
記号も検索出来て便利だね
もっと早く使えばよかった

googleは記号の検索できないし
デスクトップサーチは検索しないディレクトリを指定する仕組みだし
垢版
返信 [1]
どうもです。

>>365
BEの発言者の検索はできません。
スレッドに書き込まれるBEの"キー"が違うためです。
垢版
返信 [2]
こんばんは。

スレッド全文検索を更新しました。
Ver 2.031になりました。 (1日で2回更新しました。2.03と2.031)
http://www.geocities.jp/cen_hp/threadsearch.html

更新点になります

2.03分
・「D:\」などのドライブ直下などに置いて動作すると、結果が正しく表示されない不具合を修正しました。
・カレントディレクトリが実行フォルダになっていない不具合を修正しました。
・BBSMENUからスレのURL抽出をできるようにしました。
・専用ブラウザでスレッドを開けるようにしました。

2.031分
・インデックス作成中・更新中に外部ブラウザを設定すると、
 インデックスが正しく作成されない不具合を修正しました。
垢版
外部ブラウザについて、次のソフトで試しました。

・Jane Style 3.10
・MonoView 1.28 (非起動状態から)
・Live2ch 1.19 (非起動状態から)

MonoViewとLive2chは、起動しているとスレッドを
「スレッド全文検索」から開けません。
起動していない状態からだと、外部ブラウザとしてスレッドを
開くことができます。
垢版
返信 [1]
>>367
キーのパターンがわかってるから可能ではないかと
>>365であれば基礎BE番号が185140で
そこから生成されるキーが55542511や111084421・・・
その中で書き込まれた>>365のキーは2332764476であると

be 全ID生成・解析所
http://snowslide.s201.xrea.com/be/
垢版
返信 [1]
2ちゃんねる内のスレであれば
beid = ((benum/100) + ((benum/10) % 10) - (benum % 10) - 5) / (((benum/10) % 10) * (benum % 10) * 3);
で求められるんじゃないかな。
他のBEは知らん
垢版
言い忘れてたけど変数は unsigned int
垢版
返信 [2]
更新お疲れさまです。相変わらず素晴らしい検索速度(*´Д`)/ヽァ/ヽァ
> ・BBSMENUからスレのURL抽出をできるようにしました。
これどう使うのか分からなかったです。

専ブラ単体は使ってないので確認できませんが、firefoxのb2rなのでブラウザで該当スレ開けました
垢版
更新乙です
垢版
返信 [2]
>>373
Janeなんかだと、たとえばこのスレは(Gドライブに入れてあるので)
「G:\Program Files\Jane Style\Logs\2ch\PC等\ソフトウェア\1204107839.dat」 になる。
けど、専ブラに該当スレを開かせるにはURL形式でないとだめなので、

BBSMENUから
PC等/ソフトウェア → pc12.2ch.net/software
を取得するようにしたということだと思う。
垢版
>>375
ガッテンガッテン!
垢版
返信 [2]
というか、専ブラ連携ありがとうだぜ。>>368

かなり便利になった。
でも連携についてもうひとつお願いがあるのだが。

外部ブラウザに送る際にレス番号もつけてもらえないだろうか?
現Verだと、該当のスレのURLを送っているようで、該当スレまでジャンプしてくれない。

具体的に言うと
"G:\Program Files\Jane Style\Jane2ch.exe" http://pc12.2ch.net/test/read.cgi/software/1204107839/369
のような感じで。
ひとつのスレで2つ以上の検索結果がある場合は、「一番最初のレス」でいいと思う。

人によっては「終了時のレスを維持」する設定になっていて、勝手に該当スレまでジャンプして欲しくないという人もいるかもないで
他の人の反応を見て決めてもらって構わない。

前にも言ったが催促じゃねぇけど、余裕があるときで構わないのでよろしく頼む。
垢版
返信 [2]
>>368
>>377のほうは「DAT HTML ブラウザ 外部ブラウザ」となっていることの「外部ブラウザ」のことだったんだが、
こっちは今の仕様のスレURLのみでいいかもしれない。

で、検索結果のレス表示の横、今は「▲> 」って表示のところに「外部ブラウザ」のリンク(記号でいいので)を表示するのでもいいな。
それをクリックすると外部ブラウザにレス番つきでURLを送るようになる感じ。
こっちなら嫌がる人はいないと思うし。

それともうひとつあるんだが。

レス表示横の「>」って記号をクリックすると、「検索結果」タブの横に「HTML」タブが表示されて該当のスレが表示されるんだが、
そのときに、そのレス番までジャンプして表示するようにはできないだろうか。

わがままな要望だがよろしく頼む。
垢版
> ・専用ブラウザでスレッドを開けるようにしました。

GJ!!

某ソフトを逆コンパイルして、参考ルーチンを書き込んだりしたかいがあったw
垢版
今回のバージョンアップはステキだな
垢版
返信 [2]
ダウンロードありがとうございます。

>>370>>371
式をありがとうです。
基礎BE番号が一致するものだと、同じ人ということですか。

>>373
>>375さんの通りです。
少し説明が足りていませんでした。

>>377>>378
要望をどうもです。
下画面のレスからも外部ブラウザが見れたら便利かもですね。
あと、2つ目の「>」は既にレス番にジャンプしますが、ならないですか。

垢版
返信 [1]
>>381
>基礎BE番号が一致するものだと、同じ人ということですか。
基礎BE番号が同じなら同じ人です。
垢版
>>381
どうも。
>>377-378です。
Verは2.031を使用しています。

>あと、2つ目の「>」は既にレス番にジャンプしますが、ならないですか。
飛ばないです。

で sita.html の内容を見てみたんですが
「>」のリンクが下のようになっています。
# 行が長いので途中で改行を入れています。
# また「G:\Program Files\Jane Style\Logs」は自分の環境でのJaneStyleのログフォルダです。

<a href="ue.html#0" target="ue"><font size=2>▲</font></a><font size=2>
<a href="G:\Program Files\Jane Style\Logs\2ch\PC等\ソフトウェア\1204107839.dat.html-menu:172">

このdat.htmlの後ろは#でないといけないと思うんだけど、-になっているのが原因かなと思います。
■ このスレッドは過去ログ倉庫に格納されています

ニューススポーツなんでも実況