5ちゃんねる⇒ソフトウェア@5ch掲示板
設定
ダークモード
広告表示
画像・外部リンク

UPLIFT会員は外部リンクへ直接移動します。確認は初期設定でオンです。

機能のオン・オフ

このブラウザ・このサーバーのみ。オフにしても保存済みデータは残ります。

UPLIFT

1002コメント312KB

専用ブラウザを助けるプロクシ作らね?26.1串目

■ このスレッドは過去ログ倉庫に格納されています
垢版
返信 [2]
2chの仕様変更(dat廃止、APIでスレ取得)で使えなくなった専用ブラウザを
dat廃止後でも使えるようにするためのプロクシについて語るスレです。


広域埋め立て荒らしのためテンプレは過去スレを確認して下さい
専用ブラウザを助けるプロクシ作らね?26串目
https://egg.5ch.net/test/read.cgi/software/1659698201/
垢版
>>446
解除までの時間が変わるとしても、
直前に不正取得が出てるのに、すぐ解除なんてことにはならないだろう
取得に使われるIPが変わってないか確認して、それでもすぐ取得できるなら不具合かな
ちょっと前に、どれだけ取得しても、全然不正取得にならない期間あったよな
垢版
あったね
普段から検証で不正取得出しまくってるので逆に不安になった
垢版
返信 [1]
>>448
初期から一律2週間で変わってないという意味なのか、
今でも基本1週間で書き込みの度に1週間延長でその限度が2週間のまま変わってない
という意味なのか
垢版
>>452
後者
垢版
ニュース速報+が書けるようになってる Y⌒Y⌒Y⌒Y⌒(。A。)!!!
垢版
ソレハ━━━(゚∀゚)━( ゚∀)━(  ゚)━(  )━(゚  )━(∀゚ )━(゚∀゚)━━━ヨカッタナ
垢版
えええBANされたけど!!!!
垢版
おめでとう
垢版
read.cgiおかしいとこ増えまくって困る…
垢版
おかしいとこって?
垢版
筑波でスレ立て規制されたらこれ

ERROR!
ERROR: Sorry このホストでは、スレッドが立てられません。またの機会にどうぞ。 CODE:1
垢版
筑波だからって別に全てのサーバが筑波判定される訳ではないので
判定に引っかからないサーバ使えば済む話だよ
垢版
仕様変更(dat廃止、APIでスレ取得)
自体が分からない。
もう半数以上は2ch廃止からの専ブラで負荷を減らすどーのってのも知らないから。
垢版
仕様を明示しない掲示板システムになった時点でオワコン
垢版
筑波規制

①スレ立てだけNG(BBxにはならない)
②書き込みもNG(BBxにはならない)
③スレ立て可能だがスレ立て直後BBx
④スレ立て不可で即BBx
⑤書き込み不可で即でBBx

これだけあるが③だけは意味不明
垢版
返信 [1]
①と②のエラーメッセージはどんなん?
筑波判定じゃなくただの「ただ今制限」と同じようなものでは無いの?
垢版
>>465
①は
ERROR!
ERROR: Sorry このホストでは、スレッドが立てられません。またの機会にどうぞ。 CODE:1

その板に普通に書ける
ちょっと前までは④だった
垢版
②は制限されているとか余所でやって
筑波を切るとそのまま書ける
垢版
筑波ってなんでこんな中途半端な制限の書け方するんだろうね
VPNであると同時に一般ユーザの回線でもあり、動的IPですぐにVPN用途からIPが解放もされうるから
問答無用でVPN931にするようなガチガチの規制は掛けづらいってことなのかな
垢版
返信 [1]
>>466-467
それは筑波判定に掛かってるわけじゃ無いと思うよ
垢版
返信 [1]
>>337ので確かに正解っぽいね

IP:有効 鍵:有効 → 書きこみました
IP:有効 鍵:期限切れ → 書き込み確認 or 不正取得を検出しました
IP:BBx 鍵:有効 → このホストはBBx規制中です
IP:BBx 鍵:期限切れ → このホストは規制中です
垢版
>>470
誤爆すんなよw
垢版
返信 [1]
>>469
少し前までは筑波コロコロでスレ立て放題だった板が全く通らなくなったんだが
BBXは一時期の最悪期は脱したので普通に書けるIP、UA
垢版
>>472
> 一時期の最悪期は脱したので
なぜか緩和するのが謎だよな
どこの板か知らんけど、スレ立て規制もそのうち緩和するかもな
垢版
もう2年くらいまえからその繰り返し
垢版
3年前だとBBXもほとんどなかった
219と海外以外は98%書けた
垢版
返信 [1]
BBxの期間がまた伸びてきてるよね
ちょっと前は Proxy20が1ヶ月、Proxy60が2週間とかだったけど今は倍増?
垢版
Proxy20 なんてリストに載ってる限り、登録時刻が更新され続けるやろ
垢版
更新されるのが多いけど解除される事もあるんやで
垢版
返信 [1]
Proxy60 は規制期間いくらとか一定値に決まってるわけではないよ
垢版
解除されるのはリストから外れたからだろ
垢版
返信 [1]
>>479
BBRが付いていない時の値は決まってるでしょ
垢版
>>481
決まってないよ
垢版
返信 [1]
Proxy60の期間(がきっかり2週間(336時間)だったころ、
BBQが解ける瞬間のchkBBxの書き込みで証明してる人がおったけど、
あれはなんだったんだろうね
垢版
>>483
偶々その人の場合はってだけ
実際1時間で解除されたって報告もあれば半年、1年解除されないって報告もあった
垢版
返信 [1]
たまたまで10個以上連続で貼れるもんかねー

BBR付と勘違いしてない?
長期間解除されない例外はもちろん存在するけど基本は固定だろうね
垢版
ここは串を駆使して規制を掻い潜るスレじゃないぞ
垢版
公認されてない古い専ブラで公認専ブラに偽装して
新方式では公認専ブラでしか書かせないようにしている規制を掻いくぐるスレです
垢版
>>485
> BBR付と勘違いしてない?
してないよ
垢版
返信 [1]
BBxに期間は無いと言い張ってる人が沸いてるのか
垢版
返信 [2]
BBxに目安となる期間があるのはVPNスレじゃ割と常識だよな
https://mao.5ch.net/test/read.cgi/network/1654012162/27

27anonymous@fusianasan2022/06/01(水) 22:41:31.11ID:???
>24
VPNGateの公式クライアントやWebサイトのリストから無造作に選ぶだけだとBBQに引っかかりやすい
特に稼働時間が長い奴
稼働時間が短い奴の方が相対的に規制されていない可能性が高い傾向がある

リストを蓄積できるなら新たに登場したサーバを優先的に狙うといい
IPアドレスが変化した直後のサーバも同様
結局はリストの蓄積が物を言う

BBQだったものも例えばProxy60なら大抵は14日で解除されるので
解除される日を狙って繋いでみるのもよい
垢版
返信 [1]
>>489
実際時と場合によって規制期間は違うしな
運用系の板では常識だよ
垢版
返信 [1]
>>491
そんな事は分かってるから無理に言い返さなくていいんやで
垢版
>>492
分かってないじゃんw
垢版
返信 [1]
正確な日数は確認してないけどProxy60はいまひと月ぐらいに伸びてるよね
ちょっと前までは確かに半月ぐらいだった
垢版
>>494
IPがレンジ指定だと大抵長期
それ以外は設定された期間(時々変動)
という認識
垢版
書けなくて困る場合の応急処置用に
汎用ブラウザに化けるスクリプト作ってみたわ。
悪用しないでね。

post_5ch_net_curl.py
pastebin.com/n6Ym8Drw

PWD:Beimr7ppF6
垢版
返信 [1]
>>>476,483,485
いつ頃、どういう検証方法をした?
自分でも検証したのか、他の人のレスで見ただけなのか
自分で検証したのなら、どういうエラーで Proxy60 になったのか
他の人のレスなら、その URL を出せるか

10個以上連続でというのは、全部同じ原因で Proxy60 になっただけでは?
2週間で解除される規制に引っかかって Proxy60 になったのなら、当然全部同じになる
いろんな違うエラーで Proxy60 になっても、全部2週間というわけではない

>>490
これは VPN判定で BBx になった場合だけの話をしてるのかもしれないな
VPN判定で BBx になった場合は、一律 2週間で解除というのはあるかもしれない
だけど、一般的には Proxy60 は一律 2週間で解除というわけではないよ
垢版
>>497
>>490のパターンは自分も確認したことあるけど
VPNGateのProxy60は当時はその殆どが確かに14日間だったので
VPN判定でのProxy60に限った話なら2週間ってのはその通りなんだろうなと思う
最近はそれがひと月ぐらいに伸びてるって事だろうなと
垢版
VPN一般スレじゃなくてVPNから5chアクセスするスレを新たに作って
そこでやればいいのになと思う
垢版
返信 [1]
ソフト板にも筑波VPN規制がやってきた?
垢版
固定回線系からの書き込みキツイな
垢版
>>500
運営→運営情報
運営→運営情報臨時
PC等→ソフトウェア

今のところこれぐらいしか確認できんね
垢版
わかりにくいがスレ立て規制ならもっとある
垢版
スレ立て規制できるってことはレス規制もできるってことで、
目立つことしてたら、いつ規制されてもおかしくない
垢版
だから俺は筑波規制は2年くらい前から認知してる

荒らしの手加減を緩めたら解除されたりを繰り返してる


スレ立てだけNG(BBxにはならない)
書き込みもNG(BBxにはならない)
スレ立て可能だがスレ立て直後BBx
スレ立て不可で即BBx
書き込みも不可で即でBBx
垢版
返信 [1]
proxy2chで読み込めないとこ出て来た
垢版
返信 [1]
>>506
どこらへんの板?
垢版
返信 [1]
>>507
506じゃないけど、うちは最近medaka鯖とかが夜になるとAPIが接続エラーになるな
朝になると戻るけど、その時はスクレイピングにして凌いでいる
(スクレイピングでも効かないことが何回かあったな)
回線はNTT-PCのPPPoE
垢版
>>508
eggも調子悪いこと多いね (再試行すれば解決する場合が殆どだが)
垢版
こっ、これは
垢版
なんか筑波チェックが緩んできてるね
垢版
秋田は
垢版
流れが完全に止まってる
みんな規制されてるのか
俺も規制されまくってすっかり忘れてたわ
垢版
生半可に筑波VPNに頼ってる人当たりはソフト板に掛けずに困っている気はする
垢版
普通に書けてるし特に問題もないし
安定期?
垢版
http://nova.5ch.net/test/read.cgi/operatex/1664407685/313-319
垢版
政治性強いネタ以外はたいてい大丈夫。
垢版
結局iPhone専ブラのキーは漏れないままなのね
垢版
返信 [1]
アイホンなんてわざわざ買わないからなあ
垢版
>>519
賃貸なら元々付いてるだろうし
付いてないからって設置するのは大屋さんとの折衝が面倒だからあまりやらんよな

持ち家の場合も建売とかマンションだと最初から設備として付いてるから買うっていう意識はないだろうし
家を建てる場合も付ける付けないって話になって買うっていうのとは違う感覚だよな
垢版
返信 [1]
ただ今制限を設けております。[phs]

って出る
垢版
>>521
API串使っててそれはちょっとかっこわるい
垢版
返信 [1]
すみません。
WinUI3で5chBrowserを作ろうと思っています。
側はとりあえず作ったのですが、内部のHTMLの取得をしたり、POSTしたいと思い2ChAPIプロクシなどのプロクシを使った方法で作っていきたいと思ったのですが、
具体的にどうやってやっているのかわかりません。
プロクシは何をして専ブラに板やスレッドを写しているのでしょうか。
専ブラ側のリクエストに対して、プロクシが仲介してHTMLをゲット、それをプロクシがDat化して専ブラはそのDatを見るだけという形なのでしょうか。
専ブラは単に5ch.netのURLを投げるだけでプロクシが仲介してくれるものなのでしょうか。またプロクシによってDat化されたファイルはどこで見ることができるのでしょうか。
その辺詳しく説明されているサイトなどあれば教えていただければと思います。
とりあえず今現在できているところまでGitHubに上げております。
https://github.com/VipperNanashi/5chBrowser
垢版
返信 [1]
> その辺詳しく説明されているサイトなどあれば教えて
串のソース公開されてるんだからそれ読めばいいじゃんね
垢版
>>524
コードリーディングしてみたのですがDatはどこかに保存している感じではなさそうですね、、、
どうやって読み取っているのでしょうか。
全くわかりませんでした。
垢版
返信 [1]
ソースとか見たわけじゃないけど普通に考えたら専ブラからのHTTPリクエストに対するレスポンスボディの形で返すだけからdatとして保存はしてないんじゃないの
中身みたいならWiresharkとか使えば見られると思う
垢版
返信 [1]
datはrange指定でPCに保存してる以降のデータをバイト指定してもらう
(専ブラは毎回先頭からデータを貰わないことになってる)
専ブラによってはちょっと手前から貰うこともあったかも
(あぼーんされててデータ一がずれる場合の判別のため)
エラーハンドリングが面倒かも
垢版
>>526
なるほどありがとうございます。
つまりクライアント側でGet用のHTTPリクエストを投げたら自動的にプロクシがヘッダー情報を追加して5chのサ-バーにリクエストを送る。
そんで帰ってきたレスポンスをプロクシがまず受け取ってそれを改変してブラウザに渡してる的な感じなのですかね。
ということはこちらは普通にスクレイピングする形でHTTPGetやHTTPPostを行えばよい感じなのでしょうか。
垢版
返信 [1]
>>527
なるほどバイトで帰ってくるのですか、、、
ではバイトを文字に直す処理も必要という感じですかね。
垢版
串はHTML->datもサポートしてるから初回は専ブラからrange指定されてても
先頭からデータを取得してdatとして保存して持ってるはず
2回目以降は専ブラからのrange指定に対して
串は対応するレス番号求めてそれ以降のHTMLデータを要求するようになってるはず
垢版
>>529
専ブラは鯖にあるdatファイルを貰うつもりでいい
ただ毎回datファイルを貰うようにはなってなくて追加分だけ要求するようになってるだけ(range指定)
バイト位置というのは、DATファイルのサイズだということ
垢版
返信 [1]
串のソースでapiの場合を見てるのならdatは保存されない
専ブラの要求するrange位置からのデータをそのまま鯖に要求して
返ってきたデータをそのまま専ブラに返すだけになる
まあ要求時に、sid取得から始まるAPIの手順を踏んでちょっと要求の仕方を変えるけど
垢版
>>532
なるほどありがとうございます。
今現在使用を想定している串は2chAPIプロクシなのでAPI取得のものになりますね。
こちら側はGETやPOSTのAPIエンドポイントとRangeを指定する形になりそうですね。
垢版
串を使うんだからアクセスはhttpで、
2回目以降にはrange指定するんだから無圧縮(Accept-Encoding: gzipとかは付けない)
専ブラではこんな感じでいい
GET http://egg.5ch.net/software/dat/1661687123.dat
If-Modified-Since:
Host: egg.5ch.net
Accept:
User-Agent:
Range: bytes=999-
垢版
なお、If-Modified-Sinceがあることで初回アクセス時に返ってきたタイムスタンプは
専ブラで保存しておくことが必要なことも分かると思う
あとヘッダとしては上記のみでなく通常付けるようなものは付けておくこと
垢版
初回アクセス時→前回アクセス時の間違い
垢版
返信 [1]
なにからなにまでありがとうございます。
頑張ってみます。
垢版
>>537
とりあえず、JaneXenoあたりの挙動を調査すればいいと思うよ
それも最初は5chではなく、2ch互換BBSでのやり取りを見たほうが分かりやすいはず
まずは2ch互換BBSブラウザとして動作させることが先決
Jane総合掲示板(http://jane2ch.net/test/read.cgi/community/1654347713/)とか
あと、したらば、まちBBSはdatの構造とかちょっと違うので別に作ることになる
構造としては基本classを派生させるようにすればいいかも
垢版
2ch互換BBSを薦めるのは串が不要だから通信も専ブラのやり取りが直接見えて楽なので
垢版
したらばとまちについてはdat取得(rawmode)・書き込み等専ブラ開発者向け情報があったと思う
まあ2chにも開発者向け情報があるけどね(Monazillaプロジェクト)
垢版
まだ何にも実装してないんだね、なので検討する点をいくつか上げておく
■板一覧について
 https://menu.5ch.net/bbsmenu.json
 他の場合はbbsmenu.html
 ・同じ板が複数存在した場合、LINK付きはLINK無しに合併
 さらに自分でLINKを増やして板がユニークになるようにする
 ・カテゴリ・板移動・分離等でbbsmenuに存在しなくなった板でも勝手に削除しないこと
 (今まで取得してきたdatが見えなくなるため)
 ・スレURLから板一覧に板が見つかった場合、鯖名は板一覧のものに置換してアクセスする
 ・鯖名なしの場合も可能なようにしとくとなお良い
■スレ一覧について
 egg.5ch.net/software/subject.txtを取得する
■スレデータ(dat)について
 http://[サーバー]/[板名]/dat/[スレッド番号].dat
 ・datの構造(Shift-JIS)
  [名前]<>[メール]<>[日付] [ID] [BE-ID]<>[本文]<>[スレッドタイトル]
  ※[スレッドタイトル]についてはレス番号1にのみ存在する
 ・まず最初に他の専ブラの挙動を見て、ログフォルダの構造を検討しておく
 ・[スレッド番号]はUNIX TIMEから算出されたものでこれから何時(since)スレが立ったのか分かる
 ・datファイルを直接ログフォルダに放り込む場合やエクスプローラーからドラッグドロップした場合は
  このスレッドタイトルを有効なものとして参照することになる
 ・URLからまず板一覧を検索して見つかった場合に鯖名がそれと異なる場合は、
  板一覧の方の鯖名に置換してURLを補正する
 ・過去ログについてはURLの置換はしないが、dat保存場所は上記の場所と異ならないようにすべき
  また過去ログの取得にはofflaw2の方式にすることも検討
 ・datを要求して302でLocationに(鯖名なしの)URLが返ってきた場合
  移転先の鯖名を求めてリダイレクトして、板一覧の更新を行うよう自動移転追尾するとよい
 ・浪人の場合のdat取得や書き込みやBEについては後回しでもよいと思う
■設定ファイルについて
 外部から設定ファイルを弄られた場合、ソフトを再起動することなく
 更新された設定を有効に取り込む仕組みが必要
垢版
一応過去ログのURLについて書いとくけど、どうせ今やアクセスできないし
串を使うなら串に任せることでもいい

http://[サーバー]/[板名]/kako/[スレッド番号(上4桁)]/[スレッド番号(上5桁)]/[スレッド番号].dat.gz
スレッド番号が9桁の場合は
http://[サーバー]/[板名]/kako/[スレッド番号(上3桁)]/[スレッド番号].dat.gz
拡張子は、.dat.gzではなく.datの場合もある
垢版
返信 [1]
まだガワしか作れていません。
いろいろ支援していただきありがとうございます。
助かります。
頑張って新しい5chブラウザ作ってみます!
垢版
返信 [1]
>>543
ここまで書いたんでついでに5chレス書き込みについても触れておく
cookie情報を付加せずにPOSTした場合は、承認要求が(set-cookieとともに)返ってくるので
もう一度cookieを追加してPOSTし直す
(chromeみたいにユーザーに承認ボタンを押させるようにしてもよい)
基本Chrome等でPOSTする場合と同じなのでChromeでの動作を見るのも良い
POST http://egg.5ch.net/test/bbs.cgi
Content-Type: application/x-www-form-urlencoded
Accept-Encoding: gzip
Accept: */*
Referer: スレURL/l50とか板URLとか
Cookie: yuki=akari (他にCF-IDとか必要となる場合もある。初回時はcookieなしでPOSTするのも良い)
User-Agent: Monazilla/1.00 ソフト名バージョン・OS名バージョン情報等
  (Monazilla/1.00は5chのみで他BBSにはMozilla/5.0で)
■POSTデータ
(説明上項目毎に改行してるが実際は改行なしで。項目の順番は専ブラによって異なる)
submit=%8F%91%82%AB%8D%9E%82%DE ("書き込む"をURLエンコードしたもの)
&FROM=[名前]
&mail=[mail address / sage等]
&MESSAGE=[POST内容] (データ中での途中行の改行は <br> で)
&bbs=[板名]
&key=[スレッド番号]
&time=Unix Time(進んでいるとエラーになるので、数秒から数十秒遅れの方がよい)
お絵かきを追加する場合は&oekaki_thread1=
レスポンスヘッダに、X-RESNUMという書き込んだレス番が返ってくるのが比較的最近追加された
Jane系でこれを見てる専ブラは無いけど、レスの[自分]判定に有効に使える
■スレッド作成
基本レス書き込みと同じ
submit文字列は「新規スレッド作成」、keyは無し、subject=[スレッドタイトル]を追加
垢版
返信 [2]
>>544
なにからなにまでありがとうございます。
頑張ります。
垢版
cookieについては2ch互換BBSとpinkでは必要だが
串でAPIに直して書き込んでくれるので5chではおそらく無くても大丈夫
(APIだとCookieは使わないので)
垢版
yuki=akariは2ch互換BBSでは付けないように(5ch専用の呪文?なので)
垢版
MonaKeyがCookieをアレンジして作られたような存在だしな

それにしても5chが新法式を導入してからはや10ヶ月
もうこのまま諦めて法式変えずにずっといくのかしらね
垢版
返信 [1]
専ブラごとのキーを定期的に変えるような悪あがきぐらいはしてくると思ったけど
それもやんなかったな
■ このスレッドは過去ログ倉庫に格納されています

ニューススポーツなんでも実況