新月の開発

7ba408c7 anonymous 2011-06-27 11:35
sakuをtmpfsに置いたらめっちゃはえーｗｗｗｗｗ
ボルトネックになってたのはHDDだったか
8d7f41d8 ブランド激安市場【bag82】 2011-06-27 11:38
ブランド激安市場【bag82】
偽物ブランド_ブランドコピー_ヴィトンコピー_ブランドバッグ_財布激安/偽者_ルイヴィトン偽物_激安かばん_時計偽物
人気ブランド_バッグコピー_財布コピー_サングラス偽物_ベルトコピー_新作_スーパーコピー送料無料專門店
http://www.bag82.com
伊藤 美夕
7339e736 anonymous 2011-06-27 18:07
新月用にspamフィルタ欲しいな。
正規表現でなくて、キーワードとかマルコフモデルで学習するようなやつ。
b08ad707 anonymous 2011-06-27 20:26
Akismetを使う方法を、上げてくれてた人がいたね。

http://archive.shingetsu.info/b1129f37d45b15269a0db850ac053d46/52015ee7.html

改訂版が保管庫に残ってないな…。

プラグイン/Akismet - WordPress Codex 日本語版
http://wpdocs.sourceforge.jp/%E3%83%97%E3%83%A9%E3%82%B0%E3%82%A4%E3%83%B3/Akismet
79532b53 anonymous 2011-06-27 20:27
たまに書き込みないけど新着情報にあがってるのって、スパムにひっかかったレスがあったってことでいいのかい？
他になにか別の原因があったら教えてください。
921cb152 anonymous 2011-06-27 20:28
>>b08ad707 つづき

Akismet shingetsu でググると、修正版３があるらしいんだが。
6eb737e2 anonymous 2011-06-27 20:39
>>79532b53
オレもそうだと（スパムフィルタで落とされた）と思ってるんだけど。
自分のノードでフィルタしたのは、removedってフォルダに移動してるので確認できるよ。
途中のノードで消えてるのも、結構あるっぽい。
4d41412a anonymous 2011-06-28 13:59
昨日のスパムにイラッとしてP2Pの匿名ネットワークから大規模攻撃しかける攻性防壁の実装が必要だなとか考えちまったわ。
投稿するときの警告文にスパム投稿したら匿名ネットワークからDDOS攻撃受けますよってあってさ。

DDoS攻撃（協調分散型DoS攻撃、分散型サービス拒否攻撃、Distributed Denial of Service attack）
http://ja.wikipedia.org/wiki/DoS%E6%94%BB%E6%92%83#DDoS.E6.94.BB.E6.92.83

攻殻機動隊は全く見たことないんだけど。
738c75f1 anonymous 2011-06-28 14:10
スパムをどこで絞るか、どうするのかってのはやっぱ課題だな。
まぁ、P2Pネットワークの掲示板だけが抱えてるわけじゃあないとは思うけど。
7e1431bf anonymous 2011-06-28 16:30
reCaptchaと連携したい
5ed7ea49 anonymous 2011-06-29 02:53
すまないけど、新月の保管庫 http://archive.shingetsu.info/ にある
レスの内容を出来れば該当スレッド（ここでは板というのか？）の保管庫のレス(個別にhtml化されているもの)を、
全て時系列に表示してくれるものを作ってくれないか？人任せすぎて悪いんだけど。自分だと作るのに2,3年はかかりそうだから。

今、過去に争点になった新月の問題点なんかを見てるけど一レスごとクリックしてみていくのが面倒くさい。
例えばいまニュースの著作権に対してどれぐらいリスクを負うかを考えてるんだけど、やりすぎるとスレッドを保持している他ノードにもリスクがかかると思われる。最近は2ちゃんねるもリスクを抑えるためにシンガポールだかの企業に形だけ運用させてるみたいだし。

少しだけPythonのスクリプトは作ったことあるんで、引数に該当スレッドの名前入れれば
保管庫から全レスを時系列でまとめてくれるとかのものを作ってくれれば自分でも実行できる。

例えばこのスレだと、保管庫へのURLがhttp://archive.shingetsu.info/b1129f37d45b15269a0db850ac053d46/となってて
/b1129f37d45b15269a0db850ac053d46/って文字列があるけど、まぁ、そっちを引数として打ち込むと表示してくれるみたいな仕様でもありがたい。そもそのこの謎の文字列はなんなの。ハッシュ？

お願い。
4b334fb3 白帽子 pRqBriWgNGG 2011-06-29 14:26
>>5ed7ea49
む、これは良いテーマ。クローラっぽく取得してきて並べ替える感じか。
簡易的にやるなら、wget使って取得して、スクリプトでHTML生成といったところ？

ところで、朔のソース見てて、変数の意味が分かりにくいってことない？
ふくとみー氏自身も直しにくいコードだと言っていたことを思い出した。
3ced07b2 anonymous 2011-06-29 16:28
並び替えもいらないな
http://archive.shingetsu.info/cbf63815de14ea31c88abd00e9d2b0ac/?C=M;O=A
の?C=M;O=Aで時系列に並び替えたのが出力されるから。
BeautifulSoupで一定のタグの間のURLを取得するようにループ作って、変数に取っといて、
後はそのURLにまたアクセスして本文を取得して、成形して出力って感じか。
連続取得できるかわからないけど、できない場合はループ中にSleepとか入れればいいのかな。

あれ自分でもできる？
d6dc5bad anonymous 2011-06-29 19:42
>>3ced07b2
そして空気を読まずコードを晒す俺。
[[【自作】 プログラミング 【してみた】/89957e4a]]
d1dd9d40 anonymous 2011-07-02 12:14
NanaSHI質問スレって延々上がり続けてるよね？
5e2581b0 anonymous 2011-07-02 15:53
>>d1dd9d40
spamに狙い撃ちされてる模様。

新月APIにラッパーみたいなものを被せて、
REST的な見た目にしたいと思ったりする。
06a7039b anonymous 2011-07-02 18:02
spam.txt への記述例を別スレッド立てて配布したらどうかな。
spam投げる奴に手の内読まれるか。
177d9557 が〜りっく UymiUhS1SIl 2011-07-02 18:58
>>06a7039b
でも、こんな掲示板いちいち対応するのかなぁ・・・
4f2ea55a anonymous 2011-07-02 20:43
読まれたとしても個人的に掲示板の機能を損なわないレベルの正規表現VSスパマーの戦いを見てみたかったりする。
そして別スレッドの有無によらず最終的には正規表現だけじゃ対応しきれないから何らかの別対策が必要だと思う。
6ebc43d2 が〜りっく UymiUhS1SIl 2011-07-03 06:24
やっぱり学習するスパムフィルタ？
しかしそれはそれで不安が・・・
db96b99a anonymous 2011-07-03 13:54
ていうか、新月の仕組みは今のところスパマーにすごく有利だと思うんだよな。
一元管理してない故に個々のノードで違うスパムフィルタの穴を通りやすい。

そして個々で対応しなきゃいけないからスパマーがじゃあ、これは投稿できる？みたいに試して今回ちょこちょこスパム試されてるけど、そんな感じになる。
そうされると個人ではお仕事でやってるスパマーには基本的には敵わなくなる。
そして結局スパマーに穴を開けられると。

おまけに比較的スパムフィルタが厳しいところで通ったものはかなり伝播しやすいスパムになる。
その場合個々のノード管理者がスパムを削除するのも骨が折れる。

正直スパムの類だけはスパムフィルタ+スレッドのレス指定+スパム文を個別のスパム文リストみたいなのに入れて
それで全ノードが自動的に除去して伝播しない仕組みや、
伝播したとしても統合的なところでスパム登録したら統合管轄的なスパムフィルタにも入って、自動で既存レスが消え、さらに同一文章がキャッシュにあれば消える仕組みのようなものを作ったほうがいい気がする。

スパムはびこらすと、新月の中だけじゃなくて公開ゲートウェイ通じてWebにもゴミばらまくからな。
スパムだけは言論の自由とか匿名とは別で考えたほうがいいんじゃないだろうか。

明らかなスパムNGな掲示板ネットワークってのはやっぱり魅力的。。
相手の逆にこっちも多くの個人ノードで運営してる利点生かしてスパム情報を共有して集合知と人数の力でスパム潰すことが出来る。かも。

公開ゲートウェイにする場合、一旦明白にスパム登録されたものを投稿したIPは以後一定期間投稿できなくなるという仕組みを強制的に付加しないと公開GWとして動かないようにしてもいいんじゃないかな。
公開ゲートウェイだけ、同じような単語を使うものは以後一定期間NGとか、HTTPリンクのあるものは一定期間NGとか。
今のところ一番強力だと思う。公開ゲートウェイの規制能力をデフォルトで絞るだけでほとんどスパム投稿消えるんでね。わざわざ朔起動はしてないだろうし。

今は明らかに公開ゲートウェイから掲示板やブログの一種として攻撃されてる感じ。

色々な段階で迎撃出来ると思うけど、やっぱり一番最初は投稿前段階か、投稿後スパム判定されたらフルシャットアウトが原始的で強いでしょ。
公開ゲートウェイを対スパム用に絞ることを強制にして、公開ゲートウェイを個々のノードからのスパム投稿情報の報告でサポートする仕組みだけでも十分では。
公開ゲートウェイでスパム認定された投稿者の正規表現での自動IP規制までしたらかなり効くと思う。
なんなら公開ゲートウェイで使うように最終的にはプロクシのリストまで共有して、プロクシからの投稿はかなり厳格にはじくか、Captcha入れる。
ba40b939 anonymous 2011-07-03 14:26


>>db96b99a
初回からスパム判定できるようなシステムが作れたら面白いよね
09ae59b4 anonymous 2011-07-03 16:46
なんか日本語怪しいspamが来てるw
5787dd29 anonymous 2011-07-03 17:09
>>09ae59b4
鞄売りのはあれ中国人だからな。
社長が日本人の女かもしれないが。
b32075cb anonymous 2011-07-03 21:23
>>db96b99a
スパムを投稿する専用スレ作って、管理責任者が署名付けて投稿したのを
選別して自動的にフィルタリングして削除も行うようにすれば、管理の手間は
軽減されるんじゃないか？
9a9ec676 anonymous 2011-07-04 19:39
>>b32075cb
[[スパム検体スレ]]　でどう？
いい案だな。ここさえ対処可能になっていれば、OKと。
おっしゃるように、投稿されたスパムを名前・メール含みで転載。
c92a3b84 anonymous 2011-07-05 00:13
# 公開GWから失礼

>>b32075cb
そのトップダウン式だと、管理責任者が大変だよなあ。
有志でハッシュ鍵を共有して手分けするとか？
なんとか自動化したい。
自動化っていうのはつまり、ボトムアップに削除通知を活用する今までのやり方。
ただしこのままだと非常に効率悪い（っていうか機能していない）のはもはや周知の事実なので、
管理責任者方式と併用する。

今考えてたのは、自ノードに伝播してきた「他ノードに通知する」＝手動削除されたレスで
一定の件数を上回ったものに、スパム認定を行い、内蔵する署名で　[[パム検体スレ]]に投稿。
その際、スパムレスのMD5SUMをとって名前欄などのヘッダ情報に付加し、重複投稿を回避する。

参考?
E. Damiani et al. P2P-Based Collaborative Spam Detection and Filtering, In Proc. 4th Int'l Conference on Peer-to-Peer Computing, 2004.
feedf590 白帽子 pRqBriWgNGG 2011-07-05 22:29
[[スレ立てテスト兼、初心者が質問するスレ/40f90d44]]
テスト中
aa944fb7 anonymous 2011-07-15 17:51
プロトコルについてもっとも詳しくかかれているドキュメントはこれ？
ちょっと実装してみようとおもっているんだけど。

http://shingetsu.info/protocol/protocol-0.7.d1
338b2c6c 白帽子 pRqBriWgNGG 2011-07-15 21:28
>>aa944fb7
基本的にはそれ。正確な仕様は朔のソースコードを読むしかないわけだが。
ffff54fb 白帽子 pRqBriWgNGG 2011-07-15 22:52
比較的に長期間朔を起動しなかった場合、
久々に起動するとうまく同期されないことがある問題、何が原因なのかなあ？
1f0d39db anonymous 2011-07-15 23:17
>>ffff54fb
ノードリストが古くなってる、とか？
8911cb14 anonymous 2011-07-16 02:23
>>338b2c6c
どうもです。ソースコード読んできます。
3f9817bb anonymous vdsv8i7lEuk 2011-07-17 12:43
>>1f0d39db
それと同時に、接続しているノードも歯抜けになってるとかかな
1a07cd04 anonymous 2011-07-20 19:32
新月のPHP実装作ってるんだけど、参照系がだいたいできた。

http://sgphp.project-p.jp/

ソースは https://github.com/ha1t/sgphp にあるから、ある程度PHPわかる人なら
サーバにおいてdataディレクトリを777にすれば動かせると思う。

まだ投稿系ができてないので、ひと通り実装したら素人でも動かせるように調整します。
13797f66 anonymous 2011-07-20 19:49
>>1a07cd04
GJ!
04f054d9 白帽子 pRqBriWgNGG 2011-07-21 11:48
>>1a07cd04
ktkr
1492bc3b anonymous 2011-07-21 16:41
>>13797f66

>>04f054d9

githubのpublic reposなんでコードかけたらforkしてpull requestお願いします。
プロトコル自体の実装は簡単だけど、そこから先のP2Pクライアントとして振舞う際の
ドキュメントが存在しないからsakuのコードを読みながら試行錯誤していかないといけないので
時間がかかりそう。
67905c1e 白帽子 pRqBriWgNGG 2011-07-21 17:55
>>1492bc3b
ある程度できたら参考にさせてもらいます。自分も朔のソースコードは読みにくいと感じているのです。
まあPHPはテキストファイルからシンプルなページを生成する、までしかやったことが無いんだけども。

そろそろgitやhgの使い方覚えたほうがいいだろうなあ。
実はHaskellとPythonを勉強しつつ、Haskellで新月実装を作りたいなって思ってたりする。というかやりたい。
とりあえずlambdachanって名前にでもするか。
# 書きなおされたsaku、saku2が欲しいとも思ってたり。
1af32322 nietono 2011-07-26 20:33
開発とは少し話が違いますが、
新月のアクセスログの書式は3.7.3⇒3.10.1に移るにつれて変化ありますか？
特に、新旧環境混在で、旧環境にログの変化がでるか気になっています。
どうも最近ログ集計スクリプトが暴走気味で気になっています。

UserAgentのせいかな？
a12bae4c anonymous 2011-07-28 14:43
>>1af32322
ソースコードベースでみると、ログ出力を含めたコアの部分は変わってないように見える。
ログ集計を行っているスクリプトがパースできないような値が入ってきている可能性はありそう。
b419c8db nietono 2011-07-28 21:02
>>a12bae4c
ありがとうございます。

スクリプト読み返すと汚すぎるので、
これを機に想定外の値が変数に入ったときの例外処理入れて
思考してみようと思います。

そして、試行用のsaku 3.10.1をわざわざ8089ポートで立ち上げ中・・・
CentOS5系じゃPython2.6がyumで入らないので、Fedoraサーバも立ち上げ中・・・
8be2fd25 anonymous 2011-07-30 09:35
Unhandled exception in thread started by
これは再起動するしか解決法はないのでしょうか。
75cc5c5a anonymous 2011-08-01 20:41
>>8be2fd25
わからん、すまん。

俺の対処法
cacheフォルダとrunフォルダを全消しして再起動。
a03dd427 anonymous 2011-08-02 17:04
てすてす
766b0cc1 anonymous vdsv8i7lEuk 2011-08-08 17:42
>>feedf590
magicofmakingup
[presenciafcuk@gmail.com] 2011-08-08(月) 17:17 ID:5c2b1f32 [返信]
    It is really a great and useful piece of info. I’m happy that you just shared this helpful tidbit with us. Please keep us up to date like this. Thanks for sharing.

このスパムが何故か排除されない。
c93facb6 rep4649管理人 1JveV4KQp26 2011-08-10 20:27
>>226b1213
rep4649.ddo.jp:8000 を公開ノードにして :80 は廃止します。
関係箇所の改定をお願いします。
d000ef78 白帽子 pRqBriWgNGG 2011-08-10 22:50
>>c93facb6
file/initnode.txt修正しました
0b3d3e03 rep4649管理人 1JveV4KQp26 2011-08-12 21:57
>>d000ef78
どうもです。
9174cde3 anonymous 2011-08-16 22:39
新しいコミュニティを普及させるのは大変だが、既存のコミュニティ用のツールは普及しやすい
新月もこれに倣うべきじゃないか？
朔も2タイプあるわけだし

別に今育んでいるコミュニティを見捨てなければいけないということじゃない
既存のコミュニティ、可能なら複数の大型コミュニティを跨いでオーバーレイするようなコミュニティなら流行りやすいんじゃないかと

Top of this page. | <<last <<new 0 1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24 25 26 27 28 29 30 31 32 33 34 35 36 37 38 39 40 41 42 43 44 45 46 47 48 49 50 51 52 53 54 55 56 57 58 59 60 61 62 63 64 65 66 67 68 69 70 71 72 73 74 75 76 77 78 79 80 81 82 83 84 85 86 87 88 89 90 91 92 93 94 95 96 97 98 99 100 101 102 103 104 105 106 107 108 109 110 111 112 113 114 115 116 117 118 119 120 121 122 123 124 125 126 127 128 129 130 131 132 133 134 135 136 137 138 139 140 141 142 143 144 145 146 147 148 149 150 151 152 153 154 155 156 157 158 159 160 161 162 163 164 165 166 167 168 169 170 171 172 173 174 175 176 177 178 179 180 181 182 183 184 185 186 187 188 189 190 191 192 193 194 195 196 197 198 199 200 201 202 203 204 205 206 207 208 209 210 211 212 213 214 215 216 217 218 219 220 221 222 223 224 225 226 227 228 229 230 231 232 233 234 235 236 237 238 239 240 241 242 243 244 245 246 247 248 249 250 251 252 253 254 255 256 257 258 259 260 261 262 263 264 265 266 267 268 269 270 271 272 273 274 275 276 277 278 279 280 281 282 283 284 285 286 287 288 289 290 291 292 293 294 295 296 297 298 299 300 301 302 303 304 305 306 307 308 309 310 311 312 313 314 315 316 317 318 319 320 321 322 323 324 325 326 327 328 329 330 331 332 333 334 335 336 337 338 339 340 341 342 343 344 345 346 347 348 349 350 351 352 353 354 355 356 357 358 359 360 361 362 363 364 365 366 367 368 369 370 371 372 373 374 375 376 377 378 379 380 381 382 383 384 385 386 387 388 389 390 391 392 393 394 395 396 397 398 399 400 401 402 403 404 405 406 407 408 409 410 411 412 413 414 415 416 417 418 419 420 421 422 423 424 425 426 427 428 429 430 431 432 433 434 435 436 437 438 439 440 441 442 443 444 445 446 447 448 449 450 451 452 453 454 455 456 457 458 459 460 461 462 463 464 465 466 467 468 469 470 471 472 473 474 475 476 477 478 479 480 481 482 483 484 485 486 487 488 489 490 491 492 493 494 495 496 497 498 499 500 501 502 503 504 505 506 507 508 509 510 511 512 513 514 515 516 517 518 519 520 521 522 523 524 525 526 527 528 529 530 531 532 533 534 535 536 537 538 539 540 541 542 543 544 545 546 547 548 549 550 551 552 553 554 555 556 557 558 559 560 561 562 563 564 565 566 567 568 569 570 571 572 573 574 575 576 577 578 579 580 581 582 583 584 585 586 587 588 589 590 591 592 593 594 595 596 597 598 599 600 601 602 603 604 605 606 607 608 609 610 611 612 613 614 615 616 617 618 619 620 621 622 623 624 625 626 627 628 629 630 631 632 633 634 635 636 637 638 639 640 641 642 643 644 645 646 647 648 649 650 651 652 653 654 655 656 657 658 659 660 661 662 663 664 665 666 667 668 669 670 671 672 673 674 675 676 677 678 679 680 681 682 683 684 685 686 687 688 689 690 691 692 693 694 695 696 697 698 699 700 701 702 703 704 705 706 707 708 709 710 711 712 713 714 715 716 717 718 719 720 721 722 723 724 725 726 727 728 729 730 731 732 733 734 735 736 737 738 739 740 741 742 743 744 745 746 747 748 749 750 751 752 753 754 755 756 757 758 759 760 761 762 763 764 765 766 767 768 769 770 771 772 773 774 775 776 777 778 779 780 781 782 783 784 785 786 787 788 789 790 791 792 793 794 795 796 797 798 799 800 801 802 803 804 805 806 807 808 809 810 811 812 813 814 815 816 817 818 819 820 821 822 823 824 825 826 827 828 829 830 831 832 833 834 835 836 837 838 839 840 841 842 843 844 845 846 847 848 849 850 851 852 853 854 855 856 857 858 859 860 861 862 863 864 865 866 867 868 869 870 871 872 873 874 875 876 877 878 879 880 881 882 883 884 885 886 887 888 889 890 891 892 893 894 895 896 897 898 899 900 901 902 903 904 905 906 907 908 909 910 911 912 913 914 915 916 917 918 919 920 921 922 923 924 925 926 927 928 929 930 931 932 933 934 935 936 937 938 939 940 941 942 943 944 945 946 947 948 949 950 951 952 953 954 955 956 957 958 959 960 961 962 963 964 965 966 967 968 969 970 971 972 973 974 975 976 977 978 979 980 981 982 983 984 985 986 987 988 989 990 991 992 993 994 995 996 997 998 999 1000 1001 1002 1003 1004 1005 1006 1007 1008 1009 1010 1011 1012 1013 1014 1015 1016 1017 1018 1019 1020 1021 1022 1023 1024 1025 1026 1027 1028 1029 1030 1031 1032 1033 1034 1035 1036 1037 1038 1039 1040 1041 1042 1043 1044 1045 1046 1047 1048 1049 1050 1051 1052 1053 1054 1055 1056 1057 1058 1059 1060 1061 1062 1063 1064 1065 1066 1067 1068 1069 1070 1071 1072 1073 1074 1075 1076 1077 1078 1079 1080 1081 1082 1083 1084 1085 1086 1087 1088 1089 1090 1091 1092 1093 1094 1095 1096 1097 1098 1099 1100 1101 1102 1103 1104 1105 1106 1107 1108 1109 1110 1111 1112 1113 1114 1115 1116 1117 1118 1119 1120 1121 1122 1123 1124 1125 1126 1127 1128 1129 1130 1131 1132 1133 1134 1135 1136 1137 1138 1139 1140 1141 1142 1143 1144 1145 1146 1147 1148 1149 1150 1151 1152 1153 1154 1155 1156 1157 1158 1159 1160 1161 1162 1163 1164 1165 1166 1167 1168 1169 1170 1171 1172 1173 1174 1175 1176 1177 1178 1179 1180 1181 1182 1183 1184 1185 1186 1187 1188 1189 1190 1191 1192 1193 1194 1195 1196 1197 1198 1199 1200 1201 1202 1203 1204 1205 1206 1207 1208 1209 1210 1211 1212 1213 1214 1215 1216 1217 1218 1219 old>>

Agreement
limit: 1536KB

(新月の開発/60990/44.2MB)

Powered by shinGETsu.