スパイダーの嵐?
スパイダーの嵐?
StatPress を覗いたらアクセスアップと思ったがよく見たら
spider の嵐の様相 スパイダーの数 76 異常な数字と思い
数十秒刻みで Majestic-12 が来ている。
海外から来ているみたいだけれど・・・
スパイダーのスパム?
でも、見ていったページはそれぞれ違うからいいのかな?
ネットで調べても英語のページが多くてよくわかりません。
どうしたら良いのでしょうか?
もっとも、StatPressプラグインを入れなければ気が付かなかったわけだし
とりあえず様子見します。
Majestic-12のページをグーグルで翻訳してみたら
マジェスティック-12へようこそ!
マジェスティック-12などのSETI @ homeとdistributed.netとして成功したプロジェクトによって達成同様の方法でワークロードを分散するという概念に基づいて、World Wide Webの検索エンジンの作成に取り組んでいます。あなたが現在のプロジェクトの詳細を読むことができます。以下に、あなたの最近のニュースのハイライトを見ることができますが、その最高の完全な詳細については私たちのフォーラムをチェックする。
16/10/12 1兆回のURLはクロール!
我々は1000000000000のURLをクロールし、プロジェクトの開始以来、8年!ここでは、このフォーラムの投稿で詳細を参照してください。
21/04/12 MJ12node v1.7.8
重要なアップデートはここからダウンロードしてください!
07/02/12 MJ12node v1.7.7
重要なアップデートはここからダウンロードしてください!
18/12/11 MJ12node v1.7.6
修正プログラムの数と重要なアップデートはここから更新ソフトウェアをしてください!
4/07/11 MJ12node v1.7.5
非標準のrobots.txt externsionsをサポートする重要なアップグレードでは、ここでそれを得る!
5/02/11 MJ12node v1.7.0デベロッパー
より柔軟なクロール中央サーバーをサポートするクローラーの新しいgeneractionは、ここでそれを得る!
6/12/09 MJ12node v1.6.11
重要なバグ修正の数が、ここにあなたのノードをアップグレードしてください!
24/10/09 MJ12node v1.6.10
重要なバグ修正の数が、ここにあなたのノードをアップグレードしてください!
09/08/10マジェスティック-12以上の1000000000000ユニークなURLを発見!
マジェスティック-12は、Googleのマイルストーンを確認する:以上1000000000000 URLが見つかりました、詳しくはこちら。
21/08/09新ギガサーバーの二乗!
ギガモンスターspeccedサーバー(2倍クワッド2.0GHz Xeonプロセッサ2.5 GHzの、32 GB RAM、24 TBのディスク)はまだ再び親切にオランダからGigaserver.nlによって寄贈されました!このサーバーは、ウェブのリンクグラフ解析の新たなレベルに到達するためにプロジェクトを有効にします – 2008年9月に、私たちは、その種の最大の公的に入手可能な指標であるとアンカーインデックスを更新するために期待しています。
19/08/09 MJ12node v1.6.7
小さいながらも重要なアップデート、ここにあなたのノードをアップグレード!
14/08/08 MJ12node v1.6.6
セッションIDのフィルタリングに関連する1つ以上のバグフィックス、ここにあなたのノードを更新!
09/08/08 MJ12node v1.6.5デベロッパー
重要なバグが非ラテンエンコーディングを使用するXMLフィードの解析に関連する修正する、ここにあなたのノードを更新してください!
05/08/08 MJ12node v1.6.4デベロッパー
修正と新しいビルドで良い解析機能の多くは、ここからそれを更新!
11/07/08 MJ12node v1.6.2デベロッパー
“ディープクロール"だけでなく、いくつかの不具合修正のためのこの新しいビルド機能より良いサポートが、ここからそれを更新!
22/04/08 MJ12node v1.6.1デベロッパー
新しいクライアントの重要なバグフィックスは、ここからそれを更新!
10/04/08 MJ12node v1.6.0デベロッパー
はるかに少ないディスクに使用され、多くの同じ帯域幅使用量のクロールと修正のロット:ここに新しいクライアントをダウンロード!
04/02/08マジェスティック·SEO対策
マ ジェスティック-12マジェスティック-SEOはアンカーインデックス特色に起動できることを誇りに思います – 最新のWebスケールの検索エンジンでのウェブサイトのランキングに影響を与える関連性の問題を理解するために分析し、報告することができますバックリン クとアンカーテキストを持つ130以上の億ユニークなURLのデータベースを。
6/01/08スモールデザイン変更!
これは、ここにアーカイブされているこのプロジェクトの参加者ではなく、古い新しいに大きな重点を置くための小さなホームページに再設計したものです。
26/10/07 MJ12node v1.5.0デベロッパー
データ解析モジュールでは、多くのバグの修正:ここに新しいクライアントをダウンロードしてください。
17/08/07新ギガサーバー
モ ンスターspeccedサーバーが(2倍クワッド2.0GHz Xeonプロセッサ、16 GBのRAM、16 TBのディスク)MJ12プロジェクトの大ファンであり、実際にpowefulサーバーで貢献したかったオランダ、多くの感謝から適切な名前の会社 Gigaserverによって提供されました偉大なサーバとそれらの偉大な男に行く!このサーバーは、完全に今後の “アンカーインデックス"で利用されるであろう!ビッグGに気を付けろ!
私達の完全な履歴を参照してくださいしたいですか?アーカイブされたニュースを見てください
やっぱりよくわかりません。orz…(泣)
ディスカッション
コメント一覧
まだ、コメントがありません