 | メタボットファイルシステムクローラ |
| 今すぐダウンロード | |
メタボット ランキングとまとめ
広告
メタボット タグ
メタボット 説明
ファイルシステムクローラ MethaBotソフトウェアは、スピード最適化、スクリプト可能で高度に構成可能なWeb、FTP、およびローカルファイルシステムクローラです。それはスクリプト化されたファイルタイプの解析、さまざまなカスタマイズオプションをサポートしており、特定のニーズに合うように簡単に構成されています。モジュールシステムとスクリプト言語の使用によると、ユーザーはクロールプロセスの完全または部分的な制御を取得してメタボットを決定することができます。コマンドラインからメタボットを実行して、Webデータ、統計情報、さらに多くの。カスタムファイルタイプ、フィルタリング、動作、およびもっと多くの場合、Scripterである必要はありません。これが「メタボット」の主な機能です。 ・それは早く、地面から設計され、スピード最適化を念頭に置いて設計されています。 ・E4XでJavaScriptを通してスクリプト可能 ・ユーザー定義のファイルタイプフィルタリング（MIMEタイプ、ファイル拡張子またはUMEX式） ・マルチスレッド ・コマンドラインから高度に設定可能です ・拡張可能なモジュールシステム、カスタムデータパーサーとフィルタをサポートします。 ・UMEXを通るURLの単純で強力なフィルタリング。 ・自動ダウンロード ・HTTPを介して実行中の自動クッキー処理のサポート ・信頼性の高い、フォールトトレラントネットワーキング ・ポータブル、32ビット/ 64ビットLinux 2.6,32ビット/ 64ビットFreeBSD 6.x / 7.0、Windows XP、Mac OS Xの成功を収めてテストしました。 要件： ・SpiderMonkeyヘッダー ・カールとlibcurl このリリースの新機能： ・バグ修正、外部PEEKを使用した場合、深さ制限はめちゃくちゃでした。 ・メモリ使用量クリーンアップ修正 ・DYNAMIC-URLオプションはデフォルトで検索に設定されなくなり、クロールが大幅に遅くなります。 ・ビルドシステムは、リンク時にモジュールが使用できるヘッダファイルを作成してインストールするようになりました ・Metha-Configツールを追加しました ・lmm_mysqlはこのパッケージの外側に移動しました
メタボット 関連ソフトウェア
