web-crawler | スキル詳細 | OpenClaw Study

ステルスモード、LLM対応のMarkdownエクスポート、多形式出力、サイトマップ検出、robots.txt対応を備えた高性能なRust製ウェブクローラー。コンテンツ抽出、サイトマッピング、構造解析、LLM/RAGパイプライン向けに最適化されています。

ステルスモード、LLM対応のMarkdownエクスポート、多形式出力、サイトマップ検出、robots.txt対応を備えた高性能なRust製ウェブクローラー。コンテンツ抽出、サイトマッピング、構造解析、LLM/RAGパイプライン向けに最適化されています。

このページは OpenClaw Skills 学習ハブの一部で、導入手順・カテゴリ導線・実践リンクを提供します。

English 简体中文 繁體中文 Español Português