← 返回
数据分析

EASY_CRAWL4AI

Use Crawl4AI to fetch and convert complex webpages, including dynamic content, into Markdown for summarization, data extraction, or analysis.
使用 Crawl4AI 抓取并转换复杂网页(包括动态内容)为 Markdown,以便进行摘要、数据提取或分析。
hanqiudeng
数据分析 clawhub v1.0.0 1 版本 100000 Key: 无需
★ 1
Stars
📥 593
下载
💾 8
安装
1
版本
#latest

概述

技能:全能网页爬取与智能解析 (Crawl4AI)

1. 环境依赖与安装 (Prerequisites)

如果系统尚未安装 Crawl4AI,Agent 应参考以下步骤进行环境部署:

  1. 核心库安装: pip3 install crawl4ai (注意:尝试pip或者pip3)
  2. 浏览器内核初始化: python3 -m playwright install chromium (下载 Playwright 所需的 Chromium 内核)
  3. 验证安装: crwl --help

2. 技能描述

当用户提供 URL 并要求“总结内容”、“提取数据”或“分析网页”时触发。利用 Crawl4AI 引擎将复杂网页(含动态 JS 渲染)精准转化为 Markdown 格式。


3. 核心指令集

读取 URL 内容到控制台:

crwl {url} -o markdown

读取 URL 内容到文件:

crwl {url} -o markdown > {file_name}.md

4. 使用示例

用户指令预期的 Agent 行为 (Command)
------
"帮我看看这个网页:[URL]"crwl {URL} -o markdown
"总结这个文章:[URL]"crwl {URL} -o markdown > article.md

5. 约束与安全

  • 隐私申明: 不得爬取登录后可见的内容。

版本历史

共 1 个版本

  • v1.0.0 当前
    2026-03-29 19:40 安全 安全

安全检测

腾讯云安全 (Keen)

安全,无风险
查看报告

腾讯云安全 (Sanbu)

安全,无风险
查看报告

🔗 相关推荐

data-analysis

A股量化 AkShare

mbpz
A股量化数据分析工具,基于AkShare库获取A股行情、财务数据、板块信息等。用于回答关于A股股票查询、行情数据、财务分析、选股等问题。
★ 165 📥 60,049
data-analysis

Excel / XLSX

ivangdavila
创建、检查和编辑 Microsoft Excel 工作簿及 XLSX 文件,支持可靠的公式、日期、类型、格式、重算及模板保留功能。
★ 368 📥 140,526
productivity

TopHotCN

hanqiudeng
抓取 tophub.today 支持网站的热榜列表并生成 JSON 文件,可进一步抓取并保存文章正文内容。
★ 0 📥 722