登录
软件下载
帮助文档
新闻资讯
Skill UI
浏览并发现
18950+
精选技能
全部
编程开发
人工智能
设计创意
产品商业
数据科学
市场营销
职场通用
效率工具
硬件工程
语言学习
搜索
网络爬取
,共找到
12
条记录
默认排序
最新上传
最多下载
Web数据采集与结构化提取
firecrawl-hello-world
jeremylongshore/claude-code-plugins-plus-skills
164
Firecrawl是一个强大的网络数据采集API,用于从网站中获取和处理信息。它支持单页抓取、多页爬取、站点地图生成和利用LLM进行结构化数据提取。适用于构建数据管道、自动化内容监控或进行市场数据分析。
查看详情
Firecrawl网络爬取事件处理指南
firecrawl-webhooks-events
jeremylongshore/claude-code-plugins-plus-skills
185
本指南详细介绍了如何使用Firecrawl Webhook处理异步爬取和批量抓取任务的事件。用户无需通过轮询API来获取状态,而是通过配置Webhook端点,实时接收关键事件(如页面抓取、任务完成等)的推送通知。内容涵盖了事件类型、签名验证机制和实时数据流的处理方法,适用于构建高性能的数据爬取管道。
查看详情
网页搜索与内容提取
tavily-web
sickn33/antigravity-awesome-skills
342
该技能利用Tavily API,提供全面的网络搜索、内容提取和网站爬取能力。适用于需要获取实时信息、从特定URL抓取内容或进行深度网站研究等场景,是强大的信息检索增强工具。
查看详情
Apify核心存储与工作流管理
apify-core-workflow-b
jeremylongshore/claude-code-plugins-plus-skills
434
本工具提供对Apify核心存储(数据集、键值存储和请求队列)的全面编程管理能力。它可以执行CRUD操作,实现数据持久化和复杂、多阶段的数据管道编排(例如:爬取→转换→导出)。适用于构建健壮的端到端网络爬取和数据处理自动化工作流。
查看详情
Bright Data爬虫成本优化与管理
brightdata-cost-tuning
jeremylongshore/claude-code-plugins-plus-skills
221
本技能旨在帮助用户优化 Bright Data 的爬取服务成本。提供了详细的成本估算模型、缓存策略和使用量监控代码,指导用户在进行大规模网络数据采集时,选择最合适的产品和最佳的预算管理方案。
查看详情
HasData网络数据爬取提取平台
hasdata
sickn33/antigravity-awesome-skills
357
HasData是一个全面的云平台,用于提取结构化的公共网络数据。它提供三种核心模式:针对任意页面的网页抓取(支持JS渲染)、针对已知平台(如Google、Amazon)的预解析API,以及用于批量或递归爬取的异步爬虫任务。适用于市场调研、电商数据采集、职位信息获取和本地商家信息收集。
查看详情
命令行网络数据爬取工具
hasdata-cli
sickn33/antigravity-awesome-skills
388
这是一个强大的命令行工具,用于实时获取和结构化网页数据。它集成了多种API(如Google搜索、Amazon、房产、旅游预订等),支持用户通过命令行自动爬取、搜索和收集各类信息,非常适用于数据自动化采集、市场调研和内容增强。
查看详情
DeepAPI:网络爬取与研究工作流
deepapi
sickn33/antigravity-awesome-skills
181
本技能集成了DeepAPI,提供专业的网络数据爬取、市场调研和邮件管理功能。它可以从包括网站、领英、GitHub和Twitter在内的多个来源抓取数据,并严格管理API调用成本。适用于需要自动化数据提取和报告的场景。
查看详情
研究伦理与数据透明度指南
newms-transparency-and-data
brycewang-stanford/Awesome-Journal-Skills
319
本指南为新媒体与社会学研究提供了全面的伦理、数据透明度和文档化指导。内容涵盖知情同意、数据去标识化最佳实践、网络爬取法律限制(ToS)以及如何建立高质量的定性或计算研究证据链,确保学术报告的严谨性和可信度。
查看详情
GDPR 合法利益评估
legitimate-interest
lawve-ai/awesome-legal-skills
163
本工具指导您使用GDPR规定的三步测试,完成“合法利益评估”(LIA)。它帮助用户系统性地评估是否可以基于合法利益处理个人数据,特别适用于涉及AI训练、网络爬取、市场营销等高级数据处理场景,确保您的数据合规记录完整。
查看详情
HasData网络数据爬取提取平台
hasdata
sickn33/agentic-awesome-skills
189
HasData是一个全面的云平台,用于提取结构化的公共网络数据。它提供三种核心模式:针对任意页面的网页抓取(支持JS渲染)、针对已知平台(如Google、Amazon)的预解析API,以及用于批量或递归爬取的异步爬虫任务。适用于市场调研、电商数据采集、职位信息获取和本地商家信息收集。
查看详情
命令行网络数据爬取工具
hasdata-cli
sickn33/agentic-awesome-skills
150
这是一个强大的命令行工具,用于实时获取和结构化网页数据。它集成了多种API(如Google搜索、Amazon、房产、旅游预订等),支持用户通过命令行自动爬取、搜索和收集各类信息,非常适用于数据自动化采集、市场调研和内容增强。
查看详情
1
语言
简体中文
English