下载

Skill UI

浏览并发现 10318+ 精选技能

全部编程开发人工智能设计创意产品商业数据科学市场营销职场通用效率工具硬件工程语言学习

搜索 AI爬虫，共找到 26 条记录

默认排序最新上传最多下载

异步Python并发编程模式

async-python-patterns

sickn33/antigravity-awesome-skills

本技能提供全面的指南，用于构建高性能、非阻塞的Python异步应用。它侧重于利用asyncio和async/await实现并发编程模式，特别适用于处理I/O密集型任务，如构建异步API、实时聊天系统或并发网络爬虫，帮助开发者优化工作负载。

浏览器自动化专家

browser-automation

sickn33/antigravity-awesome-skills

擅长 Playwright/Puppeteer 浏览器自动化，排查不稳定测试、构建长期运行的爬虫，强调用户视角定位器、自动等待和测试隔离，规避检测与超时反模式。

Firecrawl爬虫配置与认证

firecrawl-install-auth

jeremylongshore/claude-code-plugins-plus-skills

本指南提供Firecrawl SDK的完整配置教程，涵盖Node.js和Python两种环境。它详细介绍了如何使用npm或pip安装SDK，并指导用户如何通过设置环境变量来安全配置API密钥。适用于需要将网页内容结构化抓取、提取Markdown或构建新爬虫项目的开发场景。

多环境爬虫爬取配置指南

firecrawl-multi-env-setup

jeremylongshore/claude-code-plugins-plus-skills

本技能指导用户如何为Firecrawl配置可靠的多环境（开发、预发布、生产）爬取流程。核心目标是解决跨环境的配置和成本控制问题。内容涵盖了使用Docker进行本地自托管、环境隔离配置，以及构建安全的爬取封装层，确保数据抓取流程的稳定性和成本可控性。

网络爬虫策略与合规防护

firecrawl-policy-guardrails

jeremylongshore/claude-code-plugins-plus-skills

这是一个用于Web爬虫管道的自动化策略防护系统。它能强制执行复杂的爬取规则，包括禁止爬取的域列表、API配额预算控制、内容质量检测（过滤错误页面、内容过少等）以及按域名限速。确保爬取过程合法合规，系统运行稳定，并优化资源消耗。

爬虫可靠性和容错设计

firecrawl-reliability-patterns

jeremylongshore/claude-code-plugins-plus-skills

本技能集提供了在生产环境中构建稳定、高可靠性爬虫管道的模式。涵盖了电路断路器、内容验证、爬取回退机制和指数退避等高级设计，旨在解决爬取超时、内容缺失或API调用失败等常见问题，确保数据提取的连续性和完整性。

PostHog成本优化与事件采样

posthog-cost-tuning

jeremylongshore/claude-code-plugins-plus-skills

本技能旨在提供一套完整的PostHog成本优化方案。通过专业的代码实现，用户可以对事件进行审计、采样和过滤，包括节流高频的自动捕获事件、过滤爬虫机器人流量，以及优化会话记录的采样率，确保在控制成本的同时，依然能获取到高质量的分析数据。

搜索引擎优化基础原理

seo-fundamentals

sickn33/antigravity-awesome-skills

本技能是关于搜索引擎优化（SEO）的全面基础指南。内容涵盖了现代SEO的四大支柱：E-E-A-T内容质量评估、核心网页指标（CWV）、技术SEO实现（如结构化数据和爬虫控制）以及高质量的内容策略。它指导用户从底层原理出发，构建可持续的、高信任度的网络可见性，而非依赖短期技巧。

通用网络数据抓取选择器

apify-ultimate-scraper

sickn33/antigravity-awesome-skills

这是一个AI驱动的通用爬虫选择器工具，帮助用户为复杂的网络数据抓取任务选择最佳的Apify Actor。它覆盖了Instagram、Facebook、TikTok、YouTube、Google Maps等主流平台，提供了一个统一的工作流，确保高效地完成数据提取。

网站技术SEO全面审计

AgriciDaniel/claude-seo

本工具提供全面的技术SEO审计，覆盖了网站可爬取性、可索引性、安全协议、核心网页指标（如LCP、INP）和结构化数据等关键方面。它特别关注现代挑战，如AI爬虫管理、移动优先索引优化和JavaScript渲染的最佳实践，帮助网站提升搜索引擎可见性和用户体验。

AI爬虫访问分析工具

zubair-trabzada/geo-seo-claude

该工具用于分析网站对主要AI爬虫（如GPTBot、ClaudeBot）的访问权限。它检查robots.txt、元标签和HTTP头部，生成完整的访问地图。帮助用户优化网站结构，最大化在AI生成搜索结果中的可见性，同时保持对爬取数据的必要控制。

地理化技术SEO审计

zubair-trabzada/geo-seo-claude

提供面向地理区域的技术SEO审计，涵盖抓取性、索引、HTTPS、安全、性能、SSR与AI爬虫访问，确保搜索与AI平台的可见性。

语言