登录
下载

Skill UI

浏览并发现 9747+ 精选技能
全部 编程开发 人工智能 设计创意 产品商业 数据科学 市场营销 职场通用 效率工具 硬件工程 语言学习
搜索 爬虫 ，共找到 51 条记录
默认排序 最新上传 最多下载

Apify：运行爬虫和数据提取

apify-hello-world
jeremylongshore/claude-code-plugins-plus-skills
143
本指南详细介绍了如何使用Apify Client SDK。学习执行远程爬虫任务（如内容爬取和网页抓取），掌握处理异步运行状态，并从爬取结果的数据集和键值存储中提取结构化数据。是实现网页抓取功能的关键技能。
查看详情

本地Apify爬虫开发与测试

apify-local-dev-loop
jeremylongshore/claude-code-plugins-plus-skills
412
本指南指导用户如何在本地环境中设置和运行Apify Actor。它通过模拟平台完整的运行环境（如数据集、KV存储），使开发者可以在不部署的情况下，进行快速的开发、测试和调试，确保爬虫的稳定性和可靠性。
查看详情

Apify 爬虫性能调优指南

apify-performance-tuning
jeremylongshore/claude-code-plugins-plus-skills
363
本技能指导用户如何优化 Apify Actor 的性能。涵盖了选择合适的爬虫（如 Cheerio 或 Playwright）、调整并发限制、管理内存使用，以及部署代理轮换策略，帮助用户解决爬取速度慢、资源消耗大或被目标网站封禁的问题，实现高效稳定的数据采集。
查看详情

Apify SDK与客户端最佳实践

apify-sdk-patterns
jeremylongshore/claude-code-plugins-plus-skills
307
本指南提供了使用Apify SDK和apify-client构建生产级应用的全面实践指南。涵盖了包括客户端单例模式、选择合适的Crawlee爬虫（Cheerio, Playwright, Puppeteer）、健壮的Actor生命周期管理，以及数据集和键值存储操作等高级主题，确保自动化流程的稳定性和可维护性。
查看详情

Apify SDK升级与迁移指南

apify-upgrade-migration
jeremylongshore/claude-code-plugins-plus-skills
323
本指南详细指导开发者如何安全地升级和迁移Apify的核心组件，包括apify-client、apify和crawlee。它特别侧重于处理重大的API变更，例如从Apify SDK v2到v3的迁移，了解爬虫功能分离到'crawlee'的关键步骤。涵盖了版本检查、依赖管理和代码重构的最佳实践。
查看详情

Bright Data CI/CD GitHub 集成

brightdata-ci-integration
jeremylongshore/claude-code-plugins-plus-skills
302
本技能用于为爬虫项目配置完整的CI/CD自动化测试流程。它指导用户如何使用GitHub Actions集成Bright Data，实现单位测试和实时的集成测试。这确保了代码在每次提交和拉取请求时，都能在模拟和真实代理环境中进行全面验证。
查看详情

Bright Data数据采集与爬虫API

brightdata-core-workflow-b
jeremylongshore/claude-code-plugins-plus-skills
284
利用Bright Data的SERP API和Web Scraper API，实现结构化搜索结果和大规模数据的批量采集。支持同步获取主流搜索引擎的JSON数据，并可触发异步爬取任务，适用于市场调研、SEO分析等数据爬取场景。
查看详情

Bright Data 网页数据爬取指南

brightdata-hello-world
jeremylongshore/claude-code-plugins-plus-skills
331
本指南详细介绍了如何使用 Bright Data 的 Web Unlocker 代理进行网页爬取。它展示了如何绕过 CAPTCHA、指纹识别等复杂的反爬机制。内容提供了 Node.js 和 Python 两种语言的代码示例，指导用户通过代理端点或 REST API 实现数据抓取，适用于构建专业的爬虫或数据采集系统。
查看详情

配置Bright Data代理认证

brightdata-install-auth
jeremylongshore/claude-code-plugins-plus-skills
142
本指南提供了完整的Bright Data集成流程，指导用户获取区域凭证、设置环境变量和SSL证书。它详细介绍了如何为Node.js和Python环境配置代理认证，确保在进行网络爬虫时能够稳定、可靠地访问数据。
查看详情

Bright Data生产部署检查清单

brightdata-prod-checklist
jeremylongshore/claude-code-plugins-plus-skills
208
本清单提供了一套全面的Bright Data爬虫集成在生产环境的部署流程指南。它涵盖了从生产区域验证、代码质量审计（如重试机制、错误日志）、基础设施配置、实时监控设置到灰度发布及回滚操作等关键环节，确保数据采集流程安全、稳定地上线运行。
查看详情

Bright Data限速处理与重试机制

brightdata-rate-limits
jeremylongshore/claude-code-plugins-plus-skills
93
本技能集专注于解决使用Bright Data服务进行大规模网络爬取和API数据采集时遇到的速率限制（Rate Limit）和限流问题。它指导如何使用并发队列控制请求并发数，实现指数退避（Exponential Backoff）重试机制，并针对Bright Data的特定API触发点进行精确的限流控制，确保爬虫任务的稳定性和可靠性。
查看详情

Bright Data 爬虫系统架构

brightdata-reference-architecture
jeremylongshore/claude-code-plugins-plus-skills
387
本模板提供了一套生产级的、完整的爬虫系统参考架构。它涵盖了使用 Bright Data 全套工具（如Web Unlocker、Scraping Browser）进行数据采集的完整流程，包括项目结构设计、代理管理、数据清洗和存储流水线（Pipeline）的最佳实践，适用于Node.js/TypeScript开发场景。
查看详情
上一页12345下一页
语言
简体中文
English