软件下载帮助文档新闻资讯

Skill UI

浏览并发现 16598+ 精选技能

全部编程开发人工智能设计创意产品商业数据科学市场营销职场通用效率工具硬件工程语言学习

搜索爬虫，共找到 56 条记录

默认排序最新上传最多下载

Bright Data 爬虫系统架构

brightdata-reference-architecture

jeremylongshore/claude-code-plugins-plus-skills

本模板提供了一套生产级的、完整的爬虫系统参考架构。它涵盖了使用 Bright Data 全套工具（如Web Unlocker、Scraping Browser）进行数据采集的完整流程，包括项目结构设计、代理管理、数据清洗和存储流水线（Pipeline）的最佳实践，适用于Node.js/TypeScript开发场景。

Bright Data数据采集模式

brightdata-sdk-patterns

jeremylongshore/claude-code-plugins-plus-skills

本指南提供了生产级的Bright Data代理集成模式，用于构建稳定可靠的网络爬虫。内容涵盖了代理客户端配置、实现带重试机制的请求逻辑、会话IP管理，以及使用Cheerio和Python进行HTML数据解析，适用于任何需要大规模数据采集的场景。

网站架构技术SEO审计

indexing-issue-auditor

sickn33/antigravity-awesome-skills

这是一个高级技术SEO审计工具，用于深度分析网站的爬虫健康状况、索引错误、站点地图完整性及结构性问题。它能够诊断“未索引”的根本原因，包括爬取预算浪费、内部链接流失、以及服务端渲染（SSR）和客户端渲染（CSR）的兼容性问题，从而提供完整的网站优化和重构路线图。

SerpApi搜索服务架构设计

serpapi-reference-architecture

jeremylongshore/claude-code-plugins-plus-skills

本参考架构为使用SerpApi构建大规模、生产级搜索功能提供蓝图。它涵盖了关键组件，包括缓存层（Redis）、多引擎抽象、SERP结果监测流程、速率限制及API使用额度管理。适用于设计高级搜索组件、SEO爬虫工具或复杂的搜索驱动型应用。

HasData网络数据爬取提取平台

sickn33/antigravity-awesome-skills

HasData是一个全面的云平台，用于提取结构化的公共网络数据。它提供三种核心模式：针对任意页面的网页抓取（支持JS渲染）、针对已知平台（如Google、Amazon）的预解析API，以及用于批量或递归爬取的异步爬虫任务。适用于市场调研、电商数据采集、职位信息获取和本地商家信息收集。

粘贴站泄露凭证监控

gather-customer-information

mukul975/Anthropic-Cybersecurity-Skills

本工具用于自动化监控Pastebin、GitHub Gists等粘贴站，实时检测泄露的凭证、API密钥和敏感数据。通过结合爬虫技术、关键词匹配和正则表达式，帮助用户尽早发现数据泄露事件，进行有效的安全响应。

网页结构化数据提取

browser-extract

本技能用于从渲染的网页中提取结构化数据，包括文本、表格和属性值。它增强了传统爬虫能力，要求所有提取的字符串必须经过AIDefence的PII和提示注入安全检测，确保数据安全。支持创建可复用的提取模板，并能进行单次查询。

网页浏览器自动化驱动

agentscope-ai/QwenPaw

这是一个用于异步Python的浏览器自动化SDK。它允许开发者模拟用户在真实浏览器上的操作，实现网页导航、元素定位、表单填写和数据抓取。核心工作流程是“感知→行动→验证”，适用于构建复杂的爬虫程序和端到端功能测试。

上一页 1 2 3 45

语言