Ayakashi.io

• Ayakashi Core：这是 Ayakashi.io 的核心引擎，负责管理抓取和自动化流程。 它包括一个用于定义抓取工作流的高级 API，以及用于与 DOM 交互和发出 HTTP 请求的低级 API。
  
  
• Ayakashi 浏览器：这是一个基于 Puppeteer 或 Playwright 的无头浏览器，用于自动化 Web 交互，例如表单提交和按钮点击。 它支持多个选项卡，可用于抓取动态网页和 SPA。
  
  
• Ayakashi 选择器：这是一组功能强大且灵活的类 CSS 选择器，可让您轻松地从网页中提取数据。 Ayakashi 选择器支持各种类型的选择器，包括元素选择器、属性选择器、伪选择器和组合器。
  
  
• Ayakashi 实体：这些是用户定义的数据模型，代表您要从网页中提取的数据。 Ayakashi 实体可以使用简单直观的 API 进行定义，并可用于提取结构化数据，例如产品信息或联系方式。
  
  
• Ayakashi 插件：这些是扩展 Ayakashi.io 功能的可选模块。 它们可用于将 Ayakashi.io 与第三方库和服务集成，添加自定义选择器或实体，或实施自定义数据管道。
  

• 易于使用：Ayakashi.io 提供了一个简单直观的 API，用于定义抓取工作流和从网页中提取数据。 其强大而灵活的选择器引擎使您能够轻松提取数据，即使是从复杂和动态的网页中也是如此。
  
  
• 模块化：Ayakashi.io 的架构设计为模块化和可扩展的，使您可以轻松地将其与其他库和服务集成或通过插件添加自定义功能。
  
  
• 可扩展性：Ayakashi.io 可以轻松处理大规模的抓取任务，这要归功于它对并行化和分布式抓取的支持。 您可以轻松配置 Ayakashi.io 以并行或跨多台机器运行多个实例，以加速抓取任务。
  
  
• 健壮性：Ayakashi.io 被设计为健壮和容错的，具有内置的错误处理和重试机制，确保抓取任务即使在出现错误或网络中断时也能继续。
  
  
• 无头浏览器支持：Ayakashi.io 支持 Puppeteer 和 Playwright 等无头浏览器，这使其能够抓取传统抓取技术不易抓取的动态网页和单页应用程序 (SPA)。
  
  
• 数据提取：Ayakashi.io 允许您使用其实体系统以结构化方式提取数据。
  

• Node.js 依赖：Ayakashi.io 建立在 Node.js 之上，这意味着它可能不是喜欢其他编程语言或平台的开发人员的最佳选择。
  
  
• 有限的社区支持：Ayakashi.io 是一个相对较新的框架，这意味着与 Scrapy 或 Beautiful Soup 等更成熟的框架相比，它拥有更小的社区和更少的第三方支持。
  
  
• 有限的文档：虽然 Ayakashi.io 拥有全面的 API 文档，但新用户可能难以开始使用该框架，因为在线教程和指南有限。
  
  
• 有限的代理支持：Ayakashi.io 对代理的内置支持有限，可能需要额外的配置才能使用某些类型的代理。
  
  
• 成本：虽然 Ayakashi.io 提供免费版本，但一些高级功能（例如运行多个并发抓取工具的能力）需要付费许可证。 许可证的费用可能是某些用户的考虑因素。