1 个仓库
The process of analyzing sample data to automatically determine patterns for data retrieval.
Distinguishing note: None of the candidates cover the 'learning' aspect of deriving scraping rules from samples.
Explore 1 awesome GitHub repository matching data & databases · Extraction Rule Learning. Refine with filters or upvote what's useful.
Autoscraper 是一个自动 Web 抓取库和基于模式的数据提取器,可从样本数据中学习提取规则。它通过分析样本值来识别和检索网页中的文本、URL 和 HTML 元素,从而在不同 URL 间复制数据模式。 该系统作为一个 Web 抓取模型管理器运行,允许用户保存和重新加载学习到的规则,以保持数据提取的一致性。它支持将抓取规则导出和导入到本地文件系统,以避免对同一网站重复训练过程。 该库通过基于样本的模式学习和位置元素检索,涵盖了自动化 Web 数据提取和 Web 内容采集。它可以检索特定数据点以及页面上所有匹配从初始样本数据中识别出的模式的元素。
Analyzes sample text, URLs, or HTML tags to determine the patterns needed to retrieve similar web elements.