PlatformBundle

Gather Platform 数据抓取平台是一套基于 Webmagic 内核的,具有 Web 任务配置和任务管理界面的数据采集平台,一个轻量级的搜索引擎系统。具有以下功能 根据配置的模板进行数据采集 对采集的数据进行NLP处理,包括:抽取关键词,抽取摘要,抽取实体词 自定义任务循环执行周期,一次定义,无人值守,自动采集 在不配置采集模板的情况下自动检测网页正文,自动抽取文章发布时间 动态字段抽取与静态字段植入 已抓取数据的管理,包括:搜索...

相关文章

加载中

暂无相关内容

返回顶部
顶部