基于Java的低代码主题爬虫的设计与实现

摘要：

网页数据提取是人工智能与大数据相关课题学习与研究的一项重要内容.为了减轻编写主题网络爬虫程序工作,该文在主题爬虫的基础原理上,设计一套通用的Java爬虫程序.程序抽象了下载模块、内容处理模块和结果操作等核心内容,通过注解或xml配置等低代码方式,即可实现不同主题内容爬取工作.

关键词：大数据、Java、主题爬虫、低代码

所属期刊栏目：18

分类号：TP311(计算技术、计算机技术)

资助基金：广东省普通高校重点科研平台2022GCZX009

在线出版日期：2022-12-08（万方平台首次上网日期，不代表论文的发表时间）

页数：共4页

页码：33-36