面向网络新闻的爬虫开发与热点新闻事件分析

摘要：

Python平台开发了网络新闻爬虫,通过实验对比常用的网页数据获取方法,本文提出一种适合新闻网页的解析方式,克服了获取动态网页时源码不完整、单一方法解析网页效率低下等弊端,满足了新闻网页抓取、解析、结构化和入库存储等需求.并将新浪新闻中心作为网络新闻数据采集的目标,分析发现新浪新闻近几年的发展情况.此外,利用词频统计等手段对十九大会议新闻进行分析,直观地反映了十九大的核心人物、关键党派、热点话题变化等重要信息.

关键词：网络爬虫、网络新闻、事件分析、十九大

所属期刊栏目：42

分类号：P208(一般性问题)

资助基金：国家自然科学基金;国家重点实验室开放基金

在线出版日期：2019-04-22（万方平台首次上网日期，不代表论文的发表时间）

页数：共5页

页码：100-103,108