高并发汉英信息抽取系统的设计与实现

摘要：

随着大数据时代的来临,如何从海量数据中抽取出最有效的信息成为人们最迫切的需要.为了能够在大数据的环境下更好更快地进行汉英文本的信息抽取,文中采用Python编程语言,Django+uWSGI+Nginx框架,基于TextRank的图排序算法实现汉英文本信息抽取系统.该系统包含文本关键词提取,文本关键短语提取以及文本摘要提取.测试结果表明,该系统能够实现大规模数据的高并发稳定调用,在兼顾抽取质量的同时,还能实现超高效率的信息抽取,具有很好的实际应用价值.

关键词：大数据、高并发、信息抽取、TextRank、uWSGI、Nginx、Django

所属期刊栏目：42

分类号：TN912.34-34;TP391

资助基金：国家自然科学基金资助项目61762084;国家自然科学基金资助项目61662077;国家自然科学基金资助项目61462083;国家自然科学基金资助项目61331011;新疆多语种信息技术实验室开放课题2016D03023

在线出版日期：2019-08-27（万方平台首次上网日期，不代表论文的发表时间）

页数：共5页

页码：104-107,111