附录二 NLPIR大数据语义智能分析平台简介
NLPIR大数据语义智能分析平台针对大数据内容采编挖搜的综合需求，融合了网络精准采集、自然语言理解、文本挖掘和语义搜索的最新研究成果，历时18年，服务了全球40万家机构用户，是大数据时代语义智能分析的一大利器。
图3-23 NLPIR大数据语义智能分析平台客户端
NLPIR大数据语义智能分析平台具有13项功能：
1.精准采集：对境内外互联网海量信息实时精准采集，有主题采集（按照信息需求的主题采集）与站点采集两种模式（给定网址列表的站内定点采集功能）。
2.文档抽取：对DOC、EXCEL、PDF与PPT等多种主流文档格式进行文本信息抽取，信息抽取准确度和效率要达到大数据处理的要求。
3.新词发现：从文本中挖掘出新词、新概念，可以用于专业词典的编撰，还可以进一步编辑标注，导入分词词典中，提高分词系统的准确度，并适应新的语言变化。
4.批量分词：对原始语料进行分词，自动识别人名、地名、机构名等未登录词，新词标注以及词性标注，并可在分析过程中导入用户定义的词典。
5.语言统计：针对切分标注结果，系统可以自动地进行一元词频统计、二元词语转移概率统计。针对常用的术语，系统会自动给出相应的英文解释。
6.文本聚类：能够从大规模数据中自动分析出热点事件，并提供事件话题的关键特征描述，同时适用于长文本和短信、微博等短文本的热点分析。
7.文本分类：根据规则或训练的方法对大量文本进行分类，可用于新闻分类、简历分类、邮件分类、办公文档分类、区域分类等诸多方面。(https://www.daowen.com)
8.摘要实体：对单篇或多篇文章自动提炼出内容摘要，抽取人名、地名、机构名、时间及主题关键词，方便用户快速浏览文本内容。
9.智能过滤：对文本内容的语义进行智能过滤审查，内置国内最全词库，智能识别多种变种，包括形变、音变、繁简等多种变形，语义精准排歧。
10.情感分析：针对事先指定的分析对象，系统自动分析海量文档的情感倾向——情感极性及情感值测量，并在原文中给出正负面的得分和句子样例。
11.文档去重：快速准确地判断文件集合或数据库中是否存在相同或相似内容的记录，同时找出所有的重复记录。
12.全文检索：支持文本、数字、日期、字符串等多种数据类型，可进行多字段的高效搜索，支持AND/OR/NOT以及NEAR邻近等查询语法，支持维吾尔语、藏语、蒙语等多种少数民族语言的检索。
13.编码转换：自动识别内容的编码，并把编码统一转换为其他编码。
NLPIR大数据语义智能分析平台提供了客户端工具、云服务与二次开发接口等多种产品使用形式。各个中间件API可以无缝地融合到客户的各类复杂应用系统之中，可兼容Windows、Linux、Android、Maemo5、FreeBSD等不同操作系统平台，可以供Java、Python、C、C#等各类平台开发语言使用。
NLPIR大数据语义智能分析平台白皮书：http：//www.nlpir.org/NLPIR-Parser-WhitePaper.pdf（约3MB）。
NLPIR大数据语义智能分析平台：http：//www.nlpir.org/NLPIR-Parser.zip（约160MB）。