第105章 没有低级的专利(2/3)
既然二者都是自动文本摘要,那么这两者的技术框架就都可以概括为:
内容表示→权重计算→内容选择→内容组织。
1内容表示是将原始文本划分为文本单元的过程,主要是分字、词、句等预处理工作;
内容表示的主要目的是通过预处理将原始文本处理成算法容易进行分析的形式。
2权重计算则是要对文本单元即预处理后原始文本计算相应的权重评分,权重的计算方式多样,如基于特征评分、序列标注、分类模型等提取内容特征计算权重。
这个步骤的目的是通过这一系列计算完成对预处理后的原始文本实现初步分析。
3内容选择是对经过计算权重后的文本单元即经过步骤2权重分析过的文本选择相应的文本单元子集组成摘要候选集,可根据要求的摘要长度、线性规划、次模函数、启发式算法等选择文本单元;
4内容组织是指对候选集的内容进行整理形成最终摘要,可根据字数要求按顺序输出,也有研究者提出使用基于语义信息、模板和神经网路学习的方法来产生符合要求的摘要。
p:……通俗理解的话,2有点类似于进行文章阅读概括的时候,找出关键段落;
3类似于在2的基础上进一步找出关键句、关键词的过程;
4则类似于确定关键句、关键词之后用合适的语言形成最终阅读概括的过程
从技术框架的这几个层次的对应描述来看,可以看出无论是权重计算还是内容选择抑或是内容组织此三者都是很重要的。
如果搞不定权重计算和内容选择的话则根本搞不清楚摘要的时候具体对文本哪些地方进行摘要。
毕竟一篇文章不是所有的地方都是重点,就像我们进行阅读概括的时候,一般都会将注意力放在首段末段和每段开头结尾处,可以说权重计算和内容选择所起的作用就是判断要处理的文本的对应文本特征点主要集中在什么位置。
如果搞不定内容组织的话即便能够找出文本特征最密集的地方也没办法得到合理通顺的文本摘要。
内容表示相对于此三者则显得不怎么重要。
正因为上述的分工,如果涉及到文本摘要的东西要分层次的话。
那么和权重计算、内容选择、内容组织这三者相关的专利都可以说是文本摘要这个体系中的高级专利。
而和内容表示有关的专利则是低级专利。
而《文本判断甄别比较的一种新方法本质上是用来甄别原始文本的
本章未完,点击下一页继续阅读。