首页 >
自然语言生成
✍ dations ◷ 2024-12-22 19:53:49 #自然语言生成
自然语言生成(NLG)是自然语言处理的一部分,从知识库或逻辑形式(英语:Logic Form (Linguistics))等等机器表述系统去生成自然语言。这种形式表述当作心理表述的模型时,心理语言学家会选用语言产出(英语:language production)这个术语。自然语言生成系统可以说是一种将资料转换成自然语言表述的翻译器。不过产生最终语言的方法不同于编译程式,因为自然语言多样的表达。NLG出现已久,但是商业NLG技术直到最近才变得普及。自然语言生成可以视为自然语言理解的反向: 自然语言理解系统须要厘清输入句的意涵,从而产生机器表述语言;自然语言生成系统须要决定如何把概念转化成语言。一个简单的例子是套用信函的生成系统。这种系统通常没有运用文法的知识,但是可以生成信函给消费者,例如告诉消费者信用卡的额度已达。换言之,简单的系统运用版型,跟Word文件的邮件合并程式没什么差别,但是更复杂的NLG系统会灵活地产生文本。正如自然语言处理的其它领域,自然语言生成可以使用明确的语言模型(例如文法)或者运用根据真人所写的文本分析而成的统计模型。“苏格兰花粉预报系统”就是一个基于版型的简单自然语言生成系统。该系统利用苏格兰几个区域花粉预报的六个输入数目,生成简短的花粉等级文本作为输出。例如使用2005年7月1日的历史资料,该软件的输出:星期五花粉等级已从昨天的中级到今天的高级,全国大部分地区的数值在6到7。不过北部是中级,数值为4。对比实际的预报(气象员手拟)如下:苏格兰大部分地区花粉量还是很高,为6级,东南部更是7级。只有北方岛屿及苏格兰东北角情况舒缓,花粉量中等。生成文本的过程可以简单到取用已准备好的章句,再用连结的文字组合起来。在简单的领域如占星机器或个人化商业信件,成果可能令人满意。不过复杂的自然语言生成系统必须经过规划以及合并资讯的步骤,从而生成看似自然并且避免重复的文本。自然语言生成典型的步骤,例如戴尔与瑞特所提出的如下:决定内容(英语:Content determination):决定在文本里置入哪些资讯。用上一节花粉预报软件为例,是否要明确提到东南部花粉级数为7。架构文件(英语:Document structuring):所传达资讯的整体组织。例如决定先描述高花粉量地区,再提及低花粉量地区。聚集语句(英语:Aggregation (linguistics)):合并类似的句子,让文本更可读、更自然。例如合并下两个句子“星期五花粉等级已从昨天的中级到今天的高级”和“全国大部分地区的花粉等级在6到7”成为“星期五花粉等级已从昨天的中级到今天的高级,全国大部分地区的数值在6到7。”选择字词(英语:Lexical choice):选用表达概念的文字。例如决定要用“中等”还是“中级”。指涉语生成(英语:Referring expression generation):产生能辨认物体或地区的指涉语(英语:referring expression (RE))。例如用“北方岛屿和苏格兰东北角”指涉苏格兰的某个地区。这个任务也包括决定代名词以及其它的照应语(英语:Anaphora (linguistics))。实现文本(英语:realization (linguistics)):根据语法学、构词学、正写法的规则产生实际的文本。大众媒体向来以报导会说笑话的NLG系统为重点(参见“计算幽默(英语:computational humor)”),不过从商业的角度,最成功的NLG应用是从数据库或资料集产生文字摘要的“资料转文本”系统,这些系统通常除了文字生成外,也进行资料分析,特别是几个已经建成的从气象资料产生气象报告文的系统。此类系统最早是加拿大的FoG,于1990年代开始制作英、法语的气象报告,其成功引领了其它研究和商业系统。近年的一个研究显示,使用者有时候偏好电脑产生的气象报告,因为使用的术语比较一致。另一个研究显示统计的技巧可以用来生成高品质的气象报告。1990年代自然语言生成开始用于财金和商业摘要。例如AC尼尔森研发的SPOTLIGHT系统,分析大量零售资料然后自动产生可读的英文。更近的NLG也用于摘要电子医疗记录,已有商业应用问世,研究人员已显示NLG摘要的医疗资料可以有效辅助医疗专业人员做决定。内容生成系统可以辅助真人作者,让写作过程更有效率。例如利用搜索引擎应用界面,基于网络探勘(英语:web mining)建立的内容生成工具,模拟作者根据各种搜寻结果形成内容,有如剪贴的写作场景。相关度的验证,对于过滤不相关的搜寻结果至为重要,方法基于匹配问题与可能答案的语法树。另一种方法利用真人写的文本建立高层次结构的版型,然后自动写成维基百科新的条目。自然语言生成的研究人员需要测试他们的系统、模组、算法,一如其它的科学领域。这叫做“评量”。评量NLG系统的基本技巧有三种:“任务型评量”虽然较接近NLG系统助人的终极目标,但是费时耗财,而且可能实行困难(尤其涉及医生之类的专家对象),因此(一如自然语言处理的其它领域)“任务型评量”是例外而非主流。
相关
- 酗酒酗酒(英语:alcoholism),又称酒精使用疾患(alcohol use disorder, AUD)或酒精依赖症候群(alcohol dependence syndrome),其为饮用酒精所致相关问题的广义用语,过去将之分成酒精滥用(英语
- 过敏性鼻炎过敏性鼻炎,又称为鼻敏感、干草热、花粉热、花粉症或季节性过敏性鼻炎,是因为免疫系统受到空气中的过敏原影响而导致的鼻炎症状。征兆和病症包括流鼻涕或鼻塞、打喷嚏、眼睛的
- 头孢烯头孢烯(英语:Cephem)是一类不饱和的β-内酰胺抗生素的统称,其核心结构包括有一个β-内酰胺四元环和含硫的不饱和六元环,结构上分为头孢菌素和头霉素两类,头霉素比头孢菌素多一个7
- 尼阿西斯尼阿西斯(英语:Panyassis),约活动于公元前5世纪前后。古希腊史诗诗人之一,哈里卡尔纳苏斯人,希罗多德的叔父,著有14卷本《赫拉克勒斯的故事》和《伊奥尼亚诸城的建立》。前者现存少
- 美国食品药品监督局美国食品药品监督管理局(英语:U.S. Food and Drug Administration,缩写为FDA)为美国卫生与公众服务部直辖的联邦政府机构,其主要职能为负责对美国国内生产及进口的食品、膳食补充
- 酸度系数酸度系数(英语:Acid dissociation constant,又名酸解离常数,代号Ka、pKa、pKa值),在化学及生物化学中,是指一个特定的平衡常数,以代表一种酸解离氢离子的能力。该平衡状况是指由一种
- 伊利诺伊大学厄巴纳-香槟分校伊利诺伊大学厄巴纳-尚佩恩分校(英语:University of Illinois at Urbana-Champaign,简称U of I,亦简称作UIUC)位于美国伊利诺伊州厄巴纳-尚佩恩市,是一所享有世界声望的一流公立研究
- 阿列省阿列(法文:Allier)是法国的一个省(编号03),位于法国中央。属于奥弗涅大区。阿列省的名字来自于横贯该省的阿列河。阿列省包括波旁王朝的老家,过去的行省波旁。阿列省是1790年3月4日
- 肿瘤基因癌基因,也称为致癌基因(英语:Oncogene)是一类能使正常细胞转化为癌细胞的基因。一般地,癌基因是功能出现异常的原癌基因(英语:Proto-oncogene)。原癌基因一般与细胞的增殖生长相关,功
- 摩尔多瓦人摩尔多瓦人是欧洲摩尔多瓦共和国的主体民族,大约占该国人口的76%。该民族以摩尔多瓦语(摩尔多瓦语并非独立语言,而是罗马尼亚语的分支)为母语。在历史上,摩尔多瓦长期与罗马尼亚