话语关系是指将两个或多个文本片段(如从句、句子或更大的单位)连接成连贯话语的语义或语用联系。这些关系解释了某一片段的意义如何依赖或关联于另一片段,使读者或听者能够将文本理解为一个统一的整体,而非孤立的句子。常见例子包括因果关系、对比关系、阐述关系和时序关系。这一概念是话语分析、文本语言学和计算语言学研究的基础,在文本摘要、机器翻译和自然语言生成等任务中发挥着支撑作用。
话语关系通常是隐性的,需要读者从语境中推断其联系;也可能是显性的,由话语标记或连接词(如“因为”、“然而”或“例如”)标示。在形式化理论中,这些关系通常表示为结构化的图或树,其中节点为文本片段,边则标注具体的关系类型。最具影响力的框架是修辞结构理论(RST),由威廉·曼和桑德拉·汤普森于20世纪80年代在南加州大学信息科学研究所提出。RST定义了包含二十多种关系的分类体系,包括动机、证据和让步等,并已被广泛采用于理论研究和计算工作中。
理论基础
话语关系的研究借鉴了多种学术传统。在语言学中,韩礼德和哈桑在20世纪70年代关于衔接的研究识别了将句子联系在一起的语法和词汇手段,如指代、省略和连接。后来,受保罗·格赖斯等哲学家影响的形式语义学和语用学强调了说话者意图和推断在建立连贯性中的作用。20世纪90年代,邦妮·韦伯和阿文德·乔希等计算语言学家开发了宾州话语树库,该树库基于话语连接词的词汇化方法,在《华尔街日报》语料中标注了超过40,000个话语关系。这一资源成为训练和评估自动话语解析器的标准基准。
另一个关键的理论贡献是分段话语表征理论(SDRT),由尼古拉斯·阿舍和亚历克斯·拉斯卡里德斯在21世纪初提出。SDRT在形式逻辑框架内建模话语关系,能够解决歧义问题,并表征关系之间的复杂交互,例如一种关系嵌入另一种关系的情况。该理论在计算语义学和对话系统开发中具有重要影响。
计算方法
在计算语言学中,话语解析是自动识别文本话语结构的任务,包括将文本分割为基本话语单元以及标注它们之间的关系。早期系统依赖手工规则和浅层特征,如连接词的存在和句法模式。随着机器学习和神经网络模型的出现,性能显著提升。现代方法使用基于变换器的架构,如BERT风格编码器,以学习文本片段的上下文表征,并以监督方式预测关系,在RST话语树库和宾州话语树库等基准数据集上通常能达到较高准确率。
这些计算模型是许多下游应用的核心组成部分。在大型语言模型系统中,话语关系在海量文本语料预训练期间被隐式学习,使其能够生成连贯的段落并保持主题连续性。然而,对于需要结构化推理的任务,如议论文评分、法律文档分析和问答系统,显式建模话语关系仍然具有价值。例如,在生成式AI系统中,控制话语关系可以改善生成文本的逻辑流畅性,减少话题漂移或矛盾陈述等问题。
应用与挑战
话语关系在多个领域具有实际应用。在自动摘要中,识别阐述或因果等关系有助于提取最显著的信息并将其压缩为简洁摘要。在机器翻译中,跨语言保持话语关系对于生成自然准确的译文至关重要,尤其是对于连接词系统不同的语言。在对话系统和会话式AI中,理解话语关系使系统能够跟踪用户意图并提供连贯响应,这一能力正由OpenAI和Anthropic等公司在其最新模型中积极追求。
尽管取得了进展,仍存在若干挑战。隐性话语关系(即没有显式连接词的情况)即使对最先进的模型也极难识别。话语关系的标注也具有主观性,某些关系类型的标注者间一致性较低,这使训练和评估复杂化。此外,话语结构因体裁和语言而异,要求模型适应不同惯例。跨语言话语解析以及以更原则化方式将话语信息整合到深度学习模型中的研究仍在继续。
与其他领域的关系
话语关系与语言学及认知科学中的其他概念密切相关。在语用学中,它们与连贯性和关联性理论(如斯珀伯和威尔逊的关联理论)相关。在心理学中,它们作为阅读理解的一部分被研究,其中推断话语关系的能力是熟练阅读的关键组成部分。在人工智能中,话语关系是一种结构化知识形式,可以补充神经网络模型学到的统计模式。梅兰妮·米切尔和约书亚·特南鲍姆等研究者认为,包括话语关系在内的显式符号结构可能对于实现稳健且可解释的AI系统是必要的,这一观点与纯数据驱动方法形成对比。
话语感知AI系统的开发是一个活跃的研究领域,贡献来自斯坦福AI实验室和MIT CSAIL等学术实验室以及工业研究团队。将话语关系整合到大型语言模型的训练和推理中被视为改善生成文本连贯性和可靠性的有前景方向,尤其适用于长篇幅内容和复杂推理任务。随着模型能力不断增强,话语结构的显式表征可能在确保AI系统有效沟通和理解细微人类语言方面发挥越来越重要的作用。
参见
参考文献
Mann, W. C., & Thompson, S. A. (1988). Rhetorical Structure Theory: Toward a functional theory of text organization. Text, 8(3), 243-281.
Webber, B., & Joshi, A. (1998). Anchoring a lexicalized theory of discourse. In Proceedings of the 36th Annual Meeting of the Association for Computational Linguistics.
Asher, N., & Lascarides, A. (2003). Logics of Conversation. Cambridge University Press.