创新古汉语解析技术:基于大模型的智能理解方法
2025-02-07 14:16
No.1337426715701682176
技术概要
PDF全文
本项技术革新提出了一种依托于大型语言模型的古汉语智能解析方法。该方法通过运用检索增强生成技术构建历史信息知识库,并在此基础上,设计出一系列紧密相连的链式思维提示机制,旨在引导大型语言模型更精准地理解和解析古汉语文本。
背景技术
随着全球化进程的加快和文化交流的深入,古代汉语作为中华文化的瑰宝,其重要性日益凸显。古代汉语不仅是研究中国历史、哲学和文学的重要工具,也是传承中华文明、增强文化自信的重要载体。然而,理解古汉语会存在许多挑战,例如语料库稀缺、语言结构复杂、词义多变以及历史文化背景深厚,这些都增加了理解的难度。因此,准确理解和翻译古代汉语对于促进文化交流、深化历史研究具有重要意义。 目前理解古代汉语句子的关键任务包括词义消歧和文本翻译。词义消歧旨在根据其上下文选择多义词最合适的含义。对于文本翻译,传统方法采用编码器-解码器方法来实现句子的直译。但是,由于历史背景不足,传统模型经常出现语义不准确的问题。此外,这些模型通常需要计算编码技能,这限制了它们的可访问性并降低了它们对教育场景的适用性。 针对词义消歧和文本翻译,现有的技术方案有以下方法: a)在词义消歧部分,其主要是将其视为分类问题,使用包含上下文和词注释的词嵌入方法,并利用K最邻近来推断单词ji的含义; b)在文本翻译部分,其主要是利用特定的预训练模型,采用编码器—解码器的框架来完成文本翻译任务。 随着大模型的出现,它们可以通过提供丰富的历史背景,并于用户进行互动,并增强语言理解能力,从而提高生成内容的可解释性。但是,大模型有时会产生虚假内容,这可能在教育场景中误导用户。此外,大模型推理过程需要高昂的计算成本,并且其训练和部署也消耗大量资源。 另一方面,评估大模型的生成能力对于衡量其有效性至关重要。总的来说,当前用于评估生成内容质量的指标通常分为以下几类: a)基于词重叠的评价指标,通过评估翻译文本与标准翻译之间的分词重叠来衡量质量; b)基于词向量的评价指标,将文本转换为向量表示,在低维语义空间进行比较; c)基于语言模型的评价指标,利用预训练模型评估翻译文本与标准翻译之间的语义和语法的一致性。 然而,基于词重叠的评价指标要求翻译的精准性,无法识别同义字段,且高度依赖于外部数据库;基于词向量的评价指标对词汇的多义性考虑不足,同时也忽略了语序和句法结构;基于语言模型的评价指标,其虽缓和了上述两种方法的局限性,但还是无法解决包含有用但额外的信息以及对原词过于详细的解释的情况。
实现思路
阅读余下40%
技术概要为部分技术内容,查看PDF获取完整资料
该技术已申请专利,如用于商业用途,请联系技术所有人!
技术研发人员:
吴斌  魏钰婷  孟奇
技术所属: 北京邮电大学
相关技术
电脑主机的温度控制方法、系统、装置及储存介质 电脑主机的温度控制方法、系统、装置及储存介质
用于SaaS软件的数据库复制方法及系统 用于SaaS软件的数据库复制方法及系统
一种基于ITSM平台的任务调度方法与系统 一种基于ITSM平台的任务调度方法与系统
基于视觉文本联合建模的共指消解、词义消歧方法及系统 基于视觉文本联合建模的共指消解、词义消歧方法及系统
一种基于数字孪生的设备故障检测方法及系统 一种基于数字孪生的设备故障检测方法及系统
一种自动化信息安全渗透测试平台 一种自动化信息安全渗透测试平台
一种基于视觉算法的无人机回收方法、装置、设备及介质 一种基于视觉算法的无人机回收方法、装置、设备及介质
一种基于边缘智控的能源设备数据监测方法及系统 一种基于边缘智控的能源设备数据监测方法及系统
一种宏观尺度不可移动文物地震灾害风险图构建方法及系统 一种宏观尺度不可移动文物地震灾害风险图构建方法及系统
基于数据分析的实物仿真系统用数据恢复方法 基于数据分析的实物仿真系统用数据恢复方法
技术分类
电信、广播电视和卫星传输服务 电信、广播电视和卫星传输服务
互联网软件服务 互联网软件服务
集成电路设计 集成电路设计
信息集成数字服务 信息集成数字服务
电气机械制造 电气机械制造
计算机、通信、电子设备制造 计算机、通信、电子设备制造
医药制造、生物基材料 医药制造、生物基材料
石油煤矿化学用品加工 石油煤矿化学用品加工
化学原料制品加工 化学原料制品加工
非金属矿物加工 非金属矿物加工
金属制品加工 金属制品加工
专用设备制造 专用设备制造
通用设备制造 通用设备制造
通用零部件制造 通用零部件制造
汽车制造业 汽车制造业
铁路、船舶、航天设备制造 铁路、船舶、航天设备制造
电力、热力生产和供应 电力、热力生产和供应
燃气生产和供应 燃气生产和供应
水生产和供应 水生产和供应
房屋建筑、土木工程 房屋建筑、土木工程
交通运输、仓储和邮政 交通运输、仓储和邮政
农、林、牧、渔业 农、林、牧、渔业
采矿业 采矿业
农副、食品加工 农副、食品加工
烟草、酒水加工 烟草、酒水加工
纺织皮具居家制品 纺织皮具居家制品
文教体娱加工 文教体娱加工
苏ICP备18062519号-5 © 2018-2025 【123技术园】 版权所有,并保留所有权利