一种多输入中文拼写纠错方法、系统、电子设备及介质
2025-02-23 10:26
No.1343167258960338944
技术概要
PDF全文
本技术涉及自然语言处理技术领域,公开了一种多输入中文拼写纠错方法、系统、电子设备及介质,方法包括:获取不同类型的拼写纠错模型针对同一个待纠错句子输出的纠错结果;根据提示词模板和各个纠错结果组成的候选集合确定提示词;将提示词输入至大语言模型,确定输出结果;根据输出结果确定待纠错句子的正确中文拼写结果。本申请集合了多个不同类型的拼写纠错模型的纠错结果融入到提示词中,作为大语言模型的输入,提高了正确结果在集合中的召回率,另外,本申请通过特定的提示词模板,使得大语言模型不会直接生成纠错的句子,而是生成提示词模板对应的输出结果,从而有效避免大语言模型自由生成的纠错结果与原句存在较大的语义偏差。
背景技术
拼写纠错任务旨在发现输入文本中的错误的字词并且进行改正,是自然语言处理(Natural Language Processing,NLP)中一个重要的研究方向,在光学字符识别(OpticalCharacter Recognition,OCR)、语音识别(Automatic Speech Rccognition,ASR)、编辑审核等场景下被广泛使用。因为识别算法精度和人工输入的准确性等原因,这些场景下会出现大量存在拼写错误的文本,这些带有错误的文本会严重影响下游任务。为了解决文本中的拼写错误问题,往往需要大量的领域专家対输入文本进行人工纠错,人工纠错的方法存在投入大,效率低下等痛点。 现有技术为了解决人工纠错效率低下的问题,通过会使用大语言模型来协助完成纠错任务,随着ChatGPT在过去两年表现出的优异效果,大语言模型(Large LanguageModels,LLM)在许多NLP任务上被证明是有效的。针对中文拼写纠错任务,现有工作大多将大语言模型直接用于纠错。对于一段存在错误文本让LLM进行纠错时,由于模型结构的原因,LLM倾向于自由生成。这种机制虽然会让生成的纠错句子在拼写和语法上完全正确,但是生成的纠错结果可能会与原句存在较大的语义偏差。
实现思路
阅读余下40%
技术概要为部分技术内容,查看PDF获取完整资料
该技术已申请专利,如用于商业用途,请联系技术所有人!
技术研发人员:
马灿  刘于雷  白瑞娜  李建军  黄瑞章
技术所属: 贵州耕云科技有限公司  贵州大学
相关技术
一种智慧课堂考勤系统 一种智慧课堂考勤系统
基于大模型的SQL语句生成方法及装置 基于大模型的SQL语句生成方法及装置
基于自然语言处理的词云创作方法、装置、介质、产品 基于自然语言处理的词云创作方法、装置、介质、产品
一种基于雷达监测数据的鸟类异常行为识别方法 一种基于雷达监测数据的鸟类异常行为识别方法
一种三方数据信息平台非即时数据监控预警方法及系统 一种三方数据信息平台非即时数据监控预警方法及系统
一种基于多张量核心处理器的卷积计算数据重用方法 一种基于多张量核心处理器的卷积计算数据重用方法
文本识别方法及装置、计算机可读存储介质和电子设备 文本识别方法及装置、计算机可读存储介质和电子设备
一种基于AI大模型的电力设备的故障评估方法及系统 一种基于AI大模型的电力设备的故障评估方法及系统
信息生成方法、装置、电子设备和计算机可读介质 信息生成方法、装置、电子设备和计算机可读介质
自动化测试脚本管理方法、装置、计算机设备和存储介质 自动化测试脚本管理方法、装置、计算机设备和存储介质
技术分类
电信、广播电视和卫星传输服务 电信、广播电视和卫星传输服务
互联网软件服务 互联网软件服务
集成电路设计 集成电路设计
信息集成数字服务 信息集成数字服务
电气机械制造 电气机械制造
计算机、通信、电子设备制造 计算机、通信、电子设备制造
医药制造、生物基材料 医药制造、生物基材料
石油煤矿化学用品加工 石油煤矿化学用品加工
化学原料制品加工 化学原料制品加工
非金属矿物加工 非金属矿物加工
金属制品加工 金属制品加工
专用设备制造 专用设备制造
通用设备制造 通用设备制造
通用零部件制造 通用零部件制造
汽车制造业 汽车制造业
铁路、船舶、航天设备制造 铁路、船舶、航天设备制造
电力、热力生产和供应 电力、热力生产和供应
燃气生产和供应 燃气生产和供应
水生产和供应 水生产和供应
房屋建筑、土木工程 房屋建筑、土木工程
交通运输、仓储和邮政 交通运输、仓储和邮政
农、林、牧、渔业 农、林、牧、渔业
采矿业 采矿业
农副、食品加工 农副、食品加工
烟草、酒水加工 烟草、酒水加工
纺织皮具居家制品 纺织皮具居家制品
文教体娱加工 文教体娱加工
苏ICP备18062519号-5 © 2018-2025 【123技术园】 版权所有,并保留所有权利