机器翻译-基础概念
2022/1/1 6:09:35
本文主要是介绍机器翻译-基础概念,对大家解决编程问题具有一定的参考价值,需要的程序猿们随着小编来一起学习吧!
1、机器翻译
机器翻译(machine translation, MT)是用计算机来实现不同语言之间翻译的技术。被翻译的语言通常称为源语言(source language),翻译成的结果语言称为目标语言(target language)。机器翻译即实现从源语言到目标语言转换的过程,是自然语言处理的重要研究领域之一。
机器翻译通常使用机器学习技术将大量文本从支持的语言翻译成支持的语言,即将“源”文本从一种语言翻译成另一种“目标”语言。尽管机器翻译技术背后的概念和使用界面相对简单,但其背后的科学和技术极其复杂,汇集了多种前沿技术,特别是深度学习(人工智能)、大数据、语言学、云计算和web API。
当前的人工智能技术——深度神经网络(又称深度学习)使机器翻译和语音识别技术达到了一个高质量的水平,使得机器翻译的水平几乎可以媲美人工水平。
当前将深度学习应用于机器翻译任务的主流方法为 seq2seq,直接用神经网络将源语言映射到目标语言,即端到端的神经网络机器翻译(End-to-End Neural Machine Translation, End-to-End NMT),简称为NMT模型。
2、概念认知
- Source : 源语料
- Target: 目标语料
- Subword算法:BPE、WordPiece、ULM
将单词拆分为字符序列并在末尾添加后缀“ </ w>”,统计单词频率。 本阶段的subword的粒度是字符。 例如,“ good”的频率为15,那么我们将其改写为“g o o d </ w>”:15
这篇关于机器翻译-基础概念的文章就介绍到这儿,希望我们推荐的文章对大家有所帮助,也希望大家多多支持为之网!
- 2024-10-01基于Python+Vue开发的医院门诊预约挂号系统
- 2024-10-01基于Python+Vue开发的旅游景区管理系统
- 2024-10-01RestfulAPI入门指南:打造简单易懂的API接口
- 2024-10-01初学者指南:了解和使用Server Action
- 2024-10-01Server Component入门指南:搭建与配置详解
- 2024-10-01React 中使用 useRequest 实现数据请求
- 2024-10-01使用 golang 将ETH账户的资产平均分散到其他账户
- 2024-10-01JWT用户校验课程:从入门到实践
- 2024-10-01Server Component课程入门指南
- 2024-09-30Dnd-Kit学习:新手快速入门指南