1. 中英文平行语料预处理中文处理数据泛化,解决数据稀疏问题数字 $number日期 $date时间 $time网址等 $literal专有名词处理:如“东北大学信息学院”建议拆分为“东北大学”、“信息学院”,有助于抽取出更多翻译规则 英文大小写句尾结束符与最后单词用空格分开数据泛化处理 其他全角 ...
分类:
其他好文 时间:
2021-04-08 13:26:01
阅读次数:
0
参考: https://blog.csdn.net/qq_41664845/article/details/84245520#t5 https://jalammar.github.io/visualizing-neural-machine-translation-mechanics-of-seq2s ...
分类:
系统相关 时间:
2021-01-26 12:15:37
阅读次数:
0
五分钟看懂seq2seqattention模型。本文通过图片,详细地画出了seq2seq+attention模型的全部流程,帮助小伙伴们无痛理解机器翻译等任务的重要模型。seq2seq是一个Encoder–Decoder结构的网络,它的输入是一个序列,输出也是一个序列,Encoder中将一个可变长度的信号序列变为固定长度的向量表达,Decoder将这个固定长度的向量变成可变长度的目标的信号序列。-
分类:
其他好文 时间:
2020-11-26 14:57:13
阅读次数:
5
近年来,人工智能 (AI) 在涉及单一模态如语音、自然语言和视觉等领域,取得了重大突破。在单一模态的任务上,如物体识别、语音识别、机器翻译等,AI 系统在特定数据集上的表现水平与人类相当。随着单模态人工智能潜在问题的解决,研究人员意识到更高层次的AI任务往往涉及到跨多种模式的更复杂的信息处理。同时, ...
分类:
编程语言 时间:
2020-11-06 01:43:37
阅读次数:
22
原文:https://www.pixelstech.net/article/1409966488-Different-types-of-keystore-in-Java JKS 机器翻译 Different types of keystore in Java -- JKS Java中不同类型的密钥库 ...
分类:
编程语言 时间:
2020-10-18 17:01:23
阅读次数:
36
代码如下 #include<iostream> using namespace std; const int MAXN = 1000 + 5; struct Node // 进去一个出去一个,很明显,队列 { int num; // 保存进去的数字 }; struct Node queue[MAXN ...
分类:
其他好文 时间:
2020-09-24 21:25:32
阅读次数:
42
https://mp.weixin.qq.com/s/uiP_s6ZWlAimWGfJuUQ32Q上集回顾机器翻译缓慢发展的六十年基于规则的机器翻译(RBMT)基于实例的机器翻译(EBMT)点击图片阅读本文(上)部统计机器翻译(SMT)在1990年初,在IBM研究中心,一个机器翻译系统首次被展示,它对规则和语言学一无所知。它用两种语言分析了下图中的文本,并试图理解这些模式。这个想法简单而美丽。在两
分类:
其他好文 时间:
2020-09-23 23:09:24
阅读次数:
38
https://mp.weixin.qq.com/s/WDC4ID_8jurGvY_rlcxrLw虽然GoogleTranslate已经发布了近15年了,但直到现在GoogleTranslate仍然倔强地认为Androidphoneisveryfast.最近GT的重大更新是2016年开始采用神经机器翻译(GNMT)的系统,它包括8个编码器和8个解码器,用于9种语言的翻译。他们不仅把句子分开,而且还
分类:
其他好文 时间:
2020-09-23 23:09:08
阅读次数:
37
由于语料短,训练时间也短,模型性能不好,以下演示过程。 语料链接: 数据格式如图(先英文,再空格,再繁体中文): 以下代码运行在Google Colab上。 导包: 1 import os 2 import sys 3 import math 4 from collections import Co ...
分类:
其他好文 时间:
2020-09-17 16:27:41
阅读次数:
29
循环神经网络 1. 绪论 基本应用: 机器翻译 股票预测 作词 模仿写论文、写代码 图像理解 视觉问答 与卷积神经网络相比 循环神经网络可以更好的处理具有时序关系的任务; 循环神经网络通过循环结构引入“记忆”的概念; 输出不仅依赖于输入,还依赖于“记忆” 将同一个结构循环利用 2.基本结构 2.1 ...
分类:
其他好文 时间:
2020-08-27 13:08:43
阅读次数:
50