AI实时翻译现在已经达到一个什么样的水平了? 钉钉AI实时翻译是与阿里巴巴达摩院合作开发的吗
\u542c\u8bf4\u4eba\u5de5\u667a\u80fd\u7528\u5728\u7ffb\u8bd1\u8bbe\u5907\u4e0a\u4e86\uff0c\u771f\u6709\u80fd\u5b9e\u65f6\u7ffb\u8bd1\u7684\u4eba\u5de5\u667a\u80fd\u7ffb\u8bd1\u673a\u5417\uff1f\u65e2\u7136\u51fa\u56fd\u65c5\u6e38\uff0c\u90a3\u5c31\u63d0\u524d\u4e70\u4e00\u53f0\u4eba\u5de5\u667a\u80fd\u7ffb\u8bd1\u673a\uff0c\u5728\u56fd\u5916\u8bed\u8a00\u95ee\u9898\u662f\u5f88\u91cd\u8981\u7684\uff0c\u4e3a\u4e86\u907f\u514d\u56e0\u8bed\u8a00\u5e26\u6765\u7684\u9ebb\u70e6\uff0c\u8fd8\u662f\u5e26\u53f0\u7ffb\u8bd1\u673a\u3002 \u51c6\u513f\u7ffb\u8bd1\u673a\uff0c \u86ee\u65f6\u5c1a\u7cbe\u5de7\u7684\uff0c\u6709\u70b9\u50cf\u82f9\u679c\u7684ipod\uff0c\u80fd\u652f\u630131\u4e2a\u8bed\u79cd\u7684\u5b9e\u65f6\u53e3\u8bed\u7ffb\u8bd1\uff0c\u5173\u952e\u8fd8\u6709LED\u5c4f\u5e55\uff0c\u80fd\u542c\u80fd\u770b\u6587\u5b57\uff0c\u660e\u661f\u4efb\u91cd\u548c\u5317\u4eac\u8bed\u8a00\u5927\u5b66\u4e13\u5bb6\u4e5f\u6709\u63a8\u8350\u7684\uff0c\u51fa\u56fd\u5403\u3001\u4f4f\u3001\u884c\u3001\u65c5\u6e38\u3001\u8d2d\u7269\u3001\u5a31\u4e50\uff0c\u54ea\u54ea\u90fd\u8981\u7528\u5230\u5b83\u3002
\u8fd9\u4e2a\u4e0d\u6e05\u695a\uff0c\u5b9e\u65f6\u7ffb\u8bd1\u76ee\u524d\u56fd\u5185\u5df2\u7ecf\u6709\u51e0\u5bb6\u516c\u53f8\u505a\u7684\u76f8\u5f53\u4e0d\u9519\u4e86\uff0c\u53ea\u8981\u4e24\u5bb6\u6570\u636e\u7aef\u53e3\u5f00\u653e\uff0c\u6216\u8005\u9489\u9489\u642d\u8f7d\u4ed6\u4eec\u7684\u63d2\u4ef6\u5e94\u8be5\u5c31\u80fd\u5b9e\u73b0\u4e86\uff0c\u6709\u5fc5\u8981\u91cd\u65b0\u7814\u53d1\uff1f
当前AI翻译模块是能够实时的,但是由于每个人说话的断句【停顿】以及语音的不标准以及重复冗余字符【比如额,嗯等等】等等各种因素,导致语音识别需要一定语音量缓冲和上下文环境理解,才能够识别字、词、短句正确,而语音翻译需要根据识别后的文字进行翻译,一旦文字识别错误,【特别是同音不同字也不同义的】进行翻译后,会错的很离谱,当然翻译本身也是非常复杂的。所以识别模型、文字处理模型、翻译模型都需要针对特定场景进行针对性训练但是模型本身的计算不会引入多少延迟的,而另外两个延迟的引入是在字、音、画同步以及二次编码上,同时为了兼容某些语速较快的人,确保字符能够显示一定的时长,需要加些延迟。综上所述AI翻译处理在整条直播链路中额外会引入500ms~2s的延迟.
所以可以看看整个链路延迟来看,AI翻译直播的端到端理论延迟可以在 1s左右。而此次阿里速卖通的跨境直播上推出的就是一个实时直播的场景,延迟在5-10s, 属于实时直播范畴,其中AI翻译引入的额外延迟可忽略不计。
而且不仅仅是电商直播,包括游戏直播也可以加入实时字幕和翻译的,比如今年S10赛事,某直播平台就采用了阿里云的实时字幕功能进行了实时字幕大型游戏赛事直播的尝试。
智能翻译确实取得了令人惊喜的进展,拿着手机和老外进行日常交流已经基本没有问题。但是智能翻译还存在“短板”,会有“词不达意”的时候,AI要想更进一步发展,和有着数十年积淀的高水平翻译员进行竞争,可能还需要从以下几个方面进行努力。
1、大量补充口语化语料
智能翻译对于口语化文本处理能力还不强,一是由于翻译语料库口语化语料不足,二是针对口语词汇与口语表达多采取直译方式,因此出现较多误译。该问题的解决应该从扩大对应部分语料库入手,增加口语类文本语料库,包括常见口语化词汇、表达与生活用语。
2、提高语境理解能力
智能翻译对于中文复杂含义句式中的时态辨别能力还不够,往往需要充分理解整句话的意思才能准确把握时态。智能翻译并非基于理解,而是基于统计学与语料库,只能做到将这句话意思大致翻译准确,在识别感情色彩方面,还有欠缺。
将神经网络学习的抽象表示和传统符号语义方法结合,建立新的基于语义的机器翻译系统,或许可以大幅提高AI对组合语义、复杂的递归语言结构的处理能力。
但,我们依然满怀期待AI让我们摆脱语言鸿沟的那一天。
其实现在AI学习语言的能力是非常完善的,日常生活交流的需求,基本上都能够满足。如果你是在非母语的国家旅游用谷歌翻译还可以,但有一点例外的场景,是电商场景。
当翻译工具在面对着商品品牌、型号、关键属性这类专业术语的时候,其实是有几率出错的。
像谷歌的实时翻译就曾有过闹剧,我记得是18年2月的时候吧,看过一个新闻,说是挪威奥运代表团在韩国参加冬奥会的时候,因为谷歌翻译错了计量单位,人家只想在超市买1500个鸡蛋的,结果拿到手的却是10倍数量的鸡蛋。
实时翻译的水平,现在确实是挺高的了,在手机中,你可以输入文字,也可以是语音,他就能给你翻译的八九不离十的,当然,你的发音不准,那是另一回事了。
AI实时翻译,现在已经达到了一个非常智能的水平。
我们使用的时候非常方便。可以和智能对话。他们也能识别出来,我们要翻译的语言。
绛旓細褰撳墠AI缈昏瘧妯″潡鏄兘澶瀹炴椂鐨勶紝浣嗘槸鐢变簬姣忎釜浜鸿璇濈殑鏂彞銆愬仠椤裤戜互鍙婅闊崇殑涓嶆爣鍑嗕互鍙婇噸澶嶅啑浣欏瓧绗︺愭瘮濡傞锛屽棷绛夌瓑銆戠瓑绛夊悇绉嶅洜绱狅紝瀵艰嚧璇煶璇嗗埆闇瑕佷竴瀹氳闊抽噺缂撳啿鍜屼笂涓嬫枃鐜鐞嗚В锛屾墠鑳藉璇嗗埆瀛椼佽瘝銆佺煭鍙ユ纭紝鑰岃闊崇炕璇戦渶瑕佹牴鎹瘑鍒悗鐨勬枃瀛楄繘琛岀炕璇戯紝涓鏃︽枃瀛楄瘑鍒敊璇紝銆愮壒鍒槸鍚岄煶涓嶅悓瀛椾篃涓嶅悓涔夌殑銆...
绛旓細1銆佸ぇ閲忚ˉ鍏呭彛璇寲璇枡 鏅鸿兘缈昏瘧瀵逛簬鍙h鍖栨枃鏈鐞嗚兘鍔涜繕涓嶅己锛屼竴鏄敱浜庣炕璇戣鏂欏簱鍙h鍖栬鏂欎笉瓒筹紝浜屾槸閽堝鍙h璇嶆眹涓庡彛璇〃杈惧閲囧彇鐩磋瘧鏂瑰紡锛屽洜姝ゅ嚭鐜拌緝澶氳璇戙傝闂鐨勮В鍐冲簲璇ヤ粠鎵╁ぇ瀵瑰簲閮ㄥ垎璇枡搴撳叆鎵嬶紝澧炲姞鍙h绫绘枃鏈鏂欏簱锛屽寘鎷父瑙佸彛璇寲璇嶆眹銆佽〃杈句笌鐢熸椿鐢ㄨ銆2銆佹彁楂樿澧冪悊瑙h兘鍔 鏅鸿兘缈昏瘧瀵逛簬涓...
绛旓細浠庢渶鍒濈殑鏂囨湰缈昏瘧锛屽埌鐜板湪鐨勮闊崇炕璇戙佸疄鏃剁炕璇戠瓑锛AI缈昏瘧宸茬粡娓楅忓埌鎴戜滑鐢熸椿鐨勬柟鏂归潰闈銆傛瘮濡傦紝鍦ㄦ梾娓搁鍩燂紝鏅鸿兘缈昏瘧璁惧鑳藉甯姪娓稿杞绘澗璺ㄨ秺璇█闅滅锛屾洿濂藉湴浣撻獙寮傚浗鏂囧寲锛涘湪鍖荤枟棰嗗煙锛孉I缈昏瘧涔熷姪鍔涘浗闄呭尰鐤楀悎浣滐紝浣垮尰鐢熻兘澶熸洿鍑嗙‘鍦扮悊瑙e苟浜ゆ祦鐥呮儏淇℃伅銆傝繖浜涘簲鐢ㄥ満鏅殑鎷撳睍锛屼笉浠呭睍绀轰簡AI缈昏瘧鎶鏈殑宸ㄥぇ娼...
绛旓細棣栧厛锛AI缈昏瘧鍦ㄥ鐞嗘柟瑷鏂归潰瀛樺湪灞闄愩傛柟瑷閫氬父鍖呭惈澶ч噺鐨勫湴鍩熺壒鑹插拰闅愬惈鎰忎箟锛屽畠浠殑褰㈠紡鍜岀粨鏋勫彲鑳戒笌鏍囧噯璇湁鏄捐憲宸紓銆侫I绯荤粺鍦ㄥ綍鍏ュ拰澶勭悊杩欎簺宸紓鎬ф瀬澶х殑鏂硅█鏁版嵁鏃堕潰涓存寫鎴樸傜浉姣斾箣涓嬶紝浜虹被缈昏瘧鑰呰兘澶熼氳繃瀛︿範鍜岀爺绌舵潵鍏嬫湇杩欎簺闅滅锛屽洜姝I缈昏瘧鍦ㄦ柟瑷缈昏瘧涓婄煭鏈熷唴闅句互鍖规晫銆傚叾娆★紝AI缈昏瘧鍦ㄧ悊瑙h澧冪殑鍏宠仈鎬...
绛旓細杩欎釜鏄熺悆涓鐩墠鏈7000澶氱璇█锛岃孧eta鍏徃浼间箮鎯充簡瑙f墍鏈夎繖浜涜瑷銆傚叚涓湀鍓嶏紝璇ュ叕鍙稿惎鍔ㄤ簡闆勫績鍕冨媰鐨"鏃犺瑷闅滅"(NLLB)椤圭洰锛岃缁冧汉宸ユ櫤鑳藉湪浼楀璇█涔嬮棿杩涜鏃犵紳缈昏瘧锛岃屼笉闇瑕佸厛閫氳繃鑻辫銆傚懆涓夛紝璇ュ叕鍙稿甯冧簡瀹冪殑绗涓涓閲嶅ぇ鎴愬姛锛岃绉颁负NLLB-200銆傝繖鏄竴涓兘璇200绉嶈瑷鐨勪汉宸ユ櫤鑳芥ā鍨嬶紝鍖呮嫭浜氭床鍜...
绛旓細绗笁灞備负閲嶈鐨勬妧鏈柟鍚戝拰闂锛屽璁$畻鏈鸿瑙夛紝璇煶宸ョ▼锛岃嚜鐒惰瑷澶勭悊绛夈傝繕鏈夊彟澶栫殑涓浜涚被浼煎喅绛栫郴缁燂紝鍍 reinforcement learning锛堢紪杈戞敞锛氬寮哄涔狅級锛屾垨鍍忎竴浜涘ぇ鏁版嵁鍒嗘瀽鐨勭粺璁$郴缁燂紝杩欎簺閮借兘鍦ㄦ満鍣ㄥ涔犵畻娉曚笂浜х敓銆傜鍥涘眰涓哄叿浣撶殑鎶鏈紝濡傚浘鍍忚瘑鍒佽闊宠瘑鍒佹満鍣缈昏瘧绛夌瓑銆傛渶椤剁涓鸿涓氱殑瑙e喅鏂规锛屽...
绛旓細鍘熸湰EMUI11鐨勬椂鍊欙紝鈥AI瀛楀箷鈥濆彧鏀寔鈥滀腑鏂-鑻辨枃鈥濅箣闂寸殑瀹炴椂浜掕瘧銆備絾鏄崌绾у埌楦胯挋2.0浠ュ悗锛屽浜涓涓鈥滄棩鏂-涓枃鈥濆疄鏃跺瓧骞缈昏瘧銆傚綋鎴戞妸杩欎釜娑堟伅鍛婅瘔韬竟浣跨敤鍗庝负鎵嬫満鐨勬湅鍙嬬殑鏃跺欙紝澶у绾风悍鍚唱濂旇蛋鐩稿憡锛岀敋鑷虫湁鏈嬪弸娆㈠懠锛屼粬绛夎繖涓姛鑳宸茬粡绛変簡鍑犲崄骞翠簡锛 澶у璺熼殢鎴戣刀绱т綋楠屼竴涓嬪惂锛佽繖涓姛鑳芥渶澶х殑浣滅敤...
绛旓細1銆佽胺姝岀炕璇 璋锋瓕缈昏瘧鏄鐩墠鏈鍏蜂汉姘旂殑AI缈昏瘧宸ュ叿涔嬩竴,宸茬粡鑳藉鏀寔100澶氱璇█銆 鎴戝钩鏃舵渶鍠滄鐢ㄥ畠鏉ョ炕璇戞枃妗,鏀寔PDF銆乄ord銆乀XT绛夊鏍煎紡鐨勬枃妗h瘑鍒炕璇, 闄や簡鍩烘湰鐨勫噯纭巼楂樹箣澶,鐢ㄥ畠缈昏瘧鐨勬枃妗h繕鑳戒繚鐣欏師鏂囨。鐨勬帓鐗堟牸寮,瀵逛簬缈昏瘧鍚庣殑鏂囧瓧杩樿兘杩涜缂栬緫銆佸唴瀹瑰鍒躲瀹炴椂鏍″銆侀噸鏂扮炕璇戠瓑鎿嶄綔銆 闅忕潃鏃堕棿鎺ㄧЩ,璋锋瓕缈昏瘧...
绛旓細浜哄伐缈昏瘧鑳界敤娴佺晠鏂囨湰鎻忚堪婧愭枃鏈殑鍚箟,杩欐槸鏈哄櫒瀛︿範鐨勫湥鏉:涓涓瀵光滃畬鍏ㄤ汉宸ユ櫤鑳解濈殑鎸戞垬銆傚鏋滄満鍣ㄧ炕璇戜篃鑳藉仛鍒扮浉鍚岀殑绋嬪害,灏嗘剰鍛崇潃鏈哄櫒宸茬粡杈惧埌浜虹被鐨勬櫤鍔涙按骞炽傚洿缁曡胺姝屽湪绁炵粡鏈哄櫒缈昏瘧鏂归潰鍙栧緱杩涘睍鐨勫ぇ鑲嗗浼犺〃鏄,鈥滃湥鏉濊繎鍦ㄥ挮灏恒傝屼笖,杩欎竴鏃跺埢鍒版潵鐨勫悓鏃,浜虹被缈昏瘧鑰呬篃灏嗚娣樻卑銆 涓嶈繃,璇戣呬滑涓鐩翠互鏉ュ浜庝汉宸...
绛旓細1. 闅忕潃浜哄伐鏅鸿兘鎶鏈殑涓嶆柇杩涙锛岀炕璇戣亴涓氶潰涓磋鍙栦唬鐨勫彲鑳芥ф棩鐩婂鍔犮鐩墠锛屽熀纭鐨勫彛璇炕璇戝拰閮ㄥ垎涔﹂潰缈昏瘧浠诲姟宸茬粡鍙互閫氳繃浜哄伐鏅鸿兘鏉ュ畬鎴愶紝渚嬪YouTube涓婄殑瀹炴椂缈昏瘧鍔熻兘锛屽畠鑳藉璇嗗埆骞惰浆鎹㈠绉嶈瑷锛屽敖绠″瓨鍦ㄤ竴浜涢敊璇紝浣宸茶揪鍒鐩稿綋楂樼殑鍑嗙‘鐜囷紝鐢ㄦ埛鍙互杈冧负娴佺晠鍦扮悊瑙e唴瀹广2. 鍙互棰勮锛屽鏋滀汉宸ユ櫤鑳芥妧鏈...