分钟前天猫精灵资深技术专家王浩AIoT时代从语音交互提升到多模态融合交互

10月16日报道

10月16日,在FUS猎云网2020年度人工智能产业峰会上,阿里巴巴天猫精灵事业部人工智能资深技术专家王浩受邀发表《懂你的家庭助手——AIoT时代无处不在的人机交互入口》的主题演讲,他表示,交互体验从传统的机械交互到触屏交互,再发展到现在的语音交互阶段。天猫精灵今年将重点从语音交互升级到多模态交互,从无屏的智能助手变成带屏的智能助手。

今天,天猫精灵从无屏的智能助手到带屏的智能助手,原来它只是有耳朵、有嘴,它能听、能说,现在我们给助手加了一个眼睛,它还能看到。

已有超2万人落户 今年落户规模保持稳定

此外,在失信责任追究方面,坚持申请人和用人单位共同对填报指标信息的真实性负责。申请人提供虚假材料的,取消当年及以后5年内的积分落户申请资格;已取得北京常住户口的,由公安部门予以注销,并迁回调京前户籍所在地。对用人单位协助提供虚假材料的,当年及以后5年内不受理其积分落户申请事项。申请人及用人单位的严重失信信息将纳入北京公共信用信息服务平台。涉嫌犯罪的,移交司法机关依法处理。

积分落户申报审核不收费不接受中介服务

传统方法是先语音识别,然后做语义理解,然后做执行。我们现在采用的是端到端的方法——语音语义一体化。以前人机交互方法是先转化为文本,文本进行自然语言理解然后执行。现在我们采用跟真人非常相似的方式,人机交互过程当中靠语音去执行就行。比如我们交流,并不需要再把我的话翻译成一个文字,然后看到文字再理解,而是通过语音直接理解,然后去执行。

最后是天猫精灵家庭助手—看:今天不用介绍人脸技术了,大家很熟悉人脸识别的AI技术。“看”的技术,我们今天看一看小孩手指点读的功能,我们希望它能看到你的手指在点课本,相当于家长在辅导孩子。以前是家长给孩子来读课本,现在我们希望通过机器替代家长承担的这部分压力,机器帮小孩去读。这样的话,相当于孩子在课本上想读什么就可以自己来学习。

该负责人表示,今年积分落户规模保持稳定,下一步将根据北京常住人口变化情况,统筹考虑城市发展需要,择机适度扩大年度落户规模。同时积极研究提升长期在京稳定就业居住人员的公共服务保障水平。

10月16日,FUS猎云网2020年度人工智能产业峰会在北京金茂万丽酒店隆重举行,近百位知名资本大咖,独角兽创始人、创业风云人物及近千位创业者共聚一堂。

教育背景指标增加了对只取得学历或学位人员可积分的内容,明确了就学期间社保及居住分值扣减规则,进一步体现就学、就业起点公平。

我们刚才已经提到了,语音可以进行操控,但有的时候点个赞,或者我是操控往左往右,只要天猫精灵看到你的动作之后,它自然也会知道了你下达的指令,除了语音交互说停止之外,你可以攥个拳头也是停止。这块相当于在手势识别,包括本身的点读识别之外,我们也进行了更好的突破,未来去给用户更好的体验。这里可以看到我们工程师在测试,这是天猫精灵眼睛里面看到的用户,它在领悟用户的一些指令信息。

首先是天猫精灵家庭助手——听:可以称为“闻声识人”功能,在过去的传统方法里,一个用户语音跟天猫精灵说话,天猫精灵听到之后,我们采用的是声学模型和语言模型。在这里也给大家普及一个概念——语音识别,就是把声音转化为文字的一个技术,我们经常叫做ASR,这是英文缩写的结果。今年我们采用了与谷歌同样的端到端深度语音识别模型,大幅提升了天猫精灵在听用户下达指令的时候不出错的状态。

新版《北京市积分落户管理办法》和《北京市积分落户操作管理细则》昨日发布。今年积分落户申报将于7月17日早8时正式启动,分为申报、部门审核结果汇总、审核结果查询、部门复核及积分排名、公示和落户办理5个阶段。

我们的口号也很清晰,万物有精灵,生活有良伴。

我们今年把传统的统计模型转化为深度的语言合成模型,主要有三个模块:前端自然语言处理、升学模型和声码器。通过对比我们可以发现,在传统方法里,机器的感觉还是非常重,现在我们加入拟人效果之后,天猫精灵声音更接近真人,这部分我们做了很大的突破和提升。

创新创业指标精简了关于申请人任职年限、工资收入等加分内容,同时考虑城市发展需求,对获得一定股权类现金融资的国家高新技术企业或科技型中小企业持股人员予以加分。此外,在新版《操作管理细则》中,优化了创新创业指标中部分奖项内容,扩大了职业技能竞赛获奖人员加分范围。

以下为王浩演讲实录,猎云网整理删改:

这里我们还是有一个使命,马老师说让天下人没有难做的生意,我们天猫精灵拆解来说,希望每个家庭都有一个天猫精灵助手。我们希望在未来AIoT、5G时代下,在设备的连接和控制上,我们希望也能有各种服务。5G时代互联网是什么,我们希望重新定义——以AI技术为核心,以家为中心,打破设备和场景的边界。大家知道以前设备都是比较孤立的,我们希望通过天猫精灵能连通这些所有的设备,包括跟设备和人,这才是一个真正的IoT时代。我们希望打造跨领域场景化的“懂你的家庭助手”。

大家可以看到我们信息助手、教育助手、娱乐助手、智能家居助手、生活服务助手、健康助手,我们希望服务中国4.3亿的家庭用户。我们还有很长的路要走,也希望各位能支持我们,随时帮我们反馈很好的建议。

其次是天猫精灵家庭助手—说:语音合成技术,就是将文本转化为语音的技术。有点类似于人的嘴巴一样,可以有不同的声音,天猫精灵有自己的声音,也可以根据用户定制化,这里并不是录制的,而是根据任何文本能动态的读出来。

积分落户政策试行期间北京确定了每年6000人的落户规模,并实行同分同落。截至目前,已有1.2万余名申请人取得了落户资格,加子女连带落户实际落户超过2万人。

新版《北京市积分落户管理办法》(以下简称《管理办法》)和《北京市积分落户操作管理细则》(以下简称《操作管理细则》)已完成修订,于7月16日发布。据介绍,新版政策主要对6个导向指标及操作层面进行了调整优化。

年龄指标调整为梯度赋分,在45周岁以上的,每增加一岁(含不满一岁)少加4分。同时,明确了涉税违法行为、守法记录指标中行政拘留处罚的扣分时限均为“近5年”,避免一旦违法、终身受罚。

记者对比两版政策发现,新版《管理办法》精简优化了职住区域、纳税、创新创业等指标内容,落实国家改革要求,确保了社保和居住指标权重占比在60%以上。同时,立足首都城市战略定位和经济社会发展需要,对部分指标进行了优化调整,更加注重考量个人对城市发展的综合贡献。

今年年初,阿里巴巴宣布将人工智能实验室天猫精灵业务升级为独立事业部,由阿里云IoT负责人库伟负责。2016年,阿里云内部孵化人工智能实验室,并在2017年7月正式对外推出智能音箱品牌“天猫精灵”,凭借着先发优势和阿里巴巴平台资源等,“天猫精灵”一经推出就受到广泛关注,并多次在销量中位列第一。

“原来天猫精灵只是有耳朵、有嘴,它能听、能说,现在我们给它加了一个眼睛,它还能看到。我们希望天猫精灵达到跟真实人类一样的助手能力,来帮助用户解决问题。”王浩说。此外,他表示,在家庭场景里,过往设备大都比较孤立,未来在AIoT和5G时代下,希望每个家庭都能通过一个天猫精灵助手,以AI技术为核心,去联通所有设备,包括连接设备和人,这才是一个真正的IoT时代。

一是填报界面能优尽优。填报指标平均输入字数压缩至110字左右,比2018年减少近一半;突出页面关键信息,填报更省力,提醒更及时。二是历史数据能用尽用。充分依托大数据技术,在9项积分指标4项“零填报”的基础上,今年自有住所产权信息和国内学历学位信息没有变化的,不必重复输入。三是操作流程能简尽简。申请人在线完成全部指标填报后可直接提交计分,不必等待所有审核结果全部返回再提交。后续可以在部门审核结果汇总阶段,随时查询指标审核结果反馈情况。对审核结果不认可的,既可以在该阶段反映解决,也可以在审核结果查询阶段提出申诉,环节衔接更顺畅,参与申报更从容。

现在,阿里巴巴菲住布渴酒店不断吸引着国内外游客去打卡。在酒店,你会体验到另一个网红产品——天猫精灵,这个语音交互助手可以帮你去做你想要做的事情。

职住区域指标将该计分年限由2017年1月1日调整为2018年1月1日,与试行政策实施之年一致,明确2018年1月1日后在北京城六区之外其他行政区自有住所居住(或工作并居住),且取得落户资格后在该自有住所落户的予以积分,强化了首都人口和功能布局调整的导向。

我们今年主要从语音交互提升到多模态融合交互。什么叫多模态,就是说除了有语音,比如说中间是一种语音的交互,上面是一个视频的交互,因为它看到你,它能听到你,还有一个文本的交互。它现在可以一边看书,一边听,一边说,这是一个真实的人在现实生活当中一个多模态的交互的过程。我们目标就是打造这种拟人的、跟真实人类一样的助手能力,来帮助用户解决问题。

纳税指标精简了申请人在京投资企业按照出资比例纳税可获加分的内容,同时进一步倡导持续稳定纳税的政策导向,并考虑申请人年度纳税额度存在一定波动的实际情况,调整为申请人近三年连续纳税,个人所得税纳税额每1年在10万元及以上的,加2分,最高加6分,平滑了分值差距。

北京积分落户政策自实施以来,已面向社会通报处理了11名弄虚作假人员。此次发布的《管理办法》和《操作管理细则》对公平公正、诚信监督的要求一以贯之,持续加强。

新京报讯 昨日,记者从市发展改革委、市人力社保局了解到,2020年的积分落户申报将按新版政策组织实施,于7月17日8时正式开启申报系统,8月15日20时系统关闭,将于10月15日起公示年度落户人员名单。

市发展改革委相关负责人介绍,新版《管理办法》在政策定位上,保持了连续性稳定性,更加突出面向普通劳动者的政策导向;在具体内容上,堵塞了漏洞,更加突出公平公正;在分值设置上,调整为梯度赋分,平滑分值差距,更加突出科学精细。“坚持政策导向不变、政策体系不变、赋分原则不变,面向符合条件的普通劳动者,重点解决来京时间长、就业能力强的人员落户问题。”该负责人强调。

市人力社保局相关负责人强调,北京市积分落户申报审核是公益性服务,全程不收取任何费用,也不接受中介服务,任何组织和个人以办理积分落户名义收取费用的,均属违法行为。提醒用人单位和申请人务必提高警惕,不要相信所谓的“代办服务”,避免遭受财产损失,更不要因提供虚假材料被取消申请资格并影响单位及个人诚信记录。用人单位要继续履行好诚信监督职责,及时纠正申请人的失信行为,并向相关部门报告。

整个过去一年,我们通过语音语义一体化,大幅提升了天猫精灵在用户语义理解方面的能力。

如需咨询各指标审核部门或各区积分落户服务窗口,可在该专栏查看联系电话。

本次峰会由猎云网主办,猎云资本、企业管家、猎云财经、锐视角协办。峰会以“AI UP!”为主题,聚焦人工智能产业的应用,通过展示多领域多维度人工智能技术和产品以及分享讨论AI在不同场景中最新落地应用,展现人工智能产业落地应用的最新成就;并围绕人工智能产业的“进击”与“破圈”,探讨AI技术如何为产业赋能。

为提高申报效率,打造“智慧政务”,今年的申报操作更加简便优化。

在过去一两年努力当中,在用户接受、允许情况下,用户可以去注册自己的声纹。以后用户跟天猫精灵说话,天猫精灵可以识别这个用户是谁。比如一个小孩不开心了,天猫精灵可以给他讲一个比较好玩儿的故事;如果是大人不开心了,天猫精灵可以给他讲一些鸡汤人生哲学。这块我们也做出了一些成果,比如三口之家里爸爸、妈妈和小孩,谁在跟天猫精灵说话,它都可以判断出来。

填报指标更省力 平均输入字数压缩

我们与其他会刚刚发布的智能音箱,加载了多模态交互全新的智慧全场景。

《操作管理细则》进一步明确了在线审核、限期申诉、资格不予递补等各项操作标准,持续深化数据共享,加强部门函询核查,更加突出公开透明、严谨严格,确保全程在阳光下运行。在落户公示阶段,扩大了拟落户人员分值公示范围,除年度总积分外,还将公示各项指标分值,便于社会监督。

这里想跟大家继续分享的是我们一直在打造的天猫精灵家庭助手,大家知道它是一个虚拟的机器人,我们希望它具备人同样的能力,

申报工作今日启动。市人力社保局相关负责人介绍,申请人可在市人力社保局“积分落户服务专栏”下载阅读《积分落户申报手册》(2020年版),熟悉申报操作环节,提前做好房屋及学历学位信息填报准备,包括登录北京市规划和自然资源委员会“北京市不动产登记领域网上办事服务平台”核实自有住所备案信息、登录教育部相关网站核对学历学位备案信息或进行学历学位认证等。该专栏“积分模拟计算器”也结合修订政策进行了全面升级,建议申请人提前自测,合理安排申报。

此外,政策推进方面,要求“用人单位须在京注册,进行税务登记并依法纳税”,进一步强化诚信申报,加强社会监督和部门核查。

先介绍刚刚发布的三款带屏音响,还有更多,我只是列出来三款。这里给天猫精灵加了一个眼睛,能够更清晰的看到用户想要什么,相当于视觉操控。天猫精灵家庭助手在“听”、“说”和“看”三方面都进行了提升。

我们一直在思考下一代交互入口是什么?大家知道每个人的智能手机是触屏时代,触屏交互改变了传统的机械交互,比如说键盘、鼠标,包括用遥控控制电视,还有用洗衣机原来是按键式,微波炉也是按键式的,现在这些都已经是触屏式。再往下走,就是另一个交互体验——语音交互,比如现在天很冷,你打开灯,打开空调就是随手说一句,自然有设备帮你把这个事情做了。

Theme: Overlay by Kaira Extra Text
Cape Town, South Africa