365官方游戏-打造多模态交互学习体验玩瞳科技要用AI视觉赋能儿童绘本阅读

本文摘要：多模态嵌入式是下一代嵌入式的发展趋势。

多模态嵌入式是下一代嵌入式的发展趋势。融合听力、视觉甚至触觉、嗅觉、味觉的多模态交互方式，无论传达的信息量和还是交流效率，都比单一模式的交互方式极具优势，且形象生动。

探讨到横向领域，以语音交互居多的智能音箱是近几年来嵌入式产品化竞争最白热化的赛道之一。从巨头到创业公司，莫不将其视作抢走下一代智能家居入口的核心利器。

其中由智能音箱进化而来的智能故事机则是其中快速增长最慢的一个细分品类。今年4月，亚马逊发售了一款儿童版智能音箱EchoDotKidsEdition，尽管在硬件配备方面和标准的EchoDot无任何差异，但在软件层面，比如其语音辨识、儿童读物等都是针对儿童场景展开量身打造出。国内方面，阿里、百度、外出问问、喜马拉雅等巨头和创业公司也争相针对儿童市场发售了涉及产品。

儿童智能音箱的爆火，更进一步造就了智能语音技术向更好应用于场景的蔓延——但由于语音交互的方式过分单一，对用户来说缺少直观感觉，因此，被彰显“视觉辨识能力”的智能故事机沦为下一个被注目的市场。“离开了‘视觉’的嵌入式方式是不完备的”，玩游戏瞳科技VisionTalkCEO黄勇在拒绝接受笔者专访时回应，因此，环绕视觉交互在教育领域的应用于，黄勇和团队通过相连智能交互终端＋书本＋自学不道德，建构了一套“AI慧读交互系统”。黄勇讲解，目前这套系统当前主要环绕儿童早期读者进行，通过视觉故事机的形式陪伴、辅助儿童读者。

例如，“当孩子关上书本，视觉交互终端就能自动识别并引领他展开自律读者。如果遇上不懂的字句或知识点，只需轻点书本上的图文，视觉交互终端就能通过摄像头收集，通过AI算法将涉及数据变成机器需要辨识的指令传遍云端，并对内容展开定位、萃取和辨识，动态解决问题孩子自学过程中遇上的问题”。

玩游戏瞳科技致力于沦为教育AI视觉领域的“安卓”，并已完成了从芯片原厂SDK构建、IDH标案到知名品牌客户的签下布局，通过为客户获取末端＋云的整体解决方案，彰显其产品“AI慧读”的能力。玩游戏瞳科技正式成立于2015年下半年，并在正式成立之初取得英诺天使基金的融资；2017年4月再度东方富海Pre-A轮融资。黄勇告诉他笔者，团队仍然专心于图像视觉技术在儿童及教育领域的落地，而涉及的算法一旦走进实验室到明确的场景，确实的考验是工程化能力。

有过于多的细节必须去考虑到，比如“一本童书或者教材在刚出版发行印刷已完成时是整洁干净的，但是一到了实际用于中各种墨迹、皱褶、卷曲等阻碍情况都会经常出现，这些都是必须解决问题和落地的最后一公里问题”，黄勇回应，这也是玩游戏瞳科技在仍然大大突破和积累的能力。现阶段，团队独特的CLSR算法需要构建在40种教育场景光线环境下保持稳定、可信的光学，并且基于前期数十万张图像的训练，超过了97%的识别率，需要有效地解决问题遮盖、光线、污染或书页卷曲等阻碍。与此同时，团队还在大大减少图像训练库的覆盖面，并计划在2019年年中竣工全球仅次于的少年儿童图书出版物的图像训练库。

据报，基于玩游戏瞳科技团队在工程化落地上的希望，这套“AI慧读交互系统”已获得了业内合作伙伴尊重。如全志科技基于V3芯片、国科微基于7102系列芯片、君正基于T20系列自由选择使用了玩瞳的技术，发售了视觉故事机嵌入式解决方案。玩游戏瞳科技的方案不仅需要在Android平台用于，还需要在低算力、高性价比的Linux平台上普遍用于。

小黄人陪伴机器人由咪咕公司与玩游戏瞳科技等联合推出玩游戏瞳科技现有60人的规模，CEO黄勇具备多年ICT构建业务经营和2B类业务渠道建设经验，曾负责管理从零开始筹设覆盖面积中小企业的渠道体系，并在两年时间已完成了200家快捷服务中心的建设。于近期重新加入团队的COO杨雪峰曾是一号公路资本的管理合伙人，并在早期投资了享物说、作文纸条、摩登世纪、小鹿森林等项目。

在任全国前五教育培训集团卓越教育的首席投资官期间，还主导了一系列在教育科技领域的创业项目和VC基金的投资。基于多年的行业从业经验，杨雪峰指出，“从纸质读者到效率提高的数字化读者辅助工具，再行到特别强调效果的多模态交互下的AITutor，这是一个渐渐演变的过程，视觉技术不会扮演着十分最重要的角色，尤其在某种特定高效率的自学场景下，需要产生有极大价值的信息流，构成数据闭环，最后推展该场景下的自学体验和效果”。另外，杨雪峰也期望玩游戏瞳科技作为一家深圳的创业公司，在确保高质量交付给的基础上充分发挥深圳华强北的cost-down精神，通过算法技术融合产业链，交付给性价比极高的慧读自学产品，解决问题早期教育公平问题，尤其是镇守儿童早期读者习惯的教导。“这是为什么我要求全职重新加入玩瞳的根本原因。

教育的初心是为了增加教育资源分配上的不公平，而科技需要协助我们更佳地构建这一目的”，他回应。火火兔的最畅销带上屏故事机I6S系列将使用VisionTalk的AI慧读系统据黄勇透漏，玩游戏瞳科技目前已取得部分预售意向订单，并与国内著名教育电子产品优学派、早教机品牌火火兔接入明年销售计划，预计将在明年第一季度牵头火火兔发售基于其“AI慧读交互系统”的故事机。

本文来源：365官方游戏-www.plenavidamusic.com