对话上交苏剑波教授 挑战 GAIR 多样性与系统 方言 直面手语的 通用性 live (上海交大苏剑波怎么样)
作为上海交通大学自动化系的资深教授，苏剑波坚守着一条科研信条：研究工作需源源不断地注入活力。
他曾阐释这一理念：“一个研究者在踏入某一科学领域时，应选取一个能够长期深耕、并随着理论及技术进步而能不断更新研究内容的主题，这才是研究者始终能保持学术活力的根本原因。”
苏教授的研究领域覆盖了智能机器人理论与技术、多传感器信息与智能融合、机器学习与人机交互等科学研究持续的热点领域。在这些领域中，手语作为人类交流的基本方式，始终是苏教授想赋予机器人的技能之一，并成为他将理论知识与实践应用相结合的重要体现。
为何要格外关注手语？苏教授指出，“手语不仅是聋/哑人群体沟通的重要工具，也是人类信息表达的一种常见和高效的方式。”他强调，手语的国际性和多样性是研究的核心，因为不同地区和国家的手语存在明显差异，甚至包含方言差异。
目前，苏教授及其团队专注于手语识别和情绪识别两大技术领域，他们通过视频捕捉和分析，深入探讨静态与动态手语的表达方式及其在不同情境下的变化。终极目标是开发出能够精准解读聋哑人手语/手势及正常人的手势，并将其转化为文字或语言系统。这一技术不仅能够促进与正常人的沟通，也蕴含着巨大的商业潜力。
与此同时，苏教授坦言，手语语料库的匮乏是当前研究面临的一大挑战。因此，他们的研究主要集中在国内聋哑人使用的标准化手语上，而方言手语的研究是第二阶段的目标。
苏教授的学术追求不止于理论研究，近年来，他积极将科研成果转化为实际应用。
2016年，他依托上海交通大学智能机器人系统与技术研究中心，创立了上海灵至科技有限公司，该公司专注于提供人工智能技术解决方案，开发智能机器人、智慧家居、车载自动驾驶软件等产品。2019年，灵至科技的核心团队又联合成立了上海追求人工智能科技有限公司，进一步深化拓展已开发的人机交互技术和产品，为全球残障人士提供专门化的人工智能解决方案。
谈及手语识别产品方面的规划，苏教授表示，目前产品已在特定场景如银行、医院和政府部门中得到了初步的应用，正需扩展更多的应用场景。
近期在与-AI科技评论的对话中，苏剑波教授从计算机视觉角度梳理了手语研究中的关键问题，也分享了对手语识别领域众团队的发展建议。
3月18日（周一）20:00-22:00，将举办主题为「AI+手语识别，技术革新与应用前景」的线上圆桌论坛，届时苏教授将分享更多前沿观察。
以下为对话（经编辑）：
手语也有“方言”之分，系统“通用性”难保证
：苏教授，您是自动化出身，怎么看待手语这个细分研究方向和应用价值？
苏剑波：我开始手语研究最初是出于关注正常人使用手势来表达情绪的尝试，随后扩展到聋哑人群体的沟通需求。
手语的特点是具有国际性和多样性，不同地区和国家的手语存在差异，甚至还有方言之分。但从本质上看，手语是人类信息表达的一种方式，因此理解和研究手语的多样性和标准化问题至关重要。此外，手势识别与手语识别有很大区别。
让机器理解聋哑人的手势，并将这些手势转换成文字或语言，以便让正常人理解。反之亦然，当正常人说话时，机器也能转换成手语将信息传达给聋哑人，实现双方的沟通。
这项工作自2016年开始，但实际上，相关的研究工作要更早。大约是在2010年左右，开始涉及机器人识别人类手势并理解人类情绪的研究。
：能再详细解释一下在手语识别这项技术吗，也就是CV技术如何参与到手语研究中？
苏剑波：我们主要专注于两大类技术：手语识别和情绪识别。这些技术基本上都是基于视频的。计算机或机器人通过摄像机捕捉人的手势/手语视频，再分析视频中的手势/手语的含义。
举个例子，手语分为静态手语和动态手语，还涉及到方言和国际化的问题。手指伸/缩或手掌张/闭状态属于静态手语，而表达“不行”或“过来”等手指和/或手臂的动作则属于动态手语。我们从视频采集出发，研究静态和动态手语的表达方式，以及它们在不同情境下的表达差异。
我们目前主要针对国内聋哑人使用的标准化手语进行研究，并未涉及太多方言，主要是受限于语料库的不足及语料采集的差异化。
：国内正在推广中国通用手语，会使得以后的手语识别研究难度变小吗？
苏剑波：中国通用手语在实际推广和执行过程中还会遇到一些挑战的。
这是因为聋哑人群体也存在地域性差异，他们可能并不熟悉通用手语。这与许多偏远地区的人们听不懂普通话的情况类似，他们可能将普通话视为另一种方言。
手语同样如此，同一个手势在不同地区可能表达不同的意义，使得制定统一标准变得复杂。
国家已经尝试过多次推广通用手语，但效果并不显著。如果某个地方的聋哑人不遵循这些规则，或者他们已经有了自己约定俗成的手语交流方式，我们又能如何呢？我们不能指责他们的交流方式不正确。
这样来看，推广标准化手语的难度可能比推广普通话要大得多。
但即便如此，我们的最终梦想还是能在开发出一个能够识别标准化手语的系统的基础上，充分利用机器智能生成和进化的自学习特点，完成识别具有地区和个人特色的手语识别系统，特别是那些与政府部门交流时常用的手语。
我们希望能够为聋哑人提供个性化的实时翻译，比如在政府办事窗口，通过计算机系统将他们的手语翻译成文字，同时也为聋哑学校的老师提供培训。
目前，我们的目标是实现对日常使用的大约2000个手语词汇的识别，其中最常用的大约500个词汇，我们的识别准确率可以达到90%以上。对于这500个词汇以外的不太常用的词汇，识别率会因采集的角度、光照、背景等有所下降，可能需要多次手势才能提高识别的准确率。
：数据是打造手语识别系统的第一步，这个过程中，您亲身经历过哪些困难？
苏剑波：确实，数据的缺乏是一个主要问题。因为除了要精准捕捉聋哑人手语动作，还要考虑到肖像权和隐私权的问题，这无疑增加了研究的复杂性。
其次，与聋哑人合作拍摄视频时可能会遇到问题，比如他们可能会感到不适或生气。有时候，即使我们有最好的意图，也可能难以解释清楚我们的研究目的，这可能导致一些误解和冲突。
但无论如何，这项工作必须继续进行，因为我们的目标是通过人工智能和技术赋能，打破人与人之间交流的障碍，特别是帮助残疾人与政府部门等机构进行有效沟通，帮助他们的意愿能最准确地为他人所知和理解。
手语识别专用的算法与模型尚未出现
：目前手语识别领域的算法和模型，是借鉴了许多其他领域的成果，还是专门针对手语研究开发的？
苏剑波：在算法创新方面，我们确实借鉴了许多其他领域的成果。
例如，我们使用的卷积神经网络等工具，和特征完备化等基础算法，包括隐马尔可夫模型等，都是在语音识别和人脸识别等领域已经尝试并证明有效的技术。
到目前为止，我还没有发现有专门针对手语识别领域的技术，我们目前使用的都是通用的模式识别工具。所以说，手语识别领域的研究进展相对于其他更活跃的模式识别领域，还有一定的差距。
我们的工作主要集中在寻找能够准确代表和区分不同手型或手势的更鲁棒的特征。这是模式识别领域的通用目标，无论是人脸识别还是语音识别，都需要找到能够精确描述特定含义的特征集合。
然而，手语识别面临的挑战在于，手势的含义可能会因为光照、角度、速度等各种因素的影响而发生变化，存在多种干扰。我们的工作关键在于能够针对滤除这些不同的干扰因素，找到最能准确代表特定手势的鲁棒稳定的特征。
：ChatGPT、Sora等大型语言模型在自然语言处理（NLP）领域取得了显著成就。这些模型背后的设计理念和技术路径，对手语识别研究有何启示？
苏剑波：确实，这些模型的设计理念和技术路径对我们的研究是有启发的，但遗憾的是，这些模型的具体实现细节往往不公开。
这在AI领域并不罕见，许多团队在开发先进技术时，出于商业竞争的考虑，会选择保留关键信息。
例如，机器人领域的波士顿动力公司，他们的机器人技术和各种机器人原型系统发展迅速，但他们很少在国际会议或学术刊物上公开具体的、真实的研究技术路线。我们只能从他们的产品表现来推测可能的技术实现方式。
国内在手语识别领域相对于国外确实存在一定的差距。例如，聋哑学校非常希望引入这些技术，但由于疫情等因素的影响，相关项目曾被迫暂停，这个过程相当曲折。
此外，技术进步可能会对某些职业造成冲击，这可能导致一些行业从业者对人工智能技术的接受度不高。尽管他们认识到人工智能的潜力，但从生存的角度出发，他们可能并不希望人工智能取代他们的工作。这种心态在实际合作中可能会成为障碍。
：我们观察到，在国内外的大型赛事如亚运会、残运会期间，许多公司推出了他们自己的手语数字人。其中一些公司所使用的手语数据由一两家公司自行采集后出售的，导致不同公司开发的数字人产品同质化，缺乏突破，而且有聋哑人反馈无法看懂这些数字人打出的手语。您怎么看这个现象？
苏剑波：这个问题非常关键。如果一个旨在为聋哑人服务的产品，连目标用户群体都无法理解，那么它的服务价值就大打折扣了。目前我们缺乏一个国家权威机构来鉴定这些成果的有效性，或者提供服务的权威性认证。至于服务的实际效果，很少人去深究聋人同胞的满意度。
：最后想请问您，因为您在上交有自己的课题团队，还孵化了两家公司（母公司“灵至科技”、以及专门打造手语产品的“上海追求”），那么您今年在手语识别方面有什么规划？
苏剑波：我和团队的重点是提高机器识别手语的准确率，并尽可能扩大语料库和应用场景。
从学术角度出发，机器对手语的识别，不过是手语特征被机器表达和计算的准确度和效率。我们鼓励博士生和硕士生进行创新研究，寻找能够更精准、有效、快速地表达手语蕴含的主体人意图的可计算的、完备且正交的手势特征集合。我们希望我们的工作不仅能在国内产生影响，也能为国际同行提供借鉴，帮助他们在自己的领域或语言体系中应用我们的研究成果。
我们的目标是建立行业内公认的标准，这是我们努力的方向。
目前国内从事手语识别的团队正在增多，在这一发展势头下，我们需要提前确立统一的测试场景，来验证手语识别系统的实用效果，否则很难真正认可其研究价值。此外，还要考虑到聋人群体的实际需求和接受程度，保证这些研究的应用价值。
从公司角度来说，我们希望能够将我们的技术应用到实际产品中，进行测试和验证。目前我们产品的应用程度有限，在银行、医院和政府部门等特定场景下，我们的产品可以发挥作用。我们希望未来能够达到一个更广泛的应用水平，但目前还很难说能做到什么程度，我们只能继续努力。
至于产品的应用区域，由于我们在上海，所以语料和数据标注可能更倾向于江浙沪一带的方言。这可能导致我们的产品在这些地区的医院等场景中应用得更多。我们希望未来能够扩大应用范围，更好地服务于更广泛的聋人同胞。
同时，我们也热切期待有更多资本能理解手语识别目前从公益性向市场化发展的初级阶段属性，而义无反顾地介入，以加速手语研究和产品开发的进程，为具有中国特色的人工智能产业的发展注入新的活力。
本文作者吴彤，欢迎添加微信（icedaguniang），交流认知，互通有无。
｜GAIR live 圆桌预告
3月18日，北京时间20:00-22:00，将举办主题为「AI+手语识别，技术革新与应用前景」的线上圆桌论坛。
本次论坛嘉宾有，美国纽约城市大学田英利教授、上海交通大学自动化系苏剑波教授、上海大学计算机工程与科学学院方昱春教授、上海大学文学院倪兰教授，共同分享他们的见解和研究成果。
“全球人工智能与机器人大会”（GAIR）始于2016年与中国计算机学会（CCF）合作创立的CCF-GAIR大会，旨在打造人工智能浪潮下，连接学术界、产业界、投资界的新平台，而“连接三界”的全新定位也在此大会上得以确立。
经过几年发展，GAIR大会已成为行业标杆，是目前为止粤港澳大湾区人工智能领域规模最大、规格最高、跨界最广的学术、工业和投资领域盛会。
GAIR Live作为旗下视频直播品牌，旨在输出新鲜、深度、原创的大咖访谈与对话内容，打造辐射产、学、研、投的特色线上平台。
｜手语相关资料
1，《专访纽约城市大学田英利教授：用多通道、多模态的方法「看懂」手语》
2，《Multi-Modal Multi-Channel American Sign Language Recognition
｜IJAIRR正在邀约论文和专题
《国际人工智能与机器人研究期刊》（International Journal of Artificial Intelligence and Robotics Research，简称IJAIRR），是由新加坡GAIR研究院与世界科技出版社联合出版的国际学术期刊。
作为全球首本专注于人工智能（AI）、机器人技术（Robotics）以及基础科学交叉研究（Research）的期刊，IJAIRR致力于成为AI与机器人领域研究的权威发布平台。
（1）“如果您在本领域顶级会议上发表的文章（或即将发表）不超过一年，我们将协助您稍作修改后在IJAIRR期刊上发表。
（2）如果您领导的团队在顶级会议上有多篇论文发表，并希望在IJAIRR上围绕特定主题策划一个专题（Special Issue），我们诚挚邀请您深入讨论合作事宜。
（3）如果您是顶级会议的组织者，并有意与IJAIRR合作，针对特定会议策划一个专题（Special Issue），我们也期待与您具体商讨合作细节。
IJAIRR期待与您携手，共同推动人工智能与机器人研究的发展。
联系人：IJAIRR创刊主编朱晓蕊博士，xiaorui_zhu@gair.sg
关于期刊创刊主编等更多信息，可点击
关于、GAIR大会、GAIR研究院（期刊和在线社区）的详细介绍，请阅读朱晓蕊教授的专访：
原创文章，未经授权禁止转载。详情见 转载须知 。
UTF-8编码在线转工具可以帮助你把中文转换成UTF-8编码，同时也支持把UTF-8编码过的还原成中文。
海跃致力于易攀德安全步道（延展铝格板）的研发和生产，是步道厂家，主要有EWG13，EWG22，EWG30，EWG30SL，EWG30/ST，EWG40，EWG40/ST等型号，同时还有立柱栏杆，冲孔板，冲孔步道等配套产品，详细产品信息请致电海跃客服，竭诚为您服务！
雄县茂森塑胶制品有限公司，是一家专注于PVC包装制品、PVC压延膜、PVC水晶桌布、经典玻璃贴等PVC产品的研发、生产、销售、运营及配套服务解决方案的塑胶制品企业。欢迎来电咨询：15128265558/0312-5868388
上海嘉春装饰设计工程有限公司
金囊黄金网专注于提供每日黄金价格查询、黄金价格走势信息及内地和香港各金店今日金价查询；掌握新的金价行情讯息，了解全面的金饰保养知识，关注时尚的黄金新款饰品就上金囊黄金网。
台山市龙腾运动器材有限公司
青岛保税区嘉铭国际贸易有限公司专业代理销售PX能量回收装置,米顿罗计量泵,米顿罗MRoy系列,米顿罗Milroyal系列,米顿罗Primeroyal系列等,米顿罗产品性能、精确度和持久度世界一流,诚邀需求米顿罗产品的朋友前来洽谈!
TechWeb专注于互联网消费领域，每日专业提供互联网产品、智能设备及互联网服务等方面的新资讯，呈现为网站、微博、微信、APP等全媒体新形态的互联网消费互动媒体。
Grandsys为大中华地区首屈一指的客户体验优化专家、语音大数据分析与客服中心精细化管理专家，长期投入CallCenter语音识别应用、客户互动大数据分析软件研发，致力为客户提供完善客户体验解决方案。
纵横数据（www.155cloud.com）是中海国盛（厦门）科技股份有限公司旗下IDC服务商品牌，成立19年来，一直专注于服务器云主机租用，为广大企业提供高质量的IDC互联网接入服务。主营显卡服务器、站群服务器、云服务器、拨号VPS、高防服务器租用等等！拥有香港美国韩国日本新加坡欧洲等海外各地区自营机房。
山东凯文农业科技有限公司,凯文农业,凯文水溶肥,凯文肥料,山东水溶肥,山东冲施肥,山东叶面肥,服务热线：0532-83360782.
人人BT(www.RRBTs.org)是资源多，更新快的百度云网盘资源搜索引擎，BT种子搜索神器，有几千万的影视音乐、软件、电子书等百度云网盘、BT种子资源，本站实时通过DHT网络获取最新百度云盘资源。
研发WiFi连接技术、试图占领上游市场并逐步控制物联网时代话语权，是高通一直以来的布局，2017年2月，高通宣布推出两款支持下一代标准——802.11ax的WiFi解决方案，其中包括面向网络基础设施的IPQ8074系统级芯片，SoC，和面向客户终端的QCA6290，借此，高通成为首家发布支持802.11ax的端到端商用解决方案的公司，...。
GitLab禁用Windows近日，有网友发现在GitLab在其官网的，入职和设备管理，一文中，明确指出了对其员工在计算机操作系统方面的限制，允许使用Linux和苹果的macOS，但禁止使用微软的Windows，对于这条禁用Windows的规定，GitLab给出的理由主要是以下两点，由于Windows在桌面操作系统中处于主导地位，所以...。
车载激光雷达赛道的火热正在从2021年延续到2022年，新智驾获悉，速腾聚创正在进行新一轮融资，具体数额可能超过24亿元以上，尽管目前并不清楚该轮融资的轮次，但一旦数额敲定，将刷新车载激光雷达行业的最大单轮融资，此前该记录由禾赛科技保持——其D轮融资为3.7亿美元，不仅如此，知情人士还向新智驾透露，速腾聚创本轮融资或将由小米领投，其他...。
adefee大神级投影控发表于2024，03，29连接爱普生投影仪到台式电脑的方式如下，1.首先，将爱普生投影仪和电脑关闭，并确保它们都插入电源，2.然后，找到电脑和投影仪的VGA接口，并使用VGA线连接电脑和投影仪，如果您的电脑没有VGA接口，则可以使用适当的适配器将另一种类型的接口转换为VGA，3.打开投影仪和电脑，然后按下你的电...。
近日，有医学专家对，发际线上移就是脱发，一事造谣，专家示意，发际线上移或者是发际线成熟的标记，并不代表秃头，不是真的脱发，概略...。
申明，1.以上内容仅代表揭发者自己，不代表黑猫揭发立场，2.未经授权，本平台案例制止任何转载，违者将被清查法律责任，3.黑猫揭发处置揭发不收取任何费用，凡以黑猫揭发名义不要钱的均为混充、诈骗行为，请及时报警并与黑猫官网反应，揭发邮箱heimaotousu@vip.sina.com，4.请大家选用官网渠道处置生产纠纷，不要轻信第三方机构...。
江淮瑞风S2后备箱尺寸大小为高度760mm，宽度1260mm，纵深730到1515mm容积为430升，放三个行李箱是没有疑问的，假设是体魄比拟娇小的人，躺出来也是齐全没有疑问的，江淮瑞风S2的后排座椅是齐全可以放倒的，江淮瑞风S的左肩和右肩下面各有一个按钮，往下按下去再往前推就可以了，然而十分遗憾的一点是，江淮瑞风S2的后排座椅是不能...。
这个是雨燕的，这个是嘉年华三厢，这是是嘉年华二厢二手福特嘉年华的多少钱是多少?二手福特嘉年华的多少钱因车况、年份、里程、性能等起因此异，依据提供的参考文章，可以看到二手福特嘉年华的多少钱范畴较广，从几万元到十几万元不等，详细的多少钱取决于车辆的实践状况和市场需求，普通来说，较新的车辆、里程数较低、车况良好的二手福特嘉年华多少钱会相对较...。
[全球时报驻德国特约记者青木]围绕欧盟对中国产电动汽车加征关税，中欧双方约定，就欧盟反补贴考查案启动商量，据德国资讯电视台23日报道，宿愿化解中欧贸易争端的德国经济部长哈贝克，在完结中国之行时以，十分满意，来概括此次访问，德新社称，在电动汽车关税争端中，中国和欧盟已初步和解，欧盟委员会6月12日颁布初裁披露，拟从7月4日起对从中国出口...。
论文中能出现它吗 1、论文中可以用它。“它”作为代词，用来指代前文提到的事物或物品，可以在论文中使用。例如，如果你在论文中第一次提到一个人名或事物时，可以使用全称或者较完整的名词短语，之后再用代词“它”进行代替。2、论文中可以提到Chatg
今日，由椰滋咪（上海）文化、上海阿柯文化出品，上海志桢文化、苏纳影视文化联合出品的都市恋爱网剧《隔壁总裁赖上我》，在南京市雨花台区举行了开机仪式。出品人孙菲遥、李晨佳，联合
亿图图示,Edraw最大允许学生，教师和商务专业人士可靠地创建和发布各种图表表示任何意见。创建具有专业外观的流程图，组织结构图，网络图，商业演示，建筑图则，思维导图，时装设计，UML图表，工作流程，程序结构，网页设计图变得简单，电气工程图，定向地图，数据库图表和更多,您可以免费下载。
在2000年的时候，互联网兴起，普通老百姓刚刚开始接触互联网，到处是流量，那时候即便你有一点点网络技术，做个废品单页，搜索引擎一收录，那流量就是源源不断……，卖任何产品，基本都能赚到盆满金满，互联网经过20几年的发展，早已今非昔比了，现在都在追求，私域流量，，何为，私域流量，?说，私域流量，前，先说，公域流量，在搜索引擎，论坛，贴吧，...。
2024双十一家用投影仪选购指南，2024双十一家用投影仪推荐发表在综合交流大区2024，10，817，23一晃眼，双十一活动马上来了，搭配杭州家电补贴，今年的双十一可以超低价入手投影仪了，那么2024双十一家用投影仪该怎么选购呢，下面就分享2024双十一家用投影仪选购指南，看看有哪些家用投影仪值得入手，一、2024双十一家用投影仪选...。
《百年孤独》：人的孤独，比生命还长久丨景凯旋读经典⑯,小说,景凯旋,昆德拉,百年孤独,马尔克斯
佛山网易房产为您提供美的鹭湖森林度假区楼盘售楼处电话：4001-666-163转29399、最新房价参考：6800元/㎡、户型图、实景图和周边配套等最新楼盘详情信息，买新房尽在佛山网易房产！
千龙网北京7月15日讯据北京市突发事情预警信息颁布中心最新信息，北京市布局人造资源委揭示您，7月15日20时，7月16日20时，房山、门头沟、昌平、延庆、怀柔、密云、平谷山区路线沿线部分路段有出现崩塌灾祸的危险，请留意防范，...。
