向善而生的AI助盲,让AI多一点,障碍少一点******
有人说,盲人与世界之间,相差的只是一个黎明。在浪潮信息研发人员的心中,失去视力的盲人不会陷入永夜,科技的进步正在力图给每一个人以光明未来。
AI助盲在人工智能赛道上一直是最热门的话题之一。以前,让失明者重见光明依靠的是医学的进步或“奇迹”。而随着以“机器视觉+自然语言理解”为代表的多模态智能技术的爆发式突破,更多的失明者正在借助AI提供的感知、理解与交互能力,以另一种方式重新“看见世界”。
新契机:多模态算法或将造福数以亿计失明者
科学实验表明,在人类获取的外界信息中,来自视觉的占比高达70%~80%,因此基于AI构建机器视觉系统,帮助视障患者拥有对外界环境的视觉感知与视觉理解能力,无疑是最直接有效的解决方案。
一个优秀的AI助盲技术,需要通过智能传感、智能用户意图推理和智能信息呈现的系统化发展,才能构建信息无障碍的交互界面。仅仅依靠“一枝独秀”超越人类水平的单模态人工智能比如计算机视觉技术还远远不够,以“机器视觉+自然语言理解”为代表的多模态算法的突破才是正确的新方向和新契机。
多个模态的交互可以提升AI的感知、理解与交互能力,也为AI理解并帮助残障人士带来了更多可能。浪潮信息研发人员介绍说,多模态算法在AI助盲领域的应用一旦成熟,将能够造福数以亿计的失明者。据世卫组织统计,全球至少22亿人视力受损或失明,而我国是世界上盲人最多的国家,占世界盲人总数的18%-20%,每年新增的盲人数量甚至高达45万。
大挑战:如何看到盲人“眼中”的千人千面
AI助盲看似简单,但多模态算法依然面临重大挑战。
多模态智能算法,营造的是沉浸式人机交互体验。在该领域,盲人视觉问答任务成为学术界研究AI助盲的起点和核心研究方向之一,这项研究已经吸引了全球数以万计的视障患者参与,这些患者们上传自己拍摄的图像数据和相匹配的文本问题,形成了最真实的模型训练数据集。
但是在现有技术条件下,盲人视觉问答任务的精度提升面临巨大挑战:一方面是盲人上传的问题类型很复杂,比如说分辨冰箱里的肉类、咨询药品的服用说明、挑选独特颜色的衬衣、介绍书籍内容等等。
另一方面,由于盲人的特殊性,很难提取面前物体的有效特征。比如盲人在拍照时,经常会产生虚焦的情况,可能上传的照片是模糊的或者没有拍全,或者没拍到关键信息,这就给AI推理增加了难度。
为推动相关研究,来自卡内基梅隆大学等机构的学者们共同构建了一个盲人视觉数据库“VizWiz”,并发起全球多模态视觉问答挑战赛。挑战赛是给定一张盲人拍摄的图片和问题,然后要求给出相应的答案,解决盲人的求助。
另外,盲人的视觉问答还会遭遇到噪声干扰的衍生问题。比如说,盲人逛超市,由于商品外观触感相似,很容易犯错,他可能会拿起一瓶醋却询问酱油的成分表,拿起酸奶却询问牛奶的保质期等等。这种噪声干扰往往会导致现有AI模型失效,没法给出有效信息。
最后,针对不同盲人患者的个性化交互服务以及算法自有的反馈闭环机制,同样也是现阶段的研发难点。
多解法:浪潮信息AI助盲靶向消灭痛点
AI助盲哪怕形式百变,无一例外都是消灭痛点,逐光而行。浪潮信息多模态算法研发团队正在推动多个领域的AI助盲研究,只为帮助盲人“看”到愈发精彩的世界。
在VizWiz官网上公布的2万份求助中,盲人最多的提问就是想知道他们面前的是什么东西,很多情况下这些物品没法靠触觉或嗅觉来做出判断,例如 “这本书书名是什么?”为此研发团队在双流多模态锚点对齐模型的基础上,提出了自监督旋转多模态模型,通过自动修正图像角度及字符语义增强,结合光学字符检测识别技术解决“是什么”的问题。
盲人所拍摄图片模糊、有效信息少?研发团队提出了答案驱动视觉定位与大模型图文匹配结合的算法,并提出多阶段交叉训练策略,具备更充分的常识能力,低质量图像、残缺的信息,依然能够精准的解答用户的求助。
目前浪潮信息研发团队在盲人视觉问答任务VizWiz-VQA上算法精度已领先人类表现9.5个百分点,在AI助盲领域斩获世界冠军两项、亚军两项。
真实场景中的盲人在口述时往往会有口误、歧义、修辞等噪声。为此,研发团队首次提出视觉定位文本去噪推理任务FREC,FREC提供3万图片和超过25万的文本标注,囊括了口误、歧义、主观偏差等多种噪声,还提供噪声纠错、含噪证据等可解释标签。同时,该团队还构建了首个可解释去噪视觉定位模型FCTR,噪声文本描述条件下精度较传统模型提升11个百分点。上述研究成果已发表于ACM Multimedia 2022会议,该会议为国际多媒体领域最顶级会议、也是该领域唯一CCF推荐A类国际会议。
在智能交互研究方面上,浪潮信息研发团队构建了可解释智能体视觉交互问答任务AI-VQA,同时给出首个智能体交互行为理解算法模型ARE。该研究成果已发表于ACM Multimedia 2022会议。该研究项目的底层技术未来可广泛应用于AI医疗诊断、故事续写、剧情推理、危情告警、智能政务等多模态交互推理场景。
眼球虽然对温度并不敏感,但浪潮信息的研发团队,却在努力让盲人能“看”到科技的温度,也希望吸引更多人一起推动人工智能技术在AI助盲、AI反诈、AI诊疗、AI灾情预警等更多场景中的落地。有AI无碍,跨越山海。科技的伟大之处不仅仅在于改变世界,更重要的是如何造福人类,让更多的不可能变成可能。当科技成为人的延伸,当AI充满人性光辉,我们终将在瞬息万变的科技浪潮中感受到更加细腻温柔的善意,见证着更加光明宏大的远方。
东西问|陈梅:华侨华人何以成为春节文化海外传承的“自媒体”?******
中新社北京1月28日电 题:华侨华人何以成为春节文化海外传承的“自媒体”?
——专访美国纽约华人社团联席会主席陈梅
中新社记者 罗海兵
写春联、剪窗花、挂灯笼、放烟花……无论离家多久、多远,生活在世界各地的华侨华人都依然保留着中国的传统习俗。反映美国历史的《哈泼斯月报》自1880年起就曾刊载在美华人燃放鞭炮、置办年货、挂彩灯欢度春节的热闹场景。
华侨华人在传续春节传统的同时,也使春节在海外成为中外文化交流的独特载体。已五次举办迎新春民俗文化节活动的美国纽约华人社团联席会主席陈梅近日在接受中新社“东西问”专访时表示,华侨华人天然是在海外传承中国春节文化的“自媒体”,既向海外推广和展示了中国悠久的历史、博大精深的中华文化,也让华裔后代在欢乐中了解、认识和爱上中华文化。
中新社记者:美国纽约华人社团联席会于2023年1月15日举办纽约华侨华人兔年迎新春民俗文化节,都有哪些内容?这一天是中国的南方小年,为什么会选择在这一天举办活动?
陈梅:纽约华侨华人迎新春民俗文化节自2015年开办以来一直深受广大华人华侨和社区内其他各族裔的喜爱,并连续举办了五届。后由于疫情原因停办了两年。今年我们再次举办线下迎新春民俗文化节活动。
今年的活动内容十分丰富多彩,既有写春联、画年画、剪纸等经典内容,也有小朋友们喜爱的捏气球、脸部彩绘、做糖画人,以及帮助小朋友们认识汉字的猜灯谜活动。活动期间还将举办一场精彩的文艺表演,其中包括京剧、太极拳、武术、民族舞,以及美轮美奂的儿童汉服秀、美中音乐家协会著名歌唱家们的专业演唱等。演员的年龄从9岁到85岁不等,以期达到联席会一向主张的“全民庆春节,举家同欢乐”初衷。
今年1月15日是中国(南方)民间俗称的“小年”的日子。在美国的华人常因工作繁忙且不是公假日,故大多数家庭不能聚在一起过小年。我们选择在小年这一天举办迎新春民俗文化节,某种意义上是向身居海外的华侨华人和下一代介绍“小年”这一传统中华习俗的来历及寓意,同时也通过迎新春民俗文化节的形式把大家从百忙中汇聚在一起。
纽约华人华侨2023第六届迎新春民俗文化节。受访者供图中新社记者:举办迎新春民俗文化节的初衷是什么?华人社会参与度如何?他们为什么热衷于参加春节活动?
陈梅:迎新春民俗文化节提供了一个重要的展示中华文化的平台,旨在借各界庆祝中国农历新年之际,以中国的民间艺术、各地的习俗风情、中华美食为主题,向美国和纽约市主流社会、各界人士、广大民众推广展示历史悠久、博大精深的中华民俗文化。这是联席会连年举办迎新春民俗文化节这个品牌活动的目的与动力,我们要让孩子们在欢乐中学习知识、传承中华文化。
活动自2015年开办以来,从第一届只有10个摊位,发展到2020年第五届时有50个摊位,还有一场精彩的免费文艺表演。过去联席会举办的每一届迎新春民俗文化节都是人山人海,参加的人士不仅可以亲自感受中国民俗艺术、品尝中华美食、观看中国传统艺术表演,还可以带走各式各样的免费民间艺术作品作为春节装饰,感受中国“年味”。
海外华侨华人纵然身处异国他乡,但对文化根脉的情怀深植心中,对中国传统节日的感受是共通的。通过参加春节文化活动,既可以营造过年氛围,也可以慰藉思乡之情,还能让华裔后代感受中国传统文化。春节讲究团圆,参加春节文化活动也是海外华侨华人一起热闹过年的场景之一。
人们在纽约华人华侨迎新春民俗文化节上写书法。受访者供图中新社记者:海外华侨华人保留了哪些中国春节传统?又有哪些本土化的创新?
陈梅:追溯历史,华人在海外过春节的传统,是与华人移民的脚步相伴相随的。在美国,十九世纪五六十年代的淘金热及横贯美国铁路修建完工之后,早期华工从美国西部开始东迁来到东岸。历史资料详细记载了1871年2月18日,这些华工及其家人,在美东地区举办第一个中国新年的庆祝活动。
春节常被翻译成Spring Festival,其实在海外更习惯称春节为Chinese New Year,即“中国新年”,也就是我们说的农历新年,一般指正月初一。但华人在海外过春节和在中国国内一样,是一个更大的范畴,包含除夕、初一和正月十五三个重要时间节点。华人完整保留了中国的春节传统,贴春联、挂灯笼、放烟花;除夕夜的年夜饭上一定要有饺子或年糕,正月十五也一定要吃元宵。春节期间走亲访友互相拜年,给孩子压岁钱发红包,华社活动中有舞龙、舞狮表演等等。
当然,春节在海外也有许多因地制宜的创新,比如在美国一些大城市的中国城,会有中国农历新年巡游等不同形式的庆祝活动;在一些欧洲国家则会以中国新年音乐会等形式庆祝;在东南亚一些国家的华人家庭,还会制作融合南洋风味的“年饼”作为新的“年味”……在这些因地制宜的创新过程中,不同文化和文明得以交融互鉴。
美国纽约布莱恩公园举行舞狮活动,众多孩童在活动中与舞狮近距离接触。廖攀 摄中新社记者:在海外举行的包括春节在内的中国传统节日活动中,是否有当地主流社会的参与?参与度如何?
陈梅:其实,在海外不同形式的中国春节庆祝活动,已经逐渐走出唐人街,有越来越多当地主流社会的人士参与。比如非常著名的旧金山农历新年大巡游,就是从早期少数中国劳工在中国城小打小闹庆祝春节的传统,如今演变成多族裔、中美团体亲密合作展示中国传统文化的盛会,成为世界十大著名大巡游之一。再比如美国纽约帝国大厦、英国伦敦眼、澳大利亚悉尼歌剧院等多国地标建筑每年也会为中国春节点亮红色灯光以示祝贺。
在一些国家和地区,中国春节已经被列为全国性或地方性的法定节日。多国政要也会在中国春节期间发表新春贺词。
美国纽约曼哈顿中国城街道张灯结彩。廖攀 摄中新社记者:海外华人赓续传承的中国传统节日文化活动,如何成为中外文化交流的载体?
陈梅:纽约有数十万来自中国的移民、学生和工作人员。每逢佳节倍思亲。像中秋节、春节这种非常具有中国特色的传统节日已逐渐融入当地美国人的生活中。自从纽约州通过了中国大年初一所有在校学生可以留在家中与家人共度春节而不算缺席的法律后,春节更是成了家喻户晓的中国传统节日。各个大学、中学、小学都会举办庆祝中国春节的活动,比如教学生包饺子、写春联、跳中国民族舞蹈,以及举办以中国民族乐器为主的音乐会等。久而久之,这些庆祝活动就自然而然地成为中美文化交流的载体。
随着世界多元文化的发展,这些丰富多彩的中国节日传统,也令当地民众耳目一新,被中国春节的热闹和“年味儿”吸引,继而对中国文化产生兴趣。而透过这些热闹场景,他们更加感受到中国春节文化的精神内核,读懂中华文化蕴涵的家庭观念和世界观,即追求团圆、追求和美。
美国纽约曼哈顿唐人街春节气氛浓,人们在一家上海菜餐厅用餐。廖攀 摄中新社记者:海外华侨华人在自身保留春节传统的同时,在传承、传播春节文化中发挥了什么作用?
陈梅:海外华侨华人自身在海外就是传承中国文化和传播春节文化的“自媒体”。我们通过不断地向我们的下一代以及其他族裔和主流社会介绍、演绎中国传统文化,让人们记住有五千年文明史的中华民族是个期望和平的民族。无论在哪里,中国人世世代代都愿意为中美人民之间的友谊,为世界和平和民族昌盛搭桥铺路。(完)
受访者简介:
陈梅,美国纽约华人社团联席会主席。纽约华人社团联席会(New York Council of Chinese American Associations)成立于2003年,是经纽约州政府登记注册,美国联邦政府认可的非盈利组织,由来自中国大陆、台湾、港澳地区的华人社团联合组成的民间团体。联席会的宗旨是为加强华人社团之间的联系与合作,争取在美华侨华人各界应有的权益,并以联席会为平台推动中美两国人民在文化、教育、经济、贸易等各方面的交流与发展,从而促进华侨华人与其他族裔之间的相互了解与合作,以及中美两国人民之间的友谊。
中国网客户端 国家重点新闻网站,9语种权威发布 |