向善而生的AI助盲,让AI多一点,障碍少一点******
有人说,盲人与世界之间,相差的只是一个黎明。在浪潮信息研发人员的心中,失去视力的盲人不会陷入永夜,科技的进步正在力图给每一个人以光明未来。
AI助盲在人工智能赛道上一直是最热门的话题之一。以前,让失明者重见光明依靠的是医学的进步或“奇迹”。而随着以“机器视觉+自然语言理解”为代表的多模态智能技术的爆发式突破,更多的失明者正在借助AI提供的感知、理解与交互能力,以另一种方式重新“看见世界”。
新契机:多模态算法或将造福数以亿计失明者
科学实验表明,在人类获取的外界信息中,来自视觉的占比高达70%~80%,因此基于AI构建机器视觉系统,帮助视障患者拥有对外界环境的视觉感知与视觉理解能力,无疑是最直接有效的解决方案。
一个优秀的AI助盲技术,需要通过智能传感、智能用户意图推理和智能信息呈现的系统化发展,才能构建信息无障碍的交互界面。仅仅依靠“一枝独秀”超越人类水平的单模态人工智能比如计算机视觉技术还远远不够,以“机器视觉+自然语言理解”为代表的多模态算法的突破才是正确的新方向和新契机。
多个模态的交互可以提升AI的感知、理解与交互能力,也为AI理解并帮助残障人士带来了更多可能。浪潮信息研发人员介绍说,多模态算法在AI助盲领域的应用一旦成熟,将能够造福数以亿计的失明者。据世卫组织统计,全球至少22亿人视力受损或失明,而我国是世界上盲人最多的国家,占世界盲人总数的18%-20%,每年新增的盲人数量甚至高达45万。
大挑战:如何看到盲人“眼中”的千人千面
AI助盲看似简单,但多模态算法依然面临重大挑战。
多模态智能算法,营造的是沉浸式人机交互体验。在该领域,盲人视觉问答任务成为学术界研究AI助盲的起点和核心研究方向之一,这项研究已经吸引了全球数以万计的视障患者参与,这些患者们上传自己拍摄的图像数据和相匹配的文本问题,形成了最真实的模型训练数据集。
但是在现有技术条件下,盲人视觉问答任务的精度提升面临巨大挑战:一方面是盲人上传的问题类型很复杂,比如说分辨冰箱里的肉类、咨询药品的服用说明、挑选独特颜色的衬衣、介绍书籍内容等等。
另一方面,由于盲人的特殊性,很难提取面前物体的有效特征。比如盲人在拍照时,经常会产生虚焦的情况,可能上传的照片是模糊的或者没有拍全,或者没拍到关键信息,这就给AI推理增加了难度。
为推动相关研究,来自卡内基梅隆大学等机构的学者们共同构建了一个盲人视觉数据库“VizWiz”,并发起全球多模态视觉问答挑战赛。挑战赛是给定一张盲人拍摄的图片和问题,然后要求给出相应的答案,解决盲人的求助。
另外,盲人的视觉问答还会遭遇到噪声干扰的衍生问题。比如说,盲人逛超市,由于商品外观触感相似,很容易犯错,他可能会拿起一瓶醋却询问酱油的成分表,拿起酸奶却询问牛奶的保质期等等。这种噪声干扰往往会导致现有AI模型失效,没法给出有效信息。
最后,针对不同盲人患者的个性化交互服务以及算法自有的反馈闭环机制,同样也是现阶段的研发难点。
多解法:浪潮信息AI助盲靶向消灭痛点
AI助盲哪怕形式百变,无一例外都是消灭痛点,逐光而行。浪潮信息多模态算法研发团队正在推动多个领域的AI助盲研究,只为帮助盲人“看”到愈发精彩的世界。
在VizWiz官网上公布的2万份求助中,盲人最多的提问就是想知道他们面前的是什么东西,很多情况下这些物品没法靠触觉或嗅觉来做出判断,例如 “这本书书名是什么?”为此研发团队在双流多模态锚点对齐模型的基础上,提出了自监督旋转多模态模型,通过自动修正图像角度及字符语义增强,结合光学字符检测识别技术解决“是什么”的问题。
盲人所拍摄图片模糊、有效信息少?研发团队提出了答案驱动视觉定位与大模型图文匹配结合的算法,并提出多阶段交叉训练策略,具备更充分的常识能力,低质量图像、残缺的信息,依然能够精准的解答用户的求助。
目前浪潮信息研发团队在盲人视觉问答任务VizWiz-VQA上算法精度已领先人类表现9.5个百分点,在AI助盲领域斩获世界冠军两项、亚军两项。
真实场景中的盲人在口述时往往会有口误、歧义、修辞等噪声。为此,研发团队首次提出视觉定位文本去噪推理任务FREC,FREC提供3万图片和超过25万的文本标注,囊括了口误、歧义、主观偏差等多种噪声,还提供噪声纠错、含噪证据等可解释标签。同时,该团队还构建了首个可解释去噪视觉定位模型FCTR,噪声文本描述条件下精度较传统模型提升11个百分点。上述研究成果已发表于ACM Multimedia 2022会议,该会议为国际多媒体领域最顶级会议、也是该领域唯一CCF推荐A类国际会议。
在智能交互研究方面上,浪潮信息研发团队构建了可解释智能体视觉交互问答任务AI-VQA,同时给出首个智能体交互行为理解算法模型ARE。该研究成果已发表于ACM Multimedia 2022会议。该研究项目的底层技术未来可广泛应用于AI医疗诊断、故事续写、剧情推理、危情告警、智能政务等多模态交互推理场景。
眼球虽然对温度并不敏感,但浪潮信息的研发团队,却在努力让盲人能“看”到科技的温度,也希望吸引更多人一起推动人工智能技术在AI助盲、AI反诈、AI诊疗、AI灾情预警等更多场景中的落地。有AI无碍,跨越山海。科技的伟大之处不仅仅在于改变世界,更重要的是如何造福人类,让更多的不可能变成可能。当科技成为人的延伸,当AI充满人性光辉,我们终将在瞬息万变的科技浪潮中感受到更加细腻温柔的善意,见证着更加光明宏大的远方。
福建省各级机关开展“我在乡间有亩田”党员志愿活动”******
让“抛荒地”变“希望田”
同心用情奋力书写保耕护粮“机关答卷”
为深入学习贯彻习近平总书记关于实施乡村振兴战略和粮食安全的重要论述,认真落实省委省政府有关部署要求,2022年以来,福建省委省直机关工委倡议开展“我在乡间有亩田”党员志愿活动,发动全省各级机关自愿认筹认种抛荒农田耕地,以实际行动保障粮食安全,推动乡村全面振兴,奋力书写保耕护粮的“机关答卷”。省委充分肯定全省机关开展的“我在乡间有亩田”活动取得的初步成效,要求认真总结宣传经验做法,推动活动持续深入开展。
截止目前,全省各级机关党员干部职工,认种抛荒地2.89万亩,认筹资金1683.8万元,其中省直机关认筹认种近3000亩。一片片抛荒地在复垦精耕中渐苏醒、复盘活,蝶变为种满水稻、甘薯、马铃薯、玉米等粮食和经济作物的“希望田”。
站位全局,保耕护粮有力有效
粮食安全,一头连着国家战略,一头连着百姓生活。习近平总书记多次深刻阐述粮食安全问题,强调“粮食安全是‘国之大者’。悠悠万事,吃饭为大”“要把中国人的饭碗牢牢端在自己手中”。
2022年4月15日,省委常委会会议学习贯彻习近平总书记重要讲话精神,要求“牢牢守住粮食安全底线”“实施乡村建设行动”。
中央有号令,省委有部署,机关有行动!机关党建如何更有效融入全省工作大局,在服务经济发展、推进乡村振兴中,发挥“第一方阵”走在前、作表率作用?省直机关工委班子始终在思考、谋划机关党建与全局工作深度融合的结合点和工作抓手。
“手中有粮,心中不慌”,是自古以来中国人的美好愿景,更是秉承“人民至上”的大国在面对国内外复杂多变的局势时该有的底气。针对农村耕地撂荒问题,去年5月,省委省直机关工委及时发出倡议,号召全省机关党组织强化党建引领,广泛发动在职党员干部职工积极参与“我在乡间有亩田”党员志愿活动,并率先在霞浦县盐田乡西胜村认筹认种10亩抛荒耕地,以实际行动保障粮食安全,为全面推进乡村振兴贡献力量。
“很快,一片片杂草丛生的抛荒耕地,迎来了一批批“城里的主人”。活动迅速得到省直单位广泛响应——省直各单位广大党员干部踊跃参与志愿活动,主动对接单位挂钩联系的县(市、区)或驻村干部,结合自身实际,探索不同路径,认领“责任田”。省人大机关、省纪委监委、省委办公厅、省政府办公厅、省委宣传部、省委统战部、省委政法委等单位领导班子成员带头认筹认种,发挥带头示范作用,以“头雁效应”推动全员积极参与;省工信厅、省公安厅、省民政厅、省退役军人事务厅、省林业局、团省委、省妇联、福建日报社等通过开展主题党日、志愿服务、工青妇活动等方式,组织党员干部深入田间地头,开展劳动体验教育,并以出资委托代耕、包干劳作等方式参与粮食生产;省司法厅、省信访局、省科协等单位分别通过系统带动、主动对接单位挂钩联系的县(市、区)或派出的驻村干部等方式认领抛荒耕地;省市台港澳办与台港澳系统、同胞、企业联合认筹认种“台港澳示范田”,积极探索闽台融合新模式;中央驻闽单位和央企也纷纷加入,福州海关、国网福建电力公司、福建电信、福建联通等履行“国家队”的责任和担当,主动认筹认种抛荒地。省农业农村厅加强政策统筹和把关,大力指导基层复耕复种,开展农业生产。
在省直机关带动下,市、县两级机关单位纷纷行动,掀起党员志愿认筹认种热潮。宁德、福州、莆田、南平、三明、漳州、龙岩以及屏南、蕉城、霞浦、晋安、永泰、永安、尤溪、平和、华安、仙游等市、县党委直属机关工委会同组织、农业农村等部门,发动机关事业单位、社会团体、企业商会、“两新”组织以及在外乡贤等社会各界积极参与,通过机关单位带动社会各界、机关党员引领家庭成员,凝聚起志愿活动的强大合力。
省委省直机关工委党员志愿者在霞浦县西胜村认筹认种抛荒地上挥锄耕作。摄影:邱炜
助农惠民,“四下基层”见事见人
八闽的盛夏,骄阳似火,却阻挡不了机关党员奔赴“自家田”的热情。
省直机关党员干部积极践行“四下基层”,纷纷走出办公室,下到田野中,与农户同劳动、话家常,感受农耕苦乐,宣传扶农惠粮政策,推动解决农业生产问题,帮助农村农民稳收增收,与基层群众拉近了距离、增进了感情。省文旅厅通过党员独自认种、众筹认种、支部结对认种、单位定点认种等多种方式,开展支农助农活动;省市场监管局通过开展扶农惠粮政策宣传、助农产品推广消费等活动,用实际行动帮助农民稳收增收;省海洋与渔业局结合行业特点,开展“我在渔区有口塘”志愿活动,通过认养虾塘,进行技术指导、渔事劳作,进一步走近农民、了解农村、推动渔业发展。
认领乡间“一亩田”,更要深耕一份“责任田”,种下去更要管得好!全省各级机关持续跟进认种后续服务,多措并举,在“长效”“实效”上作文章。宁德市县两级统筹协调各方资源,提供良田挑选、下单付款、售后跟踪等一站式服务,成立“粮耕保姆站”,全力解决耕作难题。同时筛选组建了21支农技服务队,不定期深入田间地头开展“送技上门”服务。莆田市出台“稳粮发展12条”措施,以财政投入引导撂荒地整治扶持。同时成立由党员担任田长的“红色护田员”服务队,多渠道培育农产品伴手礼品牌,提高农产品附加值。南平市强化政策协同和资金保障,引导龙头企业、家庭农场等参与撂荒地认筹利用工作,走好具有福建特色的乡村振兴之路。德化县在党建引领、政策叠加、国企助力上下功夫,打好服务保障“组合拳”;平和县号召党员干部“以当年带头开山种柚的干劲带头开耕种粮”,做到“认种与助农”结合、“开耕与护绿”结合、“引领与聚力”结合。全省各级农业农村部门不断完善“认、种、管”模式,优化个性化定制内容,帮助指导发展优势特色农业。
助农惠民,见事更要见人。各级机关在认筹认种中,紧密结合开展“四下基层、福行八闽——尊老爱幼、扶困助残”活动,深入基层一线,了解疫情影响下中小微企业发展、农产品销路、农民就业、乡村治理等农村实际情况,坚决守住不发生规模性返贫底线。每到一处,机关党员都深入基层访贫问苦,开展慰问和扶助,及时送去党和政府的温暖。在开展农村低收入人口常态化帮扶中,机关党员与基层群众拉近了距离、密切了感情,进一步树牢党的群众观点,走好党的群众路线。
“我们希望通过引导全省机关各级党组织和广大党员干部坚持党建引领,践行‘四下基层’,将认筹认种志愿活动作为拓展党史学习教育‘我为群众办实事’长效机制、实施机关党建‘三提三效’行动的重要抓手,不断健全完善活动机制,帮助农村农民稳收增收,巩固脱贫攻坚成果,让机关党建“三级联动”在助力乡村振兴、助农惠民中焕发新的生机!”省直机关工委负责同志介绍。
“沉睡”的土地被唤醒,农人们不再望“田”兴叹,而是对每寸土地、对美好生活充满期待。
省直和宁德市直单位党员在“蕉城良田”认领开耕活动中进行插秧比赛。阮传龙摄。
蓄势赋能,振兴乡村稳扎稳打
稻谷飘香季,颗粒归仓时。由全省各级机关党员认筹认种的农田已是稻谷金黄、瓜果飘香,万亩抛荒地迎来夏秋好收成!本周初,认筹认种抛荒地上产出的300袋“西胜大米”,经过简单加工和包装,就要分送到省直机关工委党员干部的手中。“机关党员干部到乡间认领抛荒地,提高了村民种地积极性,收成比往年更好了。”霞浦县盐田乡西胜村党支部书记肖风望着丰收景象,喜悦之情溢于言表。
和霞浦县盐田畲族乡西胜村的丰收情景一样,八闽大地处处呈现喜人丰收景象。“嚓嚓嚓”,沉甸甸的稻穗应声倒下;“嘭嘭嘭”,黄澄澄的谷粒欢快地蹦开。看,田间地头那一个个挥汗如雨、收割打碾的忙碌身影,可不只是勤劳质朴的农民,更有来自全省各级机关的党员干部。
看到数月前亲手插下的秧苗已又青又壮,机关党员们喜上眉梢。恰逢水稻拔节长穗期,大家头顶烈日,脚踏黄土,和村民们一起挽袖卷裤,挥镰割草,干劲十足。“因为是自己认种的地,洒下了汗水,所以倍儿有感情!”朴实的话语道出不少人的心声。
土地抛荒,是近年来不少农村面临的共同难题。机关党员干部通过开展“我在乡间有亩田”党员志愿活动,用实实在在的耕耘“汗”卫粮食安全,切实盘活了农村弃耕抛荒田,提高了土地利用率和农民种粮积极性,同时激发了全社会共同参与乡村振兴的热情,形成了良好的社会影响。上杭县上早康村驻村第一书记程清华高兴地说,认领认种不仅盘活了村里的抛荒地,而且村里一年将增加12万元的毛收入。“我在乡间有亩田”党员志愿活动,在抛荒地复耕和机关干部助农之间搭起了一座桥,为全面推进乡村振兴开拓了新的作为空间。
新形势下,如何在农村与城市之间搭建更多这样的联络桥梁值得深入思考。产业振兴是乡村振兴的物质基础,也是增加群众收入,增强人民群众获得感和幸福感的不竭源泉。各级机关通过“插秧节”“开镰节”“丰收节”等农耕活动,帮助乡村策划组织开展春耕秋收等农事体验,推进美丽乡村建设,因地制宜培育延伸产业链,做优“田间经济”。民宿、摄影、研学、康养等新产业新业态不断涌现,不仅带动了农业增效、农民增收,有效促进农旅、文旅融合,也加快了新农村建设的步伐,激活了乡村振兴引擎。
健全和落实挂钩帮扶机制,进一步赋能乡村全面振兴。在认筹认种过程中,省直各单位以“我在乡间有亩田”党员志愿活动为纽带,认真落实省委省政府关于机关部门单位挂钩帮扶、乡村振兴指导员、科技特派员和驻村第一书记等制度机制要求,立足机关职能,发挥党组织的政治优势、组织优势、人才优势、智力优势、资源优势,加大调研指导力度,主动帮助挂钩帮扶单位加强党建、谋划项目、争取政策与资金支持,协助解决乡村振兴、农业生产、项目建设等经济社会发展中遇到的困难和问题,落实落细挂钩帮扶任务,为乡村振兴蓄势赋能,凝聚起更大能量和推动力。
省市场监管局党员干部在古田县薛后村体验金秋割稻,感受丰收喜悦。摄影:徐丽玲
党建引领,红色教育如火如荼
2021年3月,习近平总书记在福建考察时指出:“福建是革命老区,党史事件多、红色资源多、革命先辈多,开展党史学习教育具有独特优势。”
针对一些机关党组织开展党员教育存在的“党性”“党味”不足、内容形式单一、创新不够等情况,省直各单位充分发挥我省红色资源“三多”的特色和优势,把开展“我在乡间有亩田”志愿活动与加强党员党性党风党纪党史教育有机结合起来。通过开展主题党日活动、参观红色教育基地等方式,让机关党员干部在重温红色记忆中接受对党忠诚教育、革命传统教育和爱国主义教育,在传承红色基因中强化党性锻炼,切实把践行伟大建党精神写在田间地头上。活动开展以来,省直机关党组织到“一亩田”所在地农村开展“忠诚在心、岗位奉献”红色记忆主题党日活动300多场次,进一步丰富了机关党组织“三会一课”的内容,活跃了活动形式,又增进了党员教育的实效。
机关党建只有秉承“不忘初心、牢记使命”,做到“新、活、实”,党的工作才会有生命力和感染力,才能找准定位、增强活力、发挥作用,才能以高质量党建引领机关各项事业高质量发展。这是“我在乡间有亩田”活动中很多党员发自内心的体会。在认种认领过程中,各级机关党组织立足机关党建“围绕中心、建设队伍、服务群众”的核心职能,把握共产党人“为民造福”这一根本宗旨和最大政绩,积极探索不同路径,找准机关职能与服务发展、服务基层、服务群众的结合点。通过党建引领,广泛开展机关党的建设“三级联创”活动,深化“机关+农村”结对共建工作,强化组织共建、党员共管、载体共创、资源共享,带动市、县机关干部深入基层为民服务,做到系统带动、上下联动,使直接联系农村群众、服务乡村振兴成为全省机关的共同行动。
仓禀实,天下安。“我在乡间有亩田”党员志愿活动的火热开展,让干部长才干、群众得实惠、乡村添活力,取得较好效果。机关党员干部表示,通过认领一亩地,躬耕一方田,真切感受到唯有沉到一线察实情,扑下身子真为民,想方设法创造条件,用心耕好职责所在的“一亩三分地”,才能在时代滚滚的洪流中,砥砺初心,勇毅前行,在“为人民服务”中成就更好的自己和更有价值的人生!
党旗耀八闽,党徽映初心。八闽大地,田间地头,万亩绿辉映那抹红。阳光下,高扬的党旗分外夺目!胸前的党徽熠熠生辉!
(文图:赵筱尘 巫邓炎)