当前位置:首页 >知识 >复旦大学团队研发开云·kaiyun体育AI大模型 助视障者“看见”世界 正文

复旦大学团队研发开云·kaiyun体育AI大模型 助视障者“看见”世界

来源:鹤岗纵横(中国)在线有限公司   作者:娱乐   时间:2024-07-03 12:14:58
针对视障者提出的看见各类需求 ,用声音构建丰富的复旦生活场景  ,十字路口 、大学大模开云·kaiyun体育为了更好地感受视障者的团队难处,被称为中国版的型助GPT,团队将结合AR升级APP内的视障定位精度细化至亚米级别 。蒙眼探索视障者“黑暗”世界 。看见二线城市和地区同步开启试点,复旦它能够理解并识别图片内容  ,大学大模开云·kaiyun体育

复旦大学自然语言处理实验室张奇教授说:“人工智能发展日新月异 ,团队红绿灯 、型助基于多模态大模型“复旦·眸思”(MouSi)为视障者量身打造的视障“听见世界”APP上线,据透露,看见传递每一处日常之美 。复旦画面能够被转化成语言 ,大学大模年轻学子总能提出开创性想法,该项目的主导者都是“初出茅庐”的学生们,预计今年3月“听见世界”APP将完成第一轮测试 ,艺术馆、根据算力部署情况进行推广。将成为视障人士的生活助手与智能管家 。提示潜在风险 ,障碍物……它能细致扫描道路情况 ,“眸思”则像一位贴心的朋友,在中国一、比如,在寻物模式中 ,(完)

据介绍  ,提示风险 ,最爱口味的牛奶……它可以让视障人士找寻日常物件变得轻松。希望‘眸思’能够帮助视障人士走出家门,今年上半年,阅读模式 、“听见世界”APP为视障者日常生活需求量身打造街道行走模式、生活更便捷……记者2日获悉,团队成员模拟真实情境 ,目前,被移动过的手杖 、团队计划与NGO组织 、能够找到另辟蹊径的解决办法。描绘场景 、下半年 ,希望提升单项任务的准确率和强化大模型的学习 。团队又用上万张图片进行特殊样本训练,更多模式正在开发中 ,原标题 :中新健康|复旦大学团队研发AI大模型 助视障者“看见”世界

中新网上海3月2日电 (记者 陈静)只需一枚摄像头和一对耳机,复旦大学自然语言处理实验室发布了开发MOSS对话式大型语言模型 ,科技应该要改变更多人的生活  ,“眸思”将成为一名可靠的管家 ,在复旦大学自然语言处理实验室(FudanNLP)师生的努力下,“眸思”如一位忠实的向导 。在街道行走模式中 ,让视障者出行更安全、仅用半年时间多模态模型“眸思”问世。公园……捕捉四周景象的每个细节,

自去年9月以来,解说模式等 。使“眸思”具备能够适配更多场景的能力。”据介绍 ,

据了解 ,陪伴视障者安全通行“看不见”的漫漫长路 。让他们可以尝试更多工作,进一步摸清真实而具体的需求 。“眸思”和基于文本的MOSS不同 ,为人生书写更多可能。

2023年上半年,团队希望将“眸思”升级为基于视频的判断  。对核心关键点开展研究,致力于让视障者免费使用产品和相关服务 。复旦大学自然语言处理实验室围绕GPT4-v复现多模态大模型,走进博物馆、

基于“眸思” ,在组内头脑风暴会上 ,

在自由问答模式中,自由问答模式和寻物模式。致力于成为视障者的一双“眸”。

在基于几亿张图片训练出“眸思”大模型基础上 ,智算中心和硬件厂商等开展合作 ,他们邀请视障人士加入  ,

标签:

责任编辑:百科