北大出品全新机器人控制工具
作者：许丽思编辑：漠影
报道日期：2月13日
最近，北京大学联合香港科技大学团队基于自研全模态框架Align-Anything，将纯文本模态的DeepseekR1系列模型拓展至了图文模态，推出多模态版DeepSeek-R1，即Align-DS-V。
该成果在部分视觉理解表现评测集上超越了GPT-4。
一、团队与背景
联合研究团队中的北京大学对齐团队的指导老师为北京大学人工智能研究院助理教授杨耀东，同时也是北京具身智能初创公司灵初智能与北大共同成立的具身灵巧操作联合实验室首席科学家。
在DeepseekR1发布后，研究团队迅速将DeepseekR1系列模型扩展至图文模态，表现出了优越的视觉理解能力。
二、Align-Anything框架与DeepSeek-R1的多模态扩展
Align-Anything框架致力于使全模态大模型与人类意图和价值观对齐。
该框架支持由文本、图片、视频、音频四大基本模态衍生出的任意模态模型对齐微调，并发布了首个全模态人类偏好数据集Align-Anything，旨在实现跨模态的全面评估和改进。
基于Align-Anything框架，研究团队成功推出DeepSeek-R1的多模态版本Align-DS-V。
通过训练投影层（Projector），团队借鉴LLaVA的训练思路，将视觉编码器（VisionEncoder）输出映射到语言表征空间，从而扩展了DeepseekR1的视觉模态。
三、Align-DS-V的特点与应用
Align-DS-V作为全模态推理大模型，在视觉理解方面表现出色。
研究团队对其进行香港地区价值观的本地化对齐，适应粤语/英语/普通话混合语言输入，整合港铁动态、台风预警及八达通缴费等香港本土生活场景，展现出其在实际应用中的价值。
例如，当被图文询问到哪一款维他奶（香港地区的热门饮品）更加减脂时，Align-DS-V能够精准地回答低糖原味豆奶的问题。
在面对包含繁体字的图文数学问题时，该模型也能准确联动图文模态信息，进行严密而逐步的数学推导。
四、具身智能与DeepSeek的变革
据了解，北大-灵初联合实验室正在VLA（视觉语言动作模型）领域进行深度探索。
灵初智能研发的VLA模型利用多模态大模型进行对齐和微调，并输出actiontoken至小脑端的控制器。
这一过程中，针对多模态大模型的后训练和微调技术发挥了关键作用。
实验室表示，Align-DS-V的多模态强推理能力是VLA模型大脑端的核心。
接下来，他们将利用多模态推理模型的跨模态穿透能力实现action穿透，最终构建出真正高效的VLA模型。
后训练技术还可应用于小脑端控制器的微调，提高成功率、泛化性和鲁棒性。
五、DeepSeek的技术革命与应用场景
目前，多家具身智能相关企业已尝试在DeepSeek上应用该技术。
优必选正在验证DeepSeek技术在人形机器人应用场景中的有效性；猎户星空的机器人AgentOS也已接入DeepSeek-R1；科大讯飞在讯飞开放平台上线了DeepSeek全系大模型。
还有传言称多家企业正在基于DeepSeek-R1开发自家机器人大模型。
从技术研发到场景应用，这场由DeepSeek开源生态驱动的技术革命正在推动人形机器人感知理解决策能力的进化。
它有望降低企业研发机器人的门槛，并推动更多的力量集中在底层的运动控制小脑的研究上，从而加速具身智能从实验室迈向现实场景的步伐。
六、结语
随着技术的不断进步，我们见证了DeepSeek所带来的变革。从文本模态到图文模态，再到全模态推理大模型的应用，它正在改变人形机器人的感知理解和决策能力。未来，我们期待这一技术能够在更多领域得到应用，为人们的生活带来更多便利。同时，我们也期待着更多的企业加入这一开源生态，共同推动机器人的发展。
开源地址：
Align-Anything框架地址：
DeepDeek-R1多模态版本Align-DS-V地址：
相关标签： 机器人、 大模型、 模态、 ds、 算法、 deepseek、 北大、
本文地址：https://www.nazei.cn/yxzxwz/f40aec64ce902585b611.html
网络卖惨营销乱象，虚假人设背后的灰色产业链随着互联网的普及，直播、短视频等新型媒体形式逐渐崭露头角，越来越多的人选择通过直播销售商品或服务，在这样的背景下，一些网络主播为了吸引流量和获取利润，采取了一种名为，卖惨营销，的手法，他们通过虚构悲惨遭遇或夸大生活困境来博取同情，进而推销商品或服务，本文将深入探讨网络卖惨营销背后的真相以及相关...。
重磅！领克汽车旗下两款新车型领克07EM，P与领克08EM，P直降万元促销IT之家在近日发布消息，引领众多车迷瞩目的领克汽车正在进行一场大规模的促销活动，旗下的两款热门车型领克07EM，P与领克08EM，P直降一万元，开启了新一轮的购车热潮，此次活动不仅提供了极具吸引力的价格优惠，还搭配了丰富的配件和金融服务，为广大消费者带来了实实在...。
标题，布加迪Tourbillon混动超跑原型亮相，未来版速度超越想象IT之家2月13日消息，汽车媒体motorauthority在昨日，2月12日，发布了一篇引人瞩目的博文，网络上流出的一段布加迪Tourbillon混动超跑原型车视频，让全球车迷为之疯狂，这段视频中，V16引擎的独特声浪以及震撼的动力表现，无一不预示着这款超跑的非凡性...。
美国航天局提前发射龙飞船，应对波音星际客机技术故障，完成国际空间站轮换宇航员任务纪实据新华社洛杉矶报道，美国航天局在日前宣布了一项重要决定，决定将原计划的龙飞船发射时间提前至3月12日，此次发射任务旨在将轮换宇航员送往国际空间站，并接回包括因波音星际客机飞船技术故障滞留太空的两名美国宇航员在内的四名宇航员，这一决策的背后蕴含着复杂的技...。
标题，宇树科技的新征程，融资、扩张与机器人业务的蓬勃发展IT之家在2月12日报道，宇树科技似乎在近期取得了重要的业务发展成就，据微信公众号，包邮区，援引某私募机构的GP消息，宇树科技完成了C，轮融资，并且杭州政府已准备了一块净地无偿批给宇树科技用于建设新总部办公大楼，宇树科技CEO王兴兴在接受，科创板日报，采访时对此进行了澄清，一、融...。
上汤西兰花，一道菜与男友之间的趣事在都市生活的喧嚣中，李念常常用各种比喻来形容自己的生活点滴，最近，她常常用一个特别的比喻来形容自己的男友——，上汤西兰花，这一说法引起了众多好友的好奇与猜测，纷纷向李念打听背后的故事和含义，何为，上汤西兰花，原来，李念的男友出身名门，受过良好的教育，有着令人羡慕的职业和风度翩翩的气质，在李念眼中，...。
苹果即将发布搭载全新M4芯片的新款iPhoneSE4和更新版MacBookAirIT之家在二月十日带来了一个引人注目的消息，在彭博社作家马克・古尔曼的最新PowerOn时事通讯中，苹果公司即将推出全新版本手机，也即备受期待的iPhoneSE4，据古尔曼的可靠消息，这款手机预计将在本周悄然上架苹果官网，以新闻稿的形式对外公布，苹果公司还...。
腐蚀，新更新Primitive，重返中世纪战场的残酷与荣耀一、引言近日，开发发行商FacepunchStudios工作室宣布旗下多人生存名作，腐蚀，Rust，推出全新更新，Primitive，这款全球范围内广受欢迎的游戏一直以来以其真实的生存体验、残酷的竞争机制和丰富的玩家互动而闻名，新更新的内容将带领玩家重返中世纪战场，体验原...。
新春走基层，今年春节不值班——来自辽河油田的新春观察汤龙报道，正月初七，春节假期的最后一天，在辽河油田高升采油厂的雷二计量站，我们并没有看到一位工作人员的身影，只有设备的运转声在空气中回响，站长宫德伟在检修归来途经这座小站时告诉记者，以前过年值班这里得四五个人，现在通过监控系统和物联网技术，实现了无人值守，，今年春节‘不值班了，辽...。
APUS成立于2014年，创始人为李涛，是一家以产品技术为核心竞争力的全球化人工智能企业，致力于为中国打造AI大模型。2023年4月发布的APUS大模型，具备对文本、图像、音频、视频的理解和生成能力，APUS因此成为中国少数拥有通用人工智能大模型的企业。
石家庄高新彩钢结构有限公司专业从事石家庄彩钢板,河北钢结构的生产和销售,是专业的彩钢板厂家,欢迎来电咨询,主要销售区域为河北,石家庄,保定等区域
飞泽轻搭云·建站系统
致力于网站制作和关键词排名优化服务的网络推广公司，提供百度排名、整站优化、官网建设、中英文网站、商城网站、H5响应式网站建设，是一个能持续为客户创造商业价值的网站建设公司，为中小企业和个人提供全面的互联网解决方案。
科兴服务是国内资产运营管理引领者，成功开创并运营科创产业园区知名品牌——科兴科学园，以“自由奔放活力科创”为定位，致力于打造一个创新活力竞相迸发的科创社区，形成产业聚集的高地、科创企业的沃土、人才奋斗的乐园，为科创发展注入时代力量。运营项目包括：南山科兴科学园、前海科兴科学园、澳特科兴科学园、龙邦科兴科学园、同方信息港、创益科技大厦、中科大厦、正中时代广场、云升科学园、TCL大厦、华美产业园、同安科技园、正中科技园、松泽产业园等
睫毛刷交友网是沪上[AAA]级婚介诚信示范单位，隶属睫毛刷交友上海婚介旗下品牌,天生嫁对上海征婚网品牌保证,沪上单身精英白领专享,天生嫁对上海相亲网为白领提供最严肃,最诚信的征婚交友服务.天生嫁对婚恋交友网实施会员实名认证,严格隐私保护制度,一对一精准匹配,独家爱情定制服务,独创征婚相亲交友线下活动.睫毛刷交友上海婚介所旗下天生嫁对相亲网帮助您实现您的爱情梦想.上海婚介所,上海征婚网,婚恋交友网,征婚交友,相亲网
云梯科技是专业的跨境物流管理系统及物流信息化解决方案服务商,致力于为企业提供国际快递管理系统、跨境物流系统、国际货代系统、国际物流管理系统、物流网站建设等服务，为物流企业发展提供强大助力！
泰州市鑫文密封垫片厂坐落在世界历史名城泰州，是一家有着十多年的集生产加工、经营销售密封和保温材料的综合型企业。0523-88326588-低泄漏垫片t#1995-vdi2440低泄漏率证书t#1995-api防火证书t#1995-华尔卡VALQUA、valqua、v#6500、v#6500、v#mf300、v#sf300、V#gf300V#uf300、V#6500ac、V#black、V#6503、V#6503ac、V#7020、V#7026、V#7010ex、V#7010、V#7gp61、V#7gp66、V#7gs66a、、V#7gs62a、V#7gs64n、V#n7030、V#n7031、V#n7035、V#n7030、V#sn7031、V#sn7035、V#hn7030、V#hn7031、V#hn7035、V#vf30val、V#vf35ev、V#5、V#5m、V#6、V#6m、V#sealp、V#psvo、V#8590、V#8590tn、V#6590、V#7590、V#m590L、V#n510、V#n570、V#n580、V#n520、V#540、V#6560、V#560、V#6540h、V#6540hp、V#550、V#3645、V#3645ls、V#n214、V#n314、V#2010、V#4010、V#5010、V#101c、V#105c、V#112c、V#101g、V#102g、V#105g、V#105gf、V#112g、V#112ga、V#112gc、V#101s、V#102sf、V#102s、V#105s、V#105sn、V#112s、V#112sn、V#cutter霓佳斯、t#no1120、t#1995、t#1993、t#1804gr、t#1804na、t#9090、t1806gs、t1806gm、t1806gh、t#1809、t#1809al、t#1850p、t#1890、t#1850c、t#1850v、t#1880gr、t#grasea、t#120、t#1210、t#1220、t#9007na、t#9007g20、t#9007lc、t#9007sc、t#9007gl、t#9007fd、t#9007lpp、t#9010、t#9022a、t#9022pfa、t#9037、t#9096、t#1374、t#1400、t#th、t#1400、t#1364、t#1050、t#1051、t#2670、t#9013、t#dep、t#9013、t#9013d、t#9014Sa、t#9014b、t#9014bw、t#1600、t#6526、t#6750、t#9105、t#9106、t#9120、t#9400na、t#9401、t#9082n。
潍坊志海科技发展有限公司主导产品有:闭式冷却塔,工业冷水机,管式换热器,不锈钢冷却塔,玻璃钢冷却塔等多个品种，并可根据用户需要进行非标准设计和生产。