11月22日,在IDEA研究院主办的2024年IDEA大会上,IDEA研究院创院理事长、美国国家工程院外籍院士沈向洋表示,在技术大爆发时期开展创新,对技术的深度理解尤为重要。 从通用视觉感知到具身智能,从合成数据到大模型价值创造,从AI for Science到AI for Coding……当天,IDEA大会公布了一系列前沿研究与产业落地成果,带来从技术突破到产业融合的AI创新实践。
活动现场
已举办四年 公布一系列合作
IDEA研究院全称粤港澳大湾区数字经济研究院(International Digital Economy Academy)。2020年11月1日,沈向洋院士在深圳全球创新人才论坛上正式宣布IDEA成立,至今正好4岁。2021年起,IDEA研究院开始每年在11月举办IDEA大会。
今年,IDEA大会公布在具身智能的三个合作:与腾讯合作,在深圳福田区、河套深港科技创新合作区落地建设福田实验室,聚焦人居环境具身智能技术;与美团合作,探索无人机视觉智能技术;与比亚迪合作,拓展工业化机器人智能应用。
沈向洋说:“深圳是一座用迭代软件的速度迭代硬件的城市。只有在大湾区、在深圳才有这样的机会以这样的速度奋勇向前。”
成长自“创都”深圳,过去一年,IDEA的大湾区生态开枝散叶,种下更多创新的种子。除上述提及的福田实验室外,IDEA与前海深港合作区共建IDEA前海创新院,与深圳龙岗区合作建设IDEA低空经济分院,与横琴粤澳深度合作区共建IDEA-横琴数字技术及人工智能测评中心。
在初创生态方面,IDEA的一众生态企业,如识渊科技、AI玩伴机器人爱小伴、GPU加速电影工业渲染器Smaray慧光追等,也在IDEA大会上悉数亮相。
计算机视觉:无需提示,检测万物
每年的IDEA大会,沈向洋都会在长达2个多小时的报告中,悉数更新过去一年IDEA的研究成果及落地情况。
计算机视觉技术是其中的重磅成果之一。如今,计算机视觉技术在真实世界的应用场景十分广泛,过去主流的小模型方案,难以应对碎片化、多变的长尾需求,限制了技术落地规模。
源自自然语言研究的Transformer架构诞生后,视觉模型与之结合,走上一条“从小变大,从N变1”之路。自2022年起,IDEA团队从目标检测出发,打造精准度、通用性、泛化能力兼优的DINO系列视觉大模型。
本次大会发布了该系列最新的DINO-X通用视觉大模型,拥有真正的物体级别理解能力,实现开放世界(Open-world)目标检测。无需用户提示,直接检测万物。
与此同时,IDEA团队还推出行业平台架构,通过一个大模型基座,结合通用识别技术,让模型不需重新训练,就可边用边学,支撑多种多样的B端应用需求。
大模型:价值创造进行时
大模型能力的涌现,离不开互联网时代的海量数据养料积累。如今,数据存量告急,引发业界对合成数据的重视。
在这个方向上,IDEA团队自研了语境图谱技术,解决过往文本数据合成方案的多样性匮乏等问题。该技术为合成数据引入“指导手册”,以图谱为纲,指导用于合成的语境采样。
实验结果显示,IDEA团队的方案能持续为大模型带来能力提升,表现超过目前的最佳实践(SOTA);从token消耗来看,平均节约成本85.7%。目前,该技术内测平台已开放,通过API提供服务。
在拓展前沿的同时,大模型价值创造也在进行时。大会上,IDEA秀出多个垂类行业应用落地进展,包括:学术大模型和AI科研神器ReadPaper、营销创作大模型,以及面向经济与金融领域的经济大模型、运筹决策大模型、投资大模型。
AI :编程语言被重塑
在基础研究愈发受到重视的当下,AI for Science是技术创新创业的重要方向。今年的诺贝尔奖,更是将这场科学革命推向聚光灯下。
IDEA团队从化学领域的预测能力和数据能力入手,进行了研究和产业化实践。
在预测方面,IDEA研发的多个化学领域专家大模型,分子属性预测和化学反应预测能力均处业界领先水平;在数据方面,IDEA开发了化学文献多模态大模型,联合晶泰科技发布专利数据挖掘平台PatSight,将药物领域的专利化合物数据挖掘时间,从数周缩短至1小时。 除了科学研究之外,另一个技术范式正在被AI重塑的领域,是编程语言。
此次大会上,IDEA研究院的MoonBit团队展示了其开发平台强大的AI for coding体验。
MoonBit是专为云计算与边缘计算设计的AI云原生编程语言及工具链,已具备完备的多后端支持和跨平台能力,可在硬件上直接运行,支持RISC-V。MoonBit的开源开发平台,将于12月正式开放。
低空经济:安全与开放
低空经济腾飞之势已起。IDEA研究院连续第三年发布低空经济白皮书,今年的关键词是安全。沈向洋指出,在低空经济的发展中,安全是重中之重。唯有实现了安全,才能实现大规模飞行,而安全,又与效率、成本等要素紧密相连。针对此,《低空经济白皮书3.0》推出了低空安全体系。
另一个关键词,则为开放。IDEA推出低空管理与服务操作系统OpenSILAS 1.0 Alpha版,还携手17家产业伙伴发起OpenSILAS创新联合体,旨在打造开放共享、技术领先的系统和平台,建立有实际系统支撑的标准体系。
文|记者 沈婷婷图|主办方提供