高文:AI赋能新质生产力发展

专题:2024中国高新技术论坛

  “2024 中国高新技术论坛”于11月14日在深圳举行。中国工程院院士、鹏城实验室主任高文出席并演讲。

  以下为演讲实录:

  高文:今天我和大家分享的是“AI赋能新质生产力发展”的命题作文。

  我讲两点:一是关于今年诺奖给了人工智能,谈谈我的考虑;二是关于人工智能发展现在我所在的鹏城实验室做了一点东西。

  首先看第一部分。

  为什么今年的诺奖会给人工智能两个,物理学奖和化学奖,它背后的逻辑是什么?到底是什么使得这两个奖最后找到了人工智能?可能大家不知道,背后的逻辑是科学大奖赛,是靠比赛最后选出了获奖人。

  先说问题,这一轮人工智能起来,是深度神经网络。要想凑深度神经网络的热闹,那一定要给做深度神经网络的人一个奖,到底给谁?最后给了他俩,给他俩的主要理由,Hopfield就是统计物理学家,后半生主要做神经网络,但是用统计物理学的方法在研究神经网络。右边这个和物理学没什么关系,但他发展了Hopfield基于统计学的神经网络,给出了玻尔兹曼机,是优化问题。优化问题是数学问题,但他用了Hopfield的模型,最后他拿了奖。获奖,这个领域一点问题都没有。化学也一样,把这个问题给了一个蛋白质折叠的预测。右边两个人(Demis Hassabis 、John M.Jumper)是做软件的,只有最左边这个人(David Baker)是真正做这个行业的。它是一个搭配,但这个搭配里面有非常深层次的原因。

  诺奖很愿意蹭热度,在上世纪70年代也有一个人工智能的专家得诺奖,他(赫伯特·西蒙)得的是诺贝尔经济学奖。刚才陈院士提到,智能里很重要的是推理,上世纪70年代的人工智能主要在研究推理,研究推理时赫伯特·西蒙给了一个决策模型,要推理时最后要拍板到底哪个对哪个错,他给了一个决策模型。为了蹭人工智能的热度,这个决策模型说在社会学里可以使用,就给了赫伯特·西蒙。

  诺奖在抓一些在社会上影响比较大,可能会带动一个潮流的领域。

  今年为什么给了物理学奖和化学奖?它的判断是由两个科学大赛引出来的。

  第一个,物理学奖,真正确定要给谁的是由于ImageNet比赛(机器视觉比赛)。但机器比赛太绕口,这个比赛的数据库叫ImgeNet。这个图像数据库是现在人工智能里比较有名的斯坦福大学教授李飞飞领着学生做出来的图像数据库,用这个图像数据库做比赛。

  2010年开始正式比赛,全世界所有做计算机视觉和算法的都可以来比赛,你说你的算法厉害,是骡子是马拉出来练练。这个练是在大数据上练。ImgeNet这个图像数据库里有1500万张图像,里面有22000类目标或者叫物体。它给出一张图像,问你这图像里有什么,你就回答这个图像里有什么,你回答对了就不减分。比如这里有一只猫,你说是老虎,那你就错了,就扣分。谁扣分扣得最少谁就得第一。

  2010年得第一的,他的错误率是28.2,2011年的错误率是25.8,到2012年错误率一下降了10个百分点,16.4。当时大家说你这个算法挺有意思,一下可以提升这么多。做科学研究的都知道,努力一年能提升一两个百分点都不错了。他说我用了一个神经网络做的。从2013年以后全都是深度神经网络,只是里面的层数不一样、配置不一样等等。

  ImgeNet比赛2012年这个结果是深度神经网络在应用中的第一滴血。如果你要找最根上的东西,那肯定要找这个,所以AlexNet就被确认为入围诺奖物理学奖最重要的线索。Alex没有得到这个奖,他的导师得到了,他的导师就是物理学奖第二位的Hinton。Hinton是深度神经网络里活着的最大人物。深度网络做起来有三个人比较关键,这三个人是2006年分别各发表了一篇论文,告诉说深度神经网络可以做大规模的使用。2006年也被称为是深度神经网络的元年。深度神经网络这三个人中Hinton是排第一的。这三个人是不是都要给?物理学奖虽然可以给三个人,但学生没给,光给老师,和老师无关的另外两个人好像也不是很合乎逻辑。就在这里面找,Alex导师是新的,他在这一轮神经网络中贡献不错,但和物理学没太大关系,就要往前挖。Hinton在1985年写了玻尔兹曼机,1986年的BP网络是今天深度神经网络优化的基础模型,所以要给应该给他这个工作。但说还不能说这个工作,还要说玻尔兹曼机。确定了要给Hinton,但Hinton又不是物理学家,要给物理学家Hopfield,Hopfield都90多岁了,他做梦都没有想到突然会拿到这样一个奖。

  第二个,这个更有意思。前面那个是2012年的结果,2024年才给的奖。这个更快,蛋白质折叠的预测是非常挑战的工作,原来做结构生物学的科学家全世界大概能预测出1万个左右的蛋白质三维结构。但实际上生命界存在的蛋白质大概有上亿,一万和上亿之间差了1万倍。如果按常规方法,要把所有蛋白质结构解析出来,要一万年的时间,这是不可忍受的。1994年有一个马里兰大学的教授提出一个比赛,他说有没有可能用已有的蛋白质结构、已有的序列,去预测新的东西,因为它每年都会产生将近1万个。每年产生1万个,先不公布,拿这个东西来比赛,看看谁的算法好。从1994年开始每两年就有一次CASP大赛,这个比赛前些年的结果不怎么样,2006、2008年预测的准备率都在40%上下,40%能预测对,60%预测错的,准确率很低没有办法用。2016、2017年AIphaGo非常热,当时AIphaGo把人类围棋打败,有人问过DeepMind的CEO下一个目标是什么,他说我下一个目标是拿诺贝尔奖。那时候他已经想清楚了他要参加CASP比赛,而且他很肯定,他在这个比赛里只要拿了冠军,他将来就可能获诺贝尔奖。这个年轻人的想法很直截了当。2018年第一次去参加他们的得分就将近60,一下提升了将近20个百分点。2020年到90分,常规的东西已经价值没有那么大了,这个的价值就比较高了。他一下把原来很多合成生物学的科学家饭碗打掉了,现在合成生物学的工作都要转到怎么用这个东西了。

  正因为这个工作,确定了后面这两位的奖。但后面两位不是传统意义上化学领域专家,所以光给预测还不行,还要给蛋白质设计,要找一个人来陪榜。所以第一个人是真正做蛋白质设计和预测的,主要做设计,三维结构可以人工设计,他得了一半。后面两个做计算机的得了另外一半。

  这告诉我们什么?科学比赛对于评价一个科学发现的价值,也是非常重要的,以前都说论文重要,因为论文需要沉淀,需要大量人去引用。但你参加这个比赛,就非常直截了当,你把别人打败了,那你就厉害。怎么厉害,你可以把它写成论文,但这个结果是由大赛产生的。

  鹏城实验室是在深圳的一个国家实验室,网络通信领域。现在网络通信和人工智能分不开,所以我们也做人工智能应用。

  为了做这个东西,前些年我们一直在做算力,用算力支持人工智能大模型的训练,所以我们做了一个鹏城云脑2,这个机器的性能非常好,在存储性能方面连续八次获得世界超算比赛榜单,连续八次第一,而且它在人工智能性能榜单以及人工智能图搜索榜单上都是表现非常突出的。

  这是4096块卡用华为昇腾芯片做的机器。(见PPT)

  这个机器做出来后,国内很多大模型都是在这个机器上训练的,包括大家经常听到的华为盘古,它早期的版本都是在这个机器上训练的,也包括百度文心,还有像北京智源的模型。

  我们开源了很多东西,也有一大批,包括丝路、大圣、扁鹊、通言、通图、常羲等等。

  这台机器从2020年10月份上线到现在差不多4年,4年运行下来,机器的使用率非常饱满,90%多的使用率。其中大概只有一半48.27是实验室自己使用,剩下大部分都分享出去给合作单位甚至公益机构使用。

  (短视频播放)

  这是2020年时。

  我们这个机器上线后训练了一批模型,线上开源社区里有很多我们的模型,包括7B、33B和200B的模型,有兴趣的都可以到那儿下载。200B的模型是比较典型的任务,花了差不多7个月时间,用整台机器,这里面的3456卡做训练,另外的做数据整备和验证。这个模型训练出来当时也比较不错。

  这些模型都是用开源方式做,所以可以做各种各样的合作。

  这是云脑2,正在做的是云脑3,云脑3的算力是云脑2的16倍,里面用了2万多块最新华为的卡,每一块卡的算力相当于H100的当量。

  这台机器的原型已经完成了,我们在原型基础上开始做视频内容的生成,用Open-sora跑,可以生成几十秒甚至几十分钟的视频。后面就是生成一段内容,大家可以看一看。

  (短视频播放)

  刚才陈院士说科学无国界,地球上的科学家都应该互相合作,其实外星球的也一样。

  科学大赛非常重要,鹏城实验室这几年在深圳市科创委的组织下,我们也搞了一个全国人工智能大赛,这个人工智能大赛已经举行了很多届,每年都有几千个队伍来参加比赛,今年还会有,希望大家关注。

  科学大赛对于科技成果的评价有很重要的作用,中国的人工智能大模型要有自己的底座、算力,这样才能承载我们想做的智能和中华文明的传承。对于这样一些生态,希望大家关注,谢谢大家!

  新浪声明:所有会议实录均为现场速记整理,未经演讲者审阅,新浪网登载此文出于传递更多信息之目的,并不意味着赞同其观点或证实其描述。

标签:

相关推荐

  • 高盛:若特朗普增加关税,布油或在未来两年下跌20%!

    高盛:若特朗普增加关税,布油或在未来两年下跌20%!

      金十数据  高盛表示,未来的几年里,油价可能会面临挑战。  该公司的大宗商品分析师表示,如果当选总统特朗普实施其关税提议,或者OPEC+在未来一年增加产量,布伦特原油价格到2026年底可能会降至每桶60美元出头。  这一预测意味着布油从目前的价格下跌约20%,从今年平均约80美元/桶的价格下跌约25%。今年,由于供应增加和需求增长较小,油价已经感受...

    2024/11/25
  • 年内最高峰,央行缩量续作近万亿MLF,护航年底流动性

    年内最高峰,央行缩量续作近万亿MLF,护航年底流动性

      11月25日,人民银行开展9000亿元中期借贷便利(MLF)操作,期限1年,最高投标利率2.30%,最低投标利率1.90%,中标利率2.00%。操作后,中期借贷便利余额为62390亿元。  虽然MLF操作利率保持不变,但央行选择缩量续作,净回笼资金。本月MLF到期量为14500亿元,为年内最高峰,25日续作9000亿元,相当于本月MLF缩量5500亿元...

    2024/11/25
  • 高盛:亚洲降息步伐将因美国关税风险而放缓

    高盛:亚洲降息步伐将因美国关税风险而放缓

      根据高盛,鉴于美元走强和特朗普政府征收关税的风险,亚洲央行在进一步放宽政策上会审慎为之。该公司首席亚太经济学家AndrewTilton表示,高盛认为,韩国央行本周不会进一步降息。上周,印尼官员表示,由于美国的政治情势,印尼降低借贷成本的空间较小。...

    2024/11/25
  • 顺德农商银行“顺赢一号”队入围2024“银华基金杯”新浪理财师大赛团队赛十强

    顺德农商银行“顺赢一号”队入围2024“银华基金杯”新浪理财师大赛团队赛十强

    专题:2024“银华基金杯”新浪·理财师大赛  经过初赛答题筛选,复赛客问我答、主题论述两轮考核,2024第八届“银华基金杯”新浪理财师大赛个人赛复赛落下帷幕,团队赛全国十强理财师团队终于诞生,他们将于全国总决赛角逐冠亚季军。其中,顺德农商银行伦教支行“顺赢一号”队入围2024“银华基金杯”新浪理财师大赛团队赛十强。  以下为团队简介:  团队是一支...

    2024/11/25
  • 李在明“教唆伪证”案今日一审宣判 韩国政坛恐将进一步撕裂

    李在明“教唆伪证”案今日一审宣判 韩国政坛恐将进一步撕裂

      据韩国首尔中央地方法院消息,韩国最大的在野党共同民主党党首李在明涉“教唆伪证”一案当地时间25日下午将在首尔中央地方法院作出一审宣判。此前,韩国检方在今年9月曾提请法院要求判处李在明3年刑期。如果最终终审定罪,李在明恐失去竞选韩国下届总统的机会,韩国政坛恐将迎来执政与在野势力间的进一步撕裂。  李在明身负多项指控  李在明被指控在2018年至201...

    2024/11/25
  • 雨雪影响交易 花生行情震荡调整

    雨雪影响交易 花生行情震荡调整

      原标题:雨雪影响交易花生行情震荡调整来源:花生交易网  国内主要产区行情动态如下:  河北产区:  河北滦县产区有降雨,基层上货不多,采购商谨慎补货,主流行情清淡,成交价格稳定。其中小日本花生统货米价格在4.05元/斤左右,小日本统货果价格在2.80-2.90元/斤,308统货米4.05-4.20元/斤,308统货果3.00-3.15元/...

    2024/11/25
  • AI辅助诊断首次被列入国家医保局立项指南 AI医疗概念股大涨 公司最新回应!

    AI辅助诊断首次被列入国家医保局立项指南 AI医疗概念股大涨 公司最新回应!

      11月25日,AI医疗概念开盘大涨,理邦仪器(300206.SZ)20CM涨停,贝瑞基因(000710.SZ)涨停,鹿得医疗、润达医疗、兰卫医学、数字人等大幅高开。  消息面上,人工智能辅助诊断首次被列入国家医保局立项指南。11月23日,国家医保局在相关新闻发布会上表示,目前已编制发布17批立项指南,以此来统一指导各地规范价格项目。为了支持相对成熟...

    2024/11/25
  • 震荡,三大指数转绿!“6000亿元金矿”发酵,湖南黄金三连板!华尔街巨头:看好A股

    震荡,三大指数转绿!“6000亿元金矿”发酵,湖南黄金三连板!华尔街巨头:看好A股

    登录新浪财经APP搜索【信披】查看更多考评等级  炒股就看金麒麟分析师研报,权威,专业,及时,全面,助您挖掘潜力主题机会!  在经历上周五的大幅回调后,今日早盘,A股窄幅震荡,截至中午休市,三大指数高开后小幅下跌,科创50指数和北证50指数均跌超1%,富时中国A50指数期货盘中转跌。  总体上个股涨多跌少,全市场超2900只个股上涨。板块方面,旅...

    2024/11/25
  • 年末华尔街大幅下调美股盈利预期,释放什么信号?

    年末华尔街大幅下调美股盈利预期,释放什么信号?

      临近年关,分析师们开始密集调整对美国大公司未来一年的利润预期。  FactSet数据显示,截至11月15日,标普500指数成分股公司2025年的每股收益(EPS)预期降至274.96美元,较6月的279.68美元和9月底的276.66美元进一步下滑。尽管这种调整在以往并不鲜见,今年的下调幅度却格外引人注目。  一些分析师认为,高估值环境下,盈利预期的...

    2024/11/25
  • 大众最早将在2025年推出ID.2平价电动汽车

    大众最早将在2025年推出ID.2平价电动汽车

      盖世汽车讯据报道,德国汽车制造商大众在去年3月发布了ID.2all概念车,这是一款全新的入门级电动汽车,起售价不到2.5万欧元(约合2.7万美元)。  虽然大众有几款新的电动车型面临延期,但该品牌迄今为止售价最低的ID.2仍将按计划推出。该公司证实,这款入门级电动车最早将于2025年底发布,标志着这家德国汽车巨头迎来新“起点”。  在上周开幕的洛杉...

    2024/11/25
返回顶部
微信号复制成功
微信号: 13695011756
点击下方按钮