百度开发者大会：手艺崇奉者的盛宴
一年一度的百度Create AI开发者大会（以下简称Create大会）老是受人注目。往年百度第一次把Create大会放进元宇宙里，本年那排场向全球开发者、科技喜好者的手艺盛会，主题从“人机共生”停顿到了“人机共创”。
百度开创人、董事长兼CEO李彦宏的看点并没未改动，他相信跟着手艺利用门槛不竭降低，创造者们将迎来属于人工智能的黄金10年。而继续人工智能全栈规划多年的百度，正在构成一个多元的开发者生态。
AIGC注目
图源：百度
大会收场，李彦宏展现了一幅以“危机”和“期看”两个关键词构成的AI画做，AIGC深进利用到了此次大会的每一个环节，包罗大会歌曲、场景、演讲脑图等创做过程。
“‘人机共创’背后，是才能超群的天才创造者——百度文心大模子”，百度手艺委员会主席吴华在大会演讲中表达。
假设把文心大模子理解成一位陌头的肖像画家，它起首得是一个有着丰富阅历的看察者，能够快速的理解对方的设想而且构成一个蓝本；然后它也如果一个身手扎实的画手，可以很好的实现那个蓝本。
那个“看察者”就是文心ERNIE 3.0 Zeus，而“画手”是文心ERNIE-ViLG 2.0。
百度研发的常识加强型预操练模子ERNIE 3.0在2021年问世，此次的Zeus版本则是ERNIE 3.0 系列模子的最新晋级。
ERNIE 3.0 Zeus的理解才能来自于足够丰富的无标注数据，其参数规模已经超越百亿。从ERNIE 3.0起头，模子中起头引进大规模常识图谱，那也是业界初次呈现百亿级以上的预操练模子实现与常识图谱的合成。后者的引进也进一步提拔了文心ERNIE 3.0 Zeus关于世界常识和语言常识的进修才能和效率。
通过继续的从百余种通用常识与专业常识并行的使命中进修，也显著提拔了模子的泛化才能，使得ERNIE 3.0 Zeus可以实现多种语言理解，而且生成使命。
展开全文
ERNIE的数据题材则来自百科、小说、新闻以至戏剧和诗歌。而为了进一步进修特定使命的相关常识，ERNIE 3.0 Zeus提出了条理化提醒（Prompt）进修手艺。即在操练过程引进了条理化的 Soft Prompt 建模了差别使命之间的共性与特征，进一步提拔了模子关于差别下流使命的建模才能。
那意味着阅读理解、自在问答以至写文章的事都能够交给文心ERNIE 3.0 Zeus来完成。
好比本年高考做文“本手、好手和俗手”引发热议，百度数字人度晓晓所“写”的文章背后就是ERNIE的才能表现。
“良多电视剧剧本都是由一位总编剧造定总纲，再交给好几位编剧往写每一集的故事。所以假设你能体例一部电视剧的总纲，你就能够把每一集的要求交给ERNIE 3.0 Zeus大模子。你再颠末合并整理，就能够成为天才大编剧了！”吴华在此次Create大会上表达。
百度手艺委员会主席吴华 图源：百度
而创做也不会只停留在文字层面，设想酿成一幅画，剧本酿成一场戏，都需要文心ERNIE-ViLG 2.0——百度另一个常识加强跨模态的大模子。
全球范畴内，AIGC做为一种崭新的内容消费体例突然而至，在底层是基于扩散生成算法的DALL-E 2和Stable Diffusion的一些模子成熟。那类根底模子在国内尚处空白，文心ERNIE-ViLG 2.0是国内首个在AI做画标的目的获得打破的项目。
生成图像的语义一致性和可控性仍然是目前AI做画产物所面对的一般问题，为此文心ERNIE-ViLG 2.0中，常识加强算法被融进扩散模子，在扩散模子进修过程中，引进语言、视觉等多源常识指引模子愈加存眷文本和图像中的核心语义元素，实现精准的细粒度语义掌握。
同时因为扩散模子在生成过程的各个阶段对模子的要求纷歧样，好比初始阶段模子需要生成图像轮廓，结尾阶段变成对图像细节建模，因而百度在文心ERNIE-ViLG 2.0引进了混合降噪专家收集，在差别阶段抉择差别收集来停止建模，以削减降噪使命的互相骚乱，提拔图像生成的量量。
而在视觉内容生成方面，百度在文生图的扩散模子根底上加进时序建模，那意味着此模子能根据文本或者图像生成新的视频。
文心ERNIE-ViLG 2.0在权势巨子公开数据集MS-COCO上的测试也刷新 SOTA 效果，性能超越了包罗DALL-E 2、Imagen、Parti等模子。
除了ERNIE 3.0 Zeus和ERNIE-ViLG 2.0，百度文心大模子中仍有第三位天才创造者——VIMER-TCIR多使命大模子，一个基于大模子手艺构建的涵盖视觉内容生成与编纂的全套手艺计划。
前两者已经足够完成图文以至视频层面的AI创做，VIMER-TCIR则是一位“修复师”。
通过对超辨认率、往噪、往模糊、往压缩等多使命的结合预操练，VIMER-TCIR能够同时实现对多种差别情状的修复和编纂，并通过画量提拔、边沿锐化等体例加强视频的清晰度，到达全方位提拔视频编纂效率和看感体验。
“以前的片子修复需要人工手动一帧一帧完成，如今利用大模子提拔效率后，天天单机可修复视频28.5万帧，处理了绝大部门画面的修复问题；即使是需要进一步精修，速度也能提拔3-4倍。”吴华表达。
文心大模子已经在飞桨开发平台EasyDL和BML上集成，目前累计已有1万开发者基于文心大模子创建了超越3万个使命，利用的场景则笼盖诸多方面。平台上基于文心大模子的AI利用模子开发，用户数据标注量均匀降低70%，效果均匀提拔10.7%。
AIGC的元素贯串本年的Create大会，但百度在前沿手艺上的摸索远不行如斯。
一场手艺盛宴
2013年百度早早起头了关于主动驾驶的研发投进，那番如今看来颇具前瞻性的规划逐步显出后劲，在近年成为百度新的手艺手刺。
百度在本年7月发布了源自自研“阿波罗星河”架构平台的第六代量产无人车Apollo RT6，汽车与智能出行的元素当然不会缺席那场手艺盛会。
在本年的Create大会上，百度发布了自研的世界范畴内第一个能在手机端实现纯软件计划反响消弭的手艺，实现自在语音交互。
之前的“不自在”在于，传统的手机语音交互只能做到单工交互，即它的输出（说）和输进（听）是彼此独立的，不克不及同时停止。无法像实人对话那样同时完成“说”和“听”两个动做，无法打断说到一半的话，改换话题（即起头另一个使命），那意味着立即的交换切当来说其实不存在。
但在驾驶场景中双手被占据，那种更自在的语音交互又是需要的。那项手艺喊做手机全双工语音交互，目前在世界范畴内，还没有一个能普适的撑持在手机上实现全双工的语音交互计划。
“要实现全双工语音交互，必需先做反响消弭，制止手机末端识别本身播放的声音。那在音箱、车载系统上比力随便实现，因为那些设备都是前拆计划，能够通过硬件适配算法提早包管了反响消弭的效果。但是手机APP属于纯软件后拆计划，需要让算法适配差别型号的末端硬件。但手机末端格式多，硬件良莠不齐，使得声音信号的处置普及面对严峻的非线性畸变以及参考时延颤动，招致手机反响消弭效果难以包管。”
“并且手机硬件的迭代更新长短常快速的，那就使得那个风险被放大。”百度首席语音架构师贾磊说。
针对那个问题，百度研发了两级AEC手艺，合成传统信号处置和深度进修模子各自的长处，基于语音识别目标，端到端地停止反响消弭和信号加强，处理手机场景下的反响消弭问题。
即便手机音量开到更大，反响消弭量也能到达40db。
另一方面，手机交互中面对大量复杂的情况噪音，会骚乱信息识别。百度研发了一个基于SMLTA2的多场景同一预操练模子。噪声、用户口音和反响消弭残存吸收等难题能够通过一个模子处理。
“在各场景下识别率相对提拔超越20%，那在业界同类手艺中，准确率是更高的”，贾磊表达。
百度在此次Create大会上也展示了关于主动驾驶感知才能的手艺提拔——一个撑持多传感器、多模态、多使命、时序合成等端到端感知才能的车路一体处理计划UniBEV。
图源：IoT Automotive news
传统的主动驾驶信息感知逻辑是将汽车上包罗雷达、摄像头在内的传感器摘集来的数据别离停止阐发运算，然后把各项阐发成果合成到一个同一的空间坐标系，规划车辆的行驶轨迹。但那个过程中，每个独立传感器的搜集数据会受其特定视角的局限，颠末各自的阐发运算后，在合成阶段招致误差叠加，无法拼集出道路现实情状的准确全貌，那给车辆的决策规划带来困难。
因为在主动驾驶过程中，高度信息没有那么重要，于是有了另一个BEV计划。
BEV计划中，车身多个传感器摘集的数据，会输进到一个同一模子停止整体阐发推理，然后生成一个鸟瞰图，有效地制止了误差叠加。BEV计划能够实现时序合成，即不只是搜集和阐发一个时刻的数据，而是撑持把过往一个时间片段中的数据都合成进模子做情况感知建模，时序信息的引进让感知到的成果更不变，使得车辆关于道路情状的揣度愈加准确。
在BEV计划的根底上，百度提出了车路一体的处理计划UniBEV，集成了车端多相机、多传感器的在线建图、动态障碍物感知，以及路侧视角下的多路口多传感器合成等使命，是业内首个车路一体的端到端感知处理计划。
“基于同一的BEV空间， 更随便实现多模态、多视角、多时间上的时空特征合成，基于此的UniBEV 车路一体大模子，借助了大数据+大模子+小型化手艺闭环，在车端路侧的动静态感知使命上都获得了领先的功效”，百度资深研发工程师万吉表达。
智路OS也呈现在了此次大会上。
2021年4月，百度实现了Apollo AIR车路协同主动驾驶系统，仅利用路侧感知实现了开放道路、持续路段的L4级别主动驾驶。之后百度车路协同手艺履历了一段时间的现实场景摸索，逐步在60个地级市的辅助驾驶、智能信控、伶俐泊车等范畴停止利用落地。
在那个过程中，一些空间多智能体协同所面对的普及问题呈现，好比车路云跨末端通信不变性差、空间位置协议禁绝则以及行业生态碎片化，百度团队抉择对车路协同主动驾驶关键手艺才能停止进一步的笼统整合，最末在本年8月发布了全球首个开源开放的智能网联路侧单位操做系统智路OS。
那标记着百度Apollo从“主动驾驶开放”晋级到了“主动驾驶和车路协同的全面开放”阶段。而智路OS最末将逐渐扩展为以机器报酬核心的智能空间机器人操做系统。
底座浮现
近年的百度在手艺财产落处所面，一种“底座”思维逐步凸显，文心大模子是AI创做的底座，希壤MetaStack则是一个用户能够自建元宇宙的底座。
元宇宙希壤自2021年岁尾上线至今，已经构成国内最为开放和富贵的元宇宙生态，20多个行业的120多个元宇宙空间及活动在此中落地。在此次Create大会上，百度发布了全球首个独立元宇宙处理计划MetaStack，通过那个模块化东西箱，元宇宙的开发周期能够压缩至40天。包罗超媒体控股、厦门文广集团、太一控股集团、世界人工智能大会等都已借助MetaStack，实现了独立元宇宙APP的快速创建与高效运营。
图源：百度
文心大模子以及希壤背后，以至包罗Apollo在内整个百度的AI手艺底座，都是财产级的深度进修平台飞桨。
“科技立异驱动听类开展汗青上每一次大的增长”，李彦宏表达，“沿着那个构想，假设让我来揣度，第四次科技革命的标记是深度进修算法”。
此次Create大会，百度展示了飞浆在手艺才能上的深度。
飞浆的才能起头进进人工智能科学计算（AI for Science）范畴，并衍生出更多的科学计算开源东西组件，好比赛桨PaddleScience、螺旋桨PaddleHelix以及量桨PaddleQuantum。那些东西组件将会在复杂外形障碍物绕流、构造应力应变阐发、素材分子模仿等丰富范畴算例，普遍撑持AI加计算流体力学、生物计算、量子计算等前沿标的目的的科研摸索和财产利用，使得AI在科学问题的处理过程中进一步发扬感化。
除此之外，百度基于百度飞桨平台完成了图神经收集架构的全新晋级，在此次Create大会上发布了超大规模图进修操练手艺PGLBox。PGLBox是业界首个同时撑持复杂算法+超大图+超大离散模子的大规模图进修操练手艺，能够实现单机对百亿节点、数百亿边图摘样和操练的撑持，并可通过多机扩展撑持更大规模。
持久主义的果实
1000亿元，那是百渡过往十年在手艺研发上的投进。
飞浆的初次开源在2018年，而百度关于深度进修的规划还要早得多。2013年1月19日，百度CEO李彦宏提出了成立专注于深度进修的研究院的初期设想，并定名为Institute of Deep Learning(简称IDL)。
2014年4月和5月，大数据尝试室（BDL）和硅谷人工智能尝试室（SVAIL）相继成立，深度进修研究院则改为深度进修尝试室，回于新组建的百度研究院之下。
百度研究院成为百度摸索人工智能的核心阵地，当人们仍然以搜刮引擎的形象对待百度的时候，百度悄悄起头了一场向前沿手艺范畴的转型。
2017年，百度明白把人工智能做为公司开展战术，那年也是百度Create大会的第一届，坐着无人驾驶汽车在五环路上奔赴会场的李彦宏应该想象不到，五年后的百度已经有了本身的超导量子计算机，主动驾驶出行办事萝卜快跑贸易化已经落地10余城市，飞桨上的开发者数量已经超越535万。
《2021中国开源年度陈述》展现，2021 年GitHub中国项目活泼度Top 30中，飞桨占据了5个项目，此中飞桨框架位列第一，而围绕飞桨的产学研密切协同，已经培育提拔出超越300万AI人才。往年12月发布的Apollo EDU人才培育提拔方案，目前也已经笼盖超越33.5万主动驾驶相关手艺人秀士和700多所院校。
李彦宏在往年Create大会上表达，将来5年，百度将围绕包罗主动驾驶、机器翻译、生物计算、深度进修框架、数字城市运营、常识治理、AI芯片、小我智能助手在内的八大体害手艺，为社会培育提拔500万AI人才。
一场手艺持久主义的对峙起头结出果实。