腾讯多媒体实验室亮相中国互联网大会，展示多项数字媒体前沿技术

近日,由中国互联网协会主办的2023年(第二十二届)中国互联网大会在北京成功举办。本次大会联合主办方包括北京经济技术开发区管委会、北京市通信管理局以及工业和信息化部新闻宣传中心。大会主题为“促进数实融合,赋能千行百业”,旨在推动数字技术与实体经济的深度融合,为各行各业提供强有力的赋能支持。此次腾讯再度受邀参展,其展区包括腾讯多媒体实验室的四个板块,分别为标准、编解码、沉浸式和智能媒体,充分展示了腾讯在多媒体技术领域的前沿技术探索与落地成果。

积极引领标准制定与技术突破,取得多项技术研究成果

腾讯多媒体实验室一直致力于推动多媒体领域的发展,代表腾讯积极参与多个国际及国家标准的制定,并取得了多项突破性成果。包括H.266/VVC、MPEG-5 EVC、MPEG PCC、MPEG Systems、IETF、3GPP、国家标准AVS2 & AVS3、以及开放媒体联盟(AOMedia)标准AV2等。在这些标准的制定过程中,腾讯多媒体实验室共有超800项技术提案被国际国家标准采纳,并拥有超1000项已授权专利。

这些突破性成果的背后,离不开腾讯多媒体实验室的专家、研究员们的不懈努力。不仅腾讯多媒体实验室的专家数十人次担任标准制定工作组/专题组联合主席、标准联合主编、董事等关键职务,研究员们也积极参与学术界的交流与研究,他们的成果在CVPR、ECCV等学术顶会以及TCSVT、IEEE等专业期刊上发表,进一步展示了腾讯多媒体实验室在学术研究方面的杰出贡献。

行业领先的视频图片压缩处理引擎,支持点播、直播等应用全面落地

腾讯在编解码领域拥有行业领先的视频图片压缩和处理引擎,通过腾讯云、腾讯视频、腾讯游戏等业务平台为全球海量用户提供服务。其中,腾讯自研最新一代标准编码器Tencent266在2023年7月14日公布的MSU FullHD编码大赛中取得了令人瞩目的成绩,凭借出色的压缩性能和节省带宽的能力全面领先,取得1/5/30fps三个速度档位全场15项关键指标中12项第一。Tencent266卓越的性能使其具备在点播、直播等应用上全面落地的能力,并已上线腾讯云,为各种视频业务场景提供高效的转码服务。

不仅如此,腾讯实验室在编解码领域的积累与业务场景深度优化,自研264、265编码器广泛服务于腾讯内外的业务,例如云服务、在线会议、实时通信等场景。这些编码器有效地节省了带宽,并保障了在多终端、弱网以及不同场景中均可以从容面对网络抖动性,为用户提供极致的视频体验。相关底层技术也曾荣获2021世界数博会最高荣誉“黑科技”奖。

沉浸式体验技术能力矩阵,助力传媒、文化和旅游行业发展

围绕沉浸式体验领域,腾讯多媒体实验室构建了全景视频、三维重建、自由视角、虚实融合、数字孪生、全息视讯等技术能力矩阵,为传媒、文化、旅游等行业的发展提供有力支持。

由腾讯多媒体实验室承制,国家林业和草原局与腾讯联合推出了首个中国国家公园12.5亿像素VR全景APP。用户可以在手机端进行120倍放大,通过智能影像处理和自研VR360解决方案,全景“云”游东北虎豹国家公园。这项技术为用户提供身临其境的虚拟体验,助力旅游行业拓展全新的观光模式。

此外,腾讯多媒体实验室自研的虚实融合技术,允许将用户自身植入到虚拟世界中。支持专业虚拟制片所需的相机自动跟踪标定、高质量抠图、虚实交互、异地同屏等多项能力,适用于传媒、文化、旅游、教育等各个行业。这项技术使用户能够更加身临其境地参与虚拟制片,为行业的数字化转型带来新的可能性。

腾讯多媒体实验室还与故宫博物院合作,共同推出“‘纹’以载道”超高精度“数字文物”项目。借助VR、AR技术成功还原倦勤斋部分场景,并在空间内部利用沉浸式渲染技术和内容生产,实现了文物22倍超清放大效果。借助万花筒的折射原理,将纹理材质镶嵌进几何图形,实现对图形的色调动态调控。这项技术让观众能够以前所未有的方式近距离观赏珍贵文物,推动了文化领域的数字化展示。

多模态融合驱动智能内容生产,逐步完善AIGC能力矩阵

2019年,腾讯云副总裁、腾讯多媒体实验室负责人、杰出科学家刘杉博士带领实验室开展“基于多模态融合的智能内容生产”相关技术能力研发并逐步完善AIGC能力矩阵。

腾讯多媒体实验室自研AI通用作曲框架XMusic,被2023年世界人工智能大会评为“镇馆之宝”,基于AIGC技术。用户只需上传视频、图片、文字、标签、哼唱等任意内容,即可生成情绪、曲风、节奏可控的高质量音乐。这项技术大幅降低了音乐创作的门槛,为音乐创作者提供了更多的灵感和创作可能性。

通过多模态融合技术,腾讯多媒体实验室自研了腾讯水墨画产品,将视觉、音乐、文字等多种模态相结合。结合山水画创作、智能作诗、音乐生成等多种技术能力,形成了完整的多模态融合方案,使用户可以进行互动娱乐。这项技术在2021年国庆期间成功落地迪拜世博会中国馆,为观众带来全新的沉浸式体验。

腾讯光影焕新计划开放了腾讯多媒体实验室背后的超高清视频、经典影像修复等技术。通过智能模式驱动,自动为经典影像匹配最佳的算法组合和参数,发挥人工智能算法组合的最大效用。该计划成功修复了张国荣的《热·情》演唱会、香港回归等历史视频,使这些珍贵的影像焕发新生。

腾讯多媒体实验室在智能媒体领域的持续创新,为内容生产带来了全新的可能性。这些技术的应用推动了智能媒体产业的发展,为用户提供更加多样化、丰富的数字内容体验。

腾讯多媒体实验室专注于多媒体和相关领域的前沿技术探索、产品研发和应用落地,其行业领先的多媒体压缩和处理引擎、互动沉浸式媒体和智能媒体能力矩阵,通过公司一系列业务平台服务全球海量用户并助力传媒、文化、旅游等行业的发展。同时代表腾讯参与多个国际及国家标准制定,数十人次担任联合主席、主编等核心职务,数百项技术提案被国际标准采纳,荣获工程艾美奖、技术卢米埃奖、ISO/IEC杰出贡献奖等,享有国际盛誉。

未来,腾讯多媒体实验室将以创新的视角和前瞻的思维,不断深耕多媒体技术,拓展多领域的应用场景,为用户提供更加智能、便捷和丰富的多媒体体验。