南京广播电视集团AI智媒创新研究院由南京广播电视集团发起,于4月7日揭牌成立,秉持“AI智能技术驱动媒体创新发展”的理念,以“打造自主可控的智能媒体融合创新平台”为出发点,重在以数智理念、广电思路探索AI智媒广电新场景价值潜力,整合优质资源,依托人才优势,不断加大人工智能应用研发力度,自主研发数字人、人脸识别系统、AIGC等一系列AI应用。研究院利用南京广电集团丰富的视觉创制背景,创新实践AIGC融合应用,推进城市数字孪生新场景建设,应用推广AR/XR虚拟现实技术和虚拟数字人技术,探索基于AI应用的新一代一站式虚拟制片及动作捕捉解决方案。
2024年政府工作报告中提出,深化大数据、人工智能等研发应用,开展“人工智能+”行动,这是我国政府工作报告第一次提出“人工智能+”。
此次AI智媒创新研究院的揭牌成立,正体现了南京广电对以“融媒发展”为核心的AI智能化应用的前瞻性布局,着力构建以用户为中心、以内容为纽带、以技术为驱动的跨生态智能媒体新体系的坚定决心。
研究院已获多项国家级及省市奖项,并获得11项软件著作权,包括《音频智能转换系统V1.0》《数字人智慧融媒平台V1.0》《视频人脸检测AI识别系统V1.0》《内容大数据智能策划AI应用平台V1.0》《创新型AI图片生成系统V1.0》《AI智媒体创新型生态系统V1.0》等。
研究院自主打造的多位独家广电数字人形象,支持多种风格的服装、妆容、发型变化,适用于多种不同应用场景。
利用声纹训练模型对台内主持人的声音进行训练、复刻,基于语义理解实现数字人对用户意图的理解与答案生成,结合语音合成、驱动模型实现回答内容与数字人表情、声音的有机融合。
你能想象荧幕上天真活泼的孩童幕后其实是个七尺男儿?在这儿仅需运用单目摄像头动作捕捉技术,无需标记点无需适配就可实现精准捕捉上千个面部微表情,同时进行全身肢体的实时捕捉,实现数字主播与真人进行实时交互,摆脱传统动捕对设备场地的高要求。
目前,该全新的数字IP率先运用在南京少儿频道虚拟主持人项目中,通过虚幻引擎给观众带来逼真有趣的数字主播,提高了传统节目制作的质量、效率,并大幅度降低了制作成本。
推进AI智媒广电创新应用 利用科技+内容实现破圈
研究院已自主打造了牛牛CHAT智能对话、AI文生图、AI视频等一系列生成式AI应用,实现文本、图片、视频等不同内容类型的高质量自动生成。利用新技术、新应用为新媒体业务运营赋能,提升内容生产效率,创新内容呈现形式,打造互联网形态下的优质新闻产品。
同时,研究院从内容创制为导向出发,采用LED虚拟制作影棚与绿幕抠像相结合的方式进行虚拟场景视觉呈现,已应用于《学习宁聚力》《思想的力量》《智见未来》《主播说档案:纪念抗美援朝战争胜利70周年》等多档自制节目中。通过虚拟场景的呈现,节目更加生动、形象,观众也能够更加深入地理解和感受节目的内涵。此外,虚拟拍摄技术的使用还提高了节目制作的效率,减少了制作成本。
研究院还将AI绘画创造性投入到节目生产制作中,在各个不同的项目中,分别使用了AI智能上色、AI场景绘画、AI智能重绘等AI绘画制作技术,减少了制作成本,提高了画面质量。
下一步,研究院还将携手合作共建单位持续改进和优化包括数字人驱动、AI文生图在内的各项AI技术模型,不断提升AI创新应用在生产效率和质量方面的表现。
聚焦用户个性化服务 功能持续赋能升级
南京广电始终坚持产品创新和技术创新并举,全面落实用户思维,研究院针对牛咔视频APP开发多项人工智能服务功能:包括用户数据深入挖掘和分析,建立具有自主知识产权的个性化内容推荐系统;开发应用“千人千面”,提高内容分发的精准度和用户的参与度。
通过自主研发NLP模型算法,基于实际业务构建三级标签体系,细分20个大类、136个小类,涵盖标签2.3万个,并结合语音识别、文本抽取等技术实现文章、视频、音频等全媒体内容的标签自动提取、分类,深度分析用户内容偏好,初步构建新闻时效、内容兴趣、点击热度相结合的个性化内容推荐机制,优化平台用户体验。
基于AI深度学习 智能审核为广电媒体融合赋能
一直以来,南京广播电视集团致力于智能中台建设工作,以AI技术为突破口,基于牛咔视频实际业务,构建集文本、图片、音频、视频于一体的智能审核中台,实现全台日常业务中的文本检测过滤、图片智能审核、音频识别检测、直播视频人脸识别等全要素的实时审核功能。
下一步,研究院将继续提升视频人脸识别模型的性能,通过技术进步助力内容生产业务中的高精准度人脸识别,提升内容审核的速度和精准度,结合电视业务流程进一步优化智能审核系统,全面提升集团新闻发布的审核效率与内容安全。
融合虚幻引擎,打造真实细腻的城市数字孪生项目,可以做到真实还原三维城市景观,同时具有逼真的基于物理的照明和阴影,可更改季节、天气或一天中的时间。可以提供基于场景的图像、动画、全景图、VR视频和客户端演示,广泛用于单个建筑3D演示、3D沙盘场景漫游、3D场景复现、室内场景(博物馆,党史馆)漫游等,支持VR模式。
近年来,南京广播电视集团一直坚持拥抱新技术,以自有百万小时的优质视音频媒资库为基础,以技术赋能内容创新创优为内核,持续探索科技与视听融合的无限可能。
万涓成水,奔涌成潮。未来,研究院将携手各方资源,以促进传统媒体转型发展为核心,赋能生产流程升级,推动媒体融合的内容创新、形态创新和传播创新,加快形成以AI智能和媒体创新于一体的新质生产力,让新技术服务于传统媒体,全面打造行业领先的智媒生态视听产品。
推荐阅读
经典栏目
精彩专题
关注我们
大视频行业颇具影响力的行业社群平台,重要新闻、热点观察、深度评论分析,推动电视行业与各行各业的连接。
集合电视台、网络视听、潮科技等各种好玩信息。
专注于报道广电行业新鲜5G资讯,致力于成为广电行业有权威、有深度的5G自媒体平台。
UHD、4K、8K的最新资讯和最深入的分析,都在这里。
视频产业的专业圈子,人脉、活动、社区,就等你来。
我们只沉淀有深度的信息和数据。
致力于卫星电视信息、卫星通信技术、天地一体网络应用案例、以及广电、通信等产业的市场动态、政策法规和技术资讯的传播。