< SMG集团
    中文English

    人工智能技术在SMG融合转型中的应用和尝试

    1. 首页
    2. 媒体中心
    3. 行业内资讯
    4. 人工智能技术在SMG融合

    360截图20220711135402230.jpg

    人工智能早已被大众熟知多年,媒体作为身处科技变革浪潮前端的创新行业,必然走进一个以大数据和算法主导的智能媒体时代。


    媒体行业是否可以搭建一套全流程AI智能平台,实现降本提质增效?媒体行业能否拥有一个“数智分身”虚拟主播,辅助制播的同时创新节目形态?


    带着这些核心议题,近日,在腾讯云智慧传媒主办的《传媒行业数字化公开课》直播活动中,上海东方传媒技术有限公司(以下简称SMT)总经理助理陆趣以《人工智能技术在SMG融合转型中的应用和尝试》为题,给大家分享了SMG AI赋能媒体方面的一些应用案例。以下是直播精编摘录:




    222222222222222.jpg

    AI赋能数字化融媒体生产平台

    这几年,SMG技术中心(SMT)一直潜心新技术,致力于通过技术创新推动媒体融合事业的发展,构建了一个数字化的赋能媒体平台,应用在了新闻、广播、文娱、体育等行业。

    360截图20220711135437626.jpg

    那么这个数字化的平台,具体有哪些能力?平台具有哪些人工智能应用去赋能编辑记者,让他们能够更方便地进行内容制作呢?


    Empower-media赋能媒体平台是SMG自主研发的数字化融媒体生产平台,平台融合传统电视和新媒体各项业务的工作模式。


    平台支持新建新闻策划,并根据策划发布采访任务,帮助记者进行采访任务的新建、分配、执行等一系列操作。并针对采访任务进行车辆、设备、人员等资源调配管理。并且配备基于5G的轻量化外场新闻采编播一体化系统。同时也支持手机端连线功能,用于新闻直播时的外场连线或嘉宾接入。

    导播在后台管理进入的所有直播流,可与连线记者进行双向通话,播出组的画面可供新闻导播直接查看,并通过云剪辑功能进行多个素材快剪,也支持直播流剪辑等功能。


    编辑方面,手机、电脑多平台互通,支持图文混排、文稿培训。所见即所得,全流程可追溯,平台融入了语音合成、文稿音频剪辑、语音识别、人脸识别,这些AI智能生产功能,显著提升了生产效率和质量。


    内容发布方面,实现多种内容聚合发布,多种出口信息发布。Empower-media云导播系统可接入多个媒体来源,提供多分屏画面和画中画功能,支持播单控制及单联化,与专业广播电视内容生产系统打通。


    自动导播切换功能,可对多机位视频直播的节目进行自动画面切换和播出。


    Empower- Data数据中心,通过大数据分析,呈现新闻热点、内容效果数据、用户画像、行为数据等,为领导的选题和决策提供有力数据。


    以上就是SMG AI赋能媒体平台的基本概况,当中包括了指挥调度,协同管理,移动的采编审,内容汇聚,多平台分发。


    在分享中,除了介绍SMG在AI赋能数字化融媒体生产平台的发展概况之外,SMT总经理助理陆趣,还为大家重点讲解了AI智能辅助内容生产中运用的AI功能。



    222222222222222.jpg

    SMG AI赋能媒体的最新应用


     采编平台人工智能的应用 


    1.语音识别。语音识别功能支持广播记者在外出采访时,通过手机实时把采访内容识别为一段文字,记者可以直接在APP上进行稿件的撰写以及音频的剪辑,然后直接发送到广播台内的直播系统里。另外语音识别功能还支持把视频和音频变成一个带时间线的文字格式进行输出,输出的这个带时间序列的文字,能够直接进到非编系统进行后期制作。

    2.人脸识别。人脸识别的应用也非常实用,比如记者在现场采访,来了一个领导,但是不知道领导具体是谁,什么职务,那么就可以拍一张照,然后通过库里人脸的信息比对,就能很快知道了这位领导的信息。


    3.错别字检测。错别字检测的能力,支持记者在稿件写完之后,一键点击错别字检查,AI会自动识别可能是错别字的字符,然后给到记者进行确认。


    4.自动技审。比方说,一些视频的黑场、马赛克静音、单色的画面,包括视频的音量有没有超标,噪声有没有超标,有没有长时间的静音等等各个方面,都是可以通过智能方式来进行审查,然后有问题的就及时提醒编辑记者去更改文件。


    5.虚拟主播。SMG有个非常有名的虚拟主播叫“申䒕雅” ,已经实现了虚拟主播自动播报的能力,只要配上对应的文稿和智能的语音,“申䒕雅”就可以自己来播报一段视频。

    360截图20220711135653314.jpg

    6.智能云导播。智能云导播功能实现了多种视频格式的输入和输出,并且兼容了传统的基带以及新媒体运用的各种流媒体格式,同时结合了一些自动导播切换的能力,可以实现多机位的自动导播切换效果,以应对一些没有足够人力支持的直播。


    7.智能实时字幕。在疫情期间,因为每天都有疫情发布会,SMG退出了智能的实时字幕,来方便一些听觉有障碍的人士,帮助他们更好更快地接收到疫情相关的咨询信息。



     媒资系统里人工智能的应用 


    SMG媒资系统里对AI技术也有广泛的应用。主要包括了语音语义的分析、OCR识别,人脸识别,以及智能编目、标签的功能。


    媒资系统里的语音识别功能,和上述的采编平台类似,主要功能是把视频里带时间线的字幕识别出来。


    人脸识别在媒资系统里主要用于查询,可有效缩短素材查找环节的时间。运用人脸识别技术支持的以图检索视频功能,编辑记者通过上传一张人物的照片,即可检索查看相关匹配的人物专题汇聚内容。


    然后还包括了一些OCR的字幕识别,主要是可以将视频里的文字识别出来,那么当记者需要进行重新配字幕的时候,这样字幕就可以导出来进行使用。


    最后是SMG今年新鲜出炉的一个能力:智能编目和标签。这个功能可以把一个完整的视频分成一个元数据的标签,包括场景的标签和镜头的标签。


    然后视频里随意的一个事件,都可以通过这个技术,组织出来与之对应的编目和标签,为了这个项目,SMG对整个台里的所有的编目作了规范和梳理。另外,编目还可以识别场景,一件事在哪里发生,大概是什么样的情况,然后也包括具体某一个镜头,镜头里的人物是谁,然后是怎么样的一个视角去拍摄的这样一个镜头,都可以识别到。


    除“采编存”之外,在“”这一块,SMG运用了敏感信息实时检测服务。此项AI功能可以针对电视里的直播信号,实时地去识别一些画面中的敏感信息,然后进行报警提示,在识别到敏感信息之后,通过AR的手段,对敏感信息进行遮罩处理,之后画面就能正常播出了。这项功能避免了因敏感信息切掉画面,导致的破坏直播完整性的弊端。


    此外,SMG在直播中还运用智能模板实现了短视频的智能剪辑比如在马拉松的赛事中,可以使用通过AI智能进行人脸识别、号码牌识别,配合自动剪辑的方式来实现全流程的智能生产。


    此外在体育领域,SMG还开发运用了无感知动捕的技术。比如,可通过一些骨骼关节的识别,知道某个参赛选手他的手部、腿部在画面里的位置,然后在这个位置上去叠加一些AR的特效,有助于增加观看比赛的趣味性,并且使用户更好地去理解体育比赛。


    以上陆趣女士分享的直播精编摘录。人工智能技术赋能内容生产是大势所趋,媒体行业理应抓好机遇,迎接挑战。

  • 上一篇:打造元宇宙竞赛数字场景,SMT肥牛工作室积极入局
  • 下一篇:上海广播电视台获首批中国信通院EDMM-企业数字营销能力认证