做网站窗体属性栏设置文字居中,企业logo图片,北京免费网站制作,方城网站制作导读 #xff1a;本文主要介绍了百度智能云MCA产品的概念和应用。 媒体信息海量且复杂#xff0c;采用人工的方式对视频进行分析处理#xff0c;面临着效率低、成本高的困难。于是#xff0c;MCA应运而生。它基于百度自研的视觉AI、ASR、NLP技术#xff0c;为用户提供音视… 导读 本文主要介绍了百度智能云MCA产品的概念和应用。 媒体信息海量且复杂采用人工的方式对视频进行分析处理面临着效率低、成本高的困难。于是MCA应运而生。它基于百度自研的视觉AI、ASR、NLP技术为用户提供音视频、图片、文本的内容分析能力实现标签提取、智能封面提取、高光片段分析等功能。 01 背景与目标
对于涉及广电新闻、娱乐社交等UGC、AIGC的企业来说有效地收集、整理、分析和呈现视频内容不仅能帮助企业在竞争中拔得头筹还有利于做出更优的业务决策。可是这会面临一些挑战 标签要覆盖大量业务场景否则就需要建设多个数据集不易于统计和分析 分析维度应支持自由配置否则无法满足个性化的业务需求 支持分析不同格式的媒体内容同时处理视频的速度要快。
百度智能云媒体内容分析Media Content Analysis就是为了帮助企业提高内容分析的效率、缩减平台的人力成本而建设的一体机产品 MCA将AI技术落地于媒体行业内容分析场景可以助力企业内容推荐与搜索业务发展赋能媒体行业助力产业升级。
02 技术方案
根据公开信息可知MCA的定位是“实现智能媒体内容分析的一体机产品”用户可以选择公有云或私有化的部署方式自定义配置内容分析的维度并呈现可视化的分析结果。 AI技术托底大模型MCA借助百度强大的 AI 技术、沉淀已久的海量级数据针对视频场景进行专门的优化可以达到最优的识别效果。 影视综知识图谱业内领先根据影视剧/综艺类视频的场景、人脸、标题等内容推理返回剧集名称、别称、演员表、一句话简介、上映时间、地点等信息帮助补充视频标签。 公众人脸库专业基于百度百科的海量人脸数据收录了领导人、艺术家、影视明星、体育明星、社会活动家等国内外公众人物总数量超70万。 召回率提升高效对比人工浏览视频内容标注出的视频标签的数量使用视频内容分析MCA的结构化标签数量提升了10倍左右能够准确描述视频中的细节内容、提升视频的搜全率。 2.1 整体架构
按照功能划分MCA的层级架构如图所示 业务系统的核心功能如图所示 MCA产品的主要功能如下 a. 智能视频标签为视频文件或直播流的内容打标签可输出视频的场景、公众人物、地点、实体和关键词等结构化标签信息 b. 智能图片标签对图片内容进行打标签可输出图片中公众人物、logo、实体和关键词等结构化标签信息 c. 智能封面通过对视频、图像等内容理解从图像清晰度、构图美学和精彩程度等方面分析生成视频的静态封面、动态封面、视频封面 d. 精彩视频分析通过场景切分、音频特征分析等技术提取影视综长视频中的高光时刻。 2.2 技术实现的细节阐释
登录百度智能云平台官网进入“一念 内容分析”产品页面。
2.2.1 智能标签
登录成功、进入产品页面后进入智能标签 视频内容分析点击“创建视频内容分析”创建分析任务。 MCA支持三种视频导入方式本地文件导入、BOS 地址导入、在线地址导入。 输入限制 文件格式3gpp、asf/wmv、avi、flv/f4v、mkv、mov/mp4/m4a、mp3、mp2、mpeg/mpg、ts/ogg、mts、wmv/wma、rm/rmvb、webm等 视频编码标准H.264、H.263/H.263、MPEG-1/2/4、VP8/9、Quicktime、RealVideo、WMV、MJPEG等 音频编码标准MP1、MP2、MP3、AAC、AC-3、WMA、PCM、ADPCM、AMR、RealAudio、Vorbis、DSD等 分析时长6小时以内分辨率大于30X30 分析视频的audio、video编码信息须至少存在一个不能为空 可批量上传音视频文件最多可同时上传20个文件。 分析过程中可以看到分析状态排队中→分析中→分析完成/分析失败。如果分析失败可以将鼠标移到分析失败旁边的图标上查看失败原因。若分析完成则可查看分析结果。 点击分析完成视频的“查看详情”按钮即可查看视频分析的结果. 右侧的页签可以查看不同维度的中间分析结果下侧为标签提取结果。 2.2.2 智能封面
开启后系统将结合清晰度、人脸、构图、场景识别等特征信息综合输出视频中适合做封面的图片。 点击智能封面分析进入智能封面分析页面。 点击创建智能封面分析创建分析任务。 分析过程中可以看到分析状态排队中→分析中→分析完成/分析失败。 点击分析完成视频的“查看详情”按钮即可查看视频的封面结果。 2.2.3 精彩视频分析
登录成功、进入产品页面后点击精彩视频分析进入精彩视频分析页面。 点击创建精彩视频分析创建分析任务。 分析过程中可以看到分析状态排队中→分析中→分析完成。
分析完成后点击“查看详情”按钮即查看视频的精彩片段。 2.2.4 自定义库
系统支持自定义LOGO库与自定义人脸库、自定义文本库功能。 自定义人脸库区别于公共人物库目的在于可以让客户管理自身业务所需的人脸集是公共库的重要补充。 人脸照片的要求正面的证件照类型的正面或微微侧面的五官显示完整、面部光线均匀轮廓清晰无口罩、帽子、深色墨镜遮挡无浓妆。对于戴眼镜的人脸眼镜框不可遮挡眼睛区域镜片应无色或不严重反光。 画质画质清晰、面部区域不要有字幕、水印等遮挡物。 数量一个人物需要5张左右照片。
自定义人脸库的关系如下 支持用户配置自定义LOGO库并绑定在模板上。 自定义文本库创建后用户可选择将其关联为黑库或白库。 03 总结
在大模型的加持下MCA能够更好地帮助企业降本增效 业务提效对比人工浏览视频内容标注出的视频标签使用媒体内容分析 MCA 可提升 3~5 倍的分析效率。 部署灵活可通过SaaS、API接口调用、私有化部署的方式接入MCA服务轻松适配多种业务场景满足企业各种业务需求能快速实现集成和落地。 管理便捷支持创建普通用户和超级管理员用户普通用户仅能使用产品功能不具备用户管理权限超级管理员用户具备用户管理权限不同用户之前的视频分析历史任务可以互相隔离。
————END————
推荐阅读
产品分享百度智能云旗下作为“行业首创”的媒体内容分析MCA是什么_智能媒体分析-CSDN博客
干货分享视频的结构化标签问题_长视频内容结构化标签-CSDN博客
玩转百度云 AI 服务成为海量视频的超级管理员-CSDN博客
