62.AzureAI+机器学习综合能力展现之视频索引器-ZJUNSEN的云计算-51CTO博客

Windows Windows 2个月前 (08-15) 49次浏览 已收录 0个评论 扫描二维码

之前介绍了很多用于Demo的微软Azure AI和机器学习的能力用于演示,这次介绍一个网站可以用于强大的视频分析:AMS视频索引器

62.AzureAI+机器学习综合能力展现之视频索引器-ZJUNSEN的云计算-51CTO博客

在这个网站可以上传一个本地视频用于视频分析,上传成功后可以根据这个视频做很多不同维度的分析,比如这里我从本地计算机上传一个视频后经过一会的分析检索后就可以点击播放

62.AzureAI+机器学习综合能力展现之视频索引器-ZJUNSEN的云计算-51CTO博客

播放后会看到分析出该视频出现了多少个人,每一个人出现在整个视频的多少秒或一个区间,视频中出现多少个话题

62.AzureAI+机器学习综合能力展现之视频索引器-ZJUNSEN的云计算-51CTO博客

以及识别出该视频出现了哪些出现频率比较高的关键字;出现过的所有物体标签,比如人,男人,外面,窗户,墙等;还识别出视频里出现了什么品牌,这些所有的标签或品牌出现在视频的多少秒或区间都标示出来,可以快速点击切换到这几秒

62.AzureAI+机器学习综合能力展现之视频索引器-ZJUNSEN的云计算-51CTO博客

还识别出整个视频中的某一个人在这个视频中情感是怎样的,百分之多少是开心的等等

62.AzureAI+机器学习综合能力展现之视频索引器-ZJUNSEN的云计算-51CTO博客

还识别出该视频出现了多少个场景以及我选中的这个人物在整个视频中出现的关键帧,这些都可以点击去快进回退到出现该人的帧或秒

62.AzureAI+机器学习综合能力展现之视频索引器-ZJUNSEN的云计算-51CTO博客

其次还在时间线里可以语音转文本的方式实现整个视频的字幕体现,随着播放的语音而字幕自动滚动

62.AzureAI+机器学习综合能力展现之视频索引器-ZJUNSEN的云计算-51CTO博客

并且还可以对该文本翻译成需要的需要显示的语种来展示

62.AzureAI+机器学习综合能力展现之视频索引器-ZJUNSEN的云计算-51CTO博客

当然还可以查看各种标签穿插在整个事件线里的位置,以及编辑文本的内容进行内容修订

62.AzureAI+机器学习综合能力展现之视频索引器-ZJUNSEN的云计算-51CTO博客

最后还可以下载脚本,见解,以及翻译的txt文本等

62.AzureAI+机器学习综合能力展现之视频索引器-ZJUNSEN的云计算-51CTO博客

如果下载VTT文件就可以通过本地播放器在本地播放这个未经分析的源视频配上字幕(选择下载好的VTT文件)来一起播放了,感觉是不是很简单

62.AzureAI+机器学习综合能力展现之视频索引器-ZJUNSEN的云计算-51CTO博客

从这个视频索引分析来看其实后端结合了多种微软Azure的AI+机器学习的服务来综合使用,例如用到了计算机视觉对别场景和物体等,人脸识别识别视频中出现的人脸,用到了语音服务,对视频里原本没有字幕的视频配上英文字幕并且再结合翻译服务将英文转译成你需要的语种,比如中文等,利用情感识别对视频中的人物喜怒哀乐进行百分比的分类等,所以但从一个简单的视频就分析出多种维度不同的见解还是非常有意思的。如果您感兴趣也可以自己动手来体验感受感受。

喜欢 (0)
[]
分享 (0)
关于作者:
发表我的评论
取消评论
表情 贴图 加粗 删除线 居中 斜体 签到

Hi,您需要填写昵称和邮箱!

  • 昵称 (必填)
  • 邮箱 (必填)
  • 网址