62.Azure AI+机器学习综合能力展现之视频索引器

之前介绍了很多用于Demo的微软Azure AI和机器学习的能力用于演示，这次介绍一个网站可以用于强大的视频分析：AMS视频索引器

在这个网站可以上传一个本地视频用于视频分析，上传成功后可以根据这个视频做很多不同维度的分析，比如这里我从本地计算机上传一个视频后经过一会的分析检索后就可以点击播放

播放后会看到分析出该视频出现了多少个人，每一个人出现在整个视频的多少秒或一个区间，视频中出现多少个话题

以及识别出该视频出现了哪些出现频率比较高的关键字；出现过的所有物体标签，比如人，男人，外面，窗户，墙等；还识别出视频里出现了什么品牌，这些所有的标签或品牌出现在视频的多少秒或区间都标示出来，可以快速点击切换到这几秒

还识别出整个视频中的某一个人在这个视频中情感是怎样的，百分之多少是开心的等等

还识别出该视频出现了多少个场景以及我选中的这个人物在整个视频中出现的关键帧，这些都可以点击去快进回退到出现该人的帧或秒

其次还在时间线里可以语音转文本的方式实现整个视频的字幕体现，随着播放的语音而字幕自动滚动

并且还可以对该文本翻译成需要的需要显示的语种来展示

当然还可以查看各种标签穿插在整个事件线里的位置，以及编辑文本的内容进行内容修订

最后还可以下载脚本，见解，以及翻译的txt文本等

如果下载VTT文件就可以通过本地播放器在本地播放这个未经分析的源视频配上字幕（选择下载好的VTT文件）来一起播放了，感觉是不是很简单

从这个视频索引分析来看其实后端结合了多种微软Azure的AI+机器学习的服务来综合使用，例如用到了计算机视觉对别场景和物体等，人脸识别识别视频中出现的人脸，用到了语音服务，对视频里原本没有字幕的视频配上英文字幕并且再结合翻译服务将英文转译成你需要的语种，比如中文等，利用情感识别对视频中的人物喜怒哀乐进行百分比的分类等，所以但从一个简单的视频就分析出多种维度不同的见解还是非常有意思的。如果您感兴趣也可以自己动手来体验感受感受。