用视频时间金字塔可视化时间的流逝
我们使用不同的技术以多种速度可视化我们周围的世界，例如慢动作和延时摄影。arXiv.org最近的一篇论文提出了视频时间金字塔，这是一种可视化不同时间尺度变化的方法，以及一种用于导航和探索金字塔的可视化工具。
金字塔由一系列新视频组成，每个视频都提炼出在特定时间尺度发生的变化。它提供流畅的观看体验，没有锯齿或闪烁效果。视频频谱图绘制了时间与时间尺度的关系，显示了强烈的循环变化(例如白天/黑夜)的清晰模式。用户可以先进行概览扫描，然后深入到较低的时间尺度以查看更多详细信息。
研究人员使用不同户外场景(如建筑工地)的多个长时间网络摄像头数据集来验证该方法。
我们可以通过观察几个月或几年来了解一个场景?长时间录制的视频将在多个时间尺度上描绘有趣的现象，但识别和查看它们是一项挑战。视频太长无法完整观看，有些事件太慢无法实时体验，例如冰川退缩。延时摄影是总结长视频和可视化慢时间尺度的常用方法。然而，延时摄影仅限于单个选择的时间频率，并且由于帧之间的混叠和时间不连续性而经常出现闪烁。在本文中，我们提出了视频时间金字塔，一种解决这些限制并扩展可视化时间流逝的可能性的技术。受计算机视觉空间图像金字塔的启发，我们开发了一种在时域中构建视频金字塔的算法。视频时间金字塔的每一层都可视化不同的时间尺度;例如，每月时间尺度的视频通常适合可视化季节变化，而一分钟时间尺度的视频最适合可视化日出或天空中云层的移动。为了帮助探索不同的金字塔级别，我们还提出了一个视频频谱图来可视化整个金字塔的活动量，提供场景动态的整体概览以及跨时间和跨时间尺度探索和发现现象的能力。为了演示我们的方法，我们从十个户外场景构建了视频时间金字塔，每个场景都包含数月或数年的数据。我们将视频时间金字塔层与幼稚的延时摄影进行比较，发现我们的金字塔可以无别名查看长期变化。我们还展示了视频频谱图通过启用概览和注重细节的视角促进了跨金字塔级别的现象的探索和发现。
标签：