个性签名 ...
一个通信视频字幕的理想模型 - 预测视频中暂时性的字幕 - 应该能够处理长输入视频，预测丰富的，详细的文本描述，并在处理整个视频之前产生输出。但是，当前的最新模型会处理固定数量的下采样框架，并在观看整个视频后做出一个完整的预测。我们提出了一个由两个新颖组成部分组成的流式密集的视频字幕模型：首先，我们根据聚类传入 Token 提出了一个新的内存模块，该模块可以处理任意长的视频，因为内存的尺寸为固定尺寸 ...
密集的视频字幕旨在确定输入视频中感兴趣的事件，并为每个事件生成描述性字幕。以前的方法通常遵循两个阶段的生成过程，该过程首先提出了每个事件的段，然后为每个已确定的细分市场提供标题。大规模序列产生预处理的最新进展在统一各种任务的任务制定方面取得了巨大的成功，但是到目前为止，更复杂的任务（例如密集的视频字幕）无法完全利用这种强大的范式 ...
密集的视频字幕旨在与视频中的时间位置生成多个相关的字幕。以前的方法遵循一个复杂的“本地化”方案，该方案在很大程度上依赖于许多手工制作的组件。在本文中，我们提出了一个简单而有效的框架，用于通过将密集的字幕生成作为设定的预测任务，对并行解码（PDVC）进行端到端密集的视频字幕（PDVC） ...
视频段落字幕旨在生成一个未修剪视频的多句子描述，其中有几个时间事件位置在连贯的讲故事中。遵循人类的感知过程，通过将场景分解为视觉，可以有效地理解场景（例如 ...