从科学文件中自动生成演示幻灯片
发布日期：2021-11-01 16:31:13 来源： 编辑：
从科学论文创建演示文稿并非易事。自动化模型将提高人类生产力。这就是最近在arXiv.org上进行的一项研究的作者所建议的。他们介绍了DOC2PPT，这是一项从文档创建演示幻灯片的新任务。
为了做到这一点，分层循环序列到序列架构读取文档并将其总结为结构化幻灯片。模型决定何时继续下一部分或幻灯片，考虑当前总结的部分和之前的幻灯片。
释义模块将文本转换为幻灯片样式的子句，例如要点。此外，还使用了文本-图像匹配目标，以便相关的文本-图像对出现在同一张幻灯片上。该数据集与定性和定量评估数据一起发布，以鼓励进一步研究。
创建演示材料需要复杂的多模态推理技能来总结关键概念并以合乎逻辑和视觉上令人愉悦的方式排列它们。机器能学会模仿这个费力的过程吗?我们提出了一种新的文档到幻灯片生成任务和方法。解决这个问题涉及文档摘要、图像和文本检索、幻灯片结构和布局预测，以适合演示的形式排列关键元素。我们提出了一种分层的序列到序列方法，以端到端的方式处理我们的任务。我们的方法利用文档和幻灯片中的固有结构，并结合释义和布局预测模块来生成幻灯片。为了帮助加速该领域的研究，我们发布了一个关于我们实验中使用的6K配对文档和幻灯片的数据集。
标签：
免责声明：本文由用户上传，与本网站立场无关。财经信息仅供读者参考，并不构成投资建议。投资者据此操作，风险自担。 如有侵权请联系删除！