https://vilab.team/tag/%E5%A4%9A%E4%B8%8A%E4%B8%8B%E6%96%87%E6%95%B0%E6%8D%AE%E7%94%9F%E6%88%90/ 多上下文数据生成 Hugo Blox Builder (https://hugoblox.com)en-usSun, 01 Jan 2023 00:00:00 +0000 https://vilab.team/media/icon_hu2896232876136423579.png https://vilab.team/tag/%E5%A4%9A%E4%B8%8A%E4%B8%8B%E6%96%87%E6%95%B0%E6%8D%AE%E7%94%9F%E6%88%90/ https://vilab.team/publication/text-only-image-captioning-with-multi-context-data-generatio/ Sun, 01 Jan 2023 00:00:00 +0000 https://vilab.team/publication/text-only-image-captioning-with-multi-context-data-generatio/ <p>本文针对仅使用文本数据训练图像描述模型的任务，提出一种多上下文数据生成方法。通过构造多样化的文本上下文，生成合成图像-描述训练对，使模型学习跨模态对齐与语义描述能力，减少对真实图像标注的依赖。实验表明该方法在多个图像描述基准上取得有效性能，为数据稀缺场景下的多模态学习提供了新思路。</p>