基于书法创作诗意中国山水画的学习方法
Learning to Generate Poetic Chinese Landscape Painting with Calligraphy
Shaozu Yuan, Aijun Dai, Zhiling Yan, Ruixue Liu, Meng Chen, Baoyang Chen, Zhijie Qiu, Xiaodong He
2022-07-01
开放获取美术与书法被引 10
摘要
本文提出了一种名为Polaca的创新系统，用于生成带有书法的诗意中国山水画。与以往的单幅图像到图像的绘画生成技术不同，Polaca以古典诗词为输入，输出配有相应书法的艺术性山水画作品。该系统包含三个独立模块来完成整幅山水画创作：第一个是文本到图像模块，用于生成山水画图像；第二个是图像到图像模块，用于生成具有特定风格的书法图像；第三个是图像融合模块，用于将这两类图像整合为一件完整的审美艺术品。
本摘要由 AI（Hy-MT2-Pro）翻译生成，仅供参考，请以原文为准。
AI 综述
基于全文生成- 主要观点
- 论文提出了一种名为Polaca的新系统，能够以古典诗词为输入，生成带有对应书法的中国山水画完整艺术作品。该系统突破了以往仅关注单一艺术形式或依赖图像到图像风格迁移的局限，将诗词、山水画与书法三种传统艺术形式融合为一个整体创作过程。
- 研究方法
- 研究构建了包含5000多个文本-图像对的数据集，利用CycleGAN和TextRank等技术实现诗词与图像的语义匹配。系统架构包含三个模块：使用跨模态GAN和Bi-LSTM的文本到图像模块生成山水画，使用带注意力机制的GAN和RNN的图像到图像模块生成书法及布局，以及基于Faster R-CNN的图像融合模块进行像素级合成。
- 学术贡献
- 该研究首次探索了将诗意中国山水画与书法作为整体艺术品进行生成的任务，填补了多模态艺术生成领域的空白。此外，研究还贡献了一个大规模的诗词-绘画多模态数据集，并开发了可供用户实时体验的网页演示系统。
- 存在局限
- 人类评估显示，生成作品在山水画质量、书法质量和整体美学方面仍略逊于人类创作的真实艺术品。案例研究还表明，模型在生成过程中有时会遗漏诗词中的关键元素，且生成的色调可能过暗，从而损害画作的整体艺术意境。
- 进一步研究方向
- 研究计划在未来设计更多的目标函数，以鼓励模型在文本到图像生成过程中提高内容的完整性，减少关键元素的遗漏。材料中未明确提及其他具体的进一步研究方向。
本综述由 AI（GLM-5）阅读开放获取全文自动生成，仅供参考，不代表原文作者观点，请以原文为准。
参考文献
相关论文
话题：Computer Graphics and Visualization Techniques