SmartPaint：一种基于生成式对抗神经网络的人机协同绘画系统（英文）

发布时间：2023-04-16 14:00

　　当前人工智能在模仿和大批量生产设计作品中扮演重要角色(如电商广告),而在与用户合作创作时表现欠佳。人们有能力使用草图表达创意想法,但缺乏专业绘画技巧完成精美画作。已有人工智能方法无法基于用户输入草图的语义输出具有艺术美感的画作。本文开发了一种基于生成式对抗神经网络的人机协作绘画系统——SmartPaint,支持人机合作创作动漫风景画作。该系统使用动漫图像数据及其相应语义标注图、边缘检测图训练生成式对抗神经网络。通过此种方式,该系统能够同时理解动漫风格以及风景图像中物体的语义和空间关系。在使用中,用户输入草图作为语义标注图,系统自动为其合成边缘图;根据合成的边缘图生成具有恰当风格纹理的画作,从而稳定地处理多样化草图。实验证明该系统可有效满足用户创作需求,生成高质量动漫风格画作。

【文章页数】：14 页

【文章目录】：
1 Introduction
2 Related work
    2.1 Understanding user inputs
    2.2 Turning a sketch into a painting
3 System overview and implementation
    3.1 System overview
        1.Painting producer
        2.Edge synthesizer
        3.Reference recommender
    3.2 System implementation
        3.2.1 Painting producer
            1.Training data
            2.Painting generation network
        3.2.2 Reference recommender
        3.2.3 Edge synthesizer
4 Experiment
    4.1 Comparison with the original pix2pixHD method
    4.2 System evaluation
        4.2.1 Study 1 methodology
        4.2.2 Study 1 results
        4.2.3 Study 2 methodology
        4.2.4 Study 2 results
5 Discussion
6 Conclusions
Compliance with ethics guidelines



本文编号：3791400