浙江大学-当艺术遇见AI：科艺融合的新探索.pptx

WhereArtmeetsAI

科艺融合的前沿探索

2025/4/21

《撵茶图》局部｜刘松年（南宋）|

绢本设色｜44.2*61.9厘米｜台北故宫博物院

Partofthe“TeaGrind”｜LiuSongnian（SongDynasty）｜Inkandcoloronsilk｜44.2*61.9cm｜TaipeiPalaceMuseum;

处理画芯揭命纸托命纸补洞帖断纹全色;

处理画芯揭命纸托命纸补洞帖断纹全色;

《江亭晚景图》

董源（五代）;

色彩复原效果;

色彩复原流程;

《洞庭东山图》

赵孟頫（元代）

洞庭波兮山崨嶪,川可济兮不可以涉。

木兰为舟兮桂为楫,渺余怀兮风一叶。;

图搜图

考证;

洞庭波兮山蜓橐，

ThewavesrippleontheDongtingLake,withmountainspoisedlikedragonfliesrestingonthewater.

川可济兮不可以涉。

Therivercanbecrossedbyboats,butcannotbewadedthrough.

木兰为舟兮桂为楫，

Aboatmadeofmagnoliawood,withpaddlesmadeofcassiawood.

渺余怀兮风一叶。

AsIdriftalong,mythoughtsareasfleetingasaleafinthewind.;

《书鄢陵王主簿所画折枝二首》

苏轼（北宋）

赋诗必此诗，定非知诗人。

诗画本一律，天工与清新。;

吴昌硕（近代）

秋菊灿然白，入门无点尘。

苍黄能不染，骨相本来真。

近海生明月，清谈接晋人。

漫持酤酒去，看到岁朝春。;;

CLIPSim;

“诗画一律”：跨模态;

诗画融合大模型

山势舒坦静若盼，矾头云卷烟霞间。

树木葱茏争荫浓，江畔风吹枝叶飘。

灯笼树梢点缀处，彩旗飘扬两舟前。

春雨沐草滋人生，祥龙喜兆降瑞年。;

模型规模;

图像召回试验

相似度分数;

图像召回试验;

图像召回试验;

图像召回试验

《洞庭东山图》赵孟頫（元）;

图像召回试验;

图像召回试验

相似度分数;

智能协同修复流程;

ZJUAAILAB

PColorizor:Re-coloringAncientChinese

PaintingswithIdeorealm-congruentPoems;

古画鉴赏的初步探索;

古画鉴赏的初步探索;

能识别??面内容：山峰、雨雾、亭台楼阁、人物

能识别印章;

表示不确定

但能猜出宋代

或元代

分析过程不直观，不客观

需要更多信息;

输入：

中国古画有一些【基本特征】：【材料】指作画媒介的材料，包含【纸本】【绢本】【金笺】

【绫本】【版画】等，其中大多数是【纸本】或【绢本】；【形制】表示画的形状，包含【立轴】【册页】【长卷】【扇面】【横幅】【镜片】等；【题材】为画作的主题，是中国古画分类的一大依据，包括【山水】【人物】【花鸟】；【技法】则分为【工笔】【写意】【兼工带写】；【设色】表示画作的色彩使用，包含【设色】【水墨】

【墨书】【浅设色】【淡彩】【重彩】【白描】【吴妆】【青绿】【螺青】【浅绛】等。现在，不给上面这幅画作（记作“画作A”）和其他画作的另外信息，请从画面和你已经知道的知识，分析出画作A的这5个基本特征【材料】【形制】

【题材】【技法】【设色】分别是什么。;

接下来，我会给你若干个标注了【基本特征】的例子。在我举例时，请回复“继续”，当我给出指令【请鉴定】时，请你根据前面的例子，以这样的格式分析画作的特征：

“

画作n：

材料：绢本

形制：立轴

题材：山水

技法：兼工带写

设色：淡彩

”;;

材料：绢本√

形制：立轴×册页

题材：花鸟√

技法：写意×兼工带写

设色：水墨加彩×水墨;

古画鉴赏的初步探索;

初始的GPT模型对于鉴赏的准确度并不高，尤其是可视化解读方面，展示了分析过程中的困难。;

基本特征可视化释读;

基本特征可视化释读;

数据增强的大模型推理;

利用切片识别画作基本特征;

ArtEyer

EnrichingGPT-basedAgentswithContextualDataVisualiza