尝试训练一个模型研究了下某朋友心心念念的二次元前景人物,三次元背景,遂失败
推荐尺寸 512*768,768*1024,或接近该尺寸比例的横图皆可
推荐tag :
masterpiece,best quality ,realistic,(architectural photography:1.1)
suzhouyuanlin,no humans,garden,Building details,facade details,water,tree,white wall,out doors
例图里的tag仅供参考,核心的tag以上为准
基于SD1.5 Base SD1.5
推荐权重0.4-0.8 recommend 0.4-0.8
(低于0.4效果不明显,容易生成中国传统建筑风格而非苏州园林)
触发词suzhouyuanlin Tag:suzhouyuanlin
经过测试,目前主流大模型内直接使用tag,就可生成有中国风的建筑,
本lora是对suzhouyuanlin南方园林风格,山水概念的针对性特化训练
可使用的大模型dalcefoPainting_v4,realisticVisionV13_v13,deliberate_v2,AARG_render-mix_sd-v.15_12000,dreamlikePhotoreal20_dreamlikePhotoreal20,perfectWorld_v2Baked,v1-5-pruned,anything-v4.5,dvarchMultiPrompt_dvarch,protogenX58RebuiltScifi_10,chilloutmix_Ni,protogenX34Photorealism_1
基于苏州园林建筑风格训练,在各大模型上的泛化性都不错
可单独用于建筑,也可兼容人物lora改变背景内容为园林建筑
训练集全部为无人建筑照片,搭配人物时请降低权重
相较于中国传统建筑的区别在于更倾向于生成假山,半透的廊道和窗纹,水池等园林所包含的概念
伴随人像时,Chinese cloths,Japanese cloths这类词条会影响到背景风格
因为这类词条在大模型内训练集的背景本身就包含了中式,日式建筑,形成了词条关联
砖瓦窗格细节的问题应该和手指一样,手指,瓦片等细节,在大图片在压缩为小尺寸图片训练的时候分配到每个瓦片,木条的细节像素过少了,画图由很少像素的小尺寸细节再放大,细节就经不起看,或许在后续版本增大训练集体积能解决这个问题
有无lora对比测试
作为人物背景使用 (是否使用lora对人物背景的影响)
大模型泛化测试
各权重下表现测试
使用controlnet控制画面
案例1
案例2
Description
first version
FAQ
Details
Available On (1 platform)
Same model published on other platforms. May have additional downloads or version variants.