|
--- |
|
license: creativeml-openrail-m |
|
language: |
|
- zh |
|
pipeline_tag: text-to-image |
|
tags: |
|
- SDXL |
|
- ACG |
|
- Hyper |
|
--- |
|
|
|
AiARTiST ACG 专用游乐场大模型 Playground SDXL V6 Hyper |
|
|
|
文件名：AiARTiST XL ACG Playground V6-MiracleHyper.safetensors |
|
|
|
---------------------------------------------------------------------- |
|
|
|
V6加速版已上线！加速版同时拥有更高画质和更快速度 |
|
|
|
内置加速器 Accelerator：Hyper-SDXL-8steps-lora.safetensors |
|
|
|
---------------------------------------------------------------------- |
|
|
|
2024/5/28 更新 V6 |
|
|
|
加强NIJI风格的二次元权重，更符合模型ACG定位，不过相较于二次元底模 |
|
|
|
AiARTiST ACG Playground 依旧擅长的是2k高清直出精细图与复杂纹理。 |
|
|
|
|
|
|
|
增强了三维场景和3D角色的渲染效果。 |
|
|
|
|
|
|
|
减轻了V5版本过于花哨的风格，增加了亮色权重，减少污染降低过拟合感。 |
|
|
|
V6版本定位：更工整，更明亮，更鲜艳！ |
|
|
|
---------------------------------------------------------------------- |
|
|
|
我的常用配置： |
|
|
|
Clip Skip 1 / CFG 1 / Steps 10 / 采样方法 (Sampler) Euler a / VAE 自动 |
|
|
|
默认：640 x 1280 ，高清放大 1.5倍，高清重绘幅度0.5，重绘方式 Latent |
|
|
|
因为最终构图尺寸足够，无需开启 ADetailer 修复。 |
|
|
|
|
|
|
|
其他出图分辨率：： |
|
|
|
Size: 1280x720 / 1536x768 / 960x1920 / 1920x960 / 2048x1024 / 1024x2048 |
|
|
|
直出尺寸超过1536建议打开 Kohya HRFix 插件，修正结构错误，放大修正 |
|
|
|
可以开启 DynamicThresholding (CFG-Fix) 动态分辨率插件，作用不是很大， |
|
|
|
对LoRA及ControlNet适配良好。 |
|
|
|
---------------------------------------------------------------------- |
|
|
|
Hyper-SD是最新扩散模型加速技术之一，无损高清加速，CN适配好 |
|
|
|
经过多个底模的实测，Hyper-SD可推导出比加速前更多的画面信息！ |
|
|
|
|
|
|
|
强烈建议8G显存及MAC用户使用Hyper版本，10几秒直出2048高清图 |
|
|
|
---------------------------------------------------------------------- |
|
|
|
Lib会员可享有在线加速生成，方便在线搭配CADS系列LoRA使用。 |
|
|
|
模型清单： https://www.liblib.art/search?keyword=AiARTiST |
|
|
|
商用模型： |
|
|
|
AiARTiST-CADS2.0 XL 商业广告辅助系统（企业定制） |
|
|
|
https://www.liblib.art/modelinfo/a56ebacdba7d4e30b97bb124bc3fc28f <<点击直达 |
|
|
|
---------------------------------------------------------------------- |
|
|
|
模型用途声明： |
|
|
|
1. 您不得将此模型及其衍生版本（如融合模型版本）托管于计划赚取收入或捐赠的网站/应用程序。 |
|
|
|
2. 您不得直接售卖此模型及其衍生版本（如融合模型版本），除非您对此模型进行了足够程度的人工修改，使其在法律意义上可以被完全判定为您的个人作品。如果您违反本条，所造成的一切法律后果由您个人承担，请恕本人概不负责。 |
|
|
|
3. 您不能使用该模型故意制作或共享非法或有害的内容传播和输出，请您遵守公序良德，将此模型用于积极正面的用途。 |
|
|
|
|
|
|
|
测试问题请留言，业务合作看个人首页 +V Zyuan980 |
|
|
|
AiARTiST | Metaverse 中国·山东 数字人/AiGC/元宇宙方向 |
|
|
|
做好工具人 服务艺术家 联系方式：https://afdian.net/a/AiARTiST-lib |
|
|
|
———————————————————————————————————————— |
|
|
|
|
|
|
|
———————————————————————————————————————— |
|
|
|
AiARTiST ACG专用游乐场大模型 Playground SDXL V5 |
|
|
|
文件名：AiARTiST_CinematicVJ_XL_mix.safetensors |
|
|
|
---------------------------------------------------------------------- |
|
为什么放弃了动画专用模型？ |
|
|
|
|
|
|
|
Sora这样的模型展示了极为强大的文本驱动视频生成能力，这意味着在同样的应用场景如动画制作、虚拟主播、视频内容创作等方面，其他公司的产品可能在技术性能上难以匹敌。这种显著的技术差距使得市场上的其他竞争者面临巨大压力，如果不具备相应的研发实力和技术储备，继续投入可能无法取得预期的竞争优势。 |
|
|
|
|
|
面对像Sora这样具有颠覆性技术的出现，部分AI公司可能选择调整战略，将资源转向更具竞争力或者尚未被类似先进模型占据的领域，避免在饱和市场中进行无谓的竞争。Sora模型凭借其创新性和高效率对动画及其他相关行业造成深远影响，迫使其他AI公司在技术研发路径、市场定位以及战略合作等方面作出相应调整。 |
|
|
|
|
|
|
|
如果不在Leosam的AiART基础上继续训练，这个底模是否应该推翻重建？ |
|
|
|
|
|
|
|
随着研究领域的不断发展，新的理论框架、训练方法或优化技术不断出现，这些新技术带来更高的准确率、更快的训练速度或更好的泛化能力。为了利用这些新成果，需要重构模型结构或训练过程。当前0.9的基础模型存在训练集不足，部分权重过拟合、欠拟合、泛化性能差、计算资源消耗过大等问题。为了改进模型的表现，我们决定从头设计一个新的模型。旨在不断提升模型的性能、适应能力和可持续发展性。 |
|
|
|
|
|
所以，我们在去年的AiARTiST 艺术海报构图设计大模型 1.5版本的训练集基础上，整合了尚未发布的XL版本，并且保留了 |
|
|
|
AiARTiST 动画生成专用大模型 VJ特效 XL版本的训练权重，在一个全新的MIX融合底模上，重建了这个模型。 |
|
|
|
|
|
|
|
我也想继续直训动画模型，但是没有足够的能力去做这件事情，怎么办？我们一起来回顾一下开源社区存在的意义 |
|
|
|
---------------------------------------------------------------------- |
|
|
|
开源（Open Source）的意义体现在多个层面，主要包括以下几个关键点： |
|
|
|
|
|
|
|
技术创新与协作：开源软件鼓励全球范围内的开发者共同参与项目的开发与完善，通过集体智慧加速技术的创新与迭代。开源社区的成员可以相互学习、借鉴，协同解决问题，从而创造出高质量、高性能的软件产品。 |
|
透明度与安全性：开源意味着源代码对公众开放，允许任何人审查软件的内部工作机制，这对于确保软件的安全性至关重要。通过广泛的审查和反馈，开源软件能够及时发现和修复漏洞，增强了系统的可靠性和安全性。 |
|
灵活性与定制化：开源软件允许用户根据自身需求对软件进行修改和定制，极大地满足了个性化需求，降低了软件使用成本，特别是对于企业级用户，开源方案可以更好地契合企业的业务流程和IT战略。 |
|
资源共享与知识传播：开源软件促进了技术知识的共享与传播，尤其是对于新兴市场和欠发达地区，开源技术降低了技术门槛，让更多人有机会接触和学习最新技术，促进了全球范围内的技术普惠。 |
|
商业模式创新：虽然开源软件本身往往是免费提供的，但围绕开源项目可以建立起多样化的商业模式，如提供技术支持、培训、增值服务以及与开源相关的专业服务等，创造了全新的数字经济生态。 |
|
法律与伦理：开源软件遵循一系列开源许可协议，明确了软件的复制、分发和修改规则，倡导了公平、自由的软件使用权，推动了版权和知识产权领域的新思考与实践。 |
|
社区凝聚力与文化价值：开源社区培育了一种开放、合作、共享的文化氛围，形成了独特的社区凝聚力和认同感，这种文化价值不仅激励着开发者积极参与，也为社会营造了积极正面的技术进步动力。 |
|
|
|
|
|
综上所述，开源的意义远超过模型训练本身，它既是技术革新的催化剂，又是推动社会公平、民主、合作理念在数字化时代发扬光大的重要力量。（标准AI回答格式文本 -。-） |
|
|
|
---------------------------------------------------------------------- |
|
|
|
|
|
|
|
所以，在这次版本更新后，这个链接下的 ACG Playground 专用模型，将会严格的按照开源协议，采用SDXL官方底模基础上的各路神仙FT模型，或者大佬们的直训大模型，存档并公示融合信息，以及严格符合原作者的授权范围。 |
|
|
|
|
|
|
|
AiARTiST_CinematicVJ_XL_MIX V5 融合底模及LoRA信息 |
|
|
|
|
|
|
|
Leosam Helloworld 5.0 |
|
|
|
ZaxiousXL 2.0 |
|
|
|
juggernautXL_v9_V9 + RDPhoto 2 |
|
|
|
MJ52.safetensors |
|
|
|
Miracle-CinematicVJ-XL.safetensors |
|
|
|
Miracle-ArtComposition-XL.safetensors |
|
|
|
|
|
|
|
在此，对以上模型原作者（除自己的LoRA）表示真诚的感谢！你们的努力为社区的发展夯实基础。 |
|
|
|
如有忽略以及不足之处，请各位大佬留言指正，我们立即删除掉侵权内容，并公开道歉。 |
|
|
|
也希望我们的AI社区能够一直一直发展下去，让我们这些投入了热情和心血的玩家或组织们，不至于前功尽弃！ |
|
|
|
|
|
|
|
---------------------------------------------------------------------- |
|
|
|
附录：CreativeML Open RAIL-M 简介 |
|
|
|
CreativeML Open RAIL-M 许可证由Robin Rombach、Patrick Esser及其贡献者于2022年8月22日制定，旨在规范多模态生成模型的使用、复制、分发行为，并致力于推广开放与负责任的模型下游使用。该许可证汲取了开源许可的精神，同时加入了基于使用场景的限制条款，以防止模型的潜在滥用。 |
|
|
|
本许可证涵盖的内容包括模型及其衍生物，其定义如下： |
|
|
|
“许可证”指本文件中定义的使用、复制和分发模型及其衍生物的条款和条件。 |
|
“数据”指用于训练、预训练或评估模型的数据集中的信息和内容，但数据不在本许可证范围内。 |
|
“输出”指操作模型产生的结果信息内容。 |
|
“模型”指基于机器学习的集合，包括训练得到的权重、参数（包括优化器状态），按照随附材料中的模型架构训练或调整，至少部分基于数据进行训练。 |
|
“模型衍生物”指对模型的所有修改、基于模型的作品，以及其他通过转移模型的权重、参数、激活或输出模式初始化并使另一模型表现类似的模型，包括但不限于蒸馏方法和其他相似性传递方法。 |
|
“随附材料”指用于定义、运行、加载、评测模型的源代码和脚本，以及用于准备训练或评估数据的相关文档、教程和示例等。 |
|
“分发”指将模型或其衍生物传输、复制、发布或以任何形式分享给第三方，包括以API或网页访问形式提供的托管服务。 |
|
许可证持有人（版权所有者或授权实体）授予使用者永久、全球、非独家、免费的版权和专利许可，允许复制、展示、执行、分发、修改模型及其随附材料和衍生物，但必须遵守使用限制（见附件A）。 |
|
|
|
使用者在分发模型或其衍生物时，必须包含相同使用限制，并确保接收方知晓这些限制。使用者对其使用模型生成的输出负责，并需确保其符合许可证规定。 |
|
|
|
此外，许可证持有人保留权利，根据法律规定，限制违规使用模型，通过电子方式更新模型或根据更新调整模型输出。 |
|
|
|
总体而言，CreativeML Open RAIL-M 许可证旨在平衡开放与负责任的AI发展，通过明确的条款指导模型在艺术创作和其他领域的开放科学实践中的负责任使用。 |
|
|
|
---------------------------------------------------------------------- |
|
|
|
AiARTiST ACG专用游乐场大模型 Playground SDXL Metadata 信息公示 |
|
|
|
|
|
|
|
文件名：AiARTiST_CinematicVJ_XL_mix.safetensors |
|
|
|
{ |
|
|
|
"AuthorName": "AiARTiST", |
|
|
|
"LiblibPage": "https://www.liblib.ai/search?keyword=AiARTiST", |
|
|
|
"email": "[email protected]", |
|
|
|
"format": "pt", |
|
|
|
"ckpt_merge1": "SD XL\\zaxiousXL_v20", |
|
|
|
"ckpt_merge2": "SD XL\\juggernautXL_v9_V9 + RDPhoto 2", |
|
|
|
"ckpt_merge3": "SD XL\\LEOSAM's HelloWorld XL 5.0", |
|
|
|
"LoRA_merge1": "SD XL\\MJ52", |
|
|
|
"LoRA_merge2": "SD XL\\Miracle-CinematicVJ-XL", |
|
|
|
"LoRA_merge3": "SD XL\\Miracle-ArtComposition-XL" |
|
|
|
} |
|
|
|
---------------------------------------------------------------------- |
|
|
|
Q&A |
|
|
|
是否内置VAE？是的。 |
|
|
|
———————————————————————————————————————— |
|
|
|
测试问题请留言，业务合作看个人首页 +V Zyuan980 |
|
|
|
AiARTiST | Metaverse 中国·山东 数字人/AiGC/元宇宙方向 |
|
|
|
做好工具人 服务艺术家 联系方式：https://afdian.net/a/AiARTiST-lib |
|
|
|
———————————————————————————————————————— |
|
|
|
|
|
|
|
|
|
|
|
———————————————————————————————————————————————— |
|
|
|
以下为0.9版本信息： |
|
|
|
|
|
|
|
AiARTiST 动画生成专用大模型 CinematicVJ动画特效 XL版本 |
|
|
|
|
|
|
|
生成艺术 是什么？ |
|
|
|
|
|
|
|
生成艺术，也叫生成式艺术，英文名(generative art)，一种部分或者完全通过自治系统自动创作出来的艺术品，在这种情况下，自治系统通常是非人类的，它能够独立确定艺术品的特征，不需要艺术家直接做出决定。在某些情况下，艺术家可能会声称自治系统代表了他们自己的艺术理念，而在另一些情况下，自治系统则直接扮演了创造者的角色。 |
|
|
|
|
|
|
|
生成艺术通常也指算法艺术(由算法决定的计算机生成的艺术品)和合成媒体(任何算法生成的媒体的通用术语)，但艺术家也可以使用化学、生物、力学和机器人、智能材料、手动随机化、数学、数据映射、对称、镶嵌等等。 |
|
|
|
|
|
|
|
上述是从艺术家的视野定义，反之，站在计算机的视角，由于计算机参与艺术创作，也有人叫做创意编程。近年随着人工智能的发展，又衍生出人工智能生成艺术(AI generative art)，计算机编程、人工智能与艺术呈现越来越融合发展的趋势，特别在加密藏品技术赋予艺术品唯一性的数字经济下，更多的计算机专家与艺术家在合作改变今天的艺术世界。 |
|
|
|
|
|
|
|
生成艺术的作品格式主要有音乐、视觉艺术、软件艺术、建筑、文学、实时代码,下面通过一系列视觉图片案例呈现一些生成艺术品，这些艺术品的差异主要表现在元素随机能力、代码软硬能力、智能迁移能力，但这些差异本质上还是由于科技发展带来的。（以上描述为转载） |
|
|
|
|
|
|
|
我们的AiARTiST 动画生成专用大模型 CinematicVJ动画特效 是对生成式艺术的拙略模仿与实验， |
|
|
|
旨在降低艺术生产力方面的瓶颈，力求在打破技术实现门槛的前提下，逐步走向创造与设计平权。 |
|
|
|
|
|
|
|
【 Lib上首页就开下载 】 |
|
|
|
|
|
|
|
CinematicVJ XL 0.9 What's New |
|
|
|
|
|
|
|
SD官方XL大模型基础上的精调模型，融合底模是 LEOSAM AIArt 兔狲插画 SDXL大模型 |
|
|
|
AIArt 直达链接 https://www.liblib.art/modelinfo/b2abe174c89940cb90cc4b02d1a5bbc6 |
|
|
|
|
|
|
|
针对主题表现和特效部分做了强化，专门用来生成动态作品底图，静态图请继续使用 AIArt 主版本， |
|
|
|
搭配后续推出的一系列设计辅助Lora也会比较不错，可以很好的复现之前一些动态生成作品的风格。 |
|
|
|
|
|
|
|
———————————————————————————————————————————————————————— |
|
|
|
|
|
|
|
CinematicVJ XL 0.9 What's New |
|
|
|
|
|
|
|
本模型适用性很小众，目的是为了实现动态视觉效果，对静态图片没有什么突破，甚至劣化， |
|
|
|
我们会尝试各种动画辅助算法、模型、商业化平台等，来实验CinematicVJ作品的动画实现。 |
|
|
|
|
|
|
|
因为AiGC动画技术的限制，目前还无法非常完美的还原各类动态效果，大家一起努力吧！ |
|
|
|
|
|
|
|
设计、插画、场景Lora及普遍的人物、2D、2.5D Lora都可尝试搭配这个模型出图， |
|
|
|
可以快速利用这些风格，模拟出最终TD/UE代码的动画实现DEMO， |
|
|
|
并在此基础上利用其他专业设计工具来完成作品。 |
|
|
|
|
|
|
|
推荐Prompts tag清单（加强元素风格描述）：CinematicVJ,C4D,Surrealist,trend art,realistic, |
|
|
|
CG animations,A human head,figure, sculpture,mannequin,fashion art,digital artwork, |
|
|
|
QRcode，a burst of vibrant colors,paint splashes,transparent bubbles,neon signs,astronaut, |
|
|
|
cyberpunk style,DJ mixer,space Explosion,robotic Buddha,monks,silver color,depth of field, |
|
|
|
gauze fluttering,reature limbs and trunk,many holes and patterns on body,starry sky, |
|
|
|
Science fiction movies,cityscape at night,huge billboard,traffic lights,bustling and lively, |
|
|
|
surrounded by water,vibrant, colorful grid-like structure,flowing wave, growing light, |
|
|
|
creating a gradient effect, digital abstract,Particle light,neon colors,abstract shapes, |
|
|
|
stacked together,three-dimensional geometric structure,deep purple color,geometric, |
|
|
|
DNA molecule,double helix structure,alternating wavy pattern,connected together,等等 |
|
|
|
|
|
|
|
Neg_Prompts: 负面词尽量不加，放飞AI的大脑，节省我们的思考！ |
|
|
|
|
|
|
|
Q&A |
|
|
|
是否内置VAE？是的。 |
|
|
|
|
|
|
|
———————————————————————————————————————— |
|
|
|
|
|
|
|
测试问题请留言，业务合作看个人首页 +V Zyuan980 |
|
|
|
AiARTiST | Metaverse 中国·山东 数字人/AiGC/元宇宙方向 |
|
|
|
做好工具人 服务艺术家 联系方式：https://afdian.net/a/AiARTiST-lib |
