DataLearner 标志
CO

ControlNet

基础大模型

ControlNet

发布时间: 2023-02-10更新于: 2023-03-11 19:58:34.312690
在线体验GitHubHugging FaceCompare
模型参数
未披露
上下文长度
2K
中文支持
不支持
推理能力

ControlNet 是由 个人 发布的 AI 模型,发布时间为 2023-02-10,定位为 基础大模型,上下文长度为 2K。

数据优先来自官方发布(GitHub、Hugging Face、论文),其次为评测基准官方结果,最后为第三方评测机构数据。 了解数据收集方法

ControlNet

模型基本信息

推理过程
不支持
思考模式
不支持思考模式
上下文长度
2K tokens
最大输出长度
暂无数据
模型类型
基础大模型
输入/输出模态
暂无数据
发布时间
2023-02-10
模型文件大小
暂无数据
MoE架构
总参数 / 激活参数
暂无数据 / 不涉及
知识截止
暂无数据
ControlNet

开源和体验地址

代码开源状态
暂无数据
预训练权重开源
暂无数据
GitHub 源码
暂无GitHub开源地址
Hugging Face
暂无开源HuggingFace地址
在线体验
暂无在线体验地址
ControlNet

官方介绍与博客

DataLearnerAI博客
暂无介绍博客
ControlNet

API接口信息

接口速度
暂无数据
暂无公开的 API 定价信息。
ControlNet

评测结果

当前尚无可展示的评测数据。

和其他模型对比

暂时没有为该模型整理的相关对比页面。

想自定义其他组合?打开对比工具

ControlNet

发布机构

ControlNet

模型解读

ControlNet是一个系列模型。模型相关论文内容参考: 大模型预训练模型微调新模式——ControlNet:提高大模型在特定任务微调的效果 


ControlNet是一种新的神将网络结构,由斯坦福大学的Lvmin Zhang和Maneesh Agrawala提出的可以用来增强扩散模型的方法。主要是基于已有的Text-to-Image预训练模型对特定数据进行微调以更加适合使用者的目的。这个结构最大的特点是可以在比较资源少的设备如个人PC上对大模型进行调整以获得更好的效果。

这个结构可以帮助大家去训练模型,提高模型在一些特定任务上的效果。大模型一般可能是文本-图像对应关系训练的。但是这种模型在边缘检测、关键点识别等任务上需要做微调。微调的代价比较高,效果也不确定,而ControlNets的作用就是和原来的大模型一起对特定任务重训练的方法。

微软最新的Visual ChatGPT的也用到了这个能力。


模型名称类型地址
Controlnet - Canny VersionCanny边缘检测https://huggingface.co/lllyasviel/sd-controlnet-canny
Controlnet - Image Segmentation Version图像分割https://huggingface.co/lllyasviel/sd-controlnet-seg
Controlnet - Scribble Version图片涂鸦https://huggingface.co/lllyasviel/sd-controlnet-scribble
Controlnet - Normal Map Version法线估计https://huggingface.co/lllyasviel/sd-controlnet-normal
Controlnet - M-LSD Straight Line Version直线提取https://huggingface.co/lllyasviel/sd-controlnet-mlsd
Controlnet - Depth Version图片深度估计https://huggingface.co/lllyasviel/sd-controlnet-depth
Controlnet - HED Boundary VersionHED 网络的图像边缘检测https://huggingface.co/lllyasviel/sd-controlnet-hed
Controlnet - Human Pose Version人类姿态估计https://huggingface.co/lllyasviel/sd-controlnet-openpose


这些模型都是作者实现的,将ControlNet与知名的算法结合的预训练结果,效果很好,可以直接使用!

DataLearner 官方微信

欢迎关注 DataLearner 官方微信,获得最新 AI 技术推送

DataLearner 官方微信二维码