Bonsai-27B-GGUF
lmstudio-community · 工具包
面向 LM Studio 的 27B Bonsai 模型 GGUF 转换版,含 3.80 GB 的 Q1_0 语言文件和 0.93 GB 的 BF16 视觉投影器。已测试文本、视觉和并行工具调用。
面向网络安全和 DevOps 工作的 7B 编程模型,由 Qwen2.5-Coder-7B 微调而来。适合想要本地小模型的安全和运维工程师,须遵守附加的使用限制。
DeepHat-V1-7B 是一款工具包,属于开发类,由 Mindket 上架。可免费获取。当前为第 1 版,最近更新于 。在本页下载,是一个装着它全部文件的 zip 压缩包。这些文件不会自己运行。
pip install -U huggingface_hub hf download DeepHat/DeepHat-V1-7B
DeepHat-V1-7B 是 Qwen2.5-Coder-7B 的微调版本,有 7.6B 参数,来自一个为进攻和防御网络安全而做的模型系列。它的示例系统消息把它描述为网络安全和 DevOps 方面的专家。它保留了基础模型 131,072 个词元的上下文。
想要一个能自己运行的小型编程和安全助手的安全与运维工程师。
| Industry | Who uses it | How they use it | Example |
|---|---|---|---|
| 安全 | 安全工程师 | 获得防御和授权测试任务方面的帮助 | 解释一个配置风险 |
| DevOps | 平台工程师 | 请它写脚本、帮忙处理流水线 | 起草一个部署脚本 |
| 软件 | 开发者 | 使用偏重安全的编程模型 | 检查一个函数有没有不安全的输入处理 |
| 教育 | 学生 | 用本地模型学习安全概念 | 讲解一类常见漏洞 |
如果你的用途属于下面的许可证限制,或者你想要通用聊天模型,可以跳过它。
| Use case | Who | What they get back |
|---|---|---|
| 写代码 | 开发者 | 比如排序例程这样的代码 |
| 安全问题 | 安全工程师 | 解释和示例代码 |
| 长输入 | 分析师 | 在 config.json 里启用 YaRN 之后的更长上下文 |
pip install -U huggingface_hub hf download DeepHat/DeepHat-V1-7B
加载模型和分词器,用一条系统消息和你的问题构建对话,然后生成。模型卡把示例限制在 512 个新词元。
from transformers import AutoModelForCausalLM, AutoTokenizer
model_name = "DeepHat/DeepHat-V1-7B"
model = AutoModelForCausalLM.from_pretrained(
model_name,
torch_dtype="auto",
device_map="auto"
)
tokenizer = AutoTokenizer.from_pretrained(model_name)
prompt = "write a quick sort algorithm."
messages = [
{"role": "system", "content": "You are DeepHat, created by Kindo.ai. You are a helpful assistant that is an expert in Cybersecurity and DevOps."},
{"role": "user", "content": prompt}
]
text = tokenizer.apply_chat_template(
messages,
tokenize=False,
add_generation_prompt=True
)
model_inputs = tokenizer([text], return_tensors="pt").to(model.device)
generated_ids = model.generate(
**model_inputs,
max_new_tokens=512
)
generated_ids = [
output_ids[len(input_ids):] for input_ids, output_ids in zip(model_inputs.input_ids, generated_ids)
]
response = tokenizer.batch_decode(generated_ids, skip_special_tokens=True)[0]你原样运行模型卡里的脚本,让它写一个快速排序算法。模型把代码放进 response 变量返回,你可以把它打印出来。
如果你是新手,先原样运行快速开始示例,再换成你自己的问题。只在你被允许处理的系统和代码上使用它。
如果你懂这个领域,随附的 config.json 允许最多 32,768 个词元。更长的输入需要按模型卡的做法加入一条因子为 4.0 的 YaRN rope_scaling。架构沿用 Qwen2.5,有 28 层和分组查询注意力,查询 28 个头,键值 4 个头。
{
...,
"rope_scaling": {
"factor": 4.0,
"original_max_position_embeddings": 32768,
"type": "yarn"
}
}面向网络安全和 DevOps 工作的 7B 编程模型,由 Qwen2.5-Coder-7B 微调而来。适合想要本地小模型的安全和运维工程师,须遵守附加的使用限制。
由 DeepHat 在 Hugging Face 上制作。这些说明是 Mindket 根据它的模型页面和模型卡写的,模型自己的文件和许可证在 Hugging Face 上。
它是什么:DeepHat-V1-7B 是 Qwen2.5-Coder-7B 的微调版本,有 7.6B 参数,来自一个为进攻和防御网络安全而做的模型系列。它的示例系统消息把它描述为网络安全和 DevOps 方面的专家。它保留了基础模型 131,072 个词元的上下文。
适合谁:想要一个能自己运行的小型编程和安全助手的安全与运维工程师。
Industry | Who uses it | How they use it | Example
安全 | 安全工程师 | 获得防御和授权测试任务方面的帮助 | 解释一个配置风险
DevOps | 平台工程师 | 请它写脚本、帮忙处理流水线 | 起草一个部署脚本
软件 | 开发者 | 使用偏重安全的编程模型 | 检查一个函数有没有不安全的输入处理
教育 | 学生 | 用本地模型学习安全概念 | 讲解一类常见漏洞
如果你的用途属于下面的许可证限制,或者你想要通用聊天模型,可以跳过它。
用在哪里:
Use case | Who | What they get back
写代码 | 开发者 | 比如排序例程这样的代码
安全问题 | 安全工程师 | 解释和示例代码
长输入 | 分析师 | 在 config.json 里启用 YaRN 之后的更长上下文
如何设置:
pip install -U huggingface_hub
hf download DeepHat/DeepHat-V1-7B
如何使用:加载模型和分词器,用一条系统消息和你的问题构建对话,然后生成。模型卡把示例限制在 512 个新词元。
from transformers import AutoModelForCausalLM, AutoTokenizer
model_name = "DeepHat/DeepHat-V1-7B"
model = AutoModelForCausalLM.from_pretrained(
model_name,
torch_dtype="auto",
device_map="auto"
)
tokenizer = AutoTokenizer.from_pretrained(model_name)
prompt = "write a quick sort algorithm."
messages = [
{"role": "system", "content": "You are DeepHat, created by Kindo.ai. You are a helpful assistant that is an expert in Cybersecurity and DevOps."},
{"role": "user", "content": prompt}
]
text = tokenizer.apply_chat_template(
messages,
tokenize=False,
add_generation_prompt=True
)
model_inputs = tokenizer([text], return_tensors="pt").to(model.device)
generated_ids = model.generate(
**model_inputs,
max_new_tokens=512
)
generated_ids = [
output_ids[len(input_ids):] for input_ids, output_ids in zip(model_inputs.input_ids, generated_ids)
]
response = tokenizer.batch_decode(generated_ids, skip_special_tokens=True)[0]
示例:你原样运行模型卡里的脚本,让它写一个快速排序算法。模型把代码放进 response 变量返回,你可以把它打印出来。
新手与专家:如果你是新手,先原样运行快速开始示例,再换成你自己的问题。只在你被允许处理的系统和代码上使用它。
如果你懂这个领域,随附的 config.json 允许最多 32,768 个词元。更长的输入需要按模型卡的做法加入一条因子为 4.0 的 YaRN rope_scaling。架构沿用 Qwen2.5,有 28 层和分组查询注意力,查询 28 个头,键值 4 个头。
{
...,
"rope_scaling": {
"factor": 4.0,
"original_max_position_embeddings": 32768,
"type": "yarn"
}
}
Qwen2.5-Coder-7B 基础模型
针对网络安全和 DevOps 的微调
用 Transformers 加载
聊天回复
注意事项:
用 Hugging Face 的命令行下载它的文件:
pip install -U huggingface_hub
hf download DeepHat/DeepHat-V1-7B
然后按它的模型卡使用它。这个工具包里没有会自己运行的东西。
README.md 5 KB
同一分类里与本产品共有标签最多的已上架 Hugging Face 模型。
| 产品 | 最近 30 天下载 | 点赞 | 参数量 | 许可证 | 最近更新 |
|---|---|---|---|---|---|
| DeepHat-V1-7B 本页 | 4,315 | 309 | 7.6B | apache-2.0 | |
| Qwen2.5-Coder-14B-Instruct共有 qwen-coder · qwen2 · code | 1,860,327 | 214 | 14.8B | apache-2.0 | |
| Qwen2.5-Coder-7B-Instruct共有 qwen-coder · qwen2 · code | 1,505,999 | 872 | 7.6B | apache-2.0 | |
| Qwen2.5-Coder-32B-Instruct共有 qwen-coder · qwen2 · code | 546,583 | 2,211 | 32.8B | apache-2.0 | |
| Qwen2.5-Coder-7B共有 qwen-coder · qwen2 · code | 334,246 | 200 | 7.6B | apache-2.0 | |
| Qwen2.5-Coder-0.5B-Instruct共有 qwen-coder · qwen2 · code | 71,013 | 96 | 494M | apache-2.0 |
lmstudio-community · 工具包
面向 LM Studio 的 27B Bonsai 模型 GGUF 转换版,含 3.80 GB 的 Q1_0 语言文件和 0.93 GB 的 BF16 视觉投影器。已测试文本、视觉和并行工具调用。
LibertAIDAI · 工具包
以每权重 2.9 位的 EXL3 量化运行 DeepSeek-V4.1-Flash-1017,这是一份 196 GiB 的副本,适合在自己硬件上部署大模型的人。困惑度与原模型相差不大。
facebook · 工具包
根据文字描述或音频提示生成短音乐片段,是 facebook MusicGen 的 small 检查点。适合想在自己电脑上试用文字生成音乐的开发者和音乐爱好者。
alpindale · 工具包
用一个只有约 984 个权重的小型神经网络,为 C 源代码的每个字符打上语法高亮标签,通过一个小小的 C 程序运行。适合对手工设计的网络好奇的开发者和研究者。
prithivMLmods · 工具包
在浏览器或你自己的电脑上,用一个 Gradio 应用试用 FLUX.2 Klein 图像模型的一组 LoRA。适合制作或测试 AI 图片的人。
Sokheng · 工具包
这个模型从文档、收据和路牌照片里读取高棉语和英语文字,用一个检测器找文本行,再用识别器读每一行。适合需要在 Python 里做高棉语 OCR 的开发者。