探索腾讯混元-DiT:国产文生图开源模型的无限可能

⭐发布日期:2024年10月04日 | 来源:抖音

⭐作者:岳跃 责任编辑:Admin

⭐阅读量:361 评论:7人

【二四六天下彩天天免费大全】

【今晚澳门六开彩结果和查询】

【新澳门内部资料精准大全有购买吗】 【2021澳门天天开彩】 【今期澳门三肖三码开一码】 【新澳精选资料免费提供】 【天天彩澳门天天彩】 【打开澳门六开彩免费】 【澳门一肖中100%期期准】 【二四六香港资料期期准】
【最准的一肖一码100%】 【香港好彩二四六免费资料大全澳门】 【最精准澳门天天彩资料】 【香港二四六免费资料唯美图库】 【澳门精准免费码资料大全】 【澳门管家婆免费资料查询】 【澳门正版资料大全免费更新】 【王中王100%期期准澳彩精准澳门网站】

你是否曾经想过,用中文诗词来描绘出美丽的图画?你是否曾经想过,让 AI 模型更好地理解和生成中文文本?你是否曾经想过,在 win10 系统上本地部署一个强大的文生图模型,享受创作的乐趣?如果你有这样的想法,那么你一定不能错过腾讯混元-DiT,这是一个国产的文生图开源模型,它具有以下特点:

中英文双语 DiT 架构

Hunyuan-DiT 是潜在空间中的扩散模型,如下图所示。根据潜在扩散模型,我们使用预训练的变分自动编码器 (VAE) 将图像压缩到低维潜在空间,并训练扩散模型以使用扩散模型学习数据分布。我们的diffusion扩散模型使用转换器transformer进行参数化。为了对文本提示进行编码,我们利用预训练的双语(英语和中文)CLIP 和多语言 T5 编码器的组合。

多轮 Text2Image 生成

理解自然语言指令并与用户进行多轮交互对于文本转图像系统非常重要。它可以帮助构建一个动态且可迭代的创作过程,逐步将用户的想法变为现实。研发团队训练 MLLM(多模态LLM) 来理解多轮用户对话并输出新的文本提示,用于图像生成,用来支撑混元-DiT模型进行多轮对话和图像生成的能力

如果你对腾讯混元-DiT 感兴趣,那么你可以按照以下步骤进行 win10 本地部署体验:

01.准备工作:

你需要一台 win10 系统的电脑,并且安装了 Python 3.10 及以上版本,以及 TensorFlow 2.13 及以上版本。你还需要下载腾讯混元-DiT 的开源代码和模型权重,你可以在官网地址或GitHub 项目地址上找到它们。

https://github.com/tencent/HunyuanDiT

02. 安装依赖:你需要在命令行中运行以下命令,安装腾讯混元-DiT 的依赖库:

git clone https://github.com/tencent/HunyuanDiT

d ./HunyuanDiT python -m pip install -q -r requirements.tx

03. 安装flash-attention适合win依赖

https://github.com/bdashore3/flash-attention/releases

pip install

flash_attn-2.5.8+cu122torch2.3.0cxx11abiFALSE-cp310-cp310-win_amd64.whl

这里注意,需要安装PyTorch2.1.x和cuda 12.x。具体选择哪个下载,需要先运行pip debug --verbose,根据输出里面的Compatible tags来选择兼容的wheel文件。

04. 模型下载

python -m pip install -q "huggingface_hub[cli]" mkdir ckpts huggingface-cli download Tencent-Hunyuan/HunyuanDiT --local-dir ./ckpts

05. 代码修改

这里app/hydit_app.py需要修改代码,默认使用443端口可能会被占用。同时,如果有请gradio依赖版本报错,请根据提示版本pip安装。

if __name__ == "__main__": interface = ui() interface.launch(server_name="0.0.0.0", server_port=7875, share=True) interface.launch(server_name="127.0.0.1", server_port=7875, share=False, inbrowser=True)

06. WebUI推理

针对低显存建议使用参数 --no-enhance,否则出图速度很慢(24G显存一张图需要超过12分钟

# Using Flash Attention for acceleration. --infer-mode fa

# Start with English UI python app/hydit_app.py --no-enhance --lang en --infer-mode fa # By default, we start a Chinese UI.sh #python app/hydit_app.py --no-enhance --lang zh --infer-mode fa

07. 部署过程报错问题解决

1、DLL load failed while importing awq_inference_engine报错如下

File "C:\Users\Administrator\pinokio\bin\miniconda\lib\site-packages\awq\modules\linear.py", line 4, in <module> import awq_inference_engine # with CUDA kernelsImportError: DLL load failed while importing awq_inference_engine: 找不到指定的模块。

解决方法:

https://github.com/oobabooga/text-generation-webui/issues/4253git clone https://github.com/casper-hansen/AutoAWQ -c http.proxy="http://127.0.0.1:2081"cd AutoAWQpip install -e .

2、修改默认迭代步数,同时请不要开启文本增强否则会报错如下

NotImplementedError: Cannot copy out of meta tensor; no data!

3、

No module named

transformers.models.starcoder2 报错如下ModuleNotFoundError: No module named transformers.models.starcoder2

解决方法:

pip install --upgrade transformers

WebUI界面

打开浏览器输入local URL: http://0.0.0.0:7875,或者public URL:

https://2278a840a9f6bc4a3a.gradio.live

输入文本:你可以在文本描述中输入文本,例如“床前明月光,疑是地上霜”,然后提交生成。

生成图像:腾讯混元-DiT 会根据你输入的文本,生成一张相应的图像,并显示在屏幕上。你可以保存这张图像,或者继续输入其他文本,生成更多的图像。

通过以上步骤,你就可以在 win10 系统上本地部署和体验腾讯混元-DiT 了。你可以用它来创作各种有趣和有创意的作品,例如中文诗词绘图、故事插图、艺术设计等。你也可以将你的作品分享给其他人,让他们欣赏和评价你的才华。

腾讯混元-DiT 是一个非常有潜力和价值的文生图开源模型,它为中文语言处理和图像生成领域带来了新的突破和机遇。如果你是一个对 AI 技术感兴趣的开发者或创作者,那么你一定不要错过这个模型。快来下载和使用腾讯混元-DiT 吧,让你的创意和想象飞翔!

【2024澳门天天开好彩大全免费】 【新澳天天开奖资料大全最新】
【2024年天天开好彩资料】 【新澳天天开奖资料大全最新54期】
【2024澳门天天开好彩大全53期】 【澳门天天开彩期期精准】
【2024全年资料免费大全】 【新澳天天开奖资料大全】
【澳门内部最精准免费资料】 【2024澳门天天开好彩大全】
【2024年新奥门天天开彩免费资料】 【新澳2024今晚开奖资料】 【澳门天天彩期期精准】
上一条新闻 下一条新闻

推荐文章

发表评论

张文池

6秒前:解决方法:https://github.

IP:90.89.4.*

芮萌

9秒前:02.

IP:27.85.1.*

乔治娜·赖兰斯

1秒前:如果你是一个对 AI 技术感兴趣的开发者或创作者,那么你一定不要错过这个模型。

IP:46.88.5.*

抖音APP介绍

APP图标

新澳精准资料免费提供630期APP名:抖音

版本:V5.56.750

更新时间:2024-10-03 19:14

2024年新澳结果这是一个功能强大的2024新澳门历史结果APP,可以帮助你完成各种任务。包括最新24小时热点资讯,今日最新:找不到指定的模块。

2024新澳门原料免费462APP介绍

APP图标

2024今晚澳门开特马APP名:抖音

版本:V2.22.303

更新时间:2024-10-03 17:15

一肖一码100%澳门这是一个功能强大的香港二四六开彩资料大全302期APP,可以帮助你完成各种任务。包括最新24小时热点资讯,今日最新:你是否曾经想过,用中文诗词来描绘出美丽的图画?

澳门一肖一码必中一肖一码APP介绍

APP图标

新澳好彩免费资料查询2024APP名:抖音

版本:V5.54.283

更新时间:2024-10-03 24:17

2024澳门六开彩结果查询这是一个功能强大的澳门王中王100%期期中APP,可以帮助你完成各种任务。包括最新24小时热点资讯,今日最新:x和cuda 12.

www29357.Com澳门彩APP介绍

APP图标

澳门一肖一码100准免费资料APP名:抖音

版本:V7.34.502

更新时间:2024-10-03 21:16

新奥门资料大全免费新鼬这是一个功能强大的澳门资料大全APP,可以帮助你完成各种任务。包括最新24小时热点资讯,今日最新:proxy="http://127.

澳门正版资料大全有哪些APP介绍

APP图标

2024新奥资料免费精准051APP名:抖音

版本:V8.48.343

更新时间:2024-10-03 19:17

澳门最准资料免费网站2这是一个功能强大的新澳精准资料免费提供510期APP,可以帮助你完成各种任务。包括最新24小时热点资讯,今日最新:如果你对腾讯混元-DiT 感兴趣,那么你可以按照以下步骤进行 win10 本地部署体验:

二四六天好彩(944cc)免费资料大全APP介绍

APP图标

2o24年澳门一肖一马期期准APP名:抖音

版本:V7.66.474

更新时间:2024-10-03 23:23

澳门正版准最快免费资料这是一个功能强大的澳门最精准免费资料大全98期APP,可以帮助你完成各种任务。包括最新24小时热点资讯,今日最新:针对低显存建议使用参数 --no-enhance,否则出图速度很慢(24G显存一张图需要超过12分钟)

新澳结果资料查询29期APP介绍

APP图标

澳门资料大全正版资料2024年免费APP名:抖音

版本:V3.20.458

更新时间:2024-10-03 21:17

新澳门正版资料这是一个功能强大的澳门资料大全正版资料查询器APP,可以帮助你完成各种任务。包括最新24小时热点资讯,今日最新:通过以上步骤,你就可以在 win10 系统上本地部署和体验腾讯混元-DiT 了。

澳门资料免费大全APP介绍

APP图标

马会传真资料大全APP名:抖音

版本:V7.91.855

更新时间:2024-10-03 24:24

新澳门资料大全免费新鼬077这是一个功能强大的新澳门六开彩结果2024年APP,可以帮助你完成各种任务。包括最新24小时热点资讯,今日最新:python -m pip install -q -r requirements.