• 四步快速配置一个简单高效的文本生成图像基准模型 T2I baseline


    本文将介绍一个简单高效的文本生成图像基准模型,该基准模型是DF-GAN20版代码,清楚简单,实用性高,本基准模型代码在他的基础上经过少量简化和处理,虚拟环境也进行了打包,非常适合作为一个基线模型,然后在其上进行对应创新。

    一、下载代码

    代码地址:https://github.com/Heavenhjs/demot2i.git
    下载方法:git clone https://github.com/Heavenhjs/demot2i.git或者进入github下载压缩包
    下载后的代码结构如下:
    在这里插入图片描述
    其中:code文件夹放置模型主要代码,data放置数据集(如bird、coco),DAMSMencoders放置已经训练好的文本编码器和图像编码器。

    二、配置虚拟环境

    点击下载已经打包好的虚拟环境demoEnv,将其放到Anaconda安装目录下的envs中,无需解压。比如D:\Anaconda3\envs:
    在这里插入图片描述
    放入之后可以在anaconda prompt或者pycharm终端中输入:conda info --envs,如果显示有demoEnv则成功导入虚拟环境:
    在这里插入图片描述

    三、配置数据集

    数据集已经打包上传至OneDrive,下载数据集CUB-Bird,替换代码项目的data文件夹:
    在这里插入图片描述

    四、开始运行

    最终配置好的项目结构如下:
    在这里插入图片描述
    其中code/cfg里的yml文件存放模型的一些参数,code/miscc文件夹存放模型的选项和工具函数,DAMSM是深度注意多模态相似模块,dataset用于处理数据和加载dataloader,main是项目的入口文件,model是模型文件。

    运行:
    1、激活demoEnv环境:conda activate demoEnv
    2、进入code目录,开始运行,模型进入训练:python main.py --cfg cfg/bird.yml
    3、训练好了之后,将code/cfg/bird.yml中的B_VALIDATION 改为True,然后进入采样:python main.py --cfg cfg/bird.yml

    最后

    💖 个人简介:人工智能领域研究生,目前主攻文本生成图像(text to image)方向

    📝 关注我:中杯可乐多加冰

    🔥 限时免费订阅:文本生成图像T2I专栏

    🎉 支持我:点赞👍+收藏⭐️+留言📝

    如果这篇文章帮助到你很多,希望能点击下方打赏我一杯可乐!多加冰哦

  • 相关阅读:
    【Unity】因为获取安卓ID等隐私数据无法通过审核解决思路
    Maven
    Windows10环境下Python 开发环境搭建
    Github主页无法打开和Assets转圈
    习题:数组(一)
    Deep Residual Learning for Image Recognition--Kaiming He
    面试算法22:链表中环的入口节点(1)
    本地Image Registry Harbor安装
    Feign接口调用GET请求@RequestParam传参丢失
    STC 32位8051单片机开发实例教程 一 开发环境搭建
  • 原文地址:https://blog.csdn.net/air__Heaven/article/details/126117813