码农知识堂 - 1000bd
  •   Python
  •   PHP
  •   JS/TS
  •   JAVA
  •   C/C++
  •   C#
  •   GO
  •   Kotlin
  •   Swift
  • fastgpt本地详细部署以及配置


    目录

    • 一、Docker部署
      • 1、docker安装
      • 2、docker启动
      • 3、添加用户到 docker 组:
      • 4、验证 Docker 安装:
    • 二、one_api 本地部署
      • 1、linux系统部署
      • 2、windows系统部署
    • 三、向量模型部署(m3e)
    • 四、chatglm2模型本地部署
    • 五、fastgpt模型本地部署
      • 1、下载配置文件
      • 2、文件配置--docker-compose配置和config配置
      • 3、fastgpt启动
      • 4、事务配置
    • 六、问题
      • 问题1

    一、Docker部署

    在 CentOS 上,如果您想让普通用户安装和使用 Docker,您需要执行以下步骤。请注意,这需要管理员权限(通常需要 sudo 或 root 访问权限)才能完成一些步骤。

    1、docker安装

    # 安装 Docker
    curl -fsSL https://get.docker.com | bash -s docker --mirror Aliyun
    systemctl enable --now docker
    # 安装 docker-compose
    curl -L "https://github.com/docker/compose/releases/latest/download/docker-compose-$(uname -s)-$(uname -m)" -o /usr/local/bin/docker-compose
    chmod +x /usr/local/bin/docker-compose
    # 验证安装
    docker -v
    docker-compose -v
    # 如失效,自行百度~
    
    • 1
    • 2
    • 3
    • 4
    • 5
    • 6
    • 7
    • 8
    • 9
    • 10

    2、docker启动

    一旦安装完成,您可以启动 Docker 服务并设置它在系统启动时自动启动:

    sudo systemctl start docker 
    sudo systemctl enable docker
    
    • 1
    • 2

    3、添加用户到 docker 组:

    为了允许普通用户运行 Docker 命令,您需要将用户添加到 docker 用户组。假设您的普通用户名是 yourusername:

    sudo usermod -aG docker yourusername
    
    • 1

    请注意,用户必须注销并重新登录才能在不使用 sudo 的情况下运行 Docker 命令。

    4、验证 Docker 安装:

    您可以使用以下命令验证 Docker 是否正确安装:

    docker --version
    docker-compose -v
    
    • 1
    • 2

    二、one_api 本地部署

    oneapi中的通用key,如果配置的是本地chatglm或者m3e向量模型,填以下key即可
    sk-aaabbbcccdddeeefffggghhhiiijjjkkk

    1、linux系统部署

    # 使用 SQLite 的部署命令(不用安装mysql):
    docker run --name one-api -d --restart always  -p 4000:4000 -e TZ=Asia/Shanghai -v /home/ubuntu/data/one-api:/data justsong/one-api
    # 使用 MySQL 的部署命令,在上面的基础上添加 `-e SQL_DSN="root:123456@tcp(localhost:3306)/oneapi"`,请自行修改数据库连接参数,不清楚如何修改请参见下面环境变量一节。
    # 例如:
    docker run --name one-api -d --restart always 
    • 1
    • 2
    • 3
    • 4
  • 相关阅读:
    音视频学习笔记——实现PCM和H264合成MP4功能
    layer弹出框详细说明
    c++迷宫小游戏
    论文阅读【3】Deep & Cross Network for Ad Click Predictions
    【C++】面向对象编程(三)定义一个“抽象基类”的三大步骤
    基于深度学习的苹果叶片病害检测系统(含UI界面、yolov8、Python代码、数据集)
    .NET周刊【2月第3期 2024-02-25】
    在vmware中给linux添加硬盘
    Jenkins CI/CD 持续集成专题三 Jenkins 使用shell脚本打包组件配置流程
    IDEA 高分辨率卡顿优化
  • 原文地址:https://blog.csdn.net/sinat_30353259/article/details/136596157
  • 最新文章
  • 沪漂五周年了:我越来越迷茫了
    Agentic Skill Routing 实战:别再把所有 Skill 塞进 AI Agent 上下文
    MySQL-Seconds_behind_master的精度误差
    [MAF预定义ChatClient中间件-03]CachingChatClient——利用缓存省钱省时间
    AI的至暗历史:从万众期待到被政府撤资,AI的两次死亡徘徊
    Agent OS :五种驯服不确定性的范式
    PortSwigger SQL注入LAB11
    数据库即时编译JIT
    [Begin]AI Learn Data Day 0
    深度学习进阶(二十七)现代 LLM 的核心架构设计其二:SwiGLU
  • 热门文章
  • 十款代码表白小特效 一个比一个浪漫 赶紧收藏起来吧!!!
    奉劝各位学弟学妹们,该打造你的技术影响力了!
    五年了,我在 CSDN 的两个一百万。
    Java俄罗斯方块,老程序员花了一个周末,连接中学年代!
    面试官都震惊,你这网络基础可以啊!
    你真的会用百度吗?我不信 — 那些不为人知的搜索引擎语法
    心情不好的时候,用 Python 画棵樱花树送给自己吧
    通宵一晚做出来的一款类似CS的第一人称射击游戏Demo!原来做游戏也不是很难,连憨憨学妹都学会了!
    13 万字 C 语言从入门到精通保姆级教程2021 年版
    10行代码集2000张美女图,Python爬虫120例,再上征途
小工具 小游戏
Copyright © 2022 侵权请联系2656653265@qq.com    京ICP备2022015340号-1

京公网安备 11010502049817号