• gojieba在linux系统编译及运行问题总结


    gojieba包特性:

    1.其实是 封装了 C++版本的CppJieba 第三方包;

    2.内部调用了静态文件(各种utf8文件),而且不是通过embed方式调用; 编译时无法包含静态文件;运行时 会报错如下:

    表示无法打开对应的文件

    1. /go/pkg/mod/github.com/ttys3/gojieba@v1.1.3/deps/cppjieba/DictTrie.hpp:203
    2. FATAL exp: [ifs.is_open()] false
    3. open /go/pkg/mod/github.com/ttys3/gojieba@v1.1.3/dict/jieba.dict.utf8 failed.

    针对如上错误的解决方法:

    在本地开发时,因为静态文件都在固定的位置,运行时能找到对应文件,所以不会报错;

    在测试或生产环境时,因为 都是编译好后 直接运行二进制文件,无法在 对应的位置找到utf8 文件,所以报错;

    如下代码 兼容 不同环境, 在测试和生产时, 在项目运行的根目录下 新建一个dict文件夹,里面放入对应的utf8文件即可解决; 在docker部署时,通过挂载方式实现dict文件夹在宿主机供其使用;

    1. //
    2. // @Description: 初始化jieba
    3. //
    4. func SetUp() {
    5. //本地开发使用
    6. if DevelopmentStage {
    7. JiebaObj = gojieba.NewJieba()
    8. } else {
    9. //编译部署测试服,生产服使用
    10. //从程序运行的当前目录下的dict文件夹中读取utf8文件
    11. dictDir := path.Join(filepath.Dir(os.Args[0]), "dict")
    12. jiebaPath := path.Join(dictDir, "jieba.dict.utf8")
    13. hmmPath := path.Join(dictDir, "hmm_model.utf8")
    14. userPath := path.Join(dictDir, "user.dict.utf8")
    15. idfPath := path.Join(dictDir, "idf.utf8")
    16. stopPath := path.Join(dictDir, "stop_words.utf8")
    17. JiebaObj = gojieba.NewJieba(jiebaPath, hmmPath, userPath, idfPath, stopPath)
    18. }
    19. }

    linux编译方法

    针对 特性1,因为其内部包含C++代码的原因,需要 CGO_ENABLED=1 ; 

    如下在 linux系统编译对应的自身平台的文件;

    1. export GO111MODULE=on
    2. export GOPROXY=https://goproxy.io,direct
    3. GOOS=linux CGO_ENABLED=1 GOARCH=amd64 go build -ldflags="-s -w" -installsuffix cgo -o startApp main.go

    注意点:

    1.编译时尽量不要跨平台编译,因为需要安装需要额外的软件,耗时费力,而且最后还可能 编译好后,对应平台无法运行;

    相关链接:

    jieba.dict.utf8文件位置 · Issue #62 · yanyiwu/gojieba · GitHub

  • 相关阅读:
    自动化测试常见的三大问题及解决方案
    【泛型编程】模板全详解
    UWB学习——day1
    python-pytorch 如何使用python库Netron查看模型结构(以pytorch官网模型为例)0.9.1
    全双工物联网远程控制门禁设计方案
    虚幻引擎 UE5 增强输入系统
    Qt-双链表的插入及排序
    制作一个简单HTML旅游网站(HTML+CSS+JS)无锡旅游网页设计与实现8个页面
    leetcode竞赛:20220828周赛
    LeetCode 2105.给植物浇水 II
  • 原文地址:https://blog.csdn.net/rgc_520_zyl/article/details/126040494