码农知识堂 - 1000bd
  •   Python
  •   PHP
  •   JS/TS
  •   JAVA
  •   C/C++
  •   C#
  •   GO
  •   Kotlin
  •   Swift
  • NLP模型常见报错(定期更新)


    本人是做NLP研究方向,在写代码跑模型的时候,会遇到一些bug。总有一些bug让我苦不堪言,痛苦不堪,绞尽脑汁。为此,我将把一些遇到的bug记录下来,方便他人和自己。
    定期更新哟!!!
    1、BiLSTM模型,跑阿里天池新闻分类比赛

    训练模型第一轮epoch=1时:

    • 准确率accuracy,损失值loss,f1_score得分,还挺正常。

    但是,从训练模型第二轮即epoch=2开始:

    • 准确率accuracy变得很小且不再大幅度改变
    • 损失值loss变得很大且不再大幅度改变
    • f1_score得分变得很小且不再大幅度改变

    在这里插入图片描述

      def __getitem__(self, index):
            # train_text是一个列表,列表里面的元素仍然是列表,且列表元素是一个个分词完毕的句子,
            # eg: [ ['I','love','you','too',...], [...], [...], ... ]
            text = self.train_text[index][:]
            # train_text[index]     表示取索引为index的元素即['I','love','you','too',...]
            # 接着要将其转换成数字(word_to_num)比如['5','2','1','11',...],修改的是列表元素train_text[index]本身,相当于修改列表元素本身
    
            # train_text[index][:]  表示取索引为index的元素里面的所有内容即 ('I','love','you','too',...) 并将其赋值给text
            # 接着要将其转换成数字(word_to_num)比如('5','2','1','11',...),修改的是text,相当于修改副本
    
            # 因此,在epoch=1时,准确率accuracy,损失值loss,f1_score得分,还挺正常。
            # 但是,从第二轮即epoch=2开始,准确率accuracy变得很小且不再大幅度改变,损失值loss变得很大且不再大幅度改变,f1_score得分变得很小且不再大幅度改变,
            label = self.train_data_label[index]
    
    • 1
    • 2
    • 3
    • 4
    • 5
    • 6
    • 7
    • 8
    • 9
    • 10
    • 11
    • 12
    • 13
  • 相关阅读:
    3.rsync备份案例
    java tcp接收日志
    The Sandbox 和 Brinc 公布入选 5000 万美元元宇宙加速器计划的首批初创公司
    良好的编码习惯
    不调用三方收费接口,照样实现了识别图片为文字的功能
    第二证券|11月十大牛股出炉 特一药业163%涨幅问鼎榜首
    提高Producer的发送速度
    【面试】个人宝典 查缺补漏
    Linux命令--压缩/解压缩--使用/实例
    mysql忘记密码怎么办(附免密登录和修改密码)
  • 原文地址:https://blog.csdn.net/qq_45432276/article/details/127593487
  • 最新文章
  • 攻防演习之三天拿下官网站群
    数据安全治理学习——前期安全规划和安全管理体系建设
    企业安全 | 企业内一次钓鱼演练准备过程
    内网渗透测试 | Kerberos协议及其部分攻击手法
    0day的产生 | 不懂代码的"代码审计"
    安装scrcpy-client模块av模块异常,环境问题解决方案
    leetcode hot100【LeetCode 279. 完全平方数】java实现
    OpenWrt下安装Mosquitto
    AnatoMask论文汇总
    【AI日记】24.11.01 LangChain、openai api和github copilot
  • 热门文章
  • 十款代码表白小特效 一个比一个浪漫 赶紧收藏起来吧!!!
    奉劝各位学弟学妹们,该打造你的技术影响力了!
    五年了,我在 CSDN 的两个一百万。
    Java俄罗斯方块,老程序员花了一个周末,连接中学年代!
    面试官都震惊,你这网络基础可以啊!
    你真的会用百度吗?我不信 — 那些不为人知的搜索引擎语法
    心情不好的时候,用 Python 画棵樱花树送给自己吧
    通宵一晚做出来的一款类似CS的第一人称射击游戏Demo!原来做游戏也不是很难,连憨憨学妹都学会了!
    13 万字 C 语言从入门到精通保姆级教程2021 年版
    10行代码集2000张美女图,Python爬虫120例,再上征途
Copyright © 2022 侵权请联系2656653265@qq.com    京ICP备2022015340号-1
正则表达式工具 cron表达式工具 密码生成工具

京公网安备 11010502049817号