码农知识堂 - 1000bd
  •   Python
  •   PHP
  •   JS/TS
  •   JAVA
  •   C/C++
  •   C#
  •   GO
  •   Kotlin
  •   Swift
  • 读懂Json文件[妈妈再也不用担心我不读懂了]


    第一次见到它,我特别害怕,
    在这里插入图片描述
    很大一个文件,还是二进制的,是什么意思呢?该文件是深度学习模型训练完成之后由模型的输出数据保存的结果数据;

    在线JSON编译器

    JSON Editor Online
    把文件传上去!
    发现是一个大大的dictinary,
    在这里插入图片描述
    回忆起,在代码里保存的时候,使用的是长这样的语句:

    final_logs = logger.get_logs()
    print('\nSaving session data to {}/logs.json'.format(P['save_path']))
    with open(os.path.join(P['save_path'], 'logs.json'), 'w') as f:
        json.dump(final_logs, f)
    
    • 1
    • 2
    • 3
    • 4

    其中logger类如下所示(其他函数未展示)

    class train_logger:
        
        '''
        An instance of this class keeps track of various metrics throughout
        the training process.
        '''
        
        def __init__(self, params):
            
            self.params = params
            
            # epoch-level objects:
            self.best_stop_metric = -np.Inf
            self.best_epoch = -1
            self.running_loss = 0.0
            self.num_examples = 0
            
            # batch-level objects:
            self.temp_preds = []
            self.temp_true = [] # true labels
            self.temp_obs = [] # observed labels
            self.temp_indices = [] # indices for each example
            self.temp_batch_loss = []
            self.temp_batch_reg = []
            
            # output objects: 
            self.logs = {}
            self.logs['metrics'] = {}
            self.logs['best_preds'] = {}
            self.logs['gt'] ={}
            self.logs['obs'] = {}
            self.logs['targ'] = {}
            self.logs['idx'] = {}
            for field in self.logs:
                for phase in ['train', 'val', 'test']:
                    self.logs[field][phase] = {}
    
    • 1
    • 2
    • 3
    • 4
    • 5
    • 6
    • 7
    • 8
    • 9
    • 10
    • 11
    • 12
    • 13
    • 14
    • 15
    • 16
    • 17
    • 18
    • 19
    • 20
    • 21
    • 22
    • 23
    • 24
    • 25
    • 26
    • 27
    • 28
    • 29
    • 30
    • 31
    • 32
    • 33
    • 34
    • 35
    • 36

    再不敏感,也在铺天盖地里的中括号[]看出来了,使用的是dictionary类型的变量,最后保存在logs.json文件中;

    怎么使用呢?

    可以试着读取logs.json,通过用log['key1']['key2']的方式读取其中的值,打印出来看看,这下就觉得不过如此,原来那么大的json文件,细想来就是一个字典而已;

  • 相关阅读:
    类加载和字节码技术篇
    ES实现三表关联查询+条件过滤
    关于SELECT...FOR UPDATE到底锁表还是锁行
    Clickhouse on S3 部署方案
    上线周期缩短上百倍!NLP流水线系统发布,10分钟搭建检索、问答等复杂系统
    SpringBoot——指标监控,自定义指标监控
    纯js实现录屏并保存视频到本地的尝试
    20个Java集合面试问题和答案
    安装typescript环境并开启VSCode自动监视编译ts文件为js文件
    Vue知识点---Vuex、路由
  • 原文地址:https://blog.csdn.net/weixin_44092088/article/details/133999724
  • 最新文章
  • 沪漂五周年了:我越来越迷茫了
    Agentic Skill Routing 实战:别再把所有 Skill 塞进 AI Agent 上下文
    MySQL-Seconds_behind_master的精度误差
    [MAF预定义ChatClient中间件-03]CachingChatClient——利用缓存省钱省时间
    AI的至暗历史:从万众期待到被政府撤资,AI的两次死亡徘徊
    Agent OS :五种驯服不确定性的范式
    PortSwigger SQL注入LAB11
    数据库即时编译JIT
    [Begin]AI Learn Data Day 0
    深度学习进阶(二十七)现代 LLM 的核心架构设计其二:SwiGLU
  • 热门文章
  • 十款代码表白小特效 一个比一个浪漫 赶紧收藏起来吧!!!
    奉劝各位学弟学妹们,该打造你的技术影响力了!
    五年了,我在 CSDN 的两个一百万。
    Java俄罗斯方块,老程序员花了一个周末,连接中学年代!
    面试官都震惊,你这网络基础可以啊!
    你真的会用百度吗?我不信 — 那些不为人知的搜索引擎语法
    心情不好的时候,用 Python 画棵樱花树送给自己吧
    通宵一晚做出来的一款类似CS的第一人称射击游戏Demo!原来做游戏也不是很难,连憨憨学妹都学会了!
    13 万字 C 语言从入门到精通保姆级教程2021 年版
    10行代码集2000张美女图,Python爬虫120例,再上征途
小工具 小游戏
Copyright © 2022 侵权请联系2656653265@qq.com    京ICP备2022015340号-1

京公网安备 11010502049817号