码农知识堂 - 1000bd
  •   Python
  •   PHP
  •   JS/TS
  •   JAVA
  •   C/C++
  •   C#
  •   GO
  •   Kotlin
  •   Swift
  • 【NumPy】数组的维度变换在DL|ML数据集处理时的妙用


    记录

            近日老师布置的作业中提供了一个csv文件,里面有59列,其中前面58个是数据的属性,也就是决定该某个该数据数据类别的58个变量,最后列是该数据的分类结果。比如:同样的数字手写体“1”和“8”,他们的属性就是形状、粗细等,类别就是对应的1, 8。

            但是当我读取完数据并且划分好了数据集,打印出训练集的shape是这样的:(28,2760)——(数据维度+数据数量)很明显这是错误的,那么该如何解决呢?


    【NumPy】数组的维度变换在DL|ML数据集处理时的妙用

    记录

    正文 

    np,swapaxes——交换维度!


    正文 

            众所皆知:对于投喂给模型(fit操作)的X(数据),Y(标签)中的X,不论是深度学习还是机器学习格式都是这样的:第一个维度都是数量,后面的维度是数据的维度,也就是数据数量+数据维度的格式。

            比如:Mnist数据中的X.shape=(70000, 28, 28)正是说有7W个(28,28)的数据,所以毫无疑问我的数据集X必须是(2760,28)——(数据数量+数据维度)而不是(28, 2760)——(数据维度+数据数量)。

           最后有一点差点忘记讲的是:数据集一般都是np.array的格式。


    np,swapaxes——交换维度!

            这个时候就终于轮到我们的正主:np,swapaxes登场啦!

    方法说明
    numpy.swapaxes(array,ax1,ax2)将数组array的维度ax1和维度ax2的数据进行调换

            刚刚我们提到,现在的数据是(数据维度+数据数量),而我的数据维度毫无疑问只是简单的1,所以说解决的办法显而易见:交换数据集维度1和维度0!

            那我们该如何去做呢?第一反可能会是用for循环之类的暴力交换,实际上,我们不需要这么麻烦,我也是想到了numpy的作者考虑到了维度交换的问题,会有这样一个函数,一查果然有!所以我们只需要在处理完数据集后对x_trian和x_test做以下操作: 

    1. x_train = np.swapaxes(x_train, 0, 1)
    2. x_test = np.swapaxes(x_test, 0, 1)

    便可以达到我们的目的。

    当然还有一种特别的情况: 就是我们的数据集是一维的,这个样子就更简单了,我们只需要:

    x_train = x_train.reshape(-1,1)

    除此之外,还有一些函数也会起到作用,在此处一一列出来,供大家参考使用!

  • 相关阅读:
    智能运维应用之道,告别企业数字化转型危机
    R语言基于h2o包构建二分类模型:使用h2o.gbm构建梯度提升机模型GBM、使用h2o.auc计算模型的AUC值
    ​LeetCode解法汇总2698. 求一个整数的惩罚数
    图像标签的使用2
    【C语言进阶篇】什么还没学会指针? 一篇文章让你彻底搞懂指针的奥秘
    suning苏宁API接入说明(苏宁商品详情+关键词搜索商品列表)
    2023最全CTF入门指南(建议收藏,文章末尾有福利)
    小插曲 -- 使用Linux编写 判断程序是否在运行的小程序
    Flutter IOS 前后台切换主题自动变化的问题
    Java 中的异常处理机制
  • 原文地址:https://blog.csdn.net/qq_51831335/article/details/127595006
  • 最新文章
  • polygon出题教程
    Manim物理模拟:别自己写欧拉了!
    AI 学习笔记:Agent 的应用演示
    分享一个CAN报文编辑器软件
    MiniCPM-V 4.6 部署实战:基于 GPUStack 与 SGLang 的端侧多模态模型部署
    用 FRP 打通云服务器与本地 Ubuntu,让 Codex 远程调试本地硬件
    软考 - 架构设计师 知识点总结
    给 FastApiAdmin 加个“会议纪要”模块,我把后端二次开发的坑踩了个遍
    聊一聊 MES系统如何实现多种标签打印并支持不同打印机
    断尺问题:戴德金分割现实悖论
  • 热门文章
  • 十款代码表白小特效 一个比一个浪漫 赶紧收藏起来吧!!!
    奉劝各位学弟学妹们,该打造你的技术影响力了!
    五年了,我在 CSDN 的两个一百万。
    Java俄罗斯方块,老程序员花了一个周末,连接中学年代!
    面试官都震惊,你这网络基础可以啊!
    你真的会用百度吗?我不信 — 那些不为人知的搜索引擎语法
    心情不好的时候,用 Python 画棵樱花树送给自己吧
    通宵一晚做出来的一款类似CS的第一人称射击游戏Demo!原来做游戏也不是很难,连憨憨学妹都学会了!
    13 万字 C 语言从入门到精通保姆级教程2021 年版
    10行代码集2000张美女图,Python爬虫120例,再上征途
小工具 小游戏
Copyright © 2022 侵权请联系2656653265@qq.com    京ICP备2022015340号-1

京公网安备 11010502049817号