MindSpore可以自定义Python数据源,通过迭代该数据源构造数据集。有点类似PyTorch的DataLoader。
相关的API可以参考:mindspore.dataset.GeneratorDataset
在ModelArt + GPU + MindSpore 1.2.0 环境下,使用GeneratorDataset接口加载自定义语音数据集,
报出如下错误:
Unexpected error. Invalid data type.
Line of code : 109
File: /home/jenkins/agent-working-dir/workspace/Compile_GPU_x86_Ubuntu_Cuda10/mindspore/mindpore/ccsrc/mindata/dataset/core/tensor.cc
原因分析:
解决办法:
这里给出一个例子,标注了几个重要的地方进行numpy 的转换,请确认相关位置的数据类型是否为numpy或tuple[numpy]
其他错误相关帖: