更新时间:2025-03-04 gmt 08:00

使用pycharm上传数据至notebook-九游平台

不大于500mb数据量,直接复制至本地ide中即可。

大于500mb数据量,请先上传到obs中,再从obs下载到云上notebook。

图1 数据通过obs中转上传到notebook
  1. 上传数据至obs,具体操作请参见上传文件至obs桶
  2. 将obs中的数据传至notebook中,通过在本地ide的terminal中使用modelarts提供的moxing库的文件操作api(mox.file.copy_parallel)完成。
    1. 在pycharm环境中开启terminal,vs code中操作类似。
      图2 pycharm环境开启terminal
    2. 在本地ide的terminal中使用moxing上传obs文件到notebook的操作示例如下:
      #手动source进入开发环境
      cat /home/ma-user/readme
      #然后选择要source的环境
      source /home/ma-user/miniconda3/bin/activate mindspore-python3.7-aarch64
      #输入python并回车,进入python环境
      python
      #使用moxing
      import moxing as mox  
      #下载一个obs文件夹,从obs下载至evs(obs -> evs) 
      mox.file.copy_parallel('obs://bucket_name/sub_dir_0', '/tmp/sub_dir_0')  

相关文档

网站地图