码农知识堂 - 1000bd
  •   Python
  •   PHP
  •   JS/TS
  •   JAVA
  •   C/C++
  •   C#
  •   GO
  •   Kotlin
  •   Swift
  • MaxCompute远程连接,上传、下载数据文件操作


    MaxCompute远程连接,上传数据文件

    • MaxCompute远程连接
      • 文档地址
      • 购买MaxCompute
      • 开通DataWorks
      • 创建项目
      • 远程连接
        • 注意需要有Java环境
        • 下载客户端
        • 进入配置odps_config.ini
          • 复制项目名称
          • 获取AccessKey
          • 进行验证
          • 连接地址对照表(配置end_point和tunnel_endpoint)
        • 双击打开
        • 连接成功
        • 查看表
        • tunnel文档
        • tunnel上传文件
        • tunnel下载文件
        • 创建分区表
        • 分区表上传
        • 分区表查询

    MaxCompute远程连接

    文档地址

    https://help.aliyun.com/document_detail/27971.html#section-7ce-cnh-euq

    购买MaxCompute

    在这里插入图片描述
    同意
    在这里插入图片描述

    开通DataWorks

    然后会自动让你开通DataWorks,选择免费开通基础版
    在这里插入图片描述
    在这里插入图片描述
    在这里插入图片描述
    在这里插入图片描述

    创建项目

    在这里插入图片描述
    填写信息

    在这里插入图片描述
    等待构建完成即可

    远程连接

    注意需要有Java环境

    下载客户端

    远程客户端下载

    在这里插入图片描述
    解压打开
    在这里插入图片描述

    进入配置odps_config.ini

    在这里插入图片描述

    具体配置如下:

    project_name=
    access_id=
    access_key=
    end_point=
    log_view_host=
    https_check=
    # confirm threshold for query input size(unit: GB)
    data_size_confirm=
    # this url is for odpscmd update
    update_url=
    # download sql results by instance tunnel
    use_instance_tunnel=
    # the max records when download sql results by instance tunnel
    instance_tunnel_max_record=
    # IMPORTANT:
    #   If leaving tunnel_endpoint untouched, console will try to automatically get one from odps service, which might charge networking fees in some cases.
    #   Please refer to Endpoint
    # tunnel_endpoint=
    
    # use set.<key>=
    # e.g. set.odps.sql.select.output.format=
    
    • 1
    • 2
    • 3
    • 4
    • 5
    • 6
    • 7
    • 8
    • 9
    • 10
    • 11
    • 12
    • 13
    • 14
    • 15
    • 16
    • 17
    • 18
    • 19
    • 20
    • 21

    复制项目名称

    在这里插入图片描述

    获取AccessKey

    点击创建
    在这里插入图片描述

    进行验证

    在这里插入图片描述

    在这里插入图片描述

    连接地址对照表(配置end_point和tunnel_endpoint)

    在这里插入图片描述
    在这里插入图片描述

    双击打开

    在这里插入图片描述

    连接成功

    在这里插入图片描述

    查看表

    在这里插入图片描述

    tunnel文档

    https://help.aliyun.com/document_detail/27833.html

    tunnel上传文件

    在这里插入图片描述

    tunnel下载文件

    在这里插入图片描述

    创建分区表

    以gender为分区

    create test02_p(id int,name string) partitioned by(gender string);
    alter table test02_p add if not exists partition (gender='male');
    
    • 1
    • 2

    在这里插入图片描述
    在这里插入图片描述

    分区表上传

    tunnel upload D:\2020-2024大学学习\大数据考证\实验数据\ODPS_DEMO\Resources\02-DataTransfer\t_tunnel_p.csv test02_p/gender='male';
    
    • 1

    在这里插入图片描述

    分区表查询

    select * from test02_p where gender='male';
    
    • 1

    在这里插入图片描述
    在这里插入图片描述

  • 相关阅读:
    SwiftUI 动态岛开发教程之 05 Dynamic Island 和 Live Activity 无需太多代码即可为用户提供大量信息
    [附源码]计算机毕业设计JAVA大学生评奖评优系统
    来开源吧!发布开源组件到 MavenCentral 仓库超详细攻略
    乘风破浪,遇见未来元宇宙(Metaverse)之元宇宙重要基本元素之一,虚拟数字人行业洞察报告及未来趋势
    6.S081环境配置-问题解决
    未来互联网的新篇章:深度解析Web3技术
    Golang 数据库操作
    飞桨paddlespeech语音唤醒推理C INT8 定点实现
    最大数【贪心3】
    在Win系统中创建命令
  • 原文地址:https://blog.csdn.net/qq_51553982/article/details/125420078
  • 最新文章
  • 攻防演习之三天拿下官网站群
    数据安全治理学习——前期安全规划和安全管理体系建设
    企业安全 | 企业内一次钓鱼演练准备过程
    内网渗透测试 | Kerberos协议及其部分攻击手法
    0day的产生 | 不懂代码的"代码审计"
    安装scrcpy-client模块av模块异常,环境问题解决方案
    leetcode hot100【LeetCode 279. 完全平方数】java实现
    OpenWrt下安装Mosquitto
    AnatoMask论文汇总
    【AI日记】24.11.01 LangChain、openai api和github copilot
  • 热门文章
  • 十款代码表白小特效 一个比一个浪漫 赶紧收藏起来吧!!!
    奉劝各位学弟学妹们,该打造你的技术影响力了!
    五年了,我在 CSDN 的两个一百万。
    Java俄罗斯方块,老程序员花了一个周末,连接中学年代!
    面试官都震惊,你这网络基础可以啊!
    你真的会用百度吗?我不信 — 那些不为人知的搜索引擎语法
    心情不好的时候,用 Python 画棵樱花树送给自己吧
    通宵一晚做出来的一款类似CS的第一人称射击游戏Demo!原来做游戏也不是很难,连憨憨学妹都学会了!
    13 万字 C 语言从入门到精通保姆级教程2021 年版
    10行代码集2000张美女图,Python爬虫120例,再上征途
Copyright © 2022 侵权请联系2656653265@qq.com    京ICP备2022015340号-1
正则表达式工具 cron表达式工具 密码生成工具

京公网安备 11010502049817号