< 文档首页
全部产品
弹性计算
存储
数据库
网络
视频与CDN
域名与网站(万网)
应用服务
互联网中间件
移动研发平台EMAS
移动研发平台EMAS-专有云
云通信
安全
大数据
人工智能
ET大脑
物联网
物联网行业方案
数字金融
管理与监控
云市场
开发者工具
解决方案
智能硬件
会员服务
更多

    处理MaxCompute数据

    更新时间：2019-05-09 13:37:51

    ★ 我的收藏
    本页目录

    PAI-DSW处理MaxCompute表数据

    PAI-DSW可以通过安装PYODPS包来与MaxCompute或者PAI-STUDIO中的数据进行通信，PYODPS是阿里云自行开发的一套python SDK。

    PYODPS地址：https://pyodps.readthedocs.io/zh_CN/latest/

    上手流程

    1.安装PYODPS

    进入DSW，打开终端，输入：

    1. pip install --user pyodps

    2.处理Maxcompute表数据

    代码示例（下方代码演示的是展示Maxcompute特定项目下的某表的前10行数据）

    1. from odps import ODPS
    2. from odps.df import DataFrame
    3. o = ODPS('*accessKey ID*', '*accesskey Secret*',project='*Maxcompute项目名*', endpoint='http://service-all.ext.odps.aliyun-inc.com/api')
    4. users = DataFrame(o.get_table('*表名*'))
    5. print(users.head(10))
    上一篇：PAI DSW简介
    下一篇：DSW大数据开发使用说明
    相关文档
    相关产品
    • 机器学习PAI
      阿里云人工智能平台，提供一站式的机器学习解决方案
    • MaxCompute
      大数据计算服务(MaxCompute，原名ODPS)是一种快速、完全托管的TB/PB级数据仓库解决方案。MaxCompute向用户提供了完善的数据导入方案以及多种经典的分布式计算模型，能够更快速的解决用户海量数据计算问题，有效降低企业成本，并保障数据安全。 诚邀您参加阿里云MaxCompute问卷调研，问卷填写大概需要花费您5-10分钟。我们将在认真填写的用户中随机抽取100名，每名用户赠送100元MaxCompute无门槛代金券。参与地址：https://survey.aliyun.com/apps/zhiliao/boGZtw_74
    • DataWorks
      新一代智慧大数据研发平台DataWorks（数据工场，原大数据开发套件）是从工作室、车间到工具集都齐备的一站式大数据工场，助力您快速完成数据集成、开发、治理、服务、质量、安全等全套数据研发工作。DataWorks + MaxCompute 在2018年获得著名分析评测机构Forrester的Cloud Data Warehouse云数据仓库世界排名第二的成绩，是唯一入选的中国产品。 DataWorks V2.0 在DataWorks V1.0的基础上新增业务流程、组件的概念，完善数据研发体系，支持双项目开发，隔离开发和生产，保证数据研发规范，减少错误代码。