資源操作odps精品文章

• 

  阿里云大數(shù)據(jù)MaxCompute計(jì)算資源分布以及LogView分析優(yōu)化

  ...r處理所有RESTful請(qǐng)求，包括用戶空間（project）管理操作、資源（resource）管理操作、作業(yè)管理等，對(duì)于SQL DML、MR、DT等啟動(dòng)Fuxi任務(wù)的作業(yè)，會(huì)提交Scheduler進(jìn)一步處理； Scheduler負(fù)責(zé)instance的調(diào)度，包括將instance分解為task、對(duì)等待提...

  raise_yang 2019-06-25 18:31 評(píng)論0 收藏0
• 

  MaxCompute助力OSS支持EB級(jí)計(jì)算力

  ...費(fèi)表 CREATE EXTERNAL TABLE IF NOT EXISTS oms_oss_0504 ( 月份 string, 資源擁有者 string, 消費(fèi)時(shí)間 string, 消費(fèi)類型 string, 賬單編號(hào) string, 商品 string, 計(jì)費(fèi)方式 string, 服務(wù)開始時(shí)間 string, 服務(wù)結(jié)束時(shí)間 string, 服務(wù)時(shí)長(zhǎng) string, 財(cái)務(wù)核算單元 strin...

  Enlightenment 2019-06-24 18:02 評(píng)論0 收藏0
• 

  使用 MaxCompute（原ODPS） java sdk 運(yùn)行安全相關(guān)命令

  ...直白一點(diǎn)，以下列關(guān)鍵字開頭的命令，都是 odps 安全相關(guān)操作命令： GRANT/REVOKE ... SHOW GRANTS/ACL/PACKAGE/LABEL/ROLE/PRINCIPALS SHOW PRIV/PRIVILEGES LIST/ADD/REOVE USERS/ROLES/TRUSTEDPROJECTS DROP/CREATE ROLE CLEAR EXPIRED...

  binaryTree 2019-08-16 11:07 評(píng)論0 收藏0
• 

  使用 MaxCompute（原ODPS） java sdk 運(yùn)行安全相關(guān)命令

  ...直白一點(diǎn)，以下列關(guān)鍵字開頭的命令，都是 odps 安全相關(guān)操作命令： GRANT/REVOKE ... SHOW GRANTS/ACL/PACKAGE/LABEL/ROLE/PRINCIPALS SHOW PRIV/PRIVILEGES LIST/ADD/REOVE USERS/ROLES/TRUSTEDPROJECTS DROP/CREATE ROLE CLEAR EXPIRED...

  wangdai 2019-06-21 16:42 評(píng)論0 收藏0
• 

  PyODPS 中使用 Python UDF

  ...n.dumps(d) 假設(shè)這個(gè)文件叫 my.py，接下來(lái)我們就需要?jiǎng)?chuàng)建 py 資源。 r = o.create_resource(csv_to_json.py, py, fileobj=open(my.py)) fileobj 參數(shù)也可以是 str 類型，就是表示文件的內(nèi)容 接著我們就可以創(chuàng)建 Python UDF 了。 o.create_function(csv_to_json,...

  evin2016 2019-07-30 15:33 評(píng)論0 收藏0
• 

  PyODPS 中使用 Python UDF

  ...n.dumps(d) 假設(shè)這個(gè)文件叫 my.py，接下來(lái)我們就需要?jiǎng)?chuàng)建 py 資源。 r = o.create_resource(csv_to_json.py, py, fileobj=open(my.py)) fileobj 參數(shù)也可以是 str 類型，就是表示文件的內(nèi)容 接著我們就可以創(chuàng)建 Python UDF 了。 o.create_function(csv_to_json,...

  jcc 2019-07-30 15:33 評(píng)論0 收藏0
• 

  MaxCompute讀取分析OSS非結(jié)構(gòu)化數(shù)據(jù)的實(shí)踐經(jīng)驗(yàn)總結(jié)

  ...是說(shuō)Mapper個(gè)數(shù)越多越好，因?yàn)檫@樣可能會(huì)造成較長(zhǎng)時(shí)間的資源等待，或者可能會(huì)造成長(zhǎng)尾的后續(xù)Reducer任務(wù)，反而降低整體的計(jì)算效率） 。 同樣道理，對(duì)OSS上的文本文件進(jìn)行解析的時(shí)候，也可以通過(guò)設(shè)置 odps.sql.unstructured.data.split...

  robin 2019-08-16 12:32 評(píng)論0 收藏0