暂无个人介绍
2024年05月
没有访问临时目录的权限或者临时目录满了,看看fs.oss.tmp.data.dirs或者说spark.hadoop.fs.oss.tmp.data.dirs配了什么?如果没改过,那就是/tmp/的问题,此回答整理自钉群“JindoData 用户交流群”
开放nodeport端口 ,此回答整理自钉群“Nacos社区群(1群满,请加4群:12810027056)”
可以参考这个文档 https://help.aliyun.com/zh/oss/user-guide/batch-processing , 对于图片可以通过制定过滤规则里的文件后缀的方式来限定,这种方式暂时还不支持,我们收到这个需求反馈给产品评估哈 ,此回答整理自钉群“智能媒体管理官网客户群②”
可以参考下这个文档 https://help.aliyun.com/zh/imm/developer-reference/go-sdk?spm=a2c4g.11186623.0.i1 ,此回答整理自钉群“智能媒体管理官网客户群②”
不会的,以实际的打包过程为准,我这边看打包的任务已经完成了 ,此回答整理自钉群“智能媒体管理官网客户群②”
是的,这个文件会有具体的格式,然后这样的话,总打包的文件数可以到8w个 ,此回答整理自钉群“智能媒体管理官网客户群②”
我们这边看压缩任务应该是成功了,只是发送异步消息有些问题,是因为输入的文件太多了导致的,解决办法可以是通过SourceManifestURI指定文件清单的办法。
另一块就是,您提到的这个产生的压缩包无法解压的问题,这个我们还需要在看一下,因为现在看压缩任务是成功了的,不应该会出现压缩包无法打开的问题 ,此回答整理自钉群“智能媒体管理官网客户群②”
用tunnel。https://help.aliyun.com/zh/maxcompute/user-guide/tunnel-command-and-tunnel-sdk/?spm=a2c4g.11186623.0.0.196d11c1fbI3Hn&shareId=031508800d86009472e60842d18beeb0 ,此回答整理自钉群“MaxCompute开发者社区2群”
https://help.aliyun.com/zh/maxcompute/user-guide/stddev?spm=a2c4g.11186623.0.i3 ,此回答整理自钉群“MaxCompute开发者社区2群”
reduce阶段的mem和num设置大一些再看看https://help.aliyun.com/zh/maxcompute/user-guide/flag-parameters?spm=a2c4g.11186623.0.0.1ab532bfCVqk07 ,此回答整理自钉群“MaxCompute开发者社区2群”
看下mapjoin:https://help.aliyun.com/zh/maxcompute/user-guide/mapjoin-hints?spm=a2c4g.11186623.0.i57#section-cmz-kbp-e9u
你把online关了再重跑一下Fuxi Job的两种作业类型:Online Job(service mode)和Offline Job。对于Offline的作业而言,当每次提交作业时在Fuxi上都会有一个环境准备的时间,针对大数据量并且不需要返回查询结果的作业比较合适,而对小数据量并且实时作业要求比较高的作业是不合适的。所以Fuxi提供为什么ServiceMode这种准实时的作业形式,也是online,首先会有一个服务去预先申请计算一些资源并加载出来,比如会预先分配一 万个nstance,当有作业提交时会根据作业规模分配一些Instance进行执行,这样就省去环境准备的时间,所以就会比较快。online不等资源且不保证成功。如果service mode失败,比如instance个数超过1000,或者运行超过10分钟,就会退回以Offline模式重跑。可以set odps.service.mode=off;这样就直接跑完了,不会再跑online ,此回答整理自钉群“MaxCompute开发者社区2群”
会,参考下:https://help.aliyun.com/zh/maxcompute/use-cases/check-whether-partition-pruning-is-effective?spm=a2c4g.11186623.0.i36#section-ebd-cyd-5db ,此回答整理自钉群“MaxCompute开发者社区2群”
是,主账号给一下管理员权限。 ,此回答整理自钉群“MaxCompute开发者社区2群”
标准模式下,可以选择已有的project作为开发环境,同时可以选择已有的project作为生产环境。你可以创建一下试试
,此回答整理自钉群“MaxCompute开发者社区2群”
不支持 ,此回答整理自钉群“MaxCompute开发者社区2群”
抱歉,目前还不支持powerbi直连maxcompute ,此回答整理自钉群“MaxCompute开发者社区2群”
文档暂时没有odbc连接MaxCompute的方式。 ,此回答整理自钉群“MaxCompute开发者社区2群”
用odpscmd试一下:https://help.aliyun.com/zh/maxcompute/user-guide/maxcompute-client?spm=a2c4g.11186623.0.i106
或者有DataWorks吗,在DataWorks用SQL节点加上参数重新试一下。
set odps.namespace.schema=true;这个参数没有加上,就会导致上边的报错。图里的租户级schema语法开关,和租户级别Information Schema,是两个概念。可以查看下这里的说明:https://help.aliyun.com/zh/maxcompute/product-overview/new-feature-trial-request?spm=a2c4g.11186623.0.i126#section-wa6-mdl-9w8![lQLPJx6c9t2Md93NBAzNB4CwvpExCZuhULgGMHwfdfmVAA_1920_1036.png](https://ucc.alicdn.com/pic/developer-ecology/4lehqtekv3qbw_25a4c8303d824b5088bf4dd637d701be.png)
我看了你上边报错的log view,没有加上set odps.namespace.schema=true; 选中两条SQL一起点运行
在MaxCompute的SQL分析界面、DataWorks的SQL节点 执行带有参数的SQL时,需要全部选中一起点运行;
如果在odpscmd客户端执行,当前窗口内,一般执行一次就能生效:https://help.aliyun.com/zh/maxcompute/user-guide/maxcompute-client?spm=a2c4g.11186623.0.i132 ,此回答整理自钉群“MaxCompute开发者社区2群”
主账号就照着步骤,复制粘贴授权就行。 ,此回答整理自钉群“MaxCompute开发者社区2群”
那得参考下开源python的逻辑,连接上MySQL再操作。 ,此回答整理自钉群“MaxCompute开发者社区2群”