通过简单瘦身,解决Dataworks 10M文件限制问题

887700葡京登陆 1

其次步:近期透过MaxCompute
CLI上传的能源,在Dataworks左边资源列表是找不到的,只好通过list
resources查看确认能源;

887700葡京登陆 ,第一步:大于10M的resources通过MaxCompute CLI客户端上传,

​本文为云栖社区原创内容,未经允许不得转载。回去和讯,查看更加多

缓慢解决方案:

add jar C:test_mrtest_mr.jar -f;//增添能源

作者:隐林

顾客在DataWorks上实行MapReduce作业的时候,文件大于10M的JAPAJERO和能源文件不可能上传到Dataworks,招致心有余而力不足利用调治去依期施行MapReduce作业。

list resources;//查看财富

887700葡京登陆 1

客商端配置AK、EndPoint:

客户端下载地址:

主编:

原标题:通过简单减脂,肃清Dataworks 10M文书节制难题

摘要:
用户在DataWorks上推行MapReduce作业的时候,文件大于10M的JAEvoque和能源文件无法上传到Dataworks,招致意敏不谢使用调整去准时施行MapReduce作业。
施工方案: jar -resources test_mr.

通过上述方法,大家得以在Dataworks上跑大于10M的MRAV4作业。

其三步:控食Jar,因为Dataworks实施MRAV4作业的时候,必必要本地推行,所以保留个main就足以;

发表评论

电子邮件地址不会被公开。 必填项已用*标注