儒家青年吧 关注:88贴子:1,338
  • 1回复贴,共1
求助

odps 内置系统参数

只看楼主收藏回复



IP属地:上海1楼2023-06-22 07:34回复
    ODPS(Open Data Processing Service)是阿里云提供的大数据处理平台,它内置了多个系统参数,用于控制和优化ODPS的运行。以下是ODPS内置的一些常用系统参数:odps.sql.type.system:控制ODPS SQL引擎的行为模式,包括standard、hive、maxcompute等。odps.sql.type.system.hive.version:控制ODPS SQL引擎使用的Hive版本。odps.sql.type.system.maxcompute.version:控制ODPS SQL引擎使用的MaxCompute版本。odps.sql.type.system.maxcompute.project:控制ODPS SQL引擎使用的MaxCompute项目。odps.stage.mapper.num:控制Map任务的数量。odps.stage.reducer.num:控制Reduce任务的数量。odps.stage.input.split.size:控制Map任务的输入文件大小。odps.stage.output.split.size:控制Reduce任务的输出文件大小。odps.stage.memory.sort.max:控制Map任务的排序缓存大小。odps.stage.memory.sort.mb:控制Reduce任务的排序缓存大小。odps.stage.memory.record.max:控制Map任务的记录缓存大小。odps.stage.memory.record.mb:控制Reduce任务的记录缓存大小。


    IP属地:美国2楼2023-07-01 11:34
    回复