金牛豆豆

关注

Spark orderBy OOM / 执行时间超长

金牛豆豆

关注

阅读 9

2024-01-02


比如
order by long_columnorder by double_column 执行时间超长,或者内存溢出

原因:
排序的列里有NaN值(极大值),可能是 有除法里分母为0导致的。

另外,count()也可能因为列里有NaN值而OOM


相关推荐

weednoah

获得进程执行时间

weednoah 69 0 0

生态人

查看脚本执行时间

生态人 98 0 0

b91bff6ffdb5

apache修改执行时间

b91bff6ffdb5 113 0 0

悲催博士僧

python 函数执行时间

悲催博士僧 74 0 0

陬者

打印函数执行时间

陬者 86 0 0

Villagers

计算python执行时间

Villagers 133 0 0

快乐与微笑的淘气

nodejs 代码自检(执行时间)

快乐与微笑的淘气 54 0 0

Xin_So

php计算代码执行时间

Xin_So 150 0 0

guanguans

java计算代码执行时间

guanguans 95 0 0

small_Sun

js程序执行时间顺序

small_Sun 69 0 0

精彩评论(0)

0 0 举报