Spark编程中遇到的问题

发布时间:2020年04月18日 阅读:223 次

Spark编程中遇到的问题

1 首先以为是数据量太大,然后查了一下,以为是内存溢出。

[OOM解决](https://blog.csdn.net/yhb315279058/article/details/51035631)

[driver和memory](https://blog.csdn.net/diudiu2025/article/details/78398033?depth_1-utm_source=distribute.pc_relevant.none-task-blog-BlogCommendFromBaidu-2&utm_source=distribute.pc_relevant.none-task-blog-BlogCommendFromBaidu-2)

2 改了一下,breakable{},多个循环只保留最后一个

好了。以为是循环嵌套导致的问题,但是发现求值求不对

3 最后发现是因为while循环没写i++ 导致的死循环


Tag:
相关文章

发表评论: