這篇文章主要記錄下spark中遇到的各種問題,以及解決方法(以後會持續的更新)
1.File does not exist. Holder DFSClient_NONMAPREDUCE_-67513653_1 does not have any open files
今天早上發現程序報了一個這個錯誤,目前還沒找到報錯的原因,先記錄一下吧.
2.org.apache.kafka.clients.consumer.OffsetOutOfRangeException: Offsets out of range with no configured reset policy for partitions
這個報錯是因爲startoffest越界了,在設置offest的判斷一下就好了.