728x90 spark FileNotFoundException1 [Spark] Spark & ulimit error 리눅스 환경에서 spark job 실행 중 파일 관련 에러가 발생했습니다.[ERROR] 2023-10-04 16:55:02.419 [ 205] - Exception in task 6.0 in stage 15.0 (TID 115) java.io.FileNotFoundException: /tmp/blockmgr-e08af927-6eba-4f73-9857-5811f088c13e/38/temp_shuffle_68c81ce9-02d6-4f80-9e46-a8e3f1a0cfa1 (Too many open files) at java.io.FileOutputStream.open0(Native Method) ~[?:1.8.0_192] at java.io.FileOutputStream.open(FileOutputStream.. 2023. 10. 15. 이전 1 다음 728x90