인프런 커뮤니티 질문&답변

김태욱님의 프로필 이미지

작성한 질문수

15일간의 빅데이터 파일럿 프로젝트

5.빅데이터 클러스터 구성 2 - 기본SW(하둡, 주키퍼 등) 설치

5. Cloudera Manager 구성 시 오류

24.06.01 03:32 작성

·

128

0

강의와 똑같이 설정하고 돌렸는데 위와 같은 오류들이 발생하는데 해결 방법을 모르곗습니다 ㅠㅜ

답변 1

0

인프런 AI 인턴님의 프로필 이미지

2024. 06. 01. 03:37

안녕하세요, 인프런 AI 인턴입니다.

질문자님께서 겪고 계신 “Cloudera Manager 구성 시 오류”에 대해서, 유사한 문제를 경험하신 다른 학습자의 질문과 그에 대한 지식공유자님의 답변을 찾았습니다. 이 내용이 질문자님의 문제 해결에 도움이 될 수 있을 것 같습니다.

  • 클라우데라 매니저 클러스터 오류: 이 질문에서 다른 학습자는 상태 문제가 발생했고, 지식공유자님은 경고 상태는 대부분 디스크/메모리 등의 사용량이 임계치를 넘었을 때 발생하는 일시적 경고라는 점을 설명했습니다. 상세 정보에서 “Stop”, “Shut Down”, “Error” 등의 메시지가 있다면 서비스를 재시작해보거나 원인을 파악해야 한다고 조언했습니다.

  • 클라우데라 매니저에서 자꾸 오류가 나는데 어떻게 해야 할까요??: 여기서는 네임노드 포맷 중 문제 발생 가능성과 해결 방법에 대해 설명하고 있습니다. 주로 /dfs/nn 경로의 메타정보가 꼬일 때 발생하는 문제로, 경로를 삭제하고 HDFS 및 YARN 재설치와 같은 단계를 제안했습니다.

  • 클러스터 설정 실패: 이 질문에서는 네임노드가 포맷되지 않는 이유에 대한 설명과 /dfs/nn 경로의 디렉토리 삭제 후 HDFS와 YARN을 삭제하고 재설치하는 해결 방법이 제시되었습니다.

위 링크들에서 제시된 해결 방법들이 김태욱님의 문제에 적용 가능한지 확인해보시기 바랍니다. 문제의 성격에 따라서 임계치를 넘은 리소스 사용량 조정, 서비스 재시작, 혹은 다른 설정의 재조정이 필요할 수 있습니다. 또한, 문제의 상세한 원인 파악을 위해서는 클라우데라 매니저에서 제공하는 경고나 에러 메시지의 상세 내용을 확인하는 것이 중요합니다.

저는 질문자님의 이해를 돕고자 지식공유자님의 기존 답변을 참고하여 유사한 답변 링크를 추천해드리고 있습니다.
현재 베타 기능으로 답변이 만족스럽지 않을 수 있는 점 양해 부탁드립니다. 🙏
추가적으로 궁금한 점이 있으시면, 이어서 질문해 주세요. 곧 지식공유자께서 답변해 주실 것입니다.

Big.D님의 프로필 이미지
Big.D
지식공유자

2024. 06. 01. 08:09

안녕하세요! 김태욱님!

위에 AI인턴이 저보다 더 잘 설명해 주었네요! ^^;;

대부분 해당 문제는 리소스 임계치 오류로 표기 됩니다.

하지만 셧다운, 정지, 블록깨짐, 복제계수미달 등의 오류는 실습에 문제가 되니 즈의 하셔야합니다.

편안한 주말 보내세요! - 빅디 드림