2024/12 2

2024년 회고

개요안녕하세요. 어느덧 글 쓰는 시점은 현재 2024년 마지막 날이며, 내일이면 새로운 한 해를 맞이하게 되네요!현재 기술 블로그도 작성 중에 있지만, 올 한 해를 되돌아보고 어떤 부분이 좋았고 개선해야 할 지를 좀 되돌아고보고자 작성해봅니다.추가로, 신년에는 무엇을 목표로 할 지도 목표를 세워보고자 합니다. (글또라는 활동을 진행한지 벌써 3개월이 다되갑니다. ㅎㅎ) 회고올해는 현재까지 살면서 가장 이벤트가 많았던 한 해였던 것 같습니다.  1분기에는 졸업 및 네이버 부스트캠프를 수행하며 역량 향상을 위해 노력했던 시간이었습니다. 그 당시, 변성윤님의 스페셜 세션이 5차례 정도 있었던 것으로 기억하는데, "유익하면서도 잠시 쉬어가는 힐링 타임"으로 현재까지도 기억에 남아 너무 좋았고, 글또라는 활동에 ..

일상 2024.12.31

[Hadoop 완벽 가이드] HDFS Federation 및 고가용성(HA)를 알아보자.

서론안녕하세요. 본 게시물에서는 빅데이터 플랫폼인 Hadoop을 공부하면서, HDFS Federation이 어떤 역할을 위해 탄생했고 활용되는지를 알아보고자 글을 작성합니다. 최근 회사에 입사한 후 어떤 개념을 먼저 공부해볼 까 고민하던 중, 동료분께서 HDFS Federation의 개념에 대해서 말씀해주셨고, 이를 한 번 공부하며 기록해보고자 합니다. 이번 게시물은 HDFS Federation 배경 및 환경 구축에 필요한 개념들을 먼저 알아가 볼 것이며, 다음 게시물에서는 실제 Local Docker 환경에서 HA / Federation이 적용된 Multi Node Cluster를 구축하는 실습 관련하여 게시물을 작성해볼 예정입니다. 한 번 시작해볼까요? HDFS Federation정의 우선, HDFS..

Apache Hadoop 2024.12.15