시중 대형 건설사 빅데이터 플랫폼 구축

📉 관리되지 않은 고객사 로그

고객으로부터 로그 규격을 받고 실제 로그를 보았으나, 상당히 많은 로그가 문서와는 달랐고 구조 역시 이해할 수가 없었습니다. 고객사에서 파악하고 싶어도 관련된 회사가 망하거나 로그를 발생시키는 기기가 단종되어 손을 쓸 수 없었습니다.

⚠️ 도입한 기술의 약점 판단 미스

수주 당시 ELK Stack 기반으로 빅데이터 플랫폼을 개발하기로 되어 있었고, 실제 프로젝트 내에서 제가 맡은 역할도 Kibana 기반으로 데이터를 시각화하는 BI 기획 및 개발이었습니다. 그러나 실제 해당 솔루션은 그런 용도보다는 시스템 로그 모니터링에 적절했고, 복수의 여러 페이지를 옮기거나 선택지를 변경하는 등 웹 환경에서 기본적으로 되어야 하는 것들이 잘 동작하지 않았습니다.

🧩 관련 배경 지식 부재

저는 원래 IT 백그라운드가 아니었으나, IT 회사로 와서 그것도 갑작스럽게 프로젝트 팀에 투입되었습니다. 당연히 빅데이터가 뭔지도 모르고, ELK Stack이나 AWS 같은 기술이 무엇인지도 전혀 모르는 상황이었습니다. 아키텍처나 문서를 봐도 무슨 말인지 전혀 이해할 수가 없었습니다.

🧭 A. 빠른 적응과 역할 탐색

• ■

  자체적인 학습과 러닝: 당연히 이 많은 지식들은 누군가가 떠먹여 주는 것이 아니었습니다. 그래서 무슨 말인지는 몰랐지만 직접 툴을 조작해 보고, 데이터를 보고 뭔가 만들면서 익혀가기 시작했습니다. 다행히 같이 일하는 선임들께서 저의 태도와 자질을 높게 보아주셨고, 이를 통해 저는 바뀐 보직과 역할에 빠르게 적응하여 고객과 서비스단에서의 자세한 소통에도 자주 참여하게 되었습니다.
• ■

  담당 PM과의 긴밀한 협업: 이전 회사에서도 수주 기반 프로젝트를 진행해 본 저는 상황이 간단하지 않음을 깨닫고, 로그 규격 문서와 실제 로그들을 가지고 이해가 안 가거나 의심되는 부분에 대해서 고객 측 담당 PM과 깊은 논의를 지속적으로 거쳤습니다. 이 과정에서 PM도 모르던 장비 문제 및 프로토콜 오류가 확인되었고, 수행사인 저희에 대한 신뢰 역시 강화되었습니다.

📊 B. BI 서비스 실무 수행

• ■

  BI 화면 및 지표 전담 개발: Kibana 솔루션을 학습하고, 실제 고객 데이터의 파악과 통계화를 제일 많이 진행한 저는 BI 화면과 지표 개발을 전담해 맡았습니다. 실제 고객이 실시간으로 추적하려고 하는 Alarm 성 상황, 고객이 통계화시키고 싶어하는 지표, 에러 발생 시 봐야 하는 정보 등 다양한 문제 상황에 대한 컴포넌트와 데이터 규격을 지정하고, 개발자와 협의하거나 제가 직접 솔루션으로 구현했습니다.
• ■

  서비스 구조 변경 제안: 원래 사용해야 하는 솔루션으로는 고객이 목표로 하는 서비스 경험이 불가능하다는 것을 깨달은 저는 빨리 팀 내에서 이를 공론화하였고, 이 문제를 심각하게 인식한 리드 개발자의 웹 서버 개발 및 도입이 진행되었습니다.

🛡️ 실제 고객의 업무 혁신에 기여

프로젝트 후반 검증 시점에서 고객사는 실제 아파트 현장에 방문해 이 시스템을 테스트했습니다. 다행스럽게도 이 시스템은 고객사 기대 이상의 정확도와 신속함을 보였고, 고객사 역시 새롭게 찾아낸 아파트 운영 협력사들의 장비 결함 및 운영 문제를 확인하게 되어 만족도가 매우 높았습니다.

⚡ 최고 수준의 사내 평가

아무런 설명 없이 받아든 프로젝트였고 전혀 모르는 기술이었지만, 사내에서는 매우 중요한 프로젝트였습니다. 스페이스 스코프 라는 이름으로 정식 출시된 이 서비스의 성공을 통해 빅데이터 플랫폼 개발은 회사의 주요 사업 부분이 되었고, 저 역시 프로젝트 팀에서 정식으로 기획팀으로 이동하여 다양한 빅데이터 플랫폼 기반 프로젝트의 일을 맡게 되었습니다.

🚀 개인적 커리어 전환

저 개인에게도 의미가 깊습니다. 단순 데이터 분석을 넘어, 실제 산업 현장의 문제를 해결하는 시스템을 기획하고 구축하며 도메인과 수단을 넘나드는 문제 해결 전문가로서의 커리어 전환점을 마련한 프로젝트였습니다.