빅데이터

  • HOME
  • 빅데이터
  • iShark Stream Data

iShark Stream Data

iShark Stream Data

  • 당사는 기존의 영업정보계 데이터 등과 같은 정형 데이타 분석을 위한 Data Warehouse에서 모바일 사용자 로그자료 등 빅데이터 처리기술이 적용된 Data Lake, 그리고 실시간 처리기술의 발전에 따른 Data Lake의 발전된 기술인 Lake House를 지원하기 위한 플랫폼 서비스를 합니다.
  • 빅데이터 아키텍처는 배치처리 중심에서 실시간 처리가 가능한 람다 아키텍처로 진화 하였으나, 최근의 트랜드는 처음부터 실시간 처리를 고려한 카파 아키텍처를 적용하여 시스템 기능의 중복과 복잡성을 제거하고 운영 유지 보수가 용이한 시스템을 제공 합니다.

미래지향적인 데이터 레이크

  • 몽타㈜의 빅데이터 플랫폼은 기존 정형데이터를 위한 DW와 빅데이터 처리기술이 적용된 DataLake의 발전모델인 LAKEHOUSE를 지원하기 위한 플랫폼입니다.

실시간 중심, 카파 아키텍처

  • 몽타㈜의 빅데이터 플랫폼은 실시간 처리 중심의 카파 아키텍처를 적용하여 시스템의 기능적 중복과 복잡성을 제거하고 운영유지 보수가 용이한 시스템을 구축합니다.

실시간 중심, 기술구조 간단

  • 몽타㈜의 빅데이터 플랫폼은 파이프라인 구성을 위한 소프트웨어를 단순화 하여 구성하기 때문에 유지보수 인력 운영 및 기술 내재화가 타 플랫폼과 비교하여 유리합니다.

한단계 발전된 스트림 아키텍처

  • 몽타㈜의 빅데이터 플랫폼은 실시간 아키텍처를 적용함에 있어 Confluent와 Spark 중심으로 단순화 하여 구축합니다.
    익숙한 SQL Syntax를 사용하여 데이터를 변환할 수 있어 애플리케이션 구축 시 개발 편의성과 생산성이 크게 향상 됩니다.