분류 기타

BigData형 프레임 워크

컨텐츠 정보

  • 조회 358 (작성일 )

본문

  • Bistro - 배치 및 스트림 분석을 위한 범용 데이터 처리 엔진. 이는 새로운 데이터 모델을 기반으로 하며, MapReduce 또는 SQL과 같은 기존의 접근 방식에서는 설정된 작업만 하는 것이 아니라 함수를 통해 데이터를 나타내고 열 연산을 통해 데이터를 처리합니다.
  • IBM Streams - 분산 처리 및 실시간 분석을 위한 플랫폼. 빅 데이터 에코 시스템 (Kafka, HDFS, Spark 등)에서 널리 사용되는 많은 기술과 통합
  • Apache Hadoop - 분산 처리를 위한 프레임 워크. MapReduce (병렬 처리), YARN (작업 예약) 및 HDFS (분산 파일 시스템)를 통합합니다.
  • Tigon - 처리량이 많은 실시간 스트림 처리 프레임 워크.
  • Pachyderm - Pachyderm은 재현 가능한 데이터 처리 및 분석을 제공하기 위해 Docker 및 Kubernetes에 구축 된 데이터 스토리지 플랫폼입니다.
  • Polyaxon - 재현 가능하고 확장 가능한 머신 러닝 및 딥러닝을 위한 플랫폼입니다.
TigonPachyderm