SAP가 클라우드 스토리지 레이어로 선택한 MapR 파일 시스템

빅데이터 세계에 큰 이중현상이 일어날 수 있다는 소식이다. 맵R 화요일에 파일 시스템이 융합 데이터 플랫폼 Hadoop 배포판은 다음에서 선택되었습니다. 수액 다음과 같이 사용됩니다. 클라우드 저장 기술 하나, SAP IQ및 유사한 데이터 워크로드.

당신은 그 말이 맞습니다: MapR 파일 시스템(MapR-FS), 회사의 드롭인 대체품 하둡 분산 파일 시스템(HDFS), 범용 클라우드 스토리지 또는 적어도 그 이상의 목적으로 주요 소프트웨어 회사에 의해 선택되었습니다. 하둡 그리고 불꽃.

언제나 특별했지
MapR의 파일 시스템은 Hadoop 시장의 원래 차별화 요소였습니다. 읽기 및 파일 쓰기는 한 번만 지원하며 MapR-FS는 기존 파일의 읽기-쓰기 기능을 완벽하게 지원합니다. 체계. 물론 SAP가 이를 더 광범위한 목적으로 사용하는 이유는 아직 설명되지 않습니다.

그러나 MapR의 제품 관리 수석 이사인 Vikram Gupta는 나에게 다음과 같이 설명했습니다. 단지 HDFS의 향상된 버전일 뿐인 MapR-FS는 실제로 HDFS의 표준 파일 시스템으로 구현되었습니다. 가자. 코어 파일 시스템이 개발된 후 그 위에 HDFS 호환 인터페이스가 구축되어 MapR이 일반 HDFS를 대체하기 위해 이를 Hadoop 배포판으로 교체할 수 있었습니다.

다형성 저장
그 동안 전체 파일 시스템은 그대로 유지되며 추가 인터페이스도 있습니다. NFS 그리고 POSIX 그 위에도 앉아보세요. 이를 통해 여러 파일 시스템 클라이언트가 MapR-FS를 다르게 처리하는 동시에 모든 클라이언트가 물리적으로 동일한 위치에서 데이터를 읽고 쓸 수 있습니다. 이는 표준 HDFS를 사용하여 데이터의 "골드" 복사본을 저장하고 싶지 않지만 데이터 이동 및 복제라는 두 가지 벌금을 지불하고 싶지 않은 회사에게 중요합니다.

분명히 이는 SAP에게도 중요합니다.

분산 스토리지 및 탄력적인 인프라

물론 HDFS 자체(및 MapR-FS의 HDFS와 유사한 기능)에는 클라우드에서 잘 작동하도록 하는 기능이 있습니다. 첫째, 이는 분산 파일 시스템으로, 여러 물리적 디스크를 단일 스토리지 볼륨으로 통합할 수 있습니다. 이를 통해 시스템에 다양한 드라이브 유형(예: 플래시 스토리지, SSD 및 회전 디스크)을 지리적으로 분산하고 혼합 및 일치시킬 수 있습니다. 이는 결국 서로 다른 "온도"의 데이터가 서로 다른 미디어에 저장될 수 있는 저장 계층 구조를 허용합니다. 예를 들어, 자주 액세스하는 데이터는 플래시에 저장하고 더 많은 기록을 보관하는 데이터는 더 저렴하고 회전하는 미디어에 보관할 수 있습니다.

HDFS 및 MapR-FS에는 중복 기능도 내장되어 있어 각 파일의 여러 복제본을 유지하며, 각 복제본은 별도의 물리적 드라이브에 저장됩니다. 이렇게 하면 불량 드라이브를 스토리지 클러스터에서 신속하게 제거하고 해당 위치에 새 드라이브를 쉽게 추가할 수 있으므로 두 파일 시스템 모두 하나의 드라이브 오류에 대한 복원력이 향상됩니다. 그리고 디스크를 쉽게 추가하고 제거할 수 있는 기능은 클라우드 컴퓨팅이 요구하는 일반적인 탄력성을 제공합니다.

이제 모든 것이 이해가 됩니다.
Microsoft와 Amazon이 HDFS를 대체하기 위해 Hadoop 서비스에서 자체 Blob 스토리지를 교체하고 권장하는 경우 SAP가 다른 방향으로 나아가 맞춤형 Hadoop 배포판에 사용되는 스토리지 시스템을 보다 주류 파일로 사용할 수 없는 이유 가게?

그리고 이번 MapR-SAP 거래도 일회성이 아닙니다. 내가 Gupta와 이야기를 나눴을 때, 그는 다른 라이센스 사용자들과도 유사한 추가 거래를 추진할 것이라고 단호하게 말했습니다. MapR은 Converged Data Platform을 바로 하나의 플랫폼으로 보고 있습니다. 그리고 Hadoop, Spark, 어쩌면 전통적인 "데이터" 자체를 초월하는 것입니다.