Azure Synapse Analytics: 진행률 보고서

Azure 시냅스 분석 2019년 11월 올랜도에서 열린 Ignite 컨퍼런스에서 Microsoft가 처음 공개했습니다. 당시에는 아직 라이브 이벤트가 진행 중이었습니다. 이제 첫 번째 생일까지 몇 달밖에 남지 않았으니 한번 살펴보는 것이 좋겠다고 생각했습니다. 최근 GA(일반 공급) 및 공개 버전으로 출시된 다양한 플랫폼 기능에 대해 알아보세요. 시사. 우리는 또한 최근 발표된 흥미로운 파트너십에 대해 알게 되었습니다. Microsoft와 Qlik Synapse를 중심으로 구축했으며 이를 탐색할 가치가 있다고 생각했습니다. 이 게시물에서 모든 내용을 다루겠습니다.

하지만 먼저 TL; 박사. 오늘날 Synapse는 Microsoft의 클라우드 데이터 웨어하우스 플랫폼, 통합 데이터 레이크 기능은 이제 공개 미리 보기로 제공됩니다. 그러나 Synapse는 호수와 창고 부분을 합친 것 이상입니다. 전략적 측면에서 이것이 실제로는 지금까지 단순한 기능의 섬으로 존재했던 다른 Azure 데이터 서비스 배열을 집계, 통합 및 촉진하는 서비스입니다. 기본적으로 Synapse는 Azure 클라우드의 데이터 및 분석을 위한 "더 나은 함께" 에이전트입니다.

꼭 읽어야 할 내용:

• Azure Synapse Analytics는 데이터 웨어하우스, 레이크 및 파이프라인을 결합합니다.
• Microsoft Azure Synapse Analytics 자세히 살펴보기
  

플롯이 두꺼워졌습니다.

마이크로소프트 온라인에서

짓다 지난 5월 이벤트에서 회사는 Synapse의 데이터 레이크 기능 도입에 관해 광범위한 발표를 했습니다. Synapse Studio 환경을 공개 미리 볼 뿐만 아니라 Synapse와 Synapse 간의 흥미로운 통합도 제공합니다. 코스모스DB. 우리는 이미 이에 대해 다루었지만 잘 알려지지 않은 추가 기능이 추가된 것으로 나타났습니다.

또한: Microsoft Build는 클라우드 데이터, 분석 서비스 및 둘의 교차점에 대한 발표를 제공합니다.

최근에 우리는 Microsoft의 Synapse Analytics 수석 그룹 프로그램 관리자를 만났습니다. 찰스 페더슨, 우리에게 이러한 더 깊은 기능을 설명했습니다. 최근에는 Synapse를 Qlik의 기술 및 SAP 시스템의 데이터와 결합하는 두 회사의 파트너십에 대해 이야기하기 위해 Microsoft 및 Qlik과 이야기를 나눴습니다. 이 두 가지 브리핑을 통해 Synapse가 Microsoft에 얼마나 전략적인지 분명해졌습니다. Microsoft의 Azure 데이터 및 인공 지능 제품 담당 이사의 브리핑에 모두 참여 다니엘 유, 그것을 더욱 명확하게 만들었습니다.

추가 기능 개요

Feddersen은 Synapse의 데이터 레이크가 버전 0.6을 지원할 것이라고 설명했습니다. 델타 레이크 테이블. 그는 다음을 통해 기계 학습이 어떻게 통합되었는지 반복했습니다. 아파치 스파크 그리고 Azure 기계 학습에 대한 지원은 물론 ONNX 모델과 T-SQL 예측 창고 측의 명령은 매우 중요합니다. 그는 또한 Synapse의 지원이 얼마나 중요한지 검토했습니다. 공통 데이터 모델.

그런 다음 Feddersen은 더 깊이 들어가 실질적인 핵심 데이터 웨어하우스 개선 사항을 소개했습니다. 여기에는 새로운 것이 포함됩니다. T-SQL 복사 데이터 대량 로드를 위해 Synapse에서만 사용할 수 있는 명령입니다. 스키마 추론을 지원하고, COPY 명령을 기반으로 스크립트를 생성하고, 예약된 일정에 따라 해당 스크립트를 실행하는 작업을 생성하는 대량 로드 마법사도 있습니다. 또한 구체화된 뷰 및 업데이트 가능한 해시 키에 대한 더 나은 일치를 포함하여 성능도 향상되었습니다. 이를 통해 삭제 및 재삽입 대신 실제 업데이트가 가능합니다.

생산성 향상도 있습니다. 예를 들어 Synapse Studio에서 개체를 보는 경우 해당 개체를 마우스 오른쪽 버튼으로 클릭하고 메뉴를 통해 옵션을 선택하면 개체를 열고 데이터를 가져오는 데 필요한 코드가 포함된 새 노트북을 생성할 수 있습니다. 그것. 이러한 코드 생성 단축키는 Microsoft에게는 새로운 것이 아니지만 오픈 소스 분석의 맥락에 적용되는 것을 보는 것은 좋은 일입니다.

파트너에게 할 일을 하세요

시냅스는 일종의 접착제 역할을 하며, 그 끈기는 파트너십에도 확장될 수 있습니다. Microsoft는 Synapse Analytics 및 수액의 애플리케이션 플랫폼.

Qlik이 비즈니스 인텔리전스에만 집중하여 Microsoft 및 Power BI의 강력한 경쟁자라고 생각할 수도 있지만 더 이상 그렇지 않습니다. Qlik의 2018년 Podium Data 인수, 특히 이 사례와 관련이 있는 2019년 Attunity 인수는 모든 것을 변화시켰습니다.

꼭 읽어야 할 내용:

• Qlik, BI와 빅 데이터 통합으로 Podium Data 인수
  
• Qlik, 5억 6천만 달러에 Attunity 인수
  

캐치올 아래 Qlik 데이터 통합 인수된 두 회사의 제품을 모두 포함하는 브랜드인 이전 Attunity 기술은 다음을 통해 업계 최고의 변경 데이터 캡처 기능을 제공합니다. Qlik 복제, 시스템 간 거의 실시간 데이터 복제를 지원합니다. Qlik Data Integration에는 다음을 통해 데이터 웨어하우스 자동화도 포함됩니다. Qlik Compose. 그리고 15년 전만 해도 이러한 기술을 통해 Attunity는 SAP 데이터를 위한 특별한 솔루션을 만들 수 있었습니다.

Synapse로 이 모든 것을 통합하면 무엇을 얻게 될까요? 실시간 업데이트를 통해 SAP 데이터용 Synapse 데이터 웨어하우스를 자동으로 생성하여 일괄 업데이트 및 관련 데이터 대기 시간을 방지합니다. 그리고 이 제품은 전적으로 Synapse의 데이터 웨어하우스 기능(즉, Azure SQL Data Warehouse에 있었던 것과 동일한 기능)을 기반으로 하므로 지금 바로 실행할 수 있습니다.

물론 Synapse의 공개 미리 보기 기능이 GA되면 이 파트너십을 둘러싼 가능성은 더욱 풍부해집니다. 예를 들어, 현재 SAP 데이터를 기반으로 하는 Power BI 보고서는 예약된 방식이나 대화형 방식으로 실행될 수 있습니다. 그리고 SAP 데이터를 레이크로 이동하여 예측 모델을 구축할 수도 있습니다. Spark의 머신러닝 기능, 예를 들어. 그런 다음 해당 모델은 PREDICT 명령을 사용하여 데이터베이스 내 추론을 실행하는 데 사용할 수 있는 웨어하우스로 다시 왕복할 수 있습니다. 이는 결과적으로 SAP에서 제공되는 최신 판매, 재고 및 공급망 데이터를 기반으로 데이터 기반 의사결정을 촉진할 수 있습니다.

Microsoft와 Qlik은 이를 기반으로 "가치 증명"(POV) 구현을 제공할 만큼 제휴에 대해 충분히 확신하고 있습니다. 여기에는 POV 기간 동안 무료 반나절 아키텍처 워크숍과 Qlik Data Integration, Synapse 및 Power BI에 대한 후원 소프트웨어 구독이 포함됩니다.

시냅스가 계속 발사됩니다

Synapse는 코로나바이러스/COVID-19 대유행 이전에 출시 파티를 열었을 수도 있지만 Microsoft는 대유행 중에도 플랫폼의 추진력을 영속시킬 준비가 되어 있는 것으로 보입니다. 새로운 기능, 파트너십, 후원 구현은 그런 점에서 좋은 투자입니다. Azure Machine Learning과의 더욱 강력한 통합과 같은 새로운 기능이 제공되기를 바랍니다. Azure 이벤트 허브, 뿐만 아니라 합리화 HD인사이트 그리고 데이터브릭스, 역시 파이프라인에 있습니다.

Azure 데이터 스택을 넘어 다음과의 통합 마이크로소프트 365 Teams, SharePoint, Excel과 같은 구성 요소는 실제로 아마존 레드시프트, 구글 빅쿼리 그리고 눈송이 그들의 돈을 위해 좋은 실행. 불경기는 투자하고 선의를 창출할 수 있는 좋은 기회가 될 수 있습니다. 내 생각에 전염병은 더욱 그렇습니다. 그 점에서 마이크로소프트는 올바른 길을 가고 있고 앞으로도 계속 나아갈 것입니다. 다음 오프라인 행사에서는 좋은 평가를 받을 수 있는 기회가 많이 있을 것입니다. 그럴 때마다.