Confluent обявява управление за поточни данни

  • Sep 02, 2023

Компанията зад основата на данни в реално време Apache Kafka казва, че нейното управлявано облачно решение е първият в индустрията пакет за управление за поточно предаване на данни.

confluent-stream-governance.png

Карта на линията на Confluent Stream Governance, проследяваща източника на съдържание на Kafka тема от конектор за данни, изходна Kafka тема и няколко ksqlDB заявки.

Кредит: Конфлуент

В Срещата на Кафка виртуална конференция днес, спонсор на събитието и компания, основана от Апаш Кафкасъздателите на, Конфлуентна, обявява своя нов пакет Stream Governance за управление на поточно предаване на данни в реално време. Управляваната облачна услуга е, според компанията, първото подобно решение на пазара и цели за осигуряване на управление и защита на данните в движение, сравними с това, което е станало стандарт за данни в покой.

Цели и стълбове

ZDNet разговаря със съоснователя и главен изпълнителен директор на Confluent, Джей Крепс, който обясни, че Stream Governance е насочена към двете най-големи притеснения на съвременните организации, когато става дума за данни: как да отключите всичко и все пак направете го по начин, който е безопасен, сигурен и в съответствие с индустриалните и регулаторни рамки за защита на данните, които продължават да се увеличават номер.

Stream Governance се концентрира върху три стълба: откриваемост, проследимост и качество на данните. Пакетът прави това чрез своя каталог с потоци, родословие на потоци (на снимката в горната част на тази публикация) и съответно компоненти за качество на потоците. Kreps от Confluent отбеляза, че поради начина, по който работи потокът на данни, управлението му може да се извършва до голяма степен на автоматизирана основа. При преобладаващите днес обеми данни това е добре дошъл факт.

По масово търсене

Крепс твърди пред ZDNet, че голям брой нужди от управление произтичат от преместването на данни, но повечето масови решения за управление на данни и каталог на данни се фокусират върху данните в покой. Целта на Confluent е да преодолее тази празнина и да го направи по начин, който се интегрира с тези масови платформи. С други думи, управлението на потока е фокусирано върху установяване на доверие в данните в реално време, движещи се през a бизнес и не се опитва да измести съществуващите търговски платформи и рамки за управление на данни с отворен код стандарти.

Крепс казва, че наборът от функции на Stream Governance се ръководи 100% от търсенето на клиентите, катализирано от Общата защита на данните на ЕС Регламент (GDPR), Закон за защита на потребителите на Калифорния (CCPA) и други сертификати и разпоредби, както съществуващи, така и възникващи. Основното нарастване на обемите данни и увеличаващите се случаи на употреба за дигитална бизнес трансформация също стимулират търсенето на клиентите.

По-широки хоризонти?

Въпреки че Confluent възнамерява да поддържа Stream Governance фокусиран върху поточни данни, в определени организации този обхват може да не е тесен. Confluent вече обяви технологии като "Безкрайно съхранение“ в своята платформа Confluent Cloud, която позволява на темите на Kafka да служат като постоянни хранилища на данни, а не просто пътища за преминаване на данни. Имайки предвид това, обхватът на влияние на Stream Governance може да бъде наистина широк, както и идеята, че всички набори от данни могат да се разглеждат като специални екземпляри на потоци от данни.

Прочетете също: Confluent обявява Infinite Storage за Apache Kafka

Без значение какво, оставянето на потоци от данни неконтролирани, погледнато назад, е малко като оставянето на компютър със специално предназначение незащитен от защитна стена. Това е непредпазливо, опасно и нехигиенично. Управлението на стрийминг на данни е добре дошла подкрепа за идеята, че всички данни трябва да бъдат проследявани и защитени, като в същото време са курирани, отворени и достъпни в управляван контекст.