Ved re: Invent annoncerede AWS CEO Adam Selipsky den generelle tilgængelighed af nye værktøjer, der vil reducere behovet for at bygge og administrere datapipelines.
Amazon Web Services annoncerede tirsdag den generelle tilgængelighed af værktøjer, der bringer mere finmasket kontrol til datasø-forvaltning.
For det første, Row and Cell-Level Security for Lake Formation "lægger de rigtige data i hænderne på de rigtige mennesker," sagde AWS CEO Adam Selipsky under sin AWS re: Invent keynote-tale.
Lake Formation gør det allerede muligt for kunder at flytte data til S3-datasøer, rense og klassificere dem ved hjælp af maskinlæring og sikker adgang til følsomme data. Det nye værktøj giver nu kunder mulighed for at håndhæve adgangskontrol for individuelle rækker og celler. I stedet for at oprette flere tabeller for hver bruger og administrere datapipelines, kan en kunde definere et sæt politikker for specifikke rækker for specifikke brugere. Kunder kontrollerer adgangen til specifikke rækker og kolonner i forespørgselsresultater og i AWS Glue ETL-job baseret på identiteten af, hvem der udfører handlingen.
I mellemtiden eliminerer Transaktioner for styrede tabeller i Lake Formation behovet for batchopdateringer. "Data er ikke statisk," sagde Selipsky. "Flere og flere data bliver tilføjet og flyttet hurtigt."
Nu kan kunder oprette en ny type tabel -- en styret tabel -- og Lake Formation administrerer automatisk konflikter og fejl for ensartet visning af data. Brugere vil være i stand til at følge med i dataene i realtid.
Styrede tabeller understøtter ACID-transaktioner, der lader flere brugere samtidigt og pålideligt indsætte og slette data på tværs af flere styrede tabeller. ACID-transaktioner lader også kunder køre forespørgsler, der returnerer konsistente og opdaterede data. I tilfælde af fejl i ETL-processer, eller under en opdatering, er ændringer ikke begået og vil ikke være synlige.
Kunder, der bruger styrede tabeller, kan bruge automatisk komprimering til lageroptimering. Når denne indstilling er aktiveret, komprimerer Lake Formation automatisk små S3-objekter i styrede tabeller til større objekter for at optimere adgangen via analysemotorer, som f.eks. Amazon Athena og Amazon Redshift Spectrum.
AWS vedr.: Opfind
- AWS forbedrer sit branchespil på re: Invent 2021
- AWS CEO afslører ny privat 5G-tjeneste
- AWS sigter mod mainframes med migrationsservice
- AWS, CrowdStrike og Presidio partner for ransomware mitigation kit
- AWS lancerer en kvartet af serverløse, on-demand-løsninger
- AWS retter sig mod bil- og industrisektorer med FleetWise, TwinMaker
- Processor roadmap tilføjer Graviton3, Trainium, nye forekomster
- IoT RoboRunner sigter mod at administrere robotflåder