Amazon prinaša bolj natančne kontrole v AWS Lake Formation

Spletne storitve Amazon so v torek objavile splošno razpoložljivost orodij, ki prinašajo več natančen nadzor za upravljanje podatkovnega jezera.

Prvič, Varnost na ravni vrstic in celic za formacijo jezera "daje prave podatke v roke pravim ljudem," je dejal izvršni direktor AWS Adam Selipsky med svojim osrednjim nagovorom AWS re: Invent.

Lake Formation strankam že omogoča, da premaknejo podatke v podatkovna jezera S3, jih očistijo in razvrstijo s pomočjo strojnega učenja ter varnega dostopa do občutljivih podatkov. Novo orodje strankam zdaj omogoča uveljavitev nadzora dostopa za posamezne vrstice in celice. Namesto ustvarjanja več tabel za vsakega uporabnika in upravljanja podatkovnih cevovodov lahko stranka definira nabor pravilnikov za določene vrstice za določene uporabnike. Stranke nadzorujejo dostop do določenih vrstic in stolpcev v rezultatih poizvedbe in znotraj opravil AWS Glue ETL na podlagi identitete izvajalca dejanja.

Medtem Transakcije za upravljane tabele v Lake Formation odpravljajo potrebo po paketnih posodobitvah. "Podatki niso statični," je dejal Selipsky. "Vedno več podatkov se dodaja in hitro premika."

Zdaj lahko stranke ustvarijo novo vrsto tabele -- nadzorovano tabelo -- Lake Formation pa samodejno upravlja konflikte in napake za dosleden prikaz podatkov. Uporabniki bodo lahko spremljali podatke v realnem času.

Upravljane tabele podpirajo transakcije ACID, ki omogočajo več uporabnikom hkrati in zanesljivo vstavljanje in brisanje podatkov v več nadzorovanih tabelah. Transakcije ACID strankam omogočajo tudi izvajanje poizvedb, ki vrnejo dosledne in posodobljene podatke. V primeru napak v procesih ETL ali med posodobitvijo spremembe niso potrjene in ne bodo vidne.

Stranke, ki uporabljajo nadzorovane tabele, lahko za optimizacijo shranjevanja uporabljajo samodejno stiskanje. Ko je ta možnost omogočena, Lake Formation samodejno stisne majhne objekte S3 v upravljanih tabelah v večje objekte, da optimizira dostop prek analitičnih mehanizmov, kot je npr. Amazonka Atena in Amazonov rdeči premik spektra.