ASIC creează un lac de date AWS protejat – Cloud


Comisia australiană pentru valori mobiliare și investiții a înființat un lac de date certificat la nivel protejat în Amazon Web Services pentru a-și utiliza datele despre industria serviciilor financiare la o utilizare mai bună.

Lacul de date, care este înțeles a fi primul lac de date AWS din țară care a atins o clasificare de securitate protejată, a intrat în funcțiune luna trecută ca parte a unui program major de lucru pentru ridicarea capacităților de analiză și date ale regulatorului financiar.

Acesta a fost construit de Cloudten, cu sediul în Sydney și furnizorul de servicii de securitate Cloudten, care a fost achiziționat de compania de securitate cibernetică CyberCX săptămâna trecută, în ultimele 10 luni sub 1,2 milioane USD contracta.

Cloudten a lucrat cu ASIC pentru a proiecta și implementa soluția pe mediul AWS la nivel protejat al agenției, pe care îl are înființat la începutul anului trecut, folosind o echipă de opt persoane formată din arhitecți de date, ingineri, analiști și cercetători în date.

A spus un purtător de cuvânt ASIC iTnews lacul de date a început viața ca dovadă a conceptului (PoC) în februarie, care a fost „folosit pentru a rafina cerințele și proiectarea soluției finale, care a intrat în vigoare în septembrie”.

Datele fiind o componentă din ce în ce mai integrantă a activității agenției, autoritatea de reglementare intenționează să utilizeze platforma pentru a stoca, consuma și gestiona gama sa „masivă” de seturi de date financiare pentru a obține o perspectivă mai bună.

Lacul este capabil să ingereze, să proceseze și să stocheze tipuri de date structurate, semi-structurate și nestructurate din sisteme ASIC interne precum baze de date și SharePoint, precum și fluxuri externe prin SFTP [SSH file transfer protocol], Apeluri API și flux de date.

„Arhitectura modernă a lacului nostru de date ne permite să stocăm și să prelucrăm date structurate și nestructurate la scară pentru a ajuta la îndeplinirea cerințelor noastre de date și analize”, a spus purtătorul de cuvânt.

Detectarea fraudei, conștientizarea generală a pieței și modelarea predictivă a pensiilor, ipotecilor și împrumuturilor de afaceri sunt câteva dintre domeniile imediate care se așteaptă să beneficieze de platformă.

Platforma a oferit, de asemenea, analiștilor agenției „noi instrumente și medii pentru a-și sprijini munca”, cu o serie de tablouri de bord și o soluție de procesare a limbajului natural livrată, de asemenea, ca parte a activității.

Vorbind la summit-ul sectorului public al AWS săptămâna trecută, directorul general Cloudten, Richard Tomkinson, a susținut proiectul drept „primul lac de date de calitate protejată din AWS în Australia”, fără a se referi în mod specific la ASIC.

„Am lucrat recent cu o mare agenție guvernamentală federală pentru a proiecta și implementa primul lac de date cu grad protejat din AWS în Australia. Această soluție a fost construită într-un loc de muncă AWS stabilit pentru clienți, care fusese anterior implementat ”, a spus el.

Cu toate acestea, potrivit site-ului web de achiziții al Commonwealth-ului AusTender, contractul Cloud Lake cu ASIC este cel mai mare contract cu o agenție guvernamentală până în prezent. Termenul contractului se aliniază și unui studiu de caz publicat de Cloudten.

Tomkinson a spus că platforma a utilizat o serie de servicii AWS native pre-certificate, cum ar fi Glue, Athena și Kinesis Data Streams, precum și produse de la terți, cum ar fi Platforma de analiză unificată a Databricks.

„Datele sunt curățate și transformate printr-o serie de cupe S3 înainte de a fi prezentate pentru vizualizare [in] instrumente de business intelligence precum Amazon QuickSight, Tableau sau Qlik ”, a spus el.

„Databricks este responsabil pentru cea mai mare parte a procesării avansate a analizelor și există integrări strânse cu serviciile AWS precum Amazon Glue și Athena.

„O proporție semnificativă a proceselor de automatizare și orchestrare a fluxului de lucru din mediul lacului rulează pe servicii AWS fără server, cum ar fi Elastic Container Services (ECS) și Elastic File System (EFS).

„Din perspectiva guvernării datelor, am lucrat cu o serie de produse comerciale, inclusiv Collibra, Talend și Alex Solutions.”



Source link

Lasă un răspuns