"/>

Eap - Big Data: ingurune doako herriadministrazioetako nozitzen duen Test Infrastructure bere datu irekiak
accesskey _ mod _ content

Big Data: ingurune doako herriadministrazioetako nozitzen duen Test Infrastructure bere datu irekiak

  • Entzun
  • Inprimatu Pdfa
  • Partekatu

27 martxoa 2024

Azpiegitura egiteko proba-datuen analisia (BDTI, ingelesezko siglen arabera, Big Data Test Infrastructure) tresna bat da, Europako Digitala programaren bidez finantzatua; horri esker, herri-administrazioek datu irekiak eta tresnak aztertzea, kode irekiko berrikuntza bultzatzeko.

Hori tresna (Ireki leiho berrian) hodei batean, eta bere erabilera doakoa da, bizkortzeko transformazio digitala eta soziala. Planteamendu horrekin, 2019 jarraituz eta ere Europako arteztaraua, Datu Irekiak (Ireki leiho berrian) europako batzordeak ondorioztatu zen lortzeko, bultzada digitala eta ekonomikoa, botere aprobetxatu behar datuak administrazio publikoen alegia, bere erabilgarritasuna, kalitatea eta erabilgarritasuna. Halaxe sortu zen, eta helburua BDTI berriz erabiltzea sustatzea, informazio hori aztertzeko proba ingurunea, eta tentsio bat ematen die uzten herri-administrazioei prototipoak sortzea doako konponbideak aurretik hodei implementarlas produkzio-ingurunean bere instalazioak.

Zer tresna BDTI eskaintzen ditu?

Big Data, europako herri-administrazioei eskaintzen Infrastructure Test-multzo bat kode irekiko estándar tresna datuak biltegiratzeko, prozesatzea eta aztertzen ditu, klusterrak makina birtualak plataforma azterketa eta biltegiratzeko instalazioak eta tresnak. hauek eskaintzen ditu:

  1. Datu-baseak: datuak gordetzeko eta egin kontsulta gordeta dauden datuak sartzen dira. gaur egun BDTI datu-base erlazional ( PostgreSQL ) datu-basea, dokumentu bideratutako ( MongoDB ) eta datu-base bat grafikoa ( Bertutetsu ).
  2. Datu-laku: datu-kopuru handiak gordetzeko egituratuak eta egituratu gabeko ( Minioa) Ez-ferroso gordinak egituratuak. datuak prozesa daitezke gure konfigurazioak dituzten beste eraikuntza-bloke (osagai BDTI) eta gorde formatu txikiagoan egituratua laku-irtenbidearen barruan.
  3. Garapen-inguruneak ematen dute eta beharrezko tresnak gaitasunak informatikoak jarduerak egiteko estandarra buruzko datuak aztertzea datu kanpoko iturrietatik datoz, datu-laku eta datu baseak.
    • JupyterLab bat, garapen-ingurunea interaktiboa eta sortzeko online Jupyter koadernoak, kodea eta datuak.
    • Rstudio garapen integratua; R, programazio-lengoaia da, estatistika eta grafikoak egiteko konputazio.
    • KNIME , analisi-plataforma bat, txostenak eta datuen integrazioa duen kode irekiko osagai ikaskuntza automatikoa eta datuen meatzaritza, erabil daitekeen bizi-ziklo guztiari buruzko datu-zientziaren.
    • H2O.ai plataforma bat, ikaskuntza automatikoa (machine learning edo ML) eta adimen artifiziala (IA) diseinatutako kode irekiko errazago eta azkarrago izan dadin, funtzionamendua eta berrikuntza sortzea eta IA edozein ML.
  4. Prozesatzeko ere klusterrak eta prozesatzeko tresnak sor daitezke aurreratua: datu-bolumen handiak egitea, eragiketa bilaketa-denbora errealean ( Apache Spark , Elasticsearch eta Kibana
  5. Bistaratzea: BDTI ere eskaintzen du aplikazioak, bai datuak bistaratzeko Apache Superset datuak, erabil dezakeen petabytes edo eskala Metabase .
  6. Orkestrazio lanak: prozesuen automatizazioa datuetan oinarrituta, bere bizitza-ziklo osoan zehar, datuak prestatzea azterketetan oinarritutako erabakiak hartu arte eta oinarritutako ekintzak egitea erabaki horiek, eskaintzen da:
    • Apache Airflow kudeaketa-plataforma bat, lan-fluxuak kode irekiko programatu eta gauzatzeko aukera ematen duen datu-konplexuak erraz kanalizazioak.

Tresna horien bitartez dauden hodei inguruko, langileek publikoak ebko herrialdeek herrialde sor ditzakete bere proiektu pilotuak frogatzeko datuak berrikuntza egin diezaiokete. Proiektua amaitutakoan, erabiltzaileek aukera dute deskargatu iturburu-kodea eta datuak beren kabuz lan jarraitu ahal izateko, ingurune erabiliz. Gainera, sozietate zibila, akademiak eta sektore pribatuaren egitasmo piloto horiek parte har dezakete, baldin eta erakunde publiko bateko erabilera denean, tartean.

Arrakasta-kasuak

Baliabide horiek proiektuak sortzeko, ebko zenbait herrialdetan, eta horri esker hainbat web orrian, BDTI batzuk jasotzen dira. erabilera-kasuen adibideak. Adibidez, Eurostat proiektu pilotu bat egin zen, erabili ziren lan-eskaintzen iragarki-esparruen du interneten datu irekiak europako lan-merkatuen egoera Beste arrakasta-kasuak izan zen. herri-kontratazioa optimizatzea, agentzia digitalizazio-Norvegia eta, ahalegin hori European Blood Alliance datuak trukatzeko eta errazteko hiri gaineko eragina ulertzea COVID-19. florentziako .

Espainian, BDTI ahalik eta meatzaritzako proiektu bat egin eta datuen Conselleria de Sanitat esker atera izan dira valentziako erkidegoko BDTI ezagutza ikaragarria. artikuluen kopurua; zeregin hori zuen bat egin zaie klinikoei eta kudeatzaileei zientzialari klinikoak bere praktika klinikoak eta eguneroko lanean.

Albistearen jatorrizko iturria (Ireki leiho berrian)

  • Sektore publikoaren informazioa eta datuak