Data, data og mere data: Det er den fælles valuta for stort set enhver virksomhed eller branche i dag. Men værdien af disse data afhænger i høj grad af værktøjer til dataintegration. Uden dem har de fleste organisationer svært ved at organisere, analysere, lagre og sikre deres data.
Uanset hvor god du er til dataindsamling, har data kun ringe værdi, medmindre du kan få mening ud af dem. Faktisk kredser mange af fordelene ved dataintegration om netop dette grundlæggende mål: at øge værdien af alle de oplysninger, du har til rådighed.
Det forklarer også, hvorfor dataintegration i sig selv er blevet en industri til flere milliarder dollar. Organisationer håndterer stadig større datamængder samt stadig mere forskelligartede datakilder. Det er afgørende at samle det hele på en måde, der blandt andet gør dataene forståelige og anvendelige.
"Dataintegration er hjørnestenen i moderne virksomheder og muliggør problemfrit samarbejde og beslutningstagning på tværs af forskellige systemer og kilder," siger Rohit Maheshwari, medstifter af NMG Technologies.
Ligesom selve dataene tilpasser og udvikler dataintegration sig hele tiden i takt med nye muligheder og krav.
“Landskabet har gennemgået en bemærkelsesværdig forandring fra de tidlige dage med grundlæggende ETL-processer til nutidens avancerede løsninger til integration i realtid," siger Maheshwari.
Med det i tankerne bad vi Maheshwari og andre dataeksperter om at udtale sig om de vigtigste tendenser inden for dataintegration, der udfolder sig i 2024 og fremover. Her er, hvad de havde at sige.
Trend nr. 1: Organisationer konsoliderer deres dataoperationer og dataforvaltning
Stadig oftere finder man datakonsolidering samme sted som dataintegration: nærmere bestemt muligheden for at samle flere praksisser inden for dataforvaltning på én platform, selv om dataene i sig selv kommer fra et stadig bredere udvalg af kilder.
“Vi ser et ønske om konsolidering," siger Erik Duffield, medstifter og administrerende direktør for Hakkoda, et datakonsulentfirma med speciale i Snowflake-skyen. Duffields virksomhed gennemførte for nylig en undersøgelse blandt 500 dataansvarlige og beslutningstagere i store, USA-baserede virksomheder; næsten tre ud af fire respondenter (74 %) angav, at de planlagde at implementere en centraliseret sky til deres dataoperationer i 2024.
Lucas Wyland, grundlægger af analysevirksomheden Steambase, der arbejder med videospil, bemærker, at det medfører en vis indledende kompleksitet at samle forskellige dataoperationer ét sted, og at det normalt kræver omhyggelig planlægning, migrering og systemkompatibilitet blandt andet. Men fordelene er ofte indsatsen værd.
“Dataredundans er en betydelig udfordring for organisationer," siger Wyland. “Derfor strømliner de data operationer ved at konsolidere datapipelines, ETL-processer og datavarehuse. Det forenkler forvaltningen og reducerer redundans.”
Duffield fra Hakkoda deler et eksempel fra en nylig kunde, en regional bank, hvis data reelt var opdelt i tre forskellige siloer. Det skabte fragmentering i bankens overordnede strategi for dataforvaltning.
“Vi arbejdede tæt sammen med kunden om at konsolidere de silo-opdelte datakilder til én enkelt sandhedskilde, hvilket ikke blot gjorde det muligt for dem at danne sig et mere holistisk billede af deres data, men også at etablere et stærkt, fleksibelt og skalerbart fundament for fremtidig innovation, herunder AI-integration," siger Duffield.
(Husk lige tanken om AI-integration – vi vender tilbage til den om et øjeblik.)
Have an account? Log In
Trend nr. 2: Hybrid- og multiskyarkitekturer understreger behovet for dataintegration
Selv om flere organisationer konsoliderer deres dataforvaltning og deres operationer, kan det samme ikke siges om deres bredere portefølje af infrastruktur og applikationer. I mange organisationer er infrastruktur og applikationer i stigende grad fordelt på flere miljøer – hvilket understreger behovet for robuste værktøjer og praksisser til dataintegration.
Det er sandsynligvis også med til at drive konsolideringstendensen. Maheshwari bemærker, at integration af data, der er spredt på forskellige skymiljøer, kan skabe sine egne udfordringer og udløse et behov for “løsninger [til dataintegration], der tilbyder fleksibilitet, skalerbarhed og interoperabilitet.”
Distribueret infrastruktur og distribuerede applikationer fremhæver også dataintegrationens voksende rolle inden for datastyring og sikkerhed, ifølge Maheshwari, som tilføjer, at teknologiledere prioriterer databeskyttelse, overholdelse af lovgivningen og risikostyring.
Trend nr. 3: AI vil (på et tidspunkt) blive allestedsnærværende i datastakke
Ja, AI er allerede “overalt” (ikke rigtigt). Men hvad angår datateknologiske stakke, kradser vi kun i overfladen.
Hakodas undersøgelse af dataansvarlige viste eksempelvis, at det store flertal (85 %) planlægger at få værktøjer til generativ AI sat i produktion i 2024, og Duffield siger, at omtrent halvdelen af disse virksomheder allerede bruger AI i forskellige former for automatisering.
“Men vi ser langt sjældnere sofistikerede anvendelsestilfælde som AI-copiloter, ETL/ELT samt skemamatchning og -integration – i hvert fald indtil videre,” siger Duffield.
Der lægges vægt på indtil videre: “IT-organisationer er i en fantastisk position til at udnytte AI i interne processer for at ændre den måde, IT bliver designet, bygget og understøttet på,” tilføjer Duffield.
Maheshwari forventer ligeledes en stigende anvendelse af AI- og maskinlæringsalgoritmer i dataintegrationsprocesser samt automatisering af datahåndteringsopgaver som datarensning, transformation og afstemning.
Maheshwaris virksomhed arbejdede sammen med en stor e-handelsvirksomhed om at implementere AI-funktioner i deres dataintegrationsprocesser med det formål at forbedre forbrugernes købsoplevelser.
“Ved at integrere realtidsdata om kundeinteraktioner med produktlager og salgshistorik gjorde vi det muligt for vores kunde at levere personlige produktanbefalinger, hvilket øgede konverteringsraterne markant,” siger Maheshwari.
Trend nr. 4: Metadata-drevet automatisering vil også gøre datahåndtering og -integration hurtigere og bedre
Al automatisering kræver ikke AI – langt fra. Datahåndterings- og dataintegrationsprocesser giver mulighed for at reducere tidskrævende (og fejlbehæftede) manuelle opgaver. For organisationer, der endnu ikke er klar til at kaste sig hovedkulds ud i AI, peger Duffield på metadata-drevet automatisering som en anden vigtig tendens.
“Vi ser masser af muligheder for metadata-drevet automatisering ved indlæsning, integration og levering af analyseløsninger med høj værdi,” siger Duffield.
Robuste metadata kan sætte skub i dataintegration i små virksomheders processer på et tidligt stadie og give fordele senere i processen med hensyn til tillid, nøjagtighed, dataoprindelse og anvendelighed.
“Cloudplatforme, der indeholder betydelige mængder tekniske metadata, muliggør hurtig implementering og skalering af datapipelines og giver samtidig automatisk indsigt i dataoprindelsen – hvilket giver dataforbrugere tillid til, at dataene er nøjagtige og kommer fra den korrekte kilde,” siger Duffield.
Wyland fra Steambase påpeger, at denne funktion – robuste metadata og datastyring – bliver afgørende, efterhånden som flere virksomheder tager LLM'er og andre former for AI i brug.
“Det er afgørende at forstå dataflowet,” siger Wyland.
Han forventer en overlappende tendens her: udbredelsen af “rød-gul-grønne” (RAG) modeller, der visuelt repræsenterer dataoprindelse og datakvalitet.
“De hjælper fagfolk med at forstå dataflowet på tværs af systemer og identificere potentielle flaskehalse eller problemer,” siger Wyland.
More Articles
Trend nr. 5: Vertikalisering kommer til dataintegration
I betragtning af den dynamiske karakter af dataintegration og data ser Wyland også betydelige uudnyttede muligheder for løsninger, der er skræddersyet til branchespecifikke krav og anvendelsestilfælde.
Selvom der kan være nogle grundlæggende principper for datahåndtering og -integration, der gælder for stort set alle sektorer, fanger standardiserede løsninger måske ikke nuancerne – eller de gennemgribende forskelle – ved dataintegration i eksempelvis en produktionsvirksomhed sammenlignet med en sundhedsvirksomhed. Som følge heraf siger Wyland
“Vertikalisering indebærer at tilpasse [eller] skræddersy infrastrukturløsninger til specifikke brancher eller anvendelsestilfælde,” siger Wyland. “Det gør det muligt for organisationer at opnå bedre overensstemmelse med deres forretningsbehov.”
Effektiv gennemførelse af dette kræver domæneekspertise og fleksibilitet til at tilpasse sig unikke krav – hvilket betyder betydelige muligheder for datafagfolk og dataintegrationsudbydere, der kan levere.
Konklusionen
Dataintegration er hot – og det er der en god grund til. Det er et afgørende middel til at skabe mening i dine data og generere håndgribelig værdi. Ellers indsamler du bare data for dataindsamlingens egen skyld.
Hvilke af disse tendenser inden for dataintegration er mest relevante for din virksomhed? Tilmeld dig The CTO Clubs nyhedsbrev for flere branchenyheder og diskussioner!
