Dataavstamming

Representasjon av en MapReduce-kjøring som en-til-mange-relasjoner
En-til-mange-hierarki for en MapReduce-kjøring

Dataavstamming (engelsk: data lineage) er en beskrivelse eller representasjon av hvor data kommer fra (opprinnelsen til data). For eksempel kan den vise hvilke underliggende tabeller en tabell i en database er laget av. Dataavstamming gir synlighet, og forenkler sporing av feil i dataanalytikk tilbake til rotårsaken.[1] Dersom man bruker versjonskontroll er det også mulig å se hva som skjer med dataavstammingen over tid.[2]

Dataavstamming kan også muliggjøre rekjøring av spesifikke deler eller innputt av en dataflyt for stegvis feilsøking eller regenerering av tapte resultater. Databasesystemer bruker slik informasjon, kalt dataopprinnelse (data provenance), for å løse lignende utfordringer med validering og feilsøking.[3] Dataopprinnelse kan her referere til registrering av inndata, entiteter, systemer og prosesser som påvirker data av interesse, og gir en historisk oversikt over dataene og deres opprinnelse. Dette kan brukes for å støtte opp under dataetterforskning , som for eksempel avhengighetsanalyse, analyse av kompromitterte data og gjenoppretting, revisjon og samsvarsanalyse. Dataavstamming kan derved sees på som en undertype av dataopprinnelse.[3]

Dataavstamming kan representeres visuelt for å se dataflyten fra kilder til destinasjoner, via ulike transformasjoner underveis, hvordan representasjon og parametre endres, og hvordan data deler seg eller konvergerer etter hvert hopp. En enkel representasjon av avstammingen kan vises med prikker og linjer, der punktene representerer databeholdere, og linjene representerer transformasjonene dataene går gjennom mellom databeholderne.

Representasjon avhenger stort sett av hvordan metadataene er organisert, og hva som er av interesse. Dataavstamming kan både brukes bakover for å vise kildene til dataene, og fremover for å se hvor dataene blir brukt. En ende-til-ende-visning gir mulighet for full gjennomgang, men kan være omfattende med mange grener. Etterhvert som antallet datapunkter og hopp øker blir kompleksiteten til en slik representasjon uforståelig. Dette kan begrenses ved å midlertidig maskere andre stier, og se på en og en sti av gangen. Hvis dataavstammingen er lett overførbar til kildekode- og datastrukturer kan det lette feilsøking, datamigrering og endring av prosesser, og derved spare betydelige mengder tid og ressurser i arbeid med virksomhetsetterretning.[4] Dataavstamming styres og forvaltes vanligvis av datastyring og dataforvaltning. For å representere forskjellige systemer samlet kan normalisering av metadata eller standardisering være nødvendig.

Se også

Referanser

  1. ^ Hoang, Natalie (16. mars 2017). «Data Lineage Helps Drives Business Value - Trifacta». Trifacta (på engelsk). Besøkt 20. september 2017. 
  2. ^ «What is Data Lineage? - Definition from Techopedia». 
  3. ^ a b De, Soumyarupa. (2012). Newt : an architecture for lineage based replay and debugging in DISC systems. UC San Diego: b7355202. Retrieved from: https://escholarship.org/uc/item/3170p7zn
  4. ^ Drori, Amanon (18. mai 2020). «What is Data Lineage? - Octopai». Octopai (på engelsk). Besøkt 25. august 2020. 

Read other articles:

American FactorySutradara Steven Bognar Julia Reichert Produser Jeff Reichert Julie Parker Benello Penata musikChad CannonSinematografer Steven Bognar Aubrey Keith Jeff Reichert Julia Reichert Erick Stoll PenyuntingLindsay UtzPerusahaanproduksi Higher Ground Productions Participant Media DistributorNetflixTanggal rilis 25 Januari 2019 (2019-01-25) (Sundance) 21 Agustus 2019 (2019-08-21) (Amerika Serikat) Durasi110 menitNegaraAmerika SerikatBahasa Inggris Mandarin Amer...

 

 

Bagian dari seriPemelajaran mesindan Penggalian Data Paradigma Pemelajaran terawasi Pemelajaran tak terawasi Pemelajaran mesin daring Pemelajaran mesin luring Meta-learning Pemelajaran semi terawasi Pemelajaran terawasi mandiri Reinforcement learning Pemelajaran berbasis aturan Pemelajaran mesin kuantum Masalah Klasifikasi Model generatif Regresi Kluster Reduksi dimensi Estimasi densitas Deteksi anomali Pembersihan data AutoML Aturan asosiasi Analisis semantik Rekayasa fitur Pemelajaran fitur...

 

 

У этого термина существуют и другие значения, см. Кингисепп (значения). Запрос «Ямбург» перенаправляется сюда; см. также другие значения. ГородКингисепп Флаг Герб 59°22′41″ с. ш. 28°36′04″ в. д.HGЯO Страна  Россия Субъект Федерации Ленинградская область Муниципа�...

العلاقات الباربادوسية البوتانية باربادوس بوتان   باربادوس   بوتان تعديل مصدري - تعديل   العلاقات الباربادوسية البوتانية هي العلاقات الثنائية التي تجمع بين باربادوس وبوتان.[1][2][3][4][5] مقارنة بين البلدين هذه مقارنة عامة ومرجعية للدولتين: وج�...

 

 

Одновременное вложение графов — это техника визуализации двух и более различных графов на одном и том же множестве помеченных вершин, при которой избегается пересечения рёбер в каждом из графов. Пересечения между рёбрами разных графов разрешаются, не разрешается тольк...

 

 

Wempi Wellem Mawa Bupati Malinau Ke-4PetahanaMulai menjabat 26 April 2021PresidenJoko WidodoGubernurZainal Arifin PaliwangWakilJakaria PendahuluTopan AmrullahPenggantiPetahana Informasi pribadiLahir8 Juli 1973 (umur 50)Pelita Kanaan(sekarang Malinau - Kalimantan Utara)[1]KebangsaanIndonesiaPartai politikDemokratSuami/istriMaylentyAnak1. Laban Aldrik Hezkia2. Balang Algeri Oscar Raya3. Lasung Alvin ZenobiaSunting kotak info • L • B Wempi Wellem Mawa, S.E. (la...

Austrian, later British composer, teacher and musicologist (1885–1974) Egon WelleszBornEgon Joseph Wellesz(1885-10-21)21 October 1885Vienna, Austria-HungaryDied9 November 1974(1974-11-09) (aged 89)Oxford, England, UKEducation Musicologist Composer Academic teacher OrganizationLincoln College, Oxford Egon Joseph Wellesz, CBE, FBA (21 October 1885 – 9 November 1974) was an Austrian, later British composer, teacher and musicologist, notable particularly in the field of Byzantine music. ...

 

 

Nichan Iftikhar Insigne d'officier du Nichan Iftikhar (France) daté de 1947 et attribuée par Lamine Bey. Décernée par Tunisie / France Type Distinction à six classes Éligibilité Militaires ou civils Décerné pour Long service et mérite Statut Éteint Chiffres Date de création 1837 Première attribution 1837 Dernière attribution 1957 Grand-cordon ou Grand-croix Grand officier Commandeur Officier Chevalier Rubans de l'ordre du Nichan Iftikhar. modifier  Le Nichan Iftikhar ou Ni...

 

 

Novel by Martin Amis The Information First UK edition coverAuthorMartin AmisCountryEnglandLanguageEnglishPublisherFlamingo (UK)Harmony Books (US)Publication date1995Media typePrint (hardback & paperback)Pages494ISBN0-00-225356-9 The Information is a 1995 novel by British writer Martin Amis. The plot involves two forty-year-old novelists, Gwyn Barry (successful) and Richard Tull (not so). Amis has asserted that both characters are based (if they can be regarded as based on anybody) on...

Popular Buddhist temple in Bagan, Myanmar Sulamani Temple Sulamani Temple Sulamani Temple fresco detail Sulamani Temple fresco The Sulamani Temple (Burmese: စူဠာမဏိဘုရား, pronounced [sùlàmənḭ pʰəjá]) is a Buddhist temple located in the village of Minnanthu (southwest of Bagan) in Myanmar. The temple is one of the most-frequently visited in Bagan. It was built in 1183 by King Narapatisithu,[1]: 178  and is similar to the Thatbyinn...

 

 

National coat of arms of the Republic of Trinidad and Tobago Coat of arms of Trinidad and TobagoArmigerRepublic of Trinidad and TobagoAdopted1962; 62 years ago (1962)CrestIn front of a palm tree proper a ship's wheel.ShieldPer chevron enhanced sable and gules, a chevronel enhanced argent between in chief two hummingbirds respectant Or and in base three ships of the period of Christopher Columbus also Or, the sails set proper.SupportersA scarlet ibis and a cocrico, both prope...

 

 

историческое государство ИмперияЯпонская империяяп. 大日本帝國 Флаг Императорская печать Гимн: «Кими га ё» Японская империя в 1942 году     Япония (1870—1905)      Колонии     Оккупированные территории (1932—1945) ↓ ↓ 3 января 1868 (29 ноября 1890) — 2 сентяб...

Pour les articles homonymes, voir Wygodzki. Jakub WygodzkiBiographieNaissance 3 avril 1856BabrouïskDécès Juillet 1941 (à 85 ans)VilniusNom dans la langue maternelle Jokūbas VygodskisNationalités lituaniennepolonaiseFormation Académie médico-chirurgicale impériale (d)Académie médicale militaire S.M. Kirov (en)Activités Homme politique, gynécologue, journaliste, écrivainFratrie Gavriil Vygodsky (d)Enfant Aleksandra Jakovlevna Bruštejn (en)Autres informationsParti politique ...

 

 

2016年美國總統選舉 ← 2012 2016年11月8日 2020 → 538個選舉人團席位獲勝需270票民意調查投票率55.7%[1][2] ▲ 0.8 %   获提名人 唐納·川普 希拉莉·克林頓 政党 共和黨 民主党 家鄉州 紐約州 紐約州 竞选搭档 迈克·彭斯 蒂姆·凱恩 选举人票 304[3][4][註 1] 227[5] 胜出州/省 30 + 緬-2 20 + DC 民選得票 62,984,828[6] 65,853,514[6]...

 

 

المعجزة الاقتصادية الإيطاليةمعلومات عامةالمنطقة إيطاليا التأثيراتفرع من Post-World War II in Italy (en) Reconstruction (en) تعديل - تعديل مصدري - تعديل ويكي بيانات وسط مدينة ميلانو في الستينيات المعجزة الاقتصادية الإيطالية أو الطفرة الاقتصادية الإيطالية (بالإيطالية: il miracolo economico)‏ مصطلحٌ استخ...

Academic journalNature ChemistryDisciplineChemistryLanguageEnglishEdited byStuart CantrillPublication detailsHistory2009–presentPublisherNature PortfolioFrequencyMonthlyOpen accessHybridImpact factor21.8 (2022)Standard abbreviationsISO 4 (alt) · Bluebook (alt1 · alt2)NLM (alt) · MathSciNet (alt )ISO 4Nat. Chem.IndexingCODEN (alt · alt2) · JSTOR (alt) · LCCN (alt)MIAR · NLM (alt) ·...

 

 

American politician Joshua SeneyMember-elect of theU.S. House of Representativesfrom Maryland's 7th districtDied before assuming officePreceded byWilliam HindmanSucceeded byJoseph Hopper NicholsonMember of the U.S. House of Representativesfrom Maryland's 2nd districtIn officeMarch 4, 1789 – December 6, 1792Preceded byConstituency establishedSucceeded byWilliam Hindman Personal detailsBorn(1756-03-04)March 4, 1756near Church Hill, Maryland, British AmericaDiedOctober 20,...

 

 

Serbian emigrant communities This article is about the national Serbian diaspora. For the ethnic Serb diaspora, see Serb diaspora. This article uses bare URLs, which are uninformative and vulnerable to link rot. Please consider converting them to full citations to ensure the article remains verifiable and maintains a consistent citation style. Several templates and tools are available to assist in formatting, such as reFill (documentation) and Citation bot (documentation). (September 2022) (L...

Proposed concepts for human settlements on Mars A rendering of the Interplanetary Transport System approaching Mars, a concept colonyship of the in-development SpaceX Mars Colonization Program The colonization of Mars is the proposed process of establishing and maintaining control of Martian land for exploitation and the possible settlement of Mars.[1] Most colonization concepts focus on settling, but colonization is a broader ethical concept,[2] which international space law ...

 

 

Paghimo ni bot Lsjbot. 41°52′00″N 14°08′00″E / 41.86667°N 14.13333°E / 41.86667; 14.13333 Serra Veticara Tagaytay Nasod  Italya Rehiyon Abruzzo Gitas-on 1,573 m (5,161 ft) Tiganos 41°52′00″N 14°08′00″E / 41.86667°N 14.13333°E / 41.86667; 14.13333 Timezone CET (UTC+1)  - summer (DST) CEST (UTC+2) GeoNames 3164478 Tagaytay ang Serra Veticara sa Italya.[1] Nahimutang ni sa rehiyon sa Abruzzo, s...