Czym są dane główne – i dlaczego zaczynają jako PDF

Dane główne to podstawowe, wolno zmieniające się informacje biznesowe, które identyfikują byty, na których opiera się firma: klientów, produkty, dostawców, pracowników, lokalizacje i konta. To "kto" i "co", do którego odnosi się każda transakcja, definiowane raz i udostępniane każdemu systemowi, który tego potrzebuje.

Kluczowe wnioski

  • Dane główne opisują byty. Dane transakcyjne opisują zdarzenia. Zamówienia przychodzą i odchodzą, a każde z nich wskazuje na rekord klienta, który pozostaje niezmieniony.
  • Złe dane główne to nie tylko niedogodność w raportowaniu. To zduplikowana płatność, przesyłka na nieaktualny adres, oblany audyt.
  • Prawie wszystkie te dane zaczynają jako dokument. Parseur automatycznie wyciąga pola z takiego dokumentu, dzięki czemu formularz wdrożeniowy dostawcy nigdy nie jest ponownie wpisywany ręcznie do systemu ERP.

Wpisz "dane główne znaczenie" w oknie wyszukiwania, a otrzymasz osiem wersji powyższego akapitu. Każda definicja danych głównych zmierza do tego samego wniosku. Czego prawie żadna z nich nie obejmuje, to skąd biorą się te dane, zanim staną się danymi głównymi, a to właśnie ta część pochłania czyjeś całe popołudnie. Najpierw szybko przejdziemy przez definicje. Potem do części pełnej bałaganu, gdzie podpisana umowa i zeskanowany formularz wdrożeniowy stają się czystym rekordem w Twoim ERP.

A zatem, czym dokładnie są dane główne?

Dane główne to warstwa, na którą wskazuje każdy inny rekord. Twój ERP nie przechowuje firmy Acme Components LLC tysiąc razy. Przechowuje ją raz, a tysiąc faktur wskazuje na ten jeden rekord. Gdy każdy system zgadza się co do tego rekordu, masz jedno źródło prawdy (single source of truth), a złożona, najlepiej znana wersja każdego podmiotu ma swoją własną nazwę w zarządzaniu danymi głównymi - złoty rekord (golden record).

Tym, co je wyróżnia, nie jest ich ważność. Jest to ich tempo. Nazwa prawna klienta może zmienić się raz na dekadę. Jego historia zamówień zmienia się co tydzień. Ta różnica to całe sedno i to właśnie dlatego dane główne warto definiować w jednym miejscu zamiast w ośmiu.

Globalnie, przewiduje się, że rynek zarządzania danymi głównymi wzrośnie z 21,70 mld USD w 2026 r. do 72,77 mld USD w 2034 r., przy rocznym wskaźniku wzrostu (CAGR) wynoszącym 16,30%, według Fortune Business Insights.

Najważniejsze domeny danych głównych

Dane główne są grupowane w domeny, z których każda opisuje jeden typ bytu i ma własnego właściciela, atrybuty i reguły. Domena daje Ci jedno miejsce, w którym możesz odpowiedzieć na pytanie „kim jest ten dostawca”, zamiast sześciu sprzecznych odpowiedzi z sześciu różnych systemów.

An infographic showing the core master data domains including customer, product, supplier, employee and location
Master Data Domains

Najpopularniejsze domeny, gdzie zazwyczaj "żyją" i jakie pola zawierają:

Domena Definicja Typowe systemy źródłowe Typowe pola
Klient (Customer) Informacje o osobach lub organizacjach, które kupują lub używają Twoich produktów. CRM, Rozliczenia, Wsparcie ID klienta, Nazwa firmy
Produkt (Product) Podstawowe dane opisujące sprzedawane towary lub usługi. ERP, PIM, E-commerce Nazwa produktu, SKU
Dostawca / Sprzedawca (Supplier/Vendor) Dane o zewnętrznych dostawcach materiałów lub usług. ERP, Zakupy, Zobowiązania (AP) ID dostawcy, Warunki płatności
Pracownik (Employee) Szczegółowe informacje na temat personelu wewnętrznego i ról w organizacji. HRIS, Płace, Active Directory ID pracownika, Dział
Lokalizacja (Location) Informacje o fizycznych lub wirtualnych miejscach wykorzystywanych w działalności biznesowej. ERP, Zarządzanie obiektami, GIS Adres, Kod obiektu
Konto (Plan kont) Struktura używana do organizowania transakcji finansowych. ERP, Księgowość, Systemy finansowe Kod konta, Centrum kosztów
Aktywo (Asset) Zapisy dotyczące posiadanego lub dzierżawionego sprzętu, oprogramowania czy infrastruktury. Zarządzanie aktywami, ERP ID aktywa, Status
Kontrakt (Contract) Umowy definiujące relacje z klientami, dostawcami lub partnerami. CLM, ERP, CRM ID kontraktu, Data wejścia w życie

Nadaj każdej domenie jednego właściciela i jeden zestaw reguł, a duplikaty przestaną się mnożyć, dokładność zostanie zachowana, a żaden analityk nie będzie musiał odbudowywać listy klientów od zera w każdym kwartale.

Dane główne vs dane transakcyjne vs dane referencyjne

Różnicę najłatwiej zauważyć na pojedynczej fakturze.

Przychodzi faktura od Acme Components na kwotę 18 750 USD, z terminem płatności do 30 września. Ta faktura to dane transakcyjne: opisuje coś, co wydarzyło się raz. Dostawca, który za nią stoi, Acme Components LLC, wraz ze swoim NIP-em, adresem do przelewów, warunkami płatności (np. 45 dni) i zatwierdzoną kategorią zakupową, to dane główne: opisuje coś, co istnieje i do czego będzie odnosić się kolejne dwieście faktur. „USD” znajdujące się w polu waluty to dane referencyjne: ustandaryzowana wartość ze stałej listy, używana do kategoryzacji obu z nich.

Dane główne stoją w miejscu. Dane transakcyjne gromadzą się wokół nich, a dane referencyjne sprawiają, że oba te byty używają tych samych słów.

An infographic comparing master data and transactional data side by side
Master Data vs Transactional Data

Zestawienie trzech typów danych

Typ danych Cel Przykładowe byty Przykład
Dane główne Definiują kluczowe byty biznesowe używane w różnych systemach Klient, Produkt, Dostawca Rekord klienta w CRM
Dane transakcyjne Rejestrują zdarzenia i działania biznesowe Zamówienia, Faktury, Przesyłki Zamówienie #12345 złożone przez klienta
Dane referencyjne Dostarczają dozwolonych wartości lub kategorii w celu zachowania spójności Kody krajów, Waluta, Jednostki „USD” jako kod waluty

Sporo pieniędzy zależy od utrzymania w porządku tych trzech elementów. Globalny rynek zarządzania danymi przedsiębiorstw ma wzrosnąć ze 137,3 mld USD w 2026 r. do 319,6 mld USD do 2033 r., przy rocznym wskaźniku wzrostu (CAGR) na poziomie 12,8%, według Grand View Research.

Skąd biorą się dane główne, zanim staną się danymi głównymi

Oto część, którą pomijają strony ze słownikami pojęć. Dane główne nie pojawiają się w Twoim ERP same z siebie. Pojawiają się jako dokumenty papierowe lub cyfrowe.

Nowy dostawca nie wyśle Ci rekordu do bazy danych. Otrzymujesz formularz wdrożeniowy, formularz W-9, pismo z banku, podpisaną umowę, certyfikat ubezpieczenia i, jeśli dzień dobrze się układa, zdjęcie anulowanego czeku zrobione pod kątem. Każde pole, którego potrzebujesz, znajduje się w tych dokumentach. Żadne z nich nie jest ustrukturyzowane i ktoś musi po nie pójść i je wyciągnąć.

Jeśli dwie osoby w Twoim zespole spędzają pierwszą godzinę każdego ranka na ręcznym przenoszeniu tego stosu do danych głównych dostawcy, to nie masz jeszcze problemu ze strategią danych głównych. Masz problem z przepisywaniem danych (wprowadzaniem danych).

Dokumenty stojące za rekordem głównym dostawcy

Dokument Pola danych głównych, które przenosi
Formularz wdrożeniowy dostawcy Nazwa prawna, nazwa handlowa, adres, osoba kontaktowa, metoda płatności
Formularz podatkowy (np. W-9 lub W-8) Klasyfikacja podatkowa, numer identyfikacji podatkowej (NIP), nazwa prawna podmiotu
Pismo bankowe lub anulowany czek Nazwa banku, numer rozliczeniowy, numer konta
Podpisana umowa Warunki płatności, data wejścia w życie, data rozwiązania, zobowiązania cenowe
Certyfikat ubezpieczeniowy Rodzaj ubezpieczenia, limity, data wygaśnięcia
Faktura Adres do przelewów, numer VAT, waluta

Dokumenty nie są danymi głównymi. Są dowodami, z których buduje się dane główne.

Jak faktycznie powstaje rekord

Droga od dokumentu do zatwierdzonego rekordu głównego przebiega przez sześć etapów. Zwróć uwagę na ten, który wciąż opiera się na człowieku.

  1. Przyjęcie (Intake). Dokumenty lądują w skrzynce odbiorczej, portalu dostawcy, na wspólnym dysku lub na podajniku skanera.
  2. Ekstrakcja. Pola są wyciągane z dokumentu, czy to przez osobę przepisującą je na nowo, czy przez oprogramowanie, które je odczytuje.
  3. Walidacja. Sprawdzane są formaty, potwierdzane są wymagane pola, stosowane są reguły biznesowe. Czy NIP jest poprawny, czy kraj jest zatwierdzony, czy te warunki płatności są dozwolone?
  4. Dopasowanie i deduplikacja. Zanim rekord zostanie utworzony, jest sprawdzany pod kątem tego, co już istnieje. Acme Components LLC, ACME Components i Acme Components, L.L.C. muszą zostać zidentyfikowane jako jeden dostawca, a nie trzech.
  5. Zatwierdzenie. Dział zakupów, podatkowy, finansowy i steward danych akceptują rekord, każdy w zakresie swojej odpowiedzialności.
  6. Utworzenie. Zatwierdzony rekord jest zapisywany w głównym systemie ewidencji (system of record) i przesyłany dalej do wszystkich systemów podrzędnych.

Etapy od 3 do 6 to obszar, dla którego tworzone są platformy MDM. Etap 2 to miejsce, w którym uciekają godziny, i jest to proces, który większość programów do danych głównych wciąż powierza pracownikowi z otwartym plikiem PDF na jednym ekranie i formularzem ERP na drugim.

Gdzie pasuje Parseur, a gdzie nie

Parseur automatyzuje etap 2, i tylko etap 2. Nie jest to platforma MDM i nie będzie udawać, że nią jest.

Przesyłasz formularze wdrożeniowe, umowy, formularze podatkowe i faktury do skrzynki odbiorczej Parseur. Sztuczna inteligencja oparta na tekście odczytuje e-maile i dokumenty cyfrowe. Sztuczna inteligencja oparta na obrazie (Vision AI) odczytuje pliki PDF, skany i anulowane czeki sfotografowane pod kątem. Nie musisz najpierw budować żadnego szablonu.

Pola wracają do Ciebie ustrukturyzowane i lądują w Twoim systemie ERP, CRM, arkuszu kalkulacyjnym lub pipeline MDM za pośrednictwem integracji lub API, już uformowane tak, jak oczekują tego Twoje reguły walidacji.

Rekord nadal musi zostać zweryfikowany, dopasowany i zatwierdzony przez ludzi i systemy, które powinny to robić. Tyle tylko, że nie musi być wcześniej przepisywany z klawiatury. A jeśli poprzednie narzędzie poddało się przy pierwszym zeskanowanym pliku PDF, jaki mu dałeś, jedynym testem, który warto przeprowadzić, jest sprawdzian na Twoim najgorszym dokumencie, pierwszego dnia. Aby zobaczyć sprawdzony przykład tego procesu w dziale zobowiązań (accounts payable), sprawdź, jak zespoły automatyzują przetwarzanie faktur i dokumentów dostawców.

Utwórz darmowe konto
Oszczędzaj czas i wysiłek z Parseur. Automatyzuj swoje dokumenty.

Dlaczego dane główne mają znaczenie poza zespołem ds. danych

Czyste dane główne to nie tylko preferencja zespołu analityków danych. To one powstrzymują resztę firmy przed kłótniami o to, czyje liczby są poprawne.

  • Jeden rekord na klienta. Cztery wersje tego samego konta oznaczają zduplikowane działania sprzedażowe, zduplikowane faktury i kolejkę do korekty, której nikt nie chce obsługiwać. Oznacza to również, że dział wsparcia nie pyta tej samej osoby kim ona jest trzy razy w ciągu jednego tygodnia.
  • Raportowanie, któremu ludzie ufają. Finanse, sprzedaż i operacje pobierają te same wartości, więc comiesięczne spotkanie przestaje być ćwiczeniem z uzgadniania sald.
  • Audyty, które pozostają nudne. Znormalizowane dane jednostek sprawiają, że żądanie podatkowe lub dotyczące prywatności staje się prostym zapytaniem, a nie projektem archeologicznym. Norma ISO 8000 istnieje właśnie po to, by zdefiniować, jak w tym kontekście wygląda "wystarczająco dobrze".
  • Sztuczna inteligencja, która nie myli się z pełnym przekonaniem. Nakarm model sztucznej inteligencji duplikatami, a odda ci je z powrotem w mgnieniu oka, tylko ładniejszą czcionką.
  • Mniej kosztownych pomyłek. Jeden wzorzec produktu, spójne kody SKU, odpowiedni towar na ciężarówce.

Osiągnięcie tego celu to w mniejszym stopniu kwestia zakupu platformy, a w większym automatyzacji kontroli jakości, która w przeciwnym razie nigdy nie zostałaby wykonana.

Jak dane główne są używane w różnych systemach

Każdy system opiera się na tych samych rekordach z własnych powodów. W CRM dane główne klienta to jego rekord kontaktowy, więc jeśli jest on nieaktualny, handlowiec wysyła e-maile do kogoś, kto odszedł z pracy w 2023 r. W ERP zakupy, zapasy i zamknięcie miesiąca opierają się na danych głównych produktów, dostawców i kont. Moduł bilingowy czyta dane klientów i umów, by decydować, co zostanie zafakturowane, na jakich warunkach i kiedy można uznać przychód. Panele analityczne zgadzają się ze sobą tylko wtedy, gdy liczą te same podmioty. A jakość, na której trenujesz model AI, to jakość, którą otrzymasz z powrotem.

Zespoły z najlepszymi danymi głównymi przestały pisać na klawiaturze

Dane główne to warstwa, do której odnoszą się wszystkie inne elementy stosu technologicznego. Zdefiniuj raz swoich klientów, produkty i dostawców, utrzymuj te definicje zgodnie z prawdą, a raportowanie, zgodność z przepisami i automatyzacja staną się łatwiejsze w tym samym czasie.

Zapytaj czym są dane główne, a otrzymasz listę bytów. Zapytaj skąd się wzięły, a otrzymasz szafkę na dokumenty. Firmy z najczystszymi danymi głównymi rzadko są tymi, które korzystają z najdroższych platform MDM. To te, które przestały ręcznie przepisywać dokumenty, z których te dane pochodzą.

Ostatnia aktualizacja

Rozpocznij

Gotowy zautomatyzować
ekstrakcję danych z dokumentów?

Zacznij za darmo w kilka minut i zobacz, jak Parseur wpasowuje się w Twój proces.

Bez trenowania modeli AI
Automatyzuje wprowadzanie danych z dowolnego dokumentu
Skaluje się od wskaż-i-kliknij po pełne API

Najczęściej zadawane pytania

Krótkie odpowiedzi na to, o co ludzie faktycznie pytają w kontekście danych głównych. Definicja, domeny, skąd w ogóle biorą się dane i kto odpowiada za ich poprawność.

Prosta definicja danych głównych to lista rzeczy, do których Twoja firma stale się odwołuje: klienci, produkty, dostawcy, pracownicy, lokalizacje i konta. Transakcje opisują to, co się wydarzyło. Dane główne opisują, komu i czemu to się przydarzyło.

Większość organizacji zaczyna od czterech podstawowych domen: klient, produkt, dostawca (lub sprzedawca) i pracownik. Większe firmy dodają lokalizację, plan kont, aktywa i umowy jako oddzielne domeny z własnymi właścicielami i zasadami.

Dane główne opisują byty biznesowe. Dane referencyjne definiują dozwolone wartości używane do ich klasyfikacji, takie jak kody krajów, waluty lub jednostki miary. Rekord dostawcy to dane główne. „USD” w jego polu waluty to dane referencyjne.

Pola są wyodrębniane z dokumentu, sprawdzane pod kątem poprawności, weryfikowane z istniejącymi rekordami w celu uniknięcia duplikatów, zatwierdzane i dopiero wtedy zapisywane w systemie ewidencji. Narzędzia takie jak Parseur automatyzują etap ekstrakcji, dzięki czemu pola trafiają w ustrukturyzowanej formie zamiast być przepisywane.

Nie do końca. Jedno źródło prawdy to cel. Dane główne to materiał, z którego go budujesz, a zarządzanie danymi głównymi to dyscyplina, która Cię do niego prowadzi.

Porównując każdy nowy rekord z tym, co już istnieje, przed jego utworzeniem, używając identyfikatorów takich jak NIP, konto bankowe lub znormalizowana nazwa prawna. Niejednoznaczne dopasowania trafiają do stewarda danych (data steward), zamiast być łączne automatycznie. Więcej na ten temat w artykule o oczyszczaniu, dopasowywaniu i wzbogacaniu danych.

Tak. Nowoczesne platformy MDM synchronizują rekordy między systemami za pośrednictwem interfejsów API i strumieni zdarzeń, dzięki czemu adres poprawiony w jednym miejscu rozprzestrzenia się w ciągu kilku sekund, a nie z dnia na dzień.

Rekord klienta zawierający nazwę prawną, adres rozliczeniowy, dane kontaktowe i unikalny identyfikator klienta, używany w niezmienionej formie w CRM, systemach bilingowych i wsparciu. Zamówienia składane przez tego klienta to transakcje. Sam rekord to dane główne.

Dane główne opisują jednostki biznesowe i zmieniają się powoli. Dane transakcyjne rejestrują zdarzenia biznesowe i są tworzone stale. Faktura 12345 to dane transakcyjne. Dostawca, który ją wystawił, to dane główne i nadal będzie tam istniał po opłaceniu i zarchiwizowaniu faktury.

Większość danych głównych zaczyna swoje życie na dokumencie. Formularze wdrożeniowe dostawców, formularze podatkowe (np. W-9), listy z banku, podpisane umowy, certyfikaty ubezpieczeniowe i faktury zawierają pola, które stają się rekordem głównym. Właśnie dlatego tak wiele danych głównych jest nadal tworzonych przez kogoś czytającego plik PDF i wpisującego dane do systemu ERP.

Złoty rekord to jedna, uzgodniona wersja bytu, złożona z tego, co każdy system o nim wie. Jeśli sprzedaż, finanse i wsparcie przechowują różne adresy dla tego samego klienta, złoty rekord jest tym, któremu wszyscy powinni ufać.

Domeny to kategorie, w które grupowane są dane główne, każda z własnym właścicielem, atrybutami i zasadami. Najczęstsze z nich to klient, produkt, dostawca, pracownik, lokalizacja, konto, zasób i umowa.

Tak. Zarządzanie danymi głównymi to operacyjne ramię ładu danych, egzekwujące standardy i zasady własności, które ten ład definiuje.

Biznesowi stewardzi danych i zespoły zarządzania danymi są ich właścicielami, a dział IT odpowiada za integrację i kontrolę jakości na poziomie systemu. Własność jest zwykle przypisywana do domeny, więc dane główne dostawcy i dane główne produktu mają różnych właścicieli.