Jakość danych: siedem kontroli przed wysłaniem raportu
Sprawdź kompletność, typy, klucze, zakresy i sumy danych. Rozróżnij błąd techniczny od wyjątku biznesowego oraz braku informacji.
Zespół Data Skills · · 4 min czytania
Raport bez komunikatu błędu może zawierać niepełne lub źle zinterpretowane dane. Zielony pasek jakości kolumny również nie potwierdza, że wynik odpowiada na biznesowe pytanie. Potrzebujesz kilku niewielkich kontroli, których znaczenie potrafisz wyjaśnić. Nie chodzi o tworzenie długiej procedury dla każdego pliku. Chodzi o wykrycie błędu zanim liczba zostanie wykorzystana do decyzji.
1. Zgodność okresu i jednostki obserwacji
Zapisz, co oznacza wiersz: zamówienie, jego pozycję, klienta czy miesiąc. Określ okres, walutę oraz podstawę kwoty. Wartość netto i brutto nie powinny bez komentarza trafiać do jednej sumy. Jedna kolumna date może oznaczać dzień zakupu, dostawy albo płatności, a każde z tych znaczeń prowadzi do innego raportu.
Sprawdź również moment pobrania. Dane za pełny poprzedni miesiąc i pierwszą połowę bieżącego nie są równoważnymi okresami. Jeżeli używasz niepełnego okresu, pokaż to w tytule i opisie miary. Taka informacja zmienia interpretację potencjalnego spadku.
2. Kompletność dostawy
Wiesz, że powinny dotrzeć pliki trzech regionów? Zapisz ich oczekiwane nazwy i sprawdź obecność każdego. Suma może być poprawnie policzona z dwóch plików, lecz nie przedstawiać całej firmy. Kontrola kompletności wyprzedza rachunek.
Porównaj liczbę rekordów z informacją od źródła albo z niezależnym eksportem. Nie traktuj identycznej liczby wierszy jak bezwzględnego obowiązku: miesiące mogą mieć różne wolumeny. To sygnał do sprawdzenia, a nie samodzielny dowód błędu.
3. Typy i ustawienia regionalne
Identyfikator 001 jest tekstowym kodem, nie liczbą do dodawania. Cena 123.45 w CSV wymaga interpretacji zgodnej z formatem źródła. Microsoft wyjaśnia rolę typów i ustawień regionalnych Power Query. Sam język menu nie rozstrzyga, jak została odczytana data.
Sprawdź kilka znanych wartości po konwersji. Ustawienie formatu walutowego w arkuszu nie zamienia automatycznie tekstu na poprawną liczbę. Jeśli daty albo kwoty są błędne, napraw krok importu zamiast ręcznie poprawiać wybrane komórki bez śladu.
4. Unikatowość właściwego klucza
Przyjmij pięć syntetycznych rekordów: K01 z kwotą 100 zł, K02 z 200 zł, identyczną kopię K02 z 200 zł, K03 bez kwoty oraz K04 ze zwrotem minus 50 zł. Jeżeli jeden wiersz powinien być transakcją, powtórzony K02 wymaga wyjaśnienia.
Zachowanie pierwszej identycznej kopii może być prawidłową regułą, ale dwie różne wersje tego samego ID potrzebują decyzji o obowiązywaniu. Nie usuwaj duplikatów po samej kwocie: różne transakcje mogą mieć identyczną wartość. Po połączeniu tabel sprawdź również liczbę dopasowań, zgodnie z przykładem JOIN i sum.
5. Braki, zera i wyjątki biznesowe
K03 bez kwoty nie jest sprzedażą zero. Zapisz go w tabeli wyjątków do uzupełnienia. K04 z kwotą ujemną może być poprawnym zwrotem; nie odrzucaj go tylko dlatego, że wygląda nietypowo. Reguła zakresu zależy od znaczenia pola.
Po usunięciu jednej kopii K02 i odłożeniu K03 pozostają trzy rekordy: 100 + 200 − 50 = 250 zł. Raport powinien pokazać również jeden brak kwoty i jedną decyzję o duplikacie. Bez tych informacji odbiorca nie wie, dlaczego pięć wierszy wejścia prowadzi do trzech w wyniku.
6. Uzgodnienie agregacji
Suma regionów powinna zgadzać się z sumą całego źródła, jeśli każdy rekord należy dokładnie do jednego regionu. Podobnie liczba pozycji po filtrze powinna odpowiadać jawnej regule, a nie aktywnemu przypadkowemu wyborowi w interfejsie.
W Power Query możesz użyć profilowania kolumn. Pamiętaj, że domyślnie obejmuje ono pierwsze 1000 wierszy; przełącz na cały zbiór, gdy potrzebujesz oceny pełnej dostawy. Poprawny typ wartości nie potwierdza jeszcze poprawnej definicji biznesowej.
7. Powtarzalność i reakcja na błąd
Zapisz wynik kontroli, datę, właściciela danych i sposób naprawy. Jeśli kontrola kluczy nie przechodzi, wstrzymaj przekazanie raportu i wskaż problematyczne rekordy. Ręczne poprawienie finalnej sumy nie usuwa przyczyny i może wrócić po odświeżeniu.
Wykonaj test nowej dostawy na kopii procesu. Dodaj poprawny rekord, błędny typ i powtórzony klucz, a następnie sprawdź oczekiwane reakcje. Testy mają potwierdzać zachowanie, nie tylko obecność kolorowych wskaźników.
Nie poprawiaj procesu poza procesem
Gdy znajdziesz brak kwoty, nie dopisuj domyślnej wartości tylko w końcowej tabeli raportu. Po następnym odświeżeniu taka poprawka może zniknąć. Wprowadź korektę do właściwego źródła albo utrzymywanej tabeli korekt z kluczem, uzasadnieniem i datą. W przykładzie K03 może wrócić do obliczeń dopiero po dostarczeniu kwoty oraz powtórzeniu kontroli. Nowa suma musi być wyjaśniona przez tę zmianę, nie przez ręczną edycję pola „razem”. Zachowanie surowej dostawy i rejestru wyjątków pozwala później odtworzyć, dlaczego dwa raporty pokazują różne wyniki.
FAQ
Czy wartości ujemne zawsze są błędem?
Nie. Mogą oznaczać zwrot, korektę albo stratę. Reguła musi wynikać z definicji miary i procesu źródłowego.
Czy wszystkie braki zastąpić zerem?
Nie. Zero jest wartością, a brak jest brakiem informacji. Zastąpienie wymaga jawnego uzasadnienia i oceny wpływu na wynik.
Co zrobić z poprawnym technicznie raportem?
Poproś właściciela procesu o sprawdzenie kilku znanych rekordów i interpretacji miar. Do automatyzacji przejdź z kontrolami, korzystając z Power Query. Praktyczne ćwiczenia znajdziesz w Data Missions.