Walidacja i testy danych

Data validation and testing · id datavalidation · aliases: data validation, data tests, Great Expectations, schema

Automatyczne sprawdzanie, czy dane wejściowe mają oczekiwany schemat, zakresy i rozkłady, zanim trafią do treningu lub modelu w produkcji.

Automatically checking that incoming data has the expected schema, ranges and distributions before it reaches training or a production model.

In one sentence

To automatyczne sprawdzanie danych, zanim trafią do uczenia lub działającego modelu.

This automatically checks data before it reaches model training or a working model.

Problem it solves

Brakujące pola, błędne wartości lub nagła zmiana danych mogą zepsuć wyniki, choć program nadal działa.

Missing fields, incorrect values or sudden data changes can spoil results even while the software keeps running.

What it does

Sprawdza wymagane pola, dopuszczalne wartości i niespodziewane zmiany proporcji danych, a niezgodności kieruje do wyjaśnienia.

It checks required fields, allowed values and collection patterns, then flags mismatches for investigation.

Everyday example

Przed uruchomieniem prognozy program zauważa, że nowy plik zamówień nie zawiera dat, i zgłasza problem do sprawdzenia.

Before running a forecast, software notices that a new order file lacks dates and flags the problem for review.

This concerns you if you…

Examples

Related topics

Sources