Metody oceny i utrzymania detektorów malware, uwzględniające chronologię danych, realistyczne proporcje klas i spadek skuteczności w czasie.
Methods for evaluating and maintaining malware detectors that respect data chronology, realistic class ratios and performance decay over time.
Sposób uczciwego sprawdzania, jak długo detektor wirusów zachowa skuteczność, gdy przestępcy zaczną pisać nowe szkodniki.
A fair way to check how long a virus detector keeps working once criminals start writing new malware.
Detektory chwalone w publikacjach za niemal stuprocentową skuteczność po wdrożeniu szybko przestają wyłapywać nowe zagrożenia.
Detectors praised in papers for near-perfect accuracy quickly stop catching new threats once deployed.
Jak egzamin z pytań, których uczeń nie mógł widzieć: model uczy się na starszych próbkach i jest sprawdzany wyłącznie na późniejszych.
Like an exam with questions the student could not have seen: the model learns from older samples and is tested only on later ones.
Zespół trenuje detektor na aplikacjach z zeszłego roku i sprawdza go miesiąc po miesiącu na nowych; wykres pokazuje, kiedy trzeba go douczyć.
A team trains a detector on last year's apps and tests it month by month on new ones; the chart shows when it needs retraining.