Harapan dan kenyataan: mengapa metrik sistem ML menurun dalam penjualan? Kasus dari karya Celsus

gambar



, ML- , . ML-, , . - , , ML-.



, ( ).



Mari kita mulai dengan alasan paling umum untuk penurunan metrik dalam kesalahan teknis produksi . Misalnya, prediksi model dalam pengujian offline dan dalam produksi mungkin berbeda karena perbedaan kode yang digunakan untuk praproses gambar. Ada beberapa cara sederhana untuk melindungi diri Anda dari rasa malu ini:



  • . (, , ) , . . : , - , ( – , – ).



    gambar



    • -. , -. , , -, , ML- .


    gambar



    • . , , ML-, , (, ). , , COVID-19 . , , . ( ).


    — , . .



    , (ROC-AUC = 0.53, ), . , ML- . , ML- - , , .



    , . , , . , , , - . ML- Out-of-Distribution . , , ML-. .



    gambar





    . , , (, ). , (, ML- - ) . ML covariate shift concept drift.



    , , ML- , . , , , , .



    , , . ( , , ) , . , - . , , : .



    , . -. - . ML- , , .



    , . – , .



    , ( ) ML- , - . ML- . -, , .



    , ML- – ML-. , , :



    • ( -, , )
    • ML- Out-of-Distribution-
    • ,
    • , –



All Articles