Mekhoa ea ho Itšunya-tšunya Lipalopalong
Mokhoeng oa lipalo-palo le tlhahlobo ea data, bothata ba data e sieo hangata bo hlaha. Lintlha li ka ba sieo ka lebaka la ba arabang lipotso tse itseng, liphoso tsa ho rekota, tšitiso ea sensor, bobolu ba data nakong ea ho ntša, kapa ka lebaka la ts'ebetso ea ho kopanya mehloli e mengata ea data e sa tsamaellaneng ka botlalo. Haeba e sa sebetsoe hantle, data e sieo e ka senya boleng ba tlhahlobo , ea fokotsa matla a teko, esita le ho lebisa liqetong tse leeme. E 'ngoe ea mekhoa e tloaelehileng ea ho sebetsana le data e sieo ke ho qosa, e kenyeletsang ho tlatsa boleng bo sieo ka boleng bo hakantsoeng ho latela tlhaiso-leseling e fumanehang.
Hobaneng ho Kenyelletsoa ha Moemeli ho le Bohlokoa?
Ho na le mabaka a 'maloa a etsang hore ho qojoa hangata ho khethoe ho feta ho hlakola data e sieo feela. Ea pele, ho hlakola mela/lipono tse nang le boleng bo sieo (mohlala, ho hlakola ka lethathamo) ho ka fokotsa boholo ba sampole haholo, haholo-holo ha peresente ea data e sieo e le ea bohlokoa. Ea bobeli, haeba data e sa lahlehe ka tšohanyetso, ho hlakola ho ka hlahisa leeme. Ea boraro, li-algorithm tse ngata tsa lipalo-palo kapa tsa ho ithuta ka mochini li hloka data e felletseng , e leng se etsang hore qojoa e be mohato o bonolo oa ho e lokisa pele.
Leha ho le jwalo, ho qosa ha se feela taba ya "ho tlatsa dikgeo." Mokgwa o kgethilweng o lokela ho ela hloko mokgwa wa data o sieo, sebopeho sa diphetoho, le dipheo tsa tlhahlobo. Ho qosa ho fokolang ho ka "thetsa" mohlala, ha fokotsa phapang, mme ha etsa hore diphetho di bonahale di tiile ho feta kamoo di hlileng di leng kateng.
Mokhoa oa ho Lahleha ha Lintlha
Lingoliloeng tsa lipalo-palo, lintlha tse sieo hangata li aroloa ka mekhoa e meraro e meholo:
1. MCAR (E Sieo ka ho Feletseng ka Nako e sa Lebelloang): monyetla oa hore data e sieo ha o itšetlehe ka liphetoho life kapa life, tse bonoang kapa tse sa bonoeng. Mohlala, lethathamo la lipotso le sentsoeng ke kotsi.
2. MAR (E Sieo ka Nako e sa Lebelloang): monyetla oa hore data e sieo o itšetlehile ka phetoho e bonoang, empa ha e itšetlehe ka boleng bo sieo ka bobona ka mor'a ho laola liphetoho tse ling. Mohlala, bashanyana ba arabelang ba ka 'na ba fetoa ke lipotso tsa chelete, empa lilemo lia fumaneha.
3. MNAR (E Sieo Hase ka Nako e sa Lebelloang): Monyetla oa hore data e sieo o itšetlehile ka boleng bo sieo ka bobona. Mohlala, batho ba nang le chelete e ngata haholo ba atisa ho se senole chelete ea bona.
Hangata ho kenya data ka har'a data ho bolokehile haholoanyane tlas'a MCAR/MAR. Hangata MNAR e hloka mohlala o hlalosang ka ho hlaka lintlha tse sieo kapa tlhahlobo ea kutloisiso.
Mokhoa o Bonolo oa ho Ikemela
1. Palo e Bohareng/e Bohareng/Mokhoa oa ho Imputa
Mokhoa o bonolo ka ho fetisisa ke ho nkela boleng bo sieo sebaka ka karolelano kapa bohareng bakeng sa di-variable tsa dinomoro, le mokgwa wa di-variable tsa sehlopha. Melemo ke: e bonolo, e potlakile, mme hangata e sebetsa e le motheo. Di-risk ke: e ka fokotsa phapang le ho sotha kabo ya data, haholoholo haeba data e sa leka-lekane kapa e na le di-outliers. Hangata bohareng bo matla haholo khahlanong le lintho tse sa tloaelehang ho feta bohareng..
2. Ho qosa ka ho sa Feleng
Boleng bo sieo bo tlatsitsoe ka ntho e sa fetoheng e itseng, joalo ka 0, -1, kapa leiboleng "E sa Tsejoeng." Sena se thusa ha boleng bo na le moelelo o itseng (mohlala, "ha ho na transaction"), kapa ha mohlala o hloka ho fuoa sesupo se eketsehileng ho totobatsa ho haella. Leha ho le jwalo, ho kgetha ntho e sa fetoheng e sa fetoheng ho ka hlahisa dipaterone tse fosahetseng.
3. Ho kenya letsoho ho Hot Deck
Ka har'a teraka e chesang, boleng bo sieo bo tlatsoa ho sebelisoa boleng bo tsoang ho tse ling tse "tšoanang" (bafani) tse thehiloeng ho li-variable tse 'maloa tsa bohlokoa. Mokhoa ona o tumme liphuputsong. Li-teraka tse chesang li boloka boleng ba sebele hobane li hapa boleng ba 'nete ba data, empa liphetho lia utloisisa tlhaloso ea "ho tšoana" 'me li ka hlahisa phapang lipakeng tsa mehlala.
Mokhoa oa ho Itšunya-tšunya o Thehiloeng ho Mohlala
4. Ho tsitlella ho tsitlella
Boleng bo sieo bo boleloa esale pele ho sebelisoa mohlala oa ho khutlela morao oa li-variable tse ling. Bakeng sa li-variable tsa linomoro, ho khutlela morao ka mola ho ka sebelisoa; bakeng sa li-variable tsa sehlopha, ho ka sebelisoa. ho khutlela morao ha thepa kapa multinomial. Molemo: e sebelisa likamano tse pakeng tsa di-variable. Bothata: ho sebelisa boleng bo boletsoeng esale pele bo reriloeng esale pele feela ho atisa ho fokotsa phapang hobane boleng bohle bo boletsoeng esale pele bo oela hantle moleng o boletsoeng esale pele. Ho sebetsana le sena, karolo e sa reroang (mohlala, masalla) hangata e eketsoa bakeng sa bonnete bo boholo.
5. k-Baahelani ba Haufi (kNN)
Mokhoa oa kNN o tlatsa boleng bo sieo ho latela karolelano (kapa ho vouta) ea baahisani ba haufi ba k. Ho ba haufi hangata ho lekanngoa ka sebaka sa Euclidean kapa metric e 'ngoe ka mor'a hore data e be boemong bo tloaelehileng. Melemo ea eona e kenyelletsa ho tenyetseha le ho nahana hore ha ho na kamano e otlolohileng. Mathata a kenyelletsa ho bitsa chelete e ngata ka har'a li-data sets tse kholo, kutloisiso ea sekala se feto-fetohang, le ho senyeha ha ts'ebetso ho data ea tekanyo e phahameng (thohako ea tekanyo).
6. Tebello-Phahamiso (EM)
Mokhoa oa EM o hakanya liparamente tsa mohlala (mohlala, karolelano le covariance bakeng sa data e tloaelehileng ea multivariate) ka ho tšoara boleng bo sieo e le li-variable tse patiloeng. Mohato oa E o bala ka mokhoa o pheta-phetoang tebello ea boleng bo sieo ho latela liparamente tsa hona joale, ebe mohato oa M o ntlafatsa liparamente ho latela data e "feletseng" e lebelletsoeng. EM e tiile ho latela likhopolo tse itseng tsa kabo, empa e ka ba e rarahaneng 'me e itšetlehile ka ho nepahala ha likhopolo tsa mohlala.
Ho Itšunya-tšunya ka Makhetlo a Mangata: Tekanyetso ea Khauta Maemong a Mangata
7. Ho Imputa Hangata (MI)
Ho sebelisa Multiple Imputation ho nkoa e le e 'ngoe ea mekhoa e nang le melao-motheo e mengata ea MAR. Ho e-na le ho hlahisa sete e le 'ngoe ea data e felletseng, MI e hlahisa lisete tse ngata tsa data (mohlala, 5-20) ka litšupiso tse fapaneng tse bonts'ang ho se tsitse. Sete e 'ngoe le e 'ngoe ea data e hlahlojoa ka thoko, ebe liphetho li kopanngoa ho sebelisoa melao ea Rubin ho fumana likhakanyo tse nepahetseng haholoanyane le liphoso tse tloaelehileng.
Melemo ea MI:
– E amohela ho se tsitse ha qoso.
– E nepahetseng haholoanyane bakeng sa tlhaloso ea lipalo-palo (likhaello tsa kholiseho, teko ea khopolo-taba).
– E tenyetseha bakeng sa mefuta e fapaneng ea lintho tse fetohang.
Meeli ea eona:
– Ho kenya tshebetsong ho rarahaneng haholoanyane.
– E hloka likhakanyo tse lekaneng le litlhaloso tsa mohlala oa qoso.
– Haeba ho na le khaello ho MNAR, MI e tloaelehileng e ntse e ka ba leeme.
Ho kenyelletsoa ha letoto la nako le lintlha tsa sebaka
Dintlheng tsa letoto la nako, boleng bo sieo hangata bo amana haholo le boleng ba tsona bo fetileng le bo latelang. Mekhoa e kang ho kenella ka mola, li-spline, li-filter tsa Kalman, kapa mehlala ea ARIMA/State Space hangata e sebelisoa. Bakeng sa lintlha tsa sebaka, mekhoa e kang kriging le mehlala ea sebaka e ka sebelisa bohaufi ba sebaka. Mekhoa ena e sebetsa hantle ha sebopeho sa nako/sebaka se le seholo, empa tlhokomelo e lokela ho sebelisoa khahlanong le liphetoho tse potlakileng (mohlala, litšitiso tsa moruo) tse ka etsang hore ho kenella ka mokhoa o bonolo ho khelose.
Mekhoa e Metle ea ho Khetha Mekhoa ea ho Imputa
1. Etsa tlhahlobo ea data e sieo: hlahloba peresente ea boleng bo sieo, mohlala oa ho sieo, le hore na ho sieo ho amana le phetoho e itseng.
2. Arola data ea koetliso le ea liteko: etsa qoso ka ho "ithuta" ho tsoa data ea koetliso feela, ebe u e sebelisa ho data ea liteko ho qoba ho lutla ha data.
3. Nahana ka mofuta o feto-fetohang: wa dipalo, wa sehlopha, wa ordinal, kapa o tswakilweng; mokgwa o nepahetseng o a fapana.
4. Sebelisa matshwao a lahlehileng: ka nako e nngwe tlhahisoleseding ya hore boleng bo haella ka boyona e bolela esale pele; ho eketsa di-variable tsa matshwao ho ka ntlafatsa tshebetso ya mohlala wa ho bolela esale pele.
5. Lekola tšusumetso ea qoso: bapisa likabo pele/kamora qoso, hlahloba hore na phapang e fokotsehile, 'me u netefatse mohlala.
6. Beha MI pele bakeng sa ho etsa qeto: ha sepheo sa tlhahlobo e le khakanyo ea liparamente le tlhahlobo ea lipalo-palo, hangata ho nepahala ho feta ho etsa qeto e le 'ngoe.
Qetello
Ho kenya tshebetsong ha data ke karolo ya bohlokwa ya mesebetsi ya sejwalejwale ya dipalopalo bakeng sa ho sebetsana le data e sieo. Mekhoa e bonolo jwalo ka mean/median e ka ba molemo e le motheo kapa bakeng sa ho hloleha ho honyenyane, empa hangata e senya sebopeho sa data le ho se tsitse. Mekhoa e thehilweng ho mohlala jwalo ka regression, kNN, le EM e sebedisa dikamano pakeng tsa di-variable, ha Multiple Imputation e fana ka moralo o tiileng wa ho etsa qeto o ikarabellang bakeng sa ho se tsitse. Kgetho ya mokgwa o motle ka ho fetisisa e itshetlehile ka mokgwa wa data o sieo (MCAR/MAR/MNAR), sepheo sa tlhahlobo (ponelopele vs. inference), le dibopeho tsa data (letoto la nako, sebaka, tse tswakilweng). Ka mokgwa o nepahetseng, ho kenya tshebetsong ho thusa ho boloka botshepehi ba tlhahlobo mme ho hlahisa diqeto tse tshepahalang haholoanyane.
