Усулҳои визуализатсияи маълумот дар омор

Усулҳои визуализатсияи маълумот дар омор

Визуализатсияи маълумот ҷузъи муҳими омори муосир аст. Дар байни фаровонии маълумот аз пурсишҳо, таҷрибаҳо, муомилоти рақамӣ ва сенсорҳо, мушкили асосӣ на танҳо таҳлили рақамҳо, балки расонидани маънои онҳо низ мебошад. Дар ин ҷо визуализатсияи маълумот ба кор меояд: табдил додани маълумоти хом ба намоишҳои фаҳмо, кӯмак дар кашфи нақшҳо, ошкор кардани аномалияҳо, муқоисаи гурӯҳҳо ва дастгирии қабули қарорҳои асосёфта ба далелҳо. Дар ин мақола усулҳои маъмули визуализатсияи маълумот дар омор, ҳадафҳои онҳо ва принсипҳои таъмини гумроҳкунанда набудани визуализатсияҳо баррасӣ мешаванд.

1. Нақши визуализатсияи маълумот дар омор

Дар омор, визуализатсия дар якчанд марҳилаҳои таҳлил истифода мешавад. Аввалан, ҳангоми таҳлили маълумоти иктишофӣ (EDA), графикҳо ба таҳлилгарон кӯмак мекунанд, ки пеш аз сохтани модел тақсимот, тағирёбӣ, берунравӣ ва муносибатҳои байни тағирёбандаҳоро дарк кунанд. Дуюм, визуализатсия барои расонидани натиҷаҳо истифода мешавад: гузоришҳои тадқиқотӣ, презентатсияҳои тиҷорӣ ва нашрияҳои илмӣ барои дарки зуди натиҷаҳои асосӣ ба графикҳои равшан ниёз доранд. Сеюм, визуализатсия инчунин барои тасдиқи модел муҳим аст, масалан, тавассути графикҳои боқимонда, графикҳои пешгӯишуда нисбат ба воқеӣ ё дигар графикҳои ташхисӣ.

Ба ибораи дигар, визуализатсияи маълумот на танҳо як "ороиши" гузоришҳо, балки як абзори таҳлилӣ аст, ки ба сифати хулосаҳои оморӣ таъсир мерасонад.

2. Усулҳои визуализатсия барои маълумоти якченакдор (як тағирёбанда)

Вақте ки диққати таҳлил танҳо ба як тағирёбанда равона карда мешавад, ҳадафи асосӣ фаҳмидани шакли тақсимот, маркази додаҳо ва паҳншавии он мебошад.

а) Гистограмма
Гистограмма тақсимоти маълумоти рақамиро тавассути тақсим кардани маълумот ба фосилаҳо (қуттиҳо) нишон медиҳад. Аз гистограмма, мо метавонем муайян кунем, ки оё маълумот симметрӣ аст, ба тарафи рост ё чап каҷ шудааст ё зиёда аз як қулла дорад (мултимодалӣ). Интихоби шумораи қуттиҳо муҳим аст: қуттиҳои аз ҳад зиёд метавонанд тафсилотро пинҳон кунанд, дар ҳоле ки қуттиҳои аз ҳад зиёд метавонанд графикро пурғавғо кунанд.

б. Нақшаи қуттӣ (диаграммаи қуттӣ)
Нақшаи қуттӣ маълумотро бо истифода аз медиана, квартилҳо ва хориҷкуниҳо ҷамъбаст мекунад. Ин усул барои муайян кардани зуди тағйирот ва хориҷкуниҳо хеле муфид аст. Дар омор, нақшаҳои қуттӣ аз сабаби фишурда будани онҳо як воситаи стандартӣ барои муқоисаи тақсимот байни гурӯҳҳо мебошанд.

Хонед  Усулҳои ғайрипараметрӣ дар омор

в. Графи зичӣ (каҷхати зичӣ)
Каҷхати зичӣ ба гистограмма монанд аст, аммо ҳамвортар аст. Ин визуализатсия ба нишон додани шакли тақсимот бидуни такя ба интихоби қуттӣ кӯмак мекунад. Графикҳои зичӣ аксар вақт барои муқоисаи ду тақсимот дар як график истифода мешаванд.

г. Диаграммаи сутунӣ барои маълумоти категориявӣ
Барои тағирёбандаҳои категориявӣ (масалан, ҷинс, сатҳи маълумот, категорияи маҳсулот), диаграммаҳои сутунӣ интихоби афзалиятнок мебошанд. Боварӣ ҳосил кунед, ки меҳварҳои категорияҳо ба таври мантиқӣ (масалан, аз рӯи тартиби табиӣ ё басомад) барои хондани осон ҷойгир карда шудаанд.

3. Усулҳои визуализатсия барои муқоисаи байнигурӯҳҳо

Дар бисёр таҳқиқоти оморӣ, мо бояд маълумотро аз рӯи гурӯҳҳо муқоиса кунем (масалан, табобат бо назорат, минтақаи А бо В ё синфҳои гуногун).

а. Нақшаи қуттӣ барои ҳар як гурӯҳ
Қуттичаҳо барои муқоисаи медианҳо, тақсимот ва буришҳо байни гурӯҳҳо хеле муассиранд. Агар гурӯҳҳо зиёд бошанд, гардиши меҳварҳо ё истифодаи самти уфуқиро барои хондан осонтар кардани нишонаҳо баррасӣ кунед.

б) Сюжети скрипка
Графики скрипка диаграммаи қуттӣ ва каҷи зичиро барои нишон додани ҳам хулоса ва ҳам шакли тақсимот муттаҳид мекунад. Ин вақте муфид аст, ки мо мехоҳем муайян кунем, ки оё фарқиятҳои гурӯҳӣ аз шаклҳои гуногуни тақсимот ба вуҷуд омадаанд.

в) Диаграммаи миёна/нуқта бо хатҳои хато
Барои муоширати бештари хулосабарорӣ, кашидани миёна бо сатрҳои хато (масалан, инҳирофи стандартӣ, хатои стандартӣ ё фосилаи эътимод) миёнаи тахминӣ ва номуайянии онро таъкид мекунад. Аммо, ин усул эҳтиёткориро талаб мекунад: миёна метавонад тақсимоти асимметрӣ ё бисёрмодалиро пинҳон кунад.

4. Усулҳои визуализатсия барои робитаи байни ду тағйирёбанда (ду тағйирёбанда)

Таҳлили дуҷониба барои фаҳмидани муносибати байни ду тағирёбанда, хоҳ рақамӣ-рақамӣ, ададӣ-категорӣ ё категориявӣ-категорӣ, равона шудааст.

а. Диаграммаи парокандагӣ (диаграммаи парокандагӣ)
Графики пароканда интихоби маъмултарин барои ду тағирёбандаи рақамӣ мебошад. Он намунаҳои хаттӣ, ғайрихаттӣ, кластерӣ ва берунравӣҳоро нишон медиҳад. Барои таҳлили пешрафта, графикҳои пароканда аксар вақт бо хатҳои регрессия ё ҳамворкунӣ (масалан, LOESS) барои равшан кардани тамоюлҳо пурра карда мешаванд.

б) Диаграммаи хатӣ барои маълумотҳои силсилаи вақт
Агар тағирёбандаи рақамӣ бо мурури замон тағйир ёбад, графики хатӣ барои муайян кардани тамоюлҳо, мавсимӣ ва авҷгирии онҳо кӯмак мекунад. Дар омори силсилаҳои вақт, ин график аксар вақт пеш аз моделсозии ARIMA, ҳамворкунии экспоненсиалӣ ё дигар моделҳо истифода мешавад.

Хонед  Фарқи байни миёна, медиана ва мода дар омори тавсифӣ

в. Харитаи гармӣ барои категорияҳо ё матритсаҳо
Харитаҳои гармӣ барои ҷадвалҳои шартӣ ё матритсаҳои коррелятсия мувофиқанд. Рангҳо шиддат ё бузургии арзишҳоро ифода мекунанд. Ин усул барои маҷмӯаҳои калони додаҳо самаранок аст, аммо барои пешгирӣ аз тафсири нодуруст, нақшаи ранг бояд мувофиқ интихоб карда шавад.

5. Усулҳои визуализатсияи бисёрченакӣ (беш аз ду тағйирёбанда)

Вақте ки маълумот дорои якчанд тағирёбанда аст, мушкилӣ дар он аст, ки маълумотро бидуни мураккаб кардани график нишон диҳед.

а. Диаграммаи пароканда бо ранг/андоза/шакл
Диаграммаи пароканда метавонад тағирёбандаҳои иловагиро бо истифода аз ранг (категориявӣ), андозаи нуқта (рақамӣ) ё шакл (категориявӣ) нишон диҳад. Ин усул пурқувват аст, аммо он талаб мекунад, ки боварӣ ҳосил карда шавад, ки ривоят равшан аст ва фарқиятҳои визуалӣ он қадар нозук нестанд.

б. Фейстинг (зарраҳои хурд)
Фасетинг ҳамон як диаграммаро ба панелҳои сершумор дар асоси категорияҳо (масалан, аз рӯи минтақа ё аз рӯи намуди маҳсулот) тақсим мекунад. Ин аксар вақт нисбат ба фишурдани маълумоти аз ҳад зиёд дар як диаграмма самараноктар аст.

в. Графики ҷуфтӣ / матритсаи пароканда
Матритсаи парокандагӣ ҳамаи ҷуфтҳои тағйирёбандаҳои рақамиро дар як шабака нишон медиҳад. Ин барои муайян кардани робитаҳо байни тағйирёбандаҳо, коррелятсияҳои қавӣ ё намунаҳои кластерӣ кӯмак мекунад. Ин усул барои EDA, махсусан пеш аз таҳлили регрессия ё омӯзиши мошинӣ, муфид аст.

г. Диаграммаи биплотавии PCA ё графики камкунии андоза
Барои маҷмӯи додаҳо бо хусусиятҳои зиёд, усулҳои кам кардани андозагирӣ, ба монанди PCA, t-SNE ё UMAP, метавонанд маълумотро ба 2D харита кунанд, то кластерҳоро ошкор кунанд. Дар омор, биплотҳои PCA инчунин метавонанд саҳми тағирёбандаҳоро ба ҷузъҳои асосӣ нишон диҳанд. Аммо, натиҷаҳои кам кардани андозагирӣ бояд бо эҳтиёт шарҳ дода шаванд, зеро маълумот ҳангоми фишурдашавӣ аз даст меравад.

6. Принсипҳои тарроҳии визуализатсияҳои хуб

Агар тарҳ дуруст набошад, як усули хуби визуализатсия метавонад зараровар бошад. Дар ин ҷо баъзе принсипҳои муҳим дар заминаи омор оварда шудаанд:

1. Диаграммаеро интихоб кунед, ки ба намуди додаҳо ва саволи шумо мувофиқ бошад. Диаграммаи доиравиро барои категорияҳои аз ҳад зиёд ё барои муқоисаи фарқиятҳои хурд истифода набаред.
2. Аз миқёси меҳварҳо ростқавлона истифода баред. Буридани меҳварҳо (масалан, меҳвари y аз сифр оғоз намешавад) метавонад фарқиятҳоро ба таври визуалӣ афзоиш диҳад. Ин баъзан қобили қабул аст, аммо бояд ба он контекст ва асосноккунӣ дода шавад.
3. Ба ранг диққат диҳед. Палитраи мувофиқ барои рангҳоро истифода баред ва аз омезиши рангҳои душвор худдорӣ кунед.
4. Нишонаҳо ва манбаъҳои равшанро пешниҳод кунед. Унвон, ривоят, воҳидҳо ва сарлавҳаҳо бояд пурра бошанд, то график мустақилона истода тавонад.
5. Дар ҳолати зарурӣ номуайяниро нишон диҳед. Дар омори хулосавӣ, нишон додани фосилаҳои эътимод, бандҳои пешгӯиҳо ё сатрҳои хато нисбат ба нишон додани рақамҳои ягона хеле иттилоотӣтар аст.
6. Аз «партовҳои диаграмма» худдорӣ кунед. Эффектҳои сеченака, ороишоти аз ҳад зиёд ё градиентҳои нолозим метавонанд диққатро аз паёми асосӣ парешон кунанд.

Хонед  Усули регрессияи ғайрихаттӣ

7. Хатогиҳои маъмулӣ дар визуализатсияи оморӣ

Баъзе хатогиҳо маъмуланд ва метавонанд хонандагонро гумроҳ кунанд:
– Истифодаи миёна барои маълумоти хеле каҷрав бе нишон додани медиана ё тақсимот.
– Якҷоя кардани категорияҳои аз ҳад зиёд хондани графикро душвор мегардонад.
– Андозаи намунаро нишон намедиҳад, ҳатто агар миқдори маълумот хеле фарқ кунад, муқоисаи гурӯҳҳо метавонад ғаразнок бошад.
– Гирифтани хулосаҳои сабабӣ аз графикҳои пароканда, ки танҳо коррелятсияро нишон медиҳанд.

8. Хулоса

Усулҳои визуализатсияи маълумот дар омор фаҳмиши маълумот, ҳадафҳои таҳлил ва малакаҳои муоширатро муттаҳид мекунанд. Гистограммаҳо, диаграммаҳои қуттӣ, диаграммаҳои пароканда, диаграммаҳои хатӣ, харитаҳои гармӣ ва ҳатто усулҳои бисёрҷанба ба монанди фасетинг ва PCA ба таҳлилгарон кӯмак мекунанд, ки он чизеро, ки аз ҷадвалҳои рақамҳо ба осонӣ намоён нест, бубинанд. Аммо, визуализатсияҳои хуб на танҳо "зебо", балки дақиқ, ростқавл ва ба саволҳое, ки мехоҳанд ҷавоб диҳанд, нигаронида шудаанд.

Бо истифода аз усулҳои дуруст ва принсипҳои тарроҳии дуруст, визуализатсияи маълумот метавонад пули пуриқтидоре байни таҳлили мураккаби оморӣ ва фаҳмиши осон барои шунавандагони гуногун - аз муҳаққиқон то сиёсатгузорон бошад.

Агар шумо хоҳед, ман метавонам ин мақоларо барои бештар илмӣ (бо иқтибосҳо) мутобиқ кунам, мисолҳои парванда илова кунам ё версияеро эҷод кунам, ки ба нармафзори мушаххас ба монанди Excel, R ё Python тамаркуз мекунад.

Шарҳ гузоред