O le iloa o mea e le masani ai o le toa filemu lea o galuega faʻatino o faʻamaumauga - o le faʻailo asu e musumusu aʻo leʻi mu mea.
I se faaupuga faigofie: E aʻoaʻoina e le AI le foliga o le "masani-ish", tuʻuina atu i mea fou se togi e le masani ai , ona filifili lea pe tatau ona faʻapipiʻi se tagata (pe poloka otometi le mea) e faʻavae i luga o se tulaga faʻatapulaʻa . O le tiapolo o loʻo i le auala e te faʻamatalaina ai le "masani-ish" pe a faʻavaitaimi au faʻamatalaga, faʻalavelave, feʻaveaʻi, ma o nisi taimi e pepelo ia te oe. [1]
O tala e te ono fia faitauina pe a uma lenei:
🔗 Aiseā e mafai ai e le AI ona afaina ai le sosaiete
O loʻo suʻesuʻeina tulaga lamatia tau amio, tamaoaiga, ma agafesootai o le lautele o le faʻaaogaina o le AI.
🔗 Le tele o le vai e faʻaaogaina moni e faiga faʻapitoa o le atamai faʻapitoa (AI)
Faʻamatalaina le faʻamālūlūina o le nofoaga autu o faʻamaumauga, manaʻoga o aʻoaʻoga, ma aafiaga o le vai i le siosiomaga.
🔗 O le ā le faʻamaumauga o le AI ma le māfuaʻaga e tāua ai
Faʻamatalaina faʻamaumauga, faʻailogaina, punaʻoa, ma la latou matafaioi i le faʻatinoga o le faʻataʻitaʻiga.
🔗 Auala e vavalo ai e le AI aga masani mai faʻamatalaga faigata
E aofia ai le iloaina o mamanu, faʻataʻitaʻiga o le aʻoaʻoina o masini, ma faʻaaogaina o vavalo i le lalolagi moni.
"E fa'apefea ona iloa e le AI ni mea e le masani ai?"
O se tali lelei e tatau ona sili atu nai lo le lisiina o algorithms. E tatau ona faʻamatalaina ai le faiga ma o latou foliga pe a e faʻaaogaina i faʻamatalaga moni ma le le atoatoa. O faʻamatalaga sili ona lelei:
-
Faaali mea taua: foliga , fa'avae , togi , ma tapula'a . [1]
-
Fa'atusatusa aiga fa'atino: mamao, mafiafia, vasega e tasi, vavae'ese, fa'atusatusaga, toe fausiaina. [1]
-
Taulimaina mea uiga ese o le faasologa o taimi: o le "masani" e faalagolago i le taimi o le aso, aso o le vaiaso, fa'asalalauga, ma aso malolo. [1]
-
Ia taulima le iloiloga e pei o se fa'atapula'a moni: o fa'ailo sese e le gata ina fa'alavelave - ae latou te fa'aumatia fo'i le fa'atuatuaga. [4]
-
Aofia ai le fa'amatalaina + tagata-i-le-taamilosaga, aua o le "e ese" e le o se mafua'aga autu. [5]
O Mekanika Autū: Fa'avae, Sikoa, Fa'atapula'a 🧠
O le tele o faiga e le masani ai - matagofie pe leai - e fa'avae i vaega e tolu e fealua'i:
1) Fa'atusa (e ta'ua fo'i o le mea e va'aia )
E seasea lava ona lava fa'ailoga mata. E te fa'ainisinia foliga (fuainumera fa'asolosolo, fua fa'atatau, lags, deltas fa'avaitaimi) pe a'oa'o fo'i fa'atusa (fa'apipi'iina, avanoa laiti, toe fausiaina). [1]
2) Fa'ailogaina (e ta'ua fo'i: e fa'apefea ona "ese" lenei mea?)
O manatu masani mo le faia o togi e aofia ai:
-
E fa'atatau i le mamao : mamao mai tuaoi = masalosalo. [1]
-
Fa'avae i le mafiafia : maualalo le mafiafia i le lotoifale = masalomia (O le LOF o le tamaititi lea e iloa ai). [1]
-
Tasi le vasega tuaoi : aʻoaʻo le "masani," faʻailoga mea e pa'ū i fafo. [1]
-
Fa'afuafua : maualalo le avanoa i lalo o se fa'ata'ita'iga fetaui = masalomia. [1]
-
Sese o le toe fausiaina : afai e le mafai e se faʻataʻitaʻiga ua aʻoaʻoina i le tulaga masani ona toe fausia, atonu ua sese. [1]
3) Fa'atapula'aina (e ta'ua fo'i o afea e tata ai le logo)
E mafai ona fa'amautu tapula'a, fa'avae i le aofa'i, vaega ta'itasi, pe fa'atatau i tau - ae e tatau ona fa'atusatusa i paketi fa'ailoa ma tau i lalo ifo, ae le o ni lagona. [4]
O se tasi o faʻamatalaga aoga tele: o masini suʻesuʻe fou/outlier a le scikit-learn e faʻaalia ai togi mata ona faʻaaoga lea o se tulaga faʻatapulaʻa (e masani ona pulea e ala i se manatu faʻaleagaina) e liua ai togi i ni faʻaiuga inlier/outlier. [2]
Fa'amatalaga Pupuu e Puipuia ai le Tiga Mulimuli Ane 🧯
E lua eseesega e laveaʻiina ai oe mai mea sese laiti:
-
Iloa o mea e le o iai i fafo : atonu ua aofia i au faʻamaumauga o aʻoaʻoga ni mea e le o iai i fafo; e taumafai lava le algorithm e faʻataʻitaʻi le "itulagi masani mafiafia".
-
Iloa fou : o faʻamaumauga o aʻoaʻoga e manatu e mama; o loʻo e faʻamasinoina pe fou ma le mamanu masani ua aʻoaʻoina. [2]
E le gata i lea: o le iloa o mea fou e masani ona fa'atulagaina o se fa'avasegaga e tasi le vasega - o le fa'ata'ita'iina o le tulaga masani ona o fa'ata'ita'iga e le masani ai e seasea pe le fa'amatalaina. [1]
O Mea Fa'atino e Le'i Va'ava'aia o le a E Fa'aaogaina Moni 🧰
A seāseā ona maua ni fa'ailoga (o le mea moni lava lea e masani ai), o meafaigaluega ia e fa'aalia i totonu o paipa moni:
-
Vaomatua Fa'aesea : o se fa'atulagaga masani malosi i le tele o mataupu fa'atulagaina, e fa'aaogaina lautele i le fa'atinoina ma fa'atinoina i le scikit-learn. [2]
-
SVM Vasega Tasi : e mafai ona aoga ae e maaleale i le fetuuna'i ma manatu fa'apitoa; o le scikit-learn e ta'ua manino ai le mana'omia o le fetuuna'i fa'aeteete o le hyperparameter. [2]
-
Local Outlier Factor (LOF) : togi masani e faʻavae i luga o le mafiafia; sili pe a le o se mea e faigofie ona malamalama i ai le "masani". [1]
O se mea aoga e toe suʻesuʻeina e 'au i vaiaso taʻitasi: E eseese amioga a le LOF e fuafua i le pe o e faia le suʻesuʻeina o mea e le masani ai i luga o le seti aʻoaʻoga pe o le suʻesuʻeina o mea fou i luga o faʻamatalaga fou - e manaʻomia foʻi e le scikit-learn le novelty=True e maua ai ni 'ai e leʻi vaʻaia ma le saogalemu. [2]
O se Fa'avae Malosi e Aoga Pea Pe a Faigata Fa'amaumauga 🪓
Afai o loʻo e i ai i le tulaga "matou te manaʻomia se mea e le faʻagaloina ai i matou", e le o faʻatauvaʻaina fuainumera malolosi.
O le z-score ua suia e faʻaaogaina le median ma le MAD (median absolute deviation) e faʻaitiitia ai le maaleale i tulaga ogaoga. O le tusi lesona a le NIST's EDA o loʻo faʻamaumauina ai le faʻatulagaga o le z-score ua suia ma faʻailoa mai ai se tulafono masani e faʻaaogaina o le "potential outlier" i se tulaga maualuga e sili atu i le 3.5 . [3]
E lē foʻia ai faʻafitauli uma e lē masani ai - ae e masani lava o se puipuiga malosi muamua, aemaise lava mo fua faʻatatau pisapisao ma le mataʻituina i le amataga. [3]
Faasologa o Taimi Moni: "E Masani" e Faʻalagolago i le Taimi ⏱️📈
E faigata ona iloa ni fa'aletonu o le fa'asologa o taimi ona o le uiga autū o le tala'aga: atonu e fa'amoemoeina se oso fa'afuase'i i le aoauli; o le oso fa'afuase'i lava lea i le 3 i le taeao atonu o lona uiga o lo'o iai se mea o lo'o mu. O le tele o faiga fa'atino o lea la, o lo'o fa'ata'ita'iina ai le tulaga masani e fa'aaoga ai foliga e iloa ai le taimi (lags, seasonal deltas, rolling windows) ma togi le eseesega e fa'atatau i le mamanu e fa'amoemoeina. [1]
Afai e na'o le tasi le tulafono e te manatua: vaevae lau laina autu (itula/aso/itulaga/vaega o auaunaga) a'o le'i fa'ailoa atu le afa o lau feoa'iga "e le masani ai." [1]
Iloiloga: O le Mailei e Seāseā Tutupu 🧪
O le iloa o mea sese e masani lava o le "nila i totonu o se faaputuga vaomago," lea e ese ai le iloiloga:
-
E mafai ona foliga lelei mai pi'oga ROC pe a seāseā ona iai ni mea lelei.
-
O vaaiga toe manatua sa'o e masani ona sili atu ona aoga mo tulaga le paleni ona e taula'i i le fa'atinoga i le vasega lelei. [4]
-
I le fa'atinoina o galuega, e te mana'omia fo'i se paketi fa'ailoilo : e fia fa'ailoilo i le itula e mafai e tagata ona fa'avasega e aunoa ma le taofia o le ita? [4]
O le toe faia o suʻega i luga o faʻamalama o loʻo faʻagasolo e fesoasoani ia te oe e puʻeina ai le faiga masani o le toilalo: "e galue lelei ... i le tufatufaina atu o le masina talu ai." [1]
Fa'amatalaina ma le A'a Autu: Fa'aali Lau Galuega 🪄
O le lapata'i e aunoa ma se fa'amatalaga e pei o le mauaina o se kata meli lilo. E ui e aogā, ae e fa'aita.
E mafai e meafaigaluega fa'amatala ona fesoasoani e ala i le fa'asino i po'o fea foliga na sili ona saofagā i se togi e le masani ai, pe ala i le tu'uina atu o fa'amatalaga fa'avae "o le a le mea e mana'omia ona suia ina ia foliga masani ai lenei mea?". O le Interpretatable Machine Learning o se ta'iala mautu ma taua i metotia masani (e aofia ai fa'ailoga fa'avae SHAP) ma o latou tapula'a. [5]
O le sini e lē gata ina ia mafanafana ai ē e aʻafia - ae ia vave ona faʻavasega ma faʻaitiitia ai faʻalavelave e toe tutupu.
Fa'atinoina, Fa'asolosolo, ma Fa'asologa o Manatu Fa'aalia 🚀
E lē nonofo fa'ata'ita'iga i totonu o fa'ase'e. E nonofo i latou i totonu o paipa.
O se tala masani i le "masina muamua i le gaosiga": o le masini su'esu'e e tele lava ina fa'ailoa mai ai fa'amatalaga, fa'atinoina o galuega fa'aputu, ma fa'amatalaga o lo'o misi... lea e aoga pea aua e fa'amalosia ai oe e vavae'ese "mea tutupu o le lelei o fa'amatalaga" mai "mea fa'aletonu fa'apisinisi."
I le faʻatinoina:
-
Mata'ituina le fe'avea'i ma toe fa'aa'oa'o/toe fetu'una'i pe a suia amioga. [1]
-
Fa'amaumauga o togi + fa'ata'ita'iga ina ia mafai ona e toe gaosia le mafua'aga na fa'apipi'i ai se itulau. [5]
-
Pu'eina o fa'amatalaga a tagata (aoga vs. fa'ailoilo pisapisao) e fa'atulaga ai tulaga fa'atapula'a ma vaega i le aluga o taimi. [4]
Tulaga Puipuiga: IDS ma Iloiloga Amioga 🛡️
E masani ona fa'afefiloi e 'au puipuiga ni manatu e le masani ai ma le iloa e fa'avae i tulafono: o fa'avae mo "amioga masani a le 'au talimalo," fa'atasi ai ma saini ma faiga fa'avae mo mamanu leaga ua iloa. O le SP 800-94 (Final) a le NIST o lo'o tumau pea o se fa'atulagaga e ta'ua lautele mo le iloa o osofa'iga ma le puipuiga o le faiga; e ta'ua fo'i o le 2012 draft "Rev. 1" e le'i fa'amaonia ma mulimuli ane na fa'aleaogaina. [3]
Fa'aliliuga: fa'aaoga le ML i mea e fesoasoani ai, ae 'aua le tia'i ese tulafono fa'alēmanava - e lē manaia aua e aoga.
Siata Fa'atusatusaga: O Metotia Lauiloa i se Va'aiga Pupuu 📊
| Meafaigaluega / Metotia | Sili mo | Aiseā e aoga ai (i le faʻatinoga) |
|---|---|---|
| Sikoa-z malolosi / suia | Fua fa'atatau faigofie, fa'avae vave | Malosi le ulua'i fa'ai'uga pe a e mana'omia le "lava lelei" ma le itiiti ifo o fa'ailo sese. [3] |
| Vaomatua Tuufua | Fa'asologa, foliga fefiloi | Fa'atinoga mautu ma fa'aaogaina lautele i le fa'atinoina. [2] |
| SVM Vasega Tasi | Vaega "masani" laiti | Iloaina o mea fou e faʻavae i luga o tapulaʻa; e taua tele le fetuʻunaʻi. [2] |
| Mea Fa'alotoifale | Masani eseese | O le eseesega o le mafiafia ma tuaoi e pu'eina ai mea uiga ese i le lotoifale. [1] |
| Sese o le toe fausiaina (e pei o le autoencoder-style) | Fa'ata'ita'iga maualuga | A'oa'o i le tulaga masani; o mea sese tetele i le toe fausiaina e mafai ona fa'ailoa ai ni fa'aletonu. [1] |
Tulafono taufa'ase'e: amata i ni fa'avae malolosi + se metotia le manaia e le o va'ava'aia, ona fa'aopoopo lea o le faigata pe a totogi le lisi.
O se Tusi Ta'aloga La'ititi: Mai le Zero i Lapata'iga 🧭
-
Fa'amatala le uiga o le upu "uiga ese" i le fa'atinoga (fa'atuai, lamatiaga tau fa'asese, fa'alavelave i le CPU, lamatiaga o le lisi o oloa).
-
Amata i se fa'avae (fuainumera malolosi po'o ni fa'atapula'a vaevaeina). [3]
-
Filifili se tasi faʻataʻitaʻiga e leʻi vaʻavaʻaia e fai ma uluaʻi pasi (Isolation Forest / LOF / One-Class SVM). [2]
-
Fa'atulaga ni tapula'a fa'atasi ai ma se paketi mataala , ma iloilo i le mafaufau fa'apitoa a le PR pe a seasea ona i ai ni mea lelei. [4]
-
Fa'aopoopo fa'amatalaga + fa'amaumauga ina ia mafai ona toe gaosia ma mafai ona fa'asa'oina fa'amatalaga uma. [5]
-
Toe fa'ata'ita'i, lafo, a'oa'o, toe fa'atulaga - e masani lava le fe'avea'i. [1]
E mafai lava ona e faia lenei mea i le vaiaso e tasi… pe afai e le o pipii faatasi au faailoga taimi i se lipine ma se faamoemoe. 😅
Fa'amatalaga Fa'ai'u - Umi Tele, Ou te le'i faitauina🧾
E iloa e le AI ni mea e le masani ai e ala i le aʻoaʻoina o se ata moni o le "masani," faʻailogaina o mea e le masani ai, ma faʻailogaina mea e sopoʻia se tulaga. O faiga sili ona lelei e manumalo e le ala i le faʻaalialia, ae ala i le faʻatulagaina : faʻavae vaevaeina, paketi lapatai, faʻamatalaga e mafai ona faʻamatalaina, ma se faʻasologa o tali e liua ai faʻailo pisapisao i se faʻailoga faʻatuatuaina. [1]
Fa'asinomaga
-
Pimentel et al. (2014) - O se iloiloga o le iloa o mea fou (PDF, Iunivesite o Oxford) faitau atili
-
Pepa Fa'amaumau o le scikit-learn - Iloa o Mea Fou ma Mea e Le o ni Mea e Sili Atu Faitau atili
-
NIST/SEMATECH e-Handbook - Iloa o Tagata e Le o i Ai faitau atili ma le NIST CSRC - SP 800-94 (Faaiu): Taiala i Faiga e Iloa ai ma Puipuia ai Faalavelave (IDPS) faitau atili
-
Saito & Rehmsmeier (2015) - O le Fuafuaga o le Toe Manatuaina o Mea Tonu e Sili Atu Ona Fa'amatalaga nai lo le Fuafuaga ROC pe a Iloiloina Fa'avasega Binary i Seti Fa'amaumauga Le Paleni (PLOS ONE) faitau atili
-
Molnar - A'oa'oga Masini Fa'amatalaina (tusi uepi) faitau atili