Faʻafefea ona fai se faʻataʻitaʻiga AI

Faʻafefea ona fai se faʻataʻitaʻiga AI. Fa'amatala Laasaga Atoa.

O le faia o se fa'ata'ita'iga AI e foliga mata'ina - e pei o se saienitisi i se ata tifaga o lo'o mumumumu e uiga i mea fa'apitoa - se'ia e faia fa'atasi. Ona e iloa ai lea o le 'afa o fa'amaumauga o galuega fa'amautu, afa fa'amaua'i paipa, ma uiga ese ua fai ma vaisu. O lenei ta'iala o lo'o tu'uina atu Fa'afefea ona fai se AI Fa'ata'ita'iga fa'ai'uga i le fa'ai'uga: tapenaga o fa'amaumauga, a'oa'oga, su'ega, fa'apipi'i, ma ioe - o siaki le saogalemu-ae-taua. O le a matou fa'atalatala i le leo, loloto i auiliiliga, ma tausia emojis i le faʻafefiloi, aua o le mea moni, aisea e tatau ai ona lagona le tusitusi faʻapitoa e pei o le failaina o lafoga?

Tala atonu e te mana'o e faitau pe a mae'a lenei:

🔗 O le a le AI arbitrage: O le mea moni i tua o le buzzword
Faʻamatalaina AI faʻasalaga, ona lamatiaga, avanoa, ma aʻafiaga o le lalolagi moni.

🔗 O le a le faiaoga AI
E aofia ai le matafaioi, tomai, ma matafaioi a se faiaoga AI.

🔗 O le a le fa'atusa AI: Pau mea e tatau ona e iloa
Fa'aleaga manatu fa'atusa AI, tala fa'asolopito, ma fa'aoga aoga.


O le a le mea e fai ai se fa'ata'ita'iga AI - Fa'avae ✅

O se fa'ata'ita'iga "lelei" e le'o le fa'ata'ita'iga e na'o le 99% le sa'o i lau api dev ma fa'asiasia ai oe i le gaosiga. O le tasi lea:

  • Fa'apena lelei → fa'afitauli e ma'oti, fa'aogaina/tuuina atu e iloagofie, metric ua malilie i ai.

  • Fa'amatalaga-fa'amaoni → o le fa'amaumauga o lo'o fa'ata'ita'ia moni le lalolagi leaga, ae le o se miti fa'amama. Fa'asoa iloa, leakage fa'amaufa'ailoga, fa'ailoga e mafai ona iloa.

  • Robust → fa'ata'ita'iga e le pa'u pe a fa'ase'e le fa'atonuga o le koluma pe fa'asolo teisi mea e fa'aoga.

  • Su'esu'eina ma uiga → fua fa'atatau e fetaui ma le mea moni, ae le o le fa'atauva'a. ROC AUC foliga manaia ae o nisi taimi F1 poʻo le faʻavasegaina o le mea lea e popole i ai le pisinisi.

  • Deployable → fa'ai'uga taimi va'aia, puna'oa lelei, mata'ituina pe a mae'a fa'apipi'i aofia ai.

  • Fa'atatau → su'ega sa'o, fa'amatala, pa puipui mo le fa'aoga sese [1].

Ta'i nei ma ua uma ona e alu i ai. O le isi vaega ua na o le fa'ata'ita'i... ma se fa'ata'ita'iga o le "gut feel." 🙂

Mini taua tala: i luga o se faʻataʻitaʻiga taufaasese, o le F1 atoa na foliga matagofie. Ona matou vaelua lea i le geography + "card present vs not." Fa'ate'ia: o mea sese sese ua fa'atupu i le fasi pepa e tasi. Mu le lesona - tipi vave, tipi soo.


Amata vave: auala puʻupuʻu i le faia o se AI Faʻataʻitaʻiga ⏱️

  1. Fa'amatala le galuega : fa'avasegaina, toe fa'afo'i, fa'avasega, fa'asologa o igoa, fa'atupulaga, fa'atonuga.

  2. Fa'apipi'i fa'amaumauga : fa'aputu, fa'ate'a, vaevae lelei (taimi/tino), fa'amaumau [1].

  3. Fuafuaga : amata i taimi uma laiti - fa'asologa fa'asologa, tama'i la'au [3].

  4. Filifili se aiga fa'ata'ita'i : fa'asologa → fa'aoso fa'alili; tusitusiga → laititi transformer; va'aiga → CNN muamua po'o le ivi tua [3][5].

  5. Fa'aa'oa'oga fa'aa'oa'oga : optimizer + vave taofi; siaki uma le leiloa ma le faʻamaonia [4].

  6. Iloiloga : fa'asagatau fa'amaonia, au'ili'ili mea sese, su'ega i lalo ole suiga.

  7. Paketi : faʻasaoina le mamafa, faʻasologa muamua, afifi API [2].

  8. Mata'itu : mata'i le tafetafea, leo, le sa'o le pala [2].

E foliga mama i luga o pepa. I le faʻatinoga, faʻafefe. Ma e le afaina.


Fa'atusa Fa'atusa: meafaigaluega mo le Fa'afefea ona fai se fa'ata'ita'iga AI 🛠️

Meafaigaluega / Faletusi Sili Mo Tau Aisea e aoga ai (faamatalaga)
scikit-aoao Tabula, laina faavae Sa'oloto - OSS API mama, fa'ata'ita'iga vave; manumalo pea i vasega [3].
PyTorch Aoaoga loloto Sa'oloto - OSS Malosi, faitau, lautele nuu [4].
TensorFlow + Keras Gaosiga DL Sa'oloto - OSS Keras faauo; TF Auauna e fa'alelei le fa'atinoina.
JAX + Flax Suesuega + saoasaoa Sa'oloto - OSS Autodiff + XLA = faʻaleleia galuega.
Fufulu Mata Transformers NLP, CV, leo Sa'oloto - OSS Fa'ata'ita'iga fa'aa'oa'oina muamua + paipa... kisi a le kuka [5].
XGBoost/LightGBM Pulea laulau Sa'oloto - OSS E masani ona sasa le DL i luga o faʻamaumauga faigofie.
FastAI DL faauo Sa'oloto - OSS Tulaga maualuga, fa'amagalo fa'aletonu.
Cloud AutoML (eseese) Leai/maualalo-code Fa'aaogaina $ Toso, pa'u'u, fa'apipi'i; ofo malosi.
ONNX Taimi Taimi Saosaoa fa'ai'uga Sa'oloto - OSS Au'aunaga fa'alelei, fa'auo i le pito.

Docs o le a e toe tatalaina pea: scikit-learn [3], PyTorch [4], Fusiina o Mata [5].


Laasaga 1 - Fa'atulaga le fa'afitauli e pei o se saienitisi, ae le o se toa 🎯

Ae e te leʻi tusia le code, fai leotele le mea lenei: O le a le faʻaiuga o le a faʻaalia e lenei faʻataʻitaʻiga? Afai e le mautonu, o le a sili atu le leaga o faʻamaumauga.

  • Fuafuaga fa'atatau → tasi koluma, tasi fa'amatalaga. Fa'ata'ita'iga: fa'afefe i totonu ole 30 aso?

  • Granularity → mo le tagata faʻaoga, mo le vasega, mo le meataitasi - aua le faʻafefiloi. Ua fa'atupula'ia le tulaga lamatia o le liki.

  • Fa'agata → leo, manatua, fa'alilolilo, pito vs server.

  • Fuafuaga o le manuia → tasi tulaga muamua + lua leoleo. Vasega le paleni? Fa'aaoga le AUPRC + F1. Toe solomuli? E mafai e MAE ona manumalo i le RMSE pe a taua le vaeluagalemu.

Fautuaga mai le taua: Tusi nei fa'agata + metric i le itulau muamua o le README. Faasaoina finauga i le lumana'i pe a fetaui le faatinoga ma le leo.


Laasaga 2 - Aoina mai o fa'amaumauga, fa'amamā, ma vaeluaga o lo'o taofia moni lava 🧹📦

O faʻamaumauga o le faʻataʻitaʻiga. Ua e iloa. Ae ui i lea, o faʻalavelave:

  • Provenance → o fea na sau ai, o ai e ona, i lalo o le a le faiga faavae [1].

  • Fa'ailoga → ta'iala mautu, su'esu'ega fa'asalalau, su'etusi.

  • Fa'ate'a fa'alua → fa'alua fa'alua fa'ateteleina fua fa'atatau.

  • Vaevae → fa'afuase'i e le sa'o i taimi uma. Fa'aoga taimi-fa'avae mo le va'aiga, fa'avae fa'alāpotopotoga e aloese ai mai le fa'aogaina o tagata.

  • Leaka → leai se va'aiga i le lumana'i ile taimi o toleniga.

  • Docs → tusi se kata vave faʻamatalaga faʻatasi ma fuafuaga, aoina, faʻaituau [1].

Sauniga: va'ava'ai fa'asoa fa'atatau + pito i luga. Taofi fo'i se aua ne'i pa'i se'ia o'o i le fa'ai'uga.


Laasaga 3 - Fa'avae muamua: le fa'ata'ita'iga fa'atauva'a e fa'asaoina masina 🧪

O laina faavae e le manaia, ae e fa'amauina ai fa'amoemoega.

  • Tabular → scikit-aʻoaʻo LogisticRegression poʻo RandomForest, ona XGBoost/LightGBM [3].

  • Tusi → TF-IDF + fa'avasegaga laina. Siaki le soifua maloloina i luma o le Transformers.

  • Va'aiga → tama'i CNN po'o le ivi tua'o ua uma ona a'oa'oina, fa'a'aisa.

Afai e tau le pa'u lau upega loloto i le laina faavae, manava. O nisi taimi e le malosi le faailo.


Laasaga 4 - Filifili se faiga fa'ata'ita'iga e fetaui ma fa'amaumauga 🍱

Tabula

Fa'aoso fa'alili muamua - fa'amata'utia le aoga. Fa'ainisinia fa'apitoa (feso'ota'iga, fa'ailoga) e taua pea.

Tusitusi

Transformers mua'i a'oa'oina ma fa'amuta mama mama. Fa'ata'ita'i fa'amama pe a taua le taofi [5]. Tokenizers taua foi. Mo vave manumalo: HF pipelines.

Ata

Amata ile ponaivi ua uma ona a'oa'oina + ulu fa'alelei. Fa'aopoopo moni (fe'a'i, fa'ato'aga, fa'atetetete). Mo faʻamatalaga laiti, faʻataʻitaʻiga laiti poʻo laina laina.

Fa'asologa o taimi

Fa'avae: fa'ailoga tuai, averesi fe'avea'i. A'oga tuai ARIMA vs la'au fa'aola fa'aonaponei. Fa'aaloalo i taimi uma fa'atonuga ile fa'amaonia.

Tulafono o limamatua: o se tama'i fa'ata'ita'iga tumau > se sau'ai ova.


Laasaga 5 - Fa'aa'oa'oga fa'aa'oa'oga, ae 'aua le fa'afaigata 🔁

Pau lava le mea e te manaʻomia: faʻapipiʻi faʻamaumauga, faʻataʻitaʻiga, leiloa, faʻamalieina, faʻatulagaina, logging. Ua uma.

  • Optimizers : Atamu poʻo SGD w/ malosi. Aua le soona tweak.

  • Lapopo'a : fa'atele le manatua o le masini e aunoa ma le sasa.

  • Fa'atulafonoina : fa'amuta, pala le mamafa, taofi vave.

  • Fa'afefiloi sa'o : fa'ateleina le saoasaoa tele; fa'aonaponei fa'avae ua fa'afaigofieina [4].

  • Toe gaosia : seti fatu. O le a feminoia'i lava. E masani lava.

Va'ai a'oa'oga a le PyTorch mo fa'ata'ita'iga fa'apitoa [4].


Laasaga 6 - Su'esu'ega e atagia ai le mea moni, ae le o fa'ailoga fa'ailoga 🧭

Siaki fasi, ae le na'o averesi:

  • Fa'ata'otoga → e tatau ona iai se uiga o mea e ono tutupu. Fa'atuatuaina fuafuaga fesoasoani.

  • Fa'amatalaga fenumia'i → pupuni o le faitoto'a, va'aia fefa'ataua'iga.

  • Ese pakete → vaelua i le itulagi, masini, gagana, taimi. Va'ai vaivaiga.

  • Malosi → su'ega i lalo o sifi, fa'alavelave fa'aoga.

  • Human-in-loop → pe a fa'aogaina e tagata, su'e le fa'aoga.

Fa'amatalaga vave: tasi le toe manatua na sau mai le Unicode masani le fetaui i le va o toleniga ma le gaosiga. Tau? 4 'ai atoa.


Laasaga 7 - afifiina, tautua, ma MLOps e aunoa ma ni loimata 🚚

O iinei e masani ona malaga ai galuega.

  • Meafaitino : fua fa'ata'ita'i, fa'ata'ita'iga muamua, fa'atino hash.

  • Env : pine fa'aliliuga, fa'aofuofu lean.

  • Fa'afeso'ota'i : MALU/gRPC fa'atasi ma /health + /predict .

  • Latency/throughput : talosaga fa'aputu, fa'ata'ita'iga mafanafana.

  • Meafaigaluega : PPU lelei mo vasega masani; GPU mo DL. ONNX Runtime faʻateleina le saoasaoa / feaveaʻi.

Mo le paipa atoa (CI/CD/CT, mata'ituina, toe fa'afo'i), e mautu fa'amaumauga a Google MLOps [2].


Laasaga 8 - Mataʻituina, faʻafefe, ma toe aʻoaʻo e aunoa ma le popole 📈🧭

Fa'ata'ita'iga pala. Tagata fa'aoga e fa'aleleia. O fa'amatalaga paipa e le lelei.

  • Su'esu'ega o fa'amaumauga : fuafuaga, laina, nulls.

  • Va'aiga : tufatufaga, fa'ata'ita'iga metrics, outliers.

  • Fa'atinoga : a o'o loa fa'ailoga, fa'atatau fua.

  • Fa'aliga : fa'aletonu, mea sese, tafetafea.

  • Toe a'oa'o fa'asolo : fa'avae fa'aoso > fa'avae kalena.

Faamaumau le matasele. O le wiki e manumalo i le "faamanatuga o ituaiga." Va'ai Google CT playbooks [2].


AI fa'atatau: fa'amaoni, fa'alilolilo, fa'amatala 🧩🧠

Afai e aafia tagata, o le matafaioi e le o se filifiliga.

  • Su'ega sa'o → iloilo i vaega ma'ale'ale, fa'aitiitia pe a iai avanoa [1].

  • Fa'amatala → SHAP mo fa'asologa, fa'asinomaga mo le loloto. Taulima ma le faaeteete.

  • Fa'alilolilo/seogalemu → fa'aitiitia le PII, fa'aigoaina, loka i lalo foliga.

  • Faiga Fa'avae → tusi fa'amoemoe vs fa'asaina. Faasaoina le tiga mulimuli ane [1].


Se fa'ata'ita'iga la'ititi 🧑🍳

Fai mai o loʻo matou faʻavasegaina iloiloga: lelei vs leaga.

  1. Fa'amatalaga → aoina iloiloga, fa'aputu, vaelua i le taimi [1].

  2. Fa'avae → TF-IDF + fa'asologa fa'asolo (scikit-a'oa'o) [3].

  3. Fa'alelei → tama'i fa'aa'oa'oina fa'aliliu fa'atasi ma Fusiga Mata [5].

  4. nofoaafi → nai taimi, taofi vave, ala F1 [4].

  5. Eval → matrix fenumia'i, sa'o@manatua, fa'avasegaina.

  6. Paket → tokenizer + faʻataʻitaʻiga, afifi FastAPI [2].

  7. Mata'itū → va'ai fa'ase'e i vaega [2].

  8. Tweaks talafeagai → faamama PII, fa'aaloalo i fa'amatalaga ma'ale'ale [1].

Malosi le taofiofia? Fa'amama fa'ata'ita'iga po'o le fa'atau atu i le ONNX.


O mea sese masani e foliga poto ai fa'ata'ita'iga ae fa'avalevalea 🙃

  • Fa'ailoga mata'utia (fa'amatalaga ina ua mae'a mea na tutupu ile nofoaafi).

  • Sese metric (AUC pe a popole le au i le toe manatua).

  • Tiny val set (pisao "mea fou").

  • Ua le amanaia le le paleni o vasega.

  • Le fetaui lelei muamua (toleni vs tautua).

  • Ua vave tele le fa'avasegaina.

  • Fa'agalo fa'agata (fa'ata'ita'iga tele i se telefoni feavea'i).


Togafiti fa'alelei 🔧

  • Fa'aopoopo sili atu : fa'aletonu faigata, fa'aopoopo moni.

  • Fa'atonu malosi: fa'amuta, fa'ata'ita'iga laiti.

  • Fa'asologa o fua faatatau o a'oa'oga (cosine/step).

  • Salu fa'atasi - e le sili atu le lapo'a.

  • Fa'afefiloi sa'o + vectorization mo le saoasaoa [4].

  • Quantization, teuteu i faʻataʻitaʻiga slim.

  • Fa'apipi'i fa'aoga/mua'i fa'atatau galuega mamafa.


Fa'ailoga fa'amaumauga e le pa'u 🏷️

  • Taiala: au'ili'ili, fa'atasi ai ma pito pito.

  • Fa'ailoga a'oa'oga: galuega fa'avasega, siaki maliega.

  • Tulaga lelei: seti auro, siaki nofoaga.

  • Meafaigaluega: fa'asologa o fa'amaumauga, ata e mafai ona auina atu i fafo.

  • Amioga: totogi sa'o, su'esu'ega fa'atatau. taofi atoa [1].


Fa'ata'ita'iga faiga 🚀

  • Fa'ailoga sikoa → galuega i po, faleteuoloa.

  • Taimi moni microservice → sync API, faʻaopoopo le faʻaoga.

  • Fa'asalalau → fa'atupu fa'alavelave, fa'ata'ita'iga, fa'a'ole'ole.

  • Edge → compress, masini suʻega, ONNX/TensorRT.

Taofi se tusi fa'ata'ita'i: toe fa'afo'i la'asaga, toe fa'afo'i mea fa'apitoa [2].


Punaoa aoga lou taimi 📚

  • Fa'avae: scikit-Learn User Guide [3]

  • DL mamanu: PyTorch Tutorials [4]

  • Fa'aliliuga a'oa'oga: Fusuina Fa'asaga Fa'atopetope [5]

  • Pulea/tulaga lamatia: NIST AI RMF [1]

  • MLOps: Google Cloud playbooks [2]


FAQ-ish tidbits 💡

  • Manaomia se GPU? E le mo laulau. Mo le DL, ioe (galuega totogi fa'aao).

  • Ua lava fa'amaumauga? E lelei tele se'ia pisapisao igoa. Amata laiti, toe fai.

  • Filifiliga metric? O le tasi e fetaui ma tau filifiliga. Tusi i lalo le matrix.

  • Fa'ase'e laina fa'avae? E te mafaia… i le auala lava e tasi e mafai ai ona e faamisi le taeao ma faanoanoa ai.

  • AutoML? Lelei tele mo le faʻapipiʻiina. Fai pea au lava su'ega [2].


O le upu moni laititi 🎬

E fa'afefea ona fai se Fa'ata'ita'iga AI e itiiti ifo i le numera tele ma sili atu e uiga i va'aiga: fa'ama'ai fa'ava'a, fa'amaumauga mama, siaki tulaga mama, su'esu'ega mautu, toe fa'aauau. Fa'aopoopo le tiute i le lumana'i-e te le fa'amamāina mea leaga e mafai ona puipuia [1][2].

O le mea moni, o le fa'aaliga "vaivai" - fufusi ma fa'atonu - e masani ona taia le fa'ata'ita'iga fe'ilafi fa'atopetope ile 2am i le Aso Faraile. Ae afai o lau taumafaiga muamua e lagona le le mautonu? E masani lava. O faʻataʻitaʻiga e pei o meaʻai faʻafefete: fafaga, matau, toe amata i nisi taimi. 🥖🤷


TL;DR

  • Fa'afitauli fa'avaa + metric; tape le leaka.

  • Fa'avae muamua; meafaigaluega faigofie papa.

  • E fesoasoani fa'ata'ita'iga ua uma ona a'oa'oina - 'aua le tapua'i i ai.

  • Eval i fasi pepa; fa'avasega.

  • MLOps fa'avae: fa'aliliuga, mata'ituina, toe fa'afo'i.

  • AI fa'atatau i tao i totonu, e le'i fa'amauina.

  • Toe fai, ataata - ua e fausia se ata AI. 😄


Fa'asinomaga

  1. NIST - Fa'ata'ita'iga Fa'atonu Fa'atonuga Fa'atonu (AI RMF 1.0) . So'oga

  2. Google Cloud — MLOps: Fa'aauau le tu'uina atu ma fa'autometi paipa i masini a'oa'oga . So'oga

  3. scikit-learn — Taiala mo Tagata Faaaoga . So'oga

  4. PyTorch — A'oa'oga Aloaia . So'oga

  5. Fusiina o Mata — Transformers Quickstart . So'oga


Su'e le AI Fou i le Faleoloa Fesoasoani Lagolago AI

Faatatau ia tatou

Toe fo'i ile blog