Auala e fai ai se faʻataʻitaʻiga AI

Auala e fai ai se faʻataʻitaʻiga AI. O Laʻasaga Atoa o loʻo Faʻamatalaina.

O le faia o se faʻataʻitaʻiga AI e foliga mataʻutia - e pei o se saienitisi i se tifaga o loʻo muimui e uiga i mea uiga ese - seʻia e faia moni lava i le taimi e tasi. Ona e iloa lea o le afa o le galuega faʻamamaina o faʻamaumauga, afa o le galuega faʻapipiʻi paipa, ma e ese le faʻaʻonoʻono. O lenei taʻiala o loʻo faʻamatala auiliili ai le auala e faia ai se faʻataʻitaʻiga AI mai le amataga seʻia oʻo i le iuga: sauniuniga o faʻamaumauga, aʻoaʻoga, faʻataʻitaʻiga, faʻapipiʻiina, ma ioe - o siaki saogalemu e le manaia ae taua. O le a tatou faia faʻalelei i le leo, loloto i auiliiliga, ma tuʻu pea emojis i le faʻafefiloi, aua o le mea moni, aisea e tatau ai ona lagona le tusitusi faʻapitoa e pei o le failaina o lafoga?

O tala e te ono fia faitauina pe a uma lenei:

🔗 O le ā le AI arbitrage: O le mea moni i tua atu o le upu lauiloa
Fa'amatalaina le AI arbitrage, ona tulaga lamatia, avanoa, ma aafiaga i le lalolagi moni.

🔗 O le ā le faiaʻoga AI
E aofia ai le matafaioi, tomai, ma tiutetauave o se faiaʻoga o le AI.

🔗 O le ā le fa'atusa AI: Mea uma e te mana'omia ona iloa
Fa'amatalaina auiliili ai manatu fa'atusa o le AI, talafaasolopito, ma fa'aoga aoga.


O le ā e Faia ai se Faʻataʻitaʻiga AI - Mea Faʻavae ✅

O se faʻataʻitaʻiga "lelei" e lē o le faʻataʻitaʻiga e naʻo le 99% le saʻo i lau komepiuta faʻatino ona faʻamaasiasi lea o oe i le gaosiga. Ae o se faʻataʻitaʻiga e:

  • Ua fa'atulaga lelei → e manino le fa'afitauli, e manino mea e ulufale ai/galuega e alu i fafo, ua malilie i le fua fa'atatau.

  • Fa'amaoni fa'amaumauga → o le fa'amaumauga e atagia moni lava le lalolagi moni ma le fenumiai, ae le o se fa'ata'ita'iga miti ua fa'amamāina. Ua iloa le tufatufaina atu, ua fa'amaufa'ailogaina le tafega, ma e mafai ona su'eina fa'ailoga.

  • E lē pa'ū le fa'ata'ita'iga malosi

  • Iloiloina ma le mafaufau lelei → fua fa'atatau e ogatasi ma le mea moni, ae le o le fa'amaualuga o le laupapa ta'ita'i. E foliga manaia le ROC AUC ae o nisi taimi e taua i le pisinisi le F1 po'o le fa'atulagaina.

  • E mafai ona fa'atino → taimi e mafai ona va'aia, talafeagai punaoa, e aofia ai le mata'ituina pe a uma ona fa'atino.

  • Fa'atino → suega fa'amasinotonu, fa'aliliuga, pa puipui mo le fa'aaogaina sese [1].

A e faia nei mea, ua e ausia le tele o mea. O le isi vaega ua na o se toe fa'ata'ita'iga... ma sina "lagona i lou loto." 🙂

Tala taua pu'upu'u: i luga o se fa'ata'ita'iga taufaasese, o le aotelega o le F1 sa foliga matagofie. Ona matou vaevaeina lea i le nofoaga + "o lo'o iai le kata vs leai." O le mea e ofo ai: o mea sese na fa'aopoopoina i le tasi vaega. O le lesona na muai maua - tipi vave, tipi soo.


Amataga Vave: ala aupito puupuu i le faia o se Faʻataʻitaʻiga AI ⏱️

  1. Fa'amatala le galuega : fa'avasegaga, fa'asolosolo, fa'avasegaga, fa'ailogaina o le fa'asologa, gaosiga, fautuaga.

  2. Fa'apotopoto fa'amaumauga : aoina, aveese le fa'asologa, vaevae lelei (taimi/fa'alapotopotoga), fa'amaumauina [1].

  3. Fa'avae : amata i taimi uma i se mea itiiti - logistic regression, la'au la'ititi [3].

  4. Filifili se aiga fa'ata'ita'iga : tabular → gradient boosting; text → small transformer; vision → pretrained CNN po'o le backbone [3][5].

  5. Fa'asologa o a'oa'oga : fa'aleleia atili + taofi vave; siaki uma le leiloa ma le fa'amaoniga [4].

  6. Iloiloga : fa'amaonia fa'atasi, iloilo mea sese, fa'ata'ita'i i lalo o le suiga.

  7. Afifi : sefe mamafa, preprocessors, API wrapper [2].

  8. Mataitu : fe'avea'i o le uati, latency, fa'aitiitia o le sa'o [2].

E foliga manaia pe a ta'ua i luga o le pepa. Ae peita'i, e le'o lelei. E le afaina.


Laulau Fa'atusatusaga: meafaigaluega mo le Fa'aogaina o se Fa'ata'ita'iga AI 🛠️

Meafaigaluega / Faletusi Sili mo Tau Aiseā e Aoga ai (faʻamatalaga)
scikit-learn Fa'asologa, fa'avae Sa'oloto - OSS API mama, fa'ata'ita'iga vave; e manumalo pea i mea masani [3].
PyTorch Aoaoina loloto Sa'oloto - OSS Fa'alapotopotoga tele, faigofie ona faitau, ma olaola [4].
TensorFlow + Keras DL o le Gaosiga Sa'oloto - OSS E faauo i Keras; e fa'alelei e le TF le fa'atinoina.
JAX + Flax Su'esu'ega + saoasaoa Sa'oloto - OSS Autodiff + XLA = fa'aleleia atili o le fa'atinoga.
Suiga o Foliga o Tagata e Fe'alofani NLP, CV, leo Sa'oloto - OSS Fa'ata'ita'iga ua uma ona a'oa'oina + paipa... sogi a le kuka [5].
XGBoost/LightGBM Pulea fa'ata'amilosaga Sa'oloto - OSS E masani ona sili atu nai lo le DL i luga o faʻamaumauga tauagafau.
FastAI DL faauo Sa'oloto - OSS Tulaga maualuga, ma fa'amagaloina o mea sese.
Ao AutoML (eseese) Leai se fa'ailoga/fa'ailoga maualalo Fa'aaogaina e fa'atatau i le $ Toso, fa'apa'ū, fa'atulaga; e matua'i malosi lava.
Taimi Fa'atino o le ONNX Saosaoa o le fa'ai'uga Sa'oloto - OSS Fa'aleleia atili le tautua, faigofie ona 'ai ma fa'aoga i so'o se mea'ai.

O pepa o le a e toe tatalaina pea: scikit-learn [3], PyTorch [4], Fugging Face [5].


Laasaga 1 - Fa'atulaga le fa'afitauli e pei o se saienitisi, ae le o se toa 🎯

A'o le'i tusia se polokalame fa'akomepiuta, fai leotele atu lenei mea: O le a le fa'ai'uga o le a fa'ailoa mai e lenei fa'ata'ita'iga? Afai e le manino lena mea, o le a sili atu ona leaga le fa'amaumauga.

  • Fa'amoemoega o le valo'aga → koluma e tasi, fa'amatalaga e tasi. Fa'ata'ita'iga: churn i totonu o le 30 aso?

  • Fa'aputuga → i le tagata fa'aoga, i le sauniga, i le aitema - aua le fa'afefiloi. E fa'ateleina le lamatiaga o le tafe.

  • Tapula'a → latency, manatua, le faalauaiteleina, pito vs server.

  • Fua fa'atatau o le manuia → tasi le vasega autū + ni nai leoleo. Vasega lē paleni? Faaaoga le AUPRC + F1. Regression? E mafai e le MAE ona faia'ina le RMSE pe a taua le ogatotonu.

Fautuaga mai le taua: Tusi nei tapulaʻa + fua faʻatatau i le itulau muamua o le README. Sefe ai finauga i le lumanaʻi pe a fetoʻai le faʻatinoga ma le latency.


Laasaga 2 - Aoina o faʻamaumauga, faʻamamāina, ma vaeluaga e tumau pea 🧹📦

O faʻamaumauga o le faʻataʻitaʻiga lea. Ua e iloa. Ae ui i lea, o faʻafitauli:

  • Tupuaga → o fea na sau ai, o ai e ana, i lalo o le a le faiga faavae [1].

  • Fa'ailoga → ta'iala fa'aeteete, siaki i le va o fa'amatalaga, su'esu'ega.

  • Aveese le toe faia o ni kopi → o kopi faalilolilo e faatele ai fuainumera.

  • vaeluaga → fa'afuase'i. Faaaoga le fa'avae i le taimi mo le vavalo, fa'avae i le fa'alapotopotoga e 'alofia ai le sosolo o mea mai tagata fa'aoga.

  • Fa'apuna le suavai → leai se tilotilo i le lumana'i i le taimi o a'oa'oga.

  • Pepa Fa'amaumauga kata fa'amaumauga vave ma le fa'atulagaga, aoina, fa'aitu'au [1].

Sauniga masani: vaai faalemafaufau i le tufatufaina o sini + foliga sili. Taofi foi se seti suega e aua lava ne'i pa'i


Laasaga 3 - Muamua mea taua: o le faʻataʻitaʻiga faigofie e sefe ai masina 🧪

E lē matagofie ni fa'avae, ae e fa'avae i luga o mea e fa'amoemoeina.

  • Tabular → scikit-learn LogisticRegression po'o RandomForest, ona sosoo ai lea ma le XGBoost/LightGBM [3].

  • Tusitusiga → TF-IDF + linear classifier. Siaki le soifua maloloina a'o le'i faia Transformers.

  • Va'ai → CNN la'itiiti po'o le ivi tua ua uma ona a'oa'oina, vaega fa'a'aisa.

Afai e toetoe lava a le mafai e lau upega ona sopo'ia le laina autu, ia manava. O nisi taimi e le malosi le faailoilo.


Laasaga 4 - Filifili se auala fa'ata'ita'i e fetaui ma fa'amaumauga 🍱

Fa'asologa

Muamua le fa'aleleia o le gradient - e matua'i aoga tele. E taua pea le fa'ainisinia o foliga (fegalegaleaiga, fa'ailoga).

Tusitusiga

Transformers ua uma ona a'oa'oina ma le fa'aleleia mama. Fa'ata'ita'iga fa'amama pe a taua le latency [5]. E taua fo'i Tokenizers. Mo ni manumalo vave: HF pipelines.

Ata

Amata i le ivi tua ua uma ona a'oa'oina + fa'aleleia le ulu. Fa'ateleina i se auala moni (flips, crops, jitter). Mo fa'amaumauga laiti, fa'aaoga ni nai su'ega fa'asolosolo po'o ni su'ega fa'asolosolo.

Faasologa o taimi

Fa'avae: foliga o le lag, averesi fe'avea'i. ARIMA tuai e fa'atusatusa i la'au fa'aosofia fa'aonaponei. Ia fa'aaloalo i taimi uma i le fa'asologa o taimi i le fa'amaoniga.

Tulafono faigofie: o se faʻataʻitaʻiga laʻititi ma mautu > o se sauʻai e tele naua le lapoʻa.


Laasaga 5 - Taamilosaga o aʻoaʻoga, ae aua le faʻalavelaveina 🔁

Pau lava le mea e te manaʻomia: le utaina o faʻamaumauga, faʻataʻitaʻiga, mea ua leiloa, mea e faʻaleleia atili ai, mea e faʻatulaga ai taimi, ma le faʻamauina o faʻamaumauga. Ua maeʻa.

  • Fa'aleleia atili : Adam po'o le SGD fa'atasi ai ma le momentum. 'Aua le so'ona fa'aleleia.

  • Tele o le vaega : fa'ateleina le manatua o le masini e aunoa ma le fa'aogaina sese.

  • Fa'atulagaina : fa'amuta, pa'ū o le mamafa, taofi vave.

  • Sa'o fefiloi : fa'ateleina tele le saoasaoa; fa'avae fa'aonaponei e fa'afaigofie ai [4].

  • Toe gaosia : totogo fatu. E fetolofi pea. O se mea masani lava lena.

Tagai i a'oa'oga a le PyTorch mo mamanu masani [4].


Laasaga 6 - Iloiloga e atagia ai le mea moni, ae le o 'ai o le taʻitaʻiʻau 🧭

Siaki ni fasi, ae le na o le averesi:

  • Fa'atulagaina → e tatau ona i ai se uiga o mea e ono tutupu. E fesoasoani ata o le fa'atuatuaina.

  • Malamalamaaga i le fenumiai → pi'o o tulaga, fa'atusatusaga e va'aia.

  • Paketi sese → vaevaeina e tusa ai ma le itulagi, masini, gagana, taimi. Va'ai vaivaiga.

  • Malosi → suega i lalo o suiga, fa'alavelave fa'atupu fa'alavelave.

  • Tagata-i-le-taamilosaga → afai e faʻaaogaina e tagata, faʻataʻitaʻi le faʻaaogaina.

O se tala puupuu: o le tasi fa'aletonu o le toe fa'afo'iina na mafua mai i le le fetaui o le fa'atulagaina o le Unicode i le va o a'oa'oga ma le gaosiga. Tau? 4 'ai atoa.


Laasaga 7 - Afifiina, tautua, ma MLOps e aunoa ma ni masaesae 🚚

O iinei e masani ona faaletonu ai galuega faatino.

  • Meafaatino : mamafa o le faʻataʻitaʻiga, preprocessors, commit hash.

  • Siosiomaga : fa'ailoga pine, fa'apipi'i lean i totonu o le koneteina.

  • Fa'aoga : REST/gRPC fa'atasi ai ma le /health + /predict .

  • Fa'atuai/fa'agasologa : talosaga fa'aputuga, fa'ata'ita'iga fa'amafanafana.

  • Meafaigaluega : e lelei le CPU mo masini ta'uta'ua; GPU mo masini ta'uta'ua (DL). E fa'aleleia e le ONNX Runtime le saoasaoa/faigofie ona feavea'i.

Mo le faagasologa atoa (CI/CD/CT, mataituina, toe faafoi), o pepa aloaia a Google mo MLOps e mautu [2].


Laasaga 8 - Mata'ituina, fa'ase'e, ma toe a'oa'o e aunoa ma le popole 📈🧭

E pala fa'ata'ita'iga. E alualu i luma tagata fa'aoga. E le lelei le amio a paipa fa'amaumauga.

  • Siakiina o faʻamaumauga : faʻatulagaga, vaega, nulls.

  • Vavalo : tufatufaga, fua fa'atatau o le fesuia'iga, mea e le o aofia ai.

  • Faatinoga : a taunuu mai faʻailoga, fuafua fua faʻatatau.

  • Lapataiga : tuai, mea sese, fe'avea'i.

  • Toe fa'aa'oa'o le saoasaoa : fa'avae i luga o le fa'agaoioiga > fa'avae i luga o le kalena.

Fa'amaumau le fa'asologa. E sili atu le wiki nai lo le "manatuaina o ituaiga." Tagai i tusi ta'alo a le Google CT [2].


AI e nafa ma le matafaioi: tonu, le le faalauaiteleina, faigofie ona faauigaina 🧩🧠

Afai e a'afia tagata, e lē o se filifiliga le tiutetauave.

  • Su'ega fa'amasinotonu → iloilo vaega ma'ale'ale, fa'aitiitia pe a iai ni va [1].

  • Fa'amatalaina → SHAP mo le tabular, fa'asinomaga mo le deep. Taulimaina ma le fa'aeteete.

  • Tulaga faalilolilo/saogalemu → fa'aitiitia le PII, fa'alilolilo, loka foliga.

  • Faiga Fa'avae → tusi fa'aoga fa'amoemoeina vs fa'aoga fa'asāina. Fa'asaoina le tiga mulimuli ane [1].


O se fa'ata'ita'iga pu'upu'u 🧑🍳

Se'i faapea o lo'o tatou fa'avasegaina iloiloga: lelei ma leaga.

  1. Fa'amaumauga → aoina iloiloga, aveese le numera, vaevaeina i le taimi [1].

  2. Fa'avae → TF-IDF + logistic regression (scikit-learn) [3].

  3. Fa'aleleia → transformer la'ititi ua uma ona a'oa'oina ma le Hugging Face [5].

  4. Nofoaafi → ni nai vaitaimi, taofi vave, ala F1 [4].

  5. Eval → matrix fenumiai, sa'o@toe manatua, fa'atulagaina.

  6. Afifi → tokenizer + faʻataʻitaʻiga, afifi FastAPI [2].

  7. Mataitu → fesuia'iga o le matamata i vaega eseese [2].

  8. Fa'asa'oga fa'atino → fa'amama le PII, fa'aaloalo i fa'amatalaga taua [1].

Fa'atapula'a le fa'atuai? Fa'amama le fa'ata'ita'iga pe auina atu i le ONNX.


O mea sese masani e foliga mai ai faʻataʻitaʻi e atamamai ae amio valea 🙃

  • Vaega e tafe (fa'amaumauga pe a uma le mea na tupu i le nofoaafi).

  • Fua fa'atatau sese (AUC pe a popole le 'au i le toe manatuaina).

  • Seti tiny val ("osofaiga fou" pisapisao).

  • Ua lē amana'iaina le lē paleni o vasega.

  • O le faagasologa muamua e le fetaui (toleni vs tautua).

  • Ova tele le fetu'una'i vave.

  • Faagaloina o tapula'a (fa'ata'ita'iga tele i se polokalama feavea'i).


Togafiti fa'aleleia atili 🔧

  • Fa'aopoopo atamai : mea leaga faigata, fa'aopoopoga moni.

  • Ia fa'aauau pea ona masani: fa'ata'ita'iga ua le toe a'oga, fa'ata'ita'iga laiti.

  • Fa'asologa o fua fa'atatau o le a'oa'oina (cosine/la'asaga).

  • Fa'aputuga fa'aputuga - e lē o taimi uma e sili atu ai le telē.

  • Sa'o fa'afefiloi + fa'avektorisi mo le saoasaoa [4].

  • Fa'atusatusaga, teuteuina i fa'ata'ita'iga manifinifi.

  • Fa'apipi'iga o le Cache/galuega mamafa a'o le'i fa'aogaina le komepiuta.


Fa'ailogaina o fa'amaumauga e le pa 🏷️

  • Taiala: auiliili, faatasi ai ma mataupu faapitoa.

  • Aoao tagata e fa'ailogaina igoa: galuega fa'atulagaina, siaki o maliliega.

  • Tulaga lelei: seti auro, siakiina faafuasei.

  • Meafaigaluega: seti o fa'amaumauga ua fa'atulagaina, fa'atulagaga e mafai ona auina atu i fafo.

  • Amioga Mama: totogi talafeagai, punaoa fa'atino ma le fa'aeteete. Fa'ailoga tu'u atoa [1].


Fa'ata'ita'iga o le fa'atinoina 🚀

  • Sikoa o le vaega → galuega i le po, faleteuoloa.

  • Microservice taimi moni → sync API, fa'aopoopo le caching.

  • Fa'asalalauina → e mafua mai i mea tutupu, fa'ata'ita'iga, taufaasese.

  • Pito → fa'apipi'i, masini fa'ata'ita'i, ONNX/TensorRT.

Tausi se tusi fa'atino: la'asaga toe fa'afo'i, toe fa'afo'isia o mea tuai [2].


Punaoa e aoga lou taimi 📚

  • Fa'avae: Taiala Fa'aoga a le scikit-learn [3]

  • Fa'ata'ita'iga DL: A'oa'oga PyTorch [4]

  • A'oa'oga Fa'aliliuina: O le Fusiina o Foliga Amata Vave [5]

  • Pulega/lamatiaga: NIST AI RMF [1]

  • MLOps: Tusi ta'alo a le Google Cloud [2]


Fa'amatalaga e masani ona fesiligia 💡

  • E te manaʻomia se GPU? E le mo le tabular. Mo le DL, ioe (e aoga le lisiina o le ao).

  • Lava fa'amaumauga? E lelei le tele o fa'amaumauga se'ia o'o ina pisapisaō fa'ailoga. Amata i se auala la'ititi, fa'asolosolo.

  • Filifiliga fa'atatau? O le filifiliga e tasi e fetaui lelei e tau ai. Tusi i lalo le fa'atusatusaga.

  • Faase'e le laina faavae? E mafai foi ona e… e pei lava ona e mafai ona misia le 'aiga o le taeao ma salamo ai.

  • AutoML? Lelei mo le fa'atinoina o galuega fa'atino. Ae fai pea au lava su'esu'ega [2].


O le mea moni e fai si fenumiai 🎬

O le auala e fai ai se Fa'ata'ita'iga AI e le o se matematika ese ae e sili atu i le tomai: fa'avaa manino, fa'amaumauga mama, siaki lelei o le soifua maloloina, iloiloga mautu, toe faia pea. Fa'aopoopo le tiutetauave ina ia e le fa'amamaina mea leaga e mafai ona puipuia i le lumana'i [1][2].

O le mea moni, o le fa'ata'ita'iga "le fiafia" - e fa'apito ma fa'atulagaina - e masani ona sili atu nai lo le fa'ata'ita'iga mata'ina e fa'avavevave i le 2 i le vaveao o le Aso Faraile. Ae afai e foliga le lelei lau taumafaiga muamua? E masani lava lena. O fa'ata'ita'iga e pei o mea'ai e fa'aoso ai le falaoa: fafaga, mata'ituina, toe amata i nisi taimi. 🥖🤷


TL;DR

  • Fa'afitauli i le fa'avaa + fua fa'atatau; fa'aumatia le tafe.

  • Muamua le mea autū; e sili ona lelei meafaigaluega faigofie.

  • E fesoasoani faʻataʻitaʻiga ua uma ona aʻoaʻoina - aua le tapuaʻi iā i latou.

  • Iloilo i vaega ta'itasi; fa'atulaga.

  • Fa'avae o le MLOps: fa'asologa o lomiga, mata'ituina, toe fa'afo'i i tua.

  • O le AI fa'apitoa ua fa'apipi'iina i totonu, ae le'i fa'apipi'iina.

  • Toe fai, ataata - ua e fausia se faʻataʻitaʻiga AI. 😄


Fa'asinomaga

  1. NIST — Fa'avae o le Pulega o Lamatiaga o le Atamai Fa'apitoa (AI RMF 1.0) . So'otaga

  2. Google Cloud — MLOps: Fa'aauau pea ona tu'uina atu ma fa'aautomatika paipa i le a'oa'oina o masini . So'otaga

  3. scikit-learn — Taiala a le Tagata Faʻaoga . Soʻotaga

  4. PyTorch — A'oa'oga Aloaia . So'otaga

  5. Foliga fusi — Transformers Quickstart . Link


Saili le AI Fou i le Faleoloa Aloaia o Fesoasoani AI

Faatatau ia tatou

Toe foʻi i le blog