O le a le fa'ailogaina o fa'amatalaga AI?

O le a le AI Fa'ailoga Fa'amatalaga?

Afai o lo'o e fauina pe su'esu'eina faiga fa'aa'oa'oga masini, o le a e lavea i le poloka auala e tasi i se taimi vave pe mulimuli ane: fa'ailoga fa'amaumauga. Fa'ata'ita'iga e le iloa fa'amaneta le mea. O tagata, faiga fa'avae, ma o nisi taimi e tatau ona a'oa'oina i latou e polokalame. O lea la, o le a le AI Data Labeling? I se faapuupuuga, o le masani o le faʻaopoopoina o uiga i faʻamatalaga mataʻina ina ia mafai e algorithms ona aʻoaʻoina mai ai…😊

🔗 O le a le amio a le AI
Va'aiga lautele o mataupu fa'ale-aganu'u e ta'ita'ia ai le atina'e fa'atatau ma le fa'atinoina o AI.

🔗 O le a le MCP i AI
Fa'amatala fa'ata'ita'iga fa'ata'ita'iga fa'ata'ita'iga ma lana matafaioi ile fa'afoeina o amio AI.

🔗 O le a le mata AI
Ufiufi le auala e fa'agasolo sa'o ai e AI fa'amaumauga i masini i le pito.

🔗 O le a le sui sooupu AI
Fa'ailoa mai sui tuto'atasi AI e mafai ona fuafua, fa'atatau, ma tuto'atasi gaioiga.

O le a le AI Data Labeling, moni? 🎯

O le fa'ailogaina o fa'amaumauga a le AI o le fa'agasologa lea o le fa'apipi'iina o fa'ailoga e malamalama ai tagata, va'aiga, atigipusa, fa'avasegaga, po'o fa'ailoga i mea fa'aoga mata'utia e pei o tusitusiga, ata, leo, vitio, po'o taimi fa'asologa ina ia mafai ai e fa'ata'ita'iga ona iloa mamanu ma fai fa'amatalaga. Mafaufau i pusa faʻapipiʻi i taʻavale, faʻailoga faʻapitoa i tagata ma nofoaga i tusitusiga, poʻo palota e fiafia i ai e sili atu ona fesoasoani le tali a le chatbot. A aunoa ma nei fa'ailoga, e le mafai lava ona alu ese a'oa'oga mata'utia.

E te fa'alogoina fo'i fa'ailoga e ta'ua o le 'ele'ele po'o fa'amaumauga auro : tali malilie i lalo o fa'atonuga manino, fa'aaoga e toleni ai, fa'amaonia, ma su'e su'ega fa'ata'ita'iga amio. E oo lava i le matua o faʻataʻitaʻiga faʻavae ma faʻamaumauga faʻapipiʻi, o seti faʻailoga e taua lava mo le iloiloga, faʻalelei lelei, saogalemu mumu-au, ma siʻusiʻu umi pito mata-ie, o le a le amio a lau faʻataʻitaʻiga i mea uiga ese o loʻo faia e au tagata faʻaoga. Leai se taumafataga o le aoauli e leai se totogi, na o meafaigaluega umukuka sili atu.

O le a le mea e lelei ai AI Fa'ailoga Fa'amatalaga ✅

Fa'amatalaga manino: fa'ailoga lelei e le manaia i le auala sili. E lagona le vavalo, toe fai, ma fai sina ova fa'amaumauga. O foliga ia:

  • Se fa'aupuga fa'apitoa : o le seti fa'aigoaina o vasega, uiga, ma mafutaga e te popole i ai.

  • Fa'atonuga tioata : fa'ata'ita'iga galue, fa'ata'ita'iga fa'atatau, mataupu fa'apitoa, ma tulafono fa'amavae.

  • Fa'ailo su'esu'e : o se pea lona lua o mata i luga o se vaega o galuega.

  • Fuafuaga o Maliega : maliega inter-annotator (faataitaiga, Cohen's κ, Krippendorff's α) o lea e te fuaina le tutusa, ae le o vibes. α e fa'apitoa ona fa'aoga pe a misi igoa po'o le tele o fa'amatalaga e ufiufi ai mea eseese [1].

  • Fa'ato'aga pito pito i tua : fa'aputuina e le aunoa, fa'alavelave, po'o ni mea e seasea tupu.

  • Su'esu'ega fa'aituau : su'etusi fa'amaumauga, fa'asologa o tagata, itulagi, gagana, tulaga moli, ma isi mea.

  • Fa'asinomaga & fa'alilolilo : siaki po'o fea na maua mai ai fa'amaumauga, aia tatau e fa'aoga ai, ma pe fa'afefea ona fa'aogaina le PII (o le a le mea e taua o le PII, pe fa'apefea ona e fa'avasegaina, ma puipuiga) [5].

  • Fa'aaliga i a'oa'oga : e le ola fa'ailoga i se fanuatanu fa'asalalau-latou te toe fafaga i a'oa'oga fa'agae'etia, fa'alelei lelei, ma fa'ata'ita'iga.

Ta'utinoga la'ititi: e te toe tusia au ta'iala i ni nai taimi. E masani lava. E pei o le fa'amamafaina o se siu, o sina tweak e alu mamao lava.

Fa'amatalaga vave o le fanua: tasi le 'au na fa'aopoopoina se tasi "le mafai ona filifili-mana'omia faiga fa'avae" i la latou UI. siitia le maliliega ona o le au tusitala na taofia le faia o matematega, ma o le faamaumauga o faaiuga na atili maai i le po. Manumalo le manaia.

Fa'atusatusaga: mea faigaluega mo le fa'ailogaina o fa'amatalaga AI 🔧

E le uma, ma ioe, o le faaupuga e fai si faaletonu i le faamoemoe. Suiga tau-fa'amautu i taimi uma i luga o nofoaga fa'atau a'o le'i fa'atatauina.

Meafaigaluega Sili mo Sitaili tau (fa'ailoa) Aisea e aoga ai
Pusa fa'ailoga Pisinisi, CV + NLP faʻafefiloi Fa'aoga-fa'avae, fa'avae fua Manaia QA galuega, ontologies, ma metrics; tauleleia le fua.
AWS SageMaker Ground Truth AWS-centric orgs, HITL pipelines I galuega + fa'aoga AWS Fua i auaunaga a le AWS, tagata-i-le-loop filifiliga, malosi infra matau.
Fua AI Galuega lavelave, pulea tagata faigaluega Tausi fa'apitoa, fa'avasega Au'aunaga maualuga fa'atasi ma meafaigaluega; ops malosi mo mataupu mata'utia.
SuperAnnotate 'Au fa'amamafa, amataga Tiers, su'ega fua UI faʻalelei, galulue faʻatasi, fesoasoani faʻataʻitaʻiga-fesoasoani meafaigaluega.
Manuia Devs e manaʻo i pulega faʻapitonuʻu Laisene mo le olaga atoa, i le nofoa E mafai ona tusitusi, fa'aoga vave, fua fa'ato'a-fa'agasolo i le lotoifale; lelei mo NLP.
Doccano Poloketi NLP puna'oa tatala E leai se totogi, puna tatala Fa'aaufa'atasia, faigofie ona fa'apipi'i, lelei mo le fa'avasegaina ma le fa'asologa o galuega

Su'esu'ega moni i fa'ata'ita'iga tau : fa'afefiloi e le au fa'atau le iunite fa'atau, totogi mo galuega ta'itasi, fa'avae, upusii fa'ale-aganu'u, laisene e tasi le taimi, ma fa'amatalaga tatala. Suiga faiga faavae; fa'amaonia sa'o fa'amatalaga fa'atasi ma le au fa'atau a'o le'i tu'u numera i se pepa fa'atau.

O ituaiga igoa masani, ma ata vave mafaufau 🧠

  • Fa'avasegaina o ata : tasi pe tele fa'ailoga fa'ailoga mo se ata atoa.

  • Su'esu'eina o mea : pusa fusi po'o pusa fa'ata'amilo i mea.

  • Vaevaega : pixel-level masks-faʻataʻitaʻiga poʻo semantic; e ese le faamalieina pe a mama.

  • Manatu autu & fa'ailoga : fa'ailoga e pei o so'oga po'o mata.

  • NLP : fa'ailoga pepa, va'aiga mo fa'alapotopotoga ua ta'ua, mafutaga, feso'ota'iga fa'atasi, uiga.

  • Leo ma tautalaga : fa'aliliuga, fa'asalalauga fa'asalalauga, fa'ailoga fa'amoemoe, mea fa'alogo.

  • Vitio : atigipusa po'o ala, mea fa'aletino, fa'ailoga o gaioiga.

  • Fa'asologa o taimi & fa'alogo : fa'amalama mea tutupu, fa'aletonu, faiga fa'avae.

  • Fa'asologa o galuega fa'atupu : fa'avasegaga fa'apitoa, fu'a mumu saogalemu, fa'ailoga fa'amaoni, su'esu'ega fa'avae.

  • Su'esu'e & RAG : fa'atatauga-fa'amatalaga, tali atu, mea sese.

Afai o se ata o se pizza, o le vaeluaga o le tipiina lelei o fasi pepa uma, a'o le iloa o loʻo faʻasino ma fai mai o loʻo i ai se fasi pepa ... i se mea i luga.

Fuafuaga o galuega: mai fa'amatalaga pu'upu'u ile auro 🧩

O se paipa fa'ailoga malosi e masani lava ona mulimulita'i i le fa'atusa lea:

  1. Fa'amatala le ontology : vasega, uiga, mafutaga, ma fa'ataga fa'aletonu.

  2. Fa'ata'ita'iga ta'iala : fa'ata'ita'iga, mata'itusi pito, ma fa'ata'ita'iga fa'a'ese'ese.

  3. Fa'ailoga se seti pailate : maua ni nai fa'ata'ita'iga fa'amatalaga e su'e ai pu.

  4. Fua maliega : fa'atatau κ/α; toe iloilo faatonuga seia o'o ina fa'atasia fa'amatalaga [1].

  5. Fuafuaga QA : palota autasi, fa'amasinoga, iloiloga fa'atulagaina, ma siaki va'aiga.

  6. Gaosia e tamo'e : mata'ituina le gaosiga, lelei, ma tafetafea.

  7. Tapuni le matasele : toe a'oa'o, toe fa'ata'ita'i, ma fa'afou fa'amaumauga a'o fa'asolo le fa'ata'ita'iga ma le oloa.

Motugaafa o le ae faafetai ia te oe lava mo se taimi mulimuli ane: tausia se lisi o filifiliga . Tusi i lalo tulafono faamanino taitasi e te faaopoopo ma pe aisea . I le lumanaʻi-e te faʻagaloina le faʻamatalaga. I le lumanaʻi-o le a e ita i ai.

O le tagata-i-le-vave, vaivai le vaavaaiga, ma le "sili atu igoa, itiiti kiliki" mafaufau 🧑💻🤝

Human-in-the-loop (HITL) o lona uiga o tagata e galulue faʻatasi ma faʻataʻitaʻiga i aʻoaʻoga, iloiloga, poʻo faʻatinoga ola-faʻamaonia, faʻasaʻo, poʻo le aloese mai fautuaga faʻataʻitaʻiga. Fa'aoga e fa'avavevave ai le saosaoa a'o tausia tagata e pulea lelei ma le saogalemu. O le HITL o se faʻataʻitaʻiga autu i totonu o le faʻatuatuaina AI faʻalavelave faʻalavelave (vaaiga a tagata, faʻamaumauga, mataʻituina) [2].

le va'ava'ai vaivai ose togafiti e 'ese'ese ae fa'atasi: tulafono fa'apolokalame, fa'atonuga mamao, va'ava'ai mamao, po'o isi puna pisapisao e fa'atupuina fa'ailoga le tumau i le fua, ona e fa'afitia lea. Fa'apolokalame o Fa'amaumauga ua fa'asalalauina le tu'ufa'atasia o le tele o fa'ailoga pisa (aka fa'ailoga galuega ) ma le a'oa'oina o latou sa'o e maua ai se seti a'oa'oga maualuga atu [3].

I le fa'ata'ita'iga, e fa'afefiloi e 'au saosaoa mea uma e tolu: fa'ailoga tusi mo seti auro, va'ava'ai vaivai i le bootstrap, ma le HITL e fa'avave ai galuega i aso uma. E le o le kopi. O le faiva.

A'oa'o malosi: filifili le isi mea sili e fa'ailoga 🎯📈

O le a'oa'oina malosi e feliuliua'i le tafe masani. Nai lo le fa'ata'ita'i fa'ata'ita'i fa'amaumauga e fa'aigoaina, e te tu'uina atu le fa'ata'ita'iga e talosagaina fa'ata'ita'iga sili ona fa'amatalaga: maualuga le le mautonu, maualuga feeseeseaiga, sui 'ese'ese, po'o fa'ailoga e lata ane i le tuaoi o fa'ai'uga. Faatasi ai ma faʻataʻitaʻiga lelei, e te tipiina le faʻaigoaina o otaota ma taulaʻi i aafiaga. O su'esu'ega fa'aonaponei e aofia ai le loloto o le a'oa'oga fa'agaoioiga e lipotia ai le fa'atinoina o galuega fa'aitiitiga fa'ailoga pe a lelei le fa'atulagaina o le fa'aogaina o le fa'aogaina [4].

O se fua masani e mafai ona e amata i ai, leai se tala faatino:

  • Aoao i luga o se seti fatu laʻititi.

  • Sikoa le vaita'ele e le'i fa'ailogaina.

  • Filifili le K pito i luga e ala i le le mautonu poʻo le faʻataʻitaʻiga o feeseeseaiga.

  • Fa'ailoga. Toe toleni. Toe fai i vaega laiti.

  • Matamata i fa'ailoga fa'amaonia ma fua fa'atatau ina ia e le tuliloaina le pisa.

E te iloa o lo'o aoga pe a fa'alelei lau fa'ata'ita'iga e aunoa ma le fa'aluaina o lau pili fa'ailoga masina.

Pulea lelei e aoga 🧪

E te le tau faapuna le sami. Fa'amoemoe mo siaki nei:

  • Fesili auro : tui mea ua iloa ma siaki le sa'o a le tagata fa'ailoga.

  • Autasi ma le fa'amasinoga : lua fa'ailoga tuto'atasi fa'atasi ai ma se tagata su'esu'e i feeseeseaiga.

  • Maliega inter-annotator : fa'aoga le α pe a tele au fa'amatalaga po'o fa'ailoga e le'i atoatoa, κ mo paga; 'aua ne'i fa'atauva'a i se mea e tasi e fa'atatau i le si'osi'omaga [1].

  • Su'esu'ega ta'iala : o mea sese faifaipea e masani ona faauigaina o fa'atonuga le mautonu, ae le o fa'amatalaga leaga.

  • Su'ega fa'aa'e : fa'atusatusa fa'asoa fa'ailoga i le taimi, fa'afanua, auala fa'aoga.

Afai e te filifilia na o le tasi le metric, filifili le maliega. O se fa'ailoga fa'alesoifua maloloina vave. Fa'ata'ita'iga sese laititi: afai e le'o fa'aoga au fa'ailoga, o lau fa'ata'ita'iga o lo'o tamo'e i uili fe'avea'i.

Fa'ata'ita'iga o tagata faigaluega: i totonu o le fale, BPO, motu o tagata, po'o le fa'atosina 👥

  • I totonu o le fale : sili mo faʻamatalaga maʻaleʻale, nuanced domains, ma aʻoaʻoga faʻasolosolo vave.

  • Fa'atauga fa'apitoa : fa'asolo fa'aulufale, a'oa'oina QA, ma fa'asalalau i sone taimi.

  • Crowdsourcing : taugofie ile galuega, ae e te manaʻomia auro malosi ma faʻatonutonu spam.

  • Hybrid : fa'atumauina se 'au fa'apitoa fa'apitoa ma pa'u ma le malosi i fafo.

Po o le a lava le mea e te filifilia, teu faʻafaigaluega i kickoffs, aʻoaʻoga taʻiala, taʻamilosaga faʻavasega, ma faʻamatalaga masani. Fa'ailoga taugofie e fa'amalosia ai pasi toe fa'ailoga e tolu e le taugofie.

Tau, taimi, ma ROI: o se siaki moni vave 💸⏱️

O tau e malepe i le aufaigaluega, tulaga, ma le QA. Mo fuafuaga faigata, fa'afanua lau paipa fa'apenei:

  • Manulauti fa'atumu : mea ile aso ile fa'ailoga × fa'ailoga.

  • QA luga ole ulu : % fa'ailoga fa'alua pe toe iloilo.

  • Toe fai fua faatatau : paketi mo le toe fa'amatalaga pe a mae'a fa'afouga ta'iala.

  • Si'i fa'aautomatika : fa'aigoa fa'ata'ita'i fesoasoani po'o tulafono fa'apolokalame e mafai ona tipiina taumafaiga a le tusi lesona i se pusi 'anoa (e le fa'ataulāitu, ae 'anoa).

Afai e mana'omia e le fa'atauga se numera, tu'u i ai se fa'ata'ita'iga-ae le o se matemate-ma fa'afou pea a'o fa'amautu au ta'iala.

Mailei e te lavea ia le itiiti ifo ma le tasi, ma le auala e 'alo ese ai 🪤

  • Fa'atonuga fetolofi : ta'iala ua fulafula i se tala fou. Faʻamau i laʻau filifiliga + faʻataʻitaʻiga faigofie.

  • Vasega fulafula : tele naua vasega ma vase tuaoi. Fa'atasi pe fa'amatala se "isi" ma'oti ma faiga fa'avae.

  • Ova fa'asino igoa ile saoasaoa : fa'atopetope fa'ailoga e fa'a'ona lemu fa'amaumauga a'oa'oga. Faaofi auro; fua-fa'atapula'a ia pito sili ona leaga.

  • Meafaigaluega loka-i totonu : fa'aulufale atu formats u. Filifili vave ile JSONL schemas ma fa'ailoga ID aitema.

  • Le amana'ia iloiloga : afai e te le fa'ailoga muamua se seti eval, e te le mautinoa po'o le a le mea na fa'aleleia.

Tatou fa'amaoni, e te toe fo'i i tua i lea taimi ma lea taimi. E lelei. O le togafiti o le tusi i lalo le backtracking o le isi taimi e faʻamoemoeina.

Mini-FAQ: o tali vave, fa'amaoni 🙋♀️

F: Fa'ailoga ma fa'amatalaga-e 'ese'ese?
A: I le fa'ata'ita'iga e fa'aaogaina e tagata e fa'afesuia'i. O fa'amatalaga o le fa'ailoga po'o le fa'ailoga. O le fa'ailogaina e masani ona fa'aalia ai se mafaufauga moni fa'atasi ma QA ma ta'iala. Pateta, pateta.

Q: E mafai ona ou fa'ase'e le fa'ailoga fa'afetai i fa'amaumauga fa'akomepiuta po'o le va'aiga a le tagata lava ia?
A: E mafai ona e fa'aitiitia , aua le fa'amisi. E te mana'omia pea fa'amaumauga fa'ailoga mo le iloiloga, pa puipui, fa'alelei lelei, ma amioga fa'apitoa o oloa. O le va'ava'ai vaivai e mafai ona fa'atuputeleina oe pe a na'o le fa'ailoga lima e le tipiina [3].

Q: Ou te mana'omia pea ni fua fa'atatau pe afai o a'u tagata su'esu'e o ni tagata popoto?
A: Ioe. E le ioe foi tagata popoto. Fa'aaoga fua fa'atatau (κ/α) e su'e ai fa'auigaga va'aia ma vasega fa'alilolilo, ona fa'amausali lea o fa'amatalaga po'o tulafono [1].

Q: O le tagata-i-le-loop na'o le maketiina?
A: Leai. O se fa'ata'ita'iga fa'atino e ta'ita'ia, fa'asa'o, ma iloilo ai e tagata le amio fa'ata'ita'i. E fautuaina i totonu o faʻataʻitaʻiga faʻamaonia AI tulaga lamatia [2].

F: E fa'afefea ona ou fa'amuamua mea e fa'aigoa e soso'o mai?
A: Amata i le a'oa'oina malosi: ave fa'ata'ita'iga sili ona le mautinoa pe 'ese'ese ina ia maua ai e fa'ailoga fou ta'itasi le fa'aleleia atili o fa'ata'ita'iga [4].

Fa'amatalaga fanua: mea laiti e faia ai se eseesega tele ✍️

  • Taofi se taxonomy ola i lau repo. Fai e pei o le code.

  • Fa'asa'o fa'ata'ita'iga a'o le'i mae'a ma pe a uma

  • Fausia se seti auro laititi, atoatoa ma puipuia mai le faaleagaina.

  • Su'e vasega fa'avasega : fa'aali mea e 10, fa'ailoga lemu, fa'atusatusa, talanoaina, fa'afou tulafono.

  • Su'e au'ili'ili a le tagata fa'aigoa ma le agalelei-malosi dashboards, leai se ma. E te maua avanoa a'oa'oga, ae le o ni tagata leaga.

  • Fa'aopoopo fautuaga fesoasoani fa'ata'ita'i ma le paie. Afai e sese fa'ailoga, e fa'agesegese ai tagata. Afai e masani ona sa'o, o se togafiti.

Fa'ai'uga fa'ai'u: fa'ailoga o le mea e manatua e lau oloa 🧩💡

O le a le AI Data Labeling i lona autu? O lau auala e filifili ai pe faʻafefea ona vaʻaia e le faʻataʻitaʻiga le lalolagi, tasi le filifiliga faʻaeteete i le taimi. Fai lelei ma fa'afaigofie mea uma i lalo: sili atu le sa'o, fa'aitiitia fa'aletonu, felafolafoa'iga manino e uiga i le saogalemu ma le fa'aituau, fa'alelei le felauaiga. Fai fa'avalea ma o le a e fesili pea pe aisea e amio leaga ai le fa'ata'ita'iga-pe a saofai le tali i lau fa'amaumauga o lo'o ofuina le pine o le igoa sese. E le o mea uma e manaʻomia se 'au tele poʻo se polokalama faʻapitoa-ae o mea uma e manaʻomia le tausiga.

Ua Umi Ou te Le'i Faitauina : teu fa'afaigaluega i se fa'amatalaga manino, tusi tulafono manino, fua le maliliega, fa'afefiloi tusi tusi ma fa'ailoga fa'apolokalame, ma tu'u le a'oa'oga malosi e filifili lau isi mea e sili ona lelei. Ona toe fai lea. Toe foi. Ma toe ... ma e ese, o le ae fiafia i ai. 😄

Fa'asinomaga

[1] Artstein, R., & Poesio, M. (2008). Inter-Coder Agreement for Computational Linguistics . Computational Linguistics, 34(4), 555–596. (E ufiufi κ/α ma le auala e fa'amatala ai le maliliega, e aofia ai fa'amaumauga o lo'o misi.)
PDF

[2] NIST (2023). Fa'ata'ita'iga Fa'ata'ita'iga Fa'atonu Fa'atonu (AI RMF 1.0) . (Tagata vaʻaia, faʻamaumauga, ma faʻatonuga faʻalavelave mo AI faʻatuatuaina.)
PDF

[3] Ratner, AJ, De Sa, C., Wu, S., Selsam, D., & Ré, C. (2016). Polokalama Fa'amaumauga: Fausia Seti Fa'aa'oa'oga Tele, Vave . NeurIPS. (Fa'avae auala ile va'aiga vaivai ma fa'afitia igoa pisa.)
PDF

[4] Li, D., Wang, Z., Chen, Y., et al. (2024). O se Suʻesuʻega i luga o le Deep Active Learning: Faʻamatalaga lata mai ma New Frontiers . (Faamaoniga ma mamanu mo le aʻoaʻoina malosi e faʻamaonia.)
PDF

[5] NIST (2010). SP 800-122: Ta'iala mo le Puipuia o le Fa'alilolilo o Fa'amatalaga Fa'asinomaga Fa'apitoa (PII) . (O le a le mea e taua o le PII ma le auala e puipuia ai i lau paipa faʻamaumauga.)
PDF

Su'e le AI Fou i le Faleoloa Fesoasoani Lagolago AI

Faatatau ia tatou

Toe fo'i ile blog