Dataiku

Mis on Dataiku?

Dataiku on ettevõtetele mõeldud andmeteaduse ja tehisintellekti platvorm. See aitab organisatsioonidel luua ühenduse andmetega, neid ette valmistada ja analüüsida, koostada masinõppemudeleid, luua generatiivse tehisintellekti töövooge ja agente ning viia valminud projektid või teenused tootmiskasutusse.

Platvorm ühendab visuaalsed vähese koodikirjutamise vajadusega liidesed Pythoni, R-i, SQL-i, märkmike, API-de ja pistikprogrammidega. Seetõttu saavad seda kasutada analüütikud ja ärimeeskonnad juhendatud töövoogude jaoks, kuid see pakub piisavat paindlikkust ka andmeteadlastele, masinõppeinseneridele, arendajatele ja IT-meeskondadele, kes vajavad otsesemat kontrolli.

Dataiku on saadaval hallatava pilveteenusena või iseseisvalt hallatava tarkvarana, mis juurutatakse kliendi pilvekeskkonda või ettevõtte enda taristusse. Selle peamine eesmärk ei ole pakkuda üldotstarbelist tarbijatele mõeldud vestlusrobotit. Selle asemel koondab see andmetöötluse, mudelite arendamise, tehisintellektirakendused, automatiseerimise ja halduse ühte ettevõtete töökeskkonda.

Milleks Dataikut kasutatakse?

Tüüpiline Dataiku projekt algab failide, andmebaaside, pilvesalvestuse, ärirakenduste või API-dega ühenduse loomisest. Seejärel koostavad kasutajad visuaalse voo, mille abil andmeid puhastada, ühendada, teisendada ja analüüsida. Sama projekt võib anda tulemuseks juhtpaneelid, ennustusmudelid, automatiseeritud töövood, API-d või tehisintellektirakenduse.

• Andmete ettevalmistamine ja analüüs: Meeskonnad saavad luua ühenduse struktureeritud andmetega, andmekogumeid profileerida, rakendada teisendusi ning koostada visuaalsete töövoogude abil graafikuid või juhtpaneele.
• Masinõpe: Andmeteadlased ja analüütikud saavad koostada ennustus-, klasterdus-, aegridade, süvaõppe ja muid mudeleid, sealhulgas visuaalseid masinõppe töövooge, ning hinnata nende toimivust.
• Generatiivse tehisintellekti rakendused: Administraatorid saavad seadistada ühendusi selliste teenusepakkujatega nagu Anthropic, OpenAI, Azure OpenAI, AWS Bedrock, Google Vertex AI, Mistral AI ja muud toetatud teenused. Seejärel saavad meeskonnad luua viipade töövooge, teadmusrakendusi ja hindamisi ning lisada hallatud suurte keelemudelite põhiseid funktsioone.
• Tehisintellektiagendid: Dataiku toetab visuaalselt ja koodi abil loodud agente, mis saavad kasutada seadistatud mudeleid, tööriistu, teadmiste allikaid, API-sid ja mitmeetapilisi töövooge. MCP tugi võimaldab Dataiku agente ja tööriistu ühilduvate integratsioonide jaoks välja pakkuda.
• Operatiivne automatiseerimine: Stsenaariumid saavad käivitada andmekogumite loomise, mudelite treenimise, kvaliteedikontrolle, teavitusi, mõõdikute kogumist ja muid ajastatud või sündmuspõhiseid ülesandeid.
• Tootmiskasutusse juurutamine: Projekte, mudeleid, API-sid ja teenuseid saab Dataiku juurutus- ja API-taristu kaudu tootmiskasutusse viia. See hõlmab mudelite, funktsioonide ja päringute API-teenuseid.

Kuidas platvorm ettevõtte töövoogu sobitub?

Dataiku on eriti kasulik siis, kui organisatsioon vajab enamat kui üksikut märkmikku või eraldiseisvat mudeli API-t. Meeskond saab platvormi abil liikuda algandmetest korratava töövooni ning lisada sellele õigused, seire, juurutamise juhtelemendid ja auditeeritavuse.

Näiteks võib analüütik ette valmistada kliendiandmed ja koostada visuaalses projektis kliendikaotuse ennustusmudeli. Andmeteadlane saab sama tööd Pythoni või märkmike abil edasi arendada, samal ajal kui insener saab töövoo automatiseerida ja teha mudeli ennustused API kaudu kättesaadavaks. Haldus- või IT-meeskonnad saavad hallata juurdepääsu, autentimist, juurutamist ja seiret, ilma et iga kasutaja peaks taristuga otse tegelema.

Platvorm ühendub ka paljude andmesüsteemidega, sealhulgas Amazon S3, Google Cloud Storage, Azure Blob Storage, Snowflake, Databricks, BigQuery, Redshift, PostgreSQL, Salesforce, ServiceNow, Zendesk, Google Drive, Jira, Dropboxi, Boxi ja muude allikatega. Integratsioonid ja ühendused teenusepakkujatega sõltuvad seadistusest, mistõttu oleneb täpne valik saadaolevast versioonist, juurutusest, litsentsidest ja administraatori seadistustest.

Generatiivse tehisintellekti ja agentide arendamine

Dataiku generatiivse tehisintellekti võimalused on mõeldud keelemudelite lõimimiseks hallatud äriprotsessidesse, mitte ülejäänud andmeplatvormi asendamiseks. Organisatsioonid saavad seadistada heakskiidetud mudelite pakkujaid, ühendada teadmiste allikaid, luua viipade või otsingu-põhiseid töövooge, hinnata väljundeid ja paigutada tehisintellekti funktsioonid laiemate projektide osaks.

Agente saab luua visuaalselt või koodi abil ning need saavad kasutada hallatud tööriistu ja ettevõtte andmeallikaid. See on kasulik näiteks ettevõtte sisemiste teadmiste abiliste, otsingu-põhiste töövoogude, automatiseeritud analüüsi ja mitmeetapiliste äriprotsesside jaoks. Funktsioonide kvaliteet ja kättesaadavus sõltuvad siiski valitud mudelite pakkujast, ühendatud andmetest, õigustest ja taristust. Dataiku ei paku kõigis juurutustes üht universaalset mudelite ega keelte valikut.

Võrreldes üldotstarbelise vestlusrobotiga keskendub Dataiku rohkem andmete päritolule, korratavusele, juurutamisele, juurdepääsu kontrollile, mudelite haldusele ja lõimimisele olemasolevate ettevõtte andmetega. Võrreldes lihtsa visuaalse töövoo koostajaga pakub see põhjalikumat keskkonda analüütika, masinõppe, mudelite seire ja tootmiskasutuseks mõeldud tehisintellektisüsteemide jaoks.

Kellele Dataiku mõeldud on?

Dataiku on eelkõige mõeldud organisatsioonidele, kus andmete ja tehisintellektiga tegelevad mitu meeskonda. Tõenäoliste kasutajate hulka kuuluvad andmeteadlased, andmeanalüütikud, masinõppeinsenerid, andmeinsenerid, tehisintellekti arendajad, ärianalüütikud, IT-administraatorid ning haldus- või riskimeeskonnad.

See võib sobida organisatsioonile, mis vajab:

• Ühist töökeskkonda visuaalse ja koodipõhise andmeteaduse jaoks.
• Korratavaid andme-, mudeli- ja tehisintellekti töövooge ühekordsete katsete asemel.
• Ühendusi arvukate ettevõtte andmeallikate ja mudelite pakkujatega.
• Juurutusvahendeid mudelite, API-de, rakenduste ja automatiseeritud töövoogude jaoks.
• Projektideülest õiguste haldust, ühekordset sisselogimist, auditeeritavust, seiret ja juhtimist.

See sobib vähem inimesele, kes otsib lihtsat vestlusrobotit, kerget alternatiivi tabelarvutusele, esmalt mobiilseadmetele mõeldud tehisintellektirakendust või odavat eraldiseisvat mudeli API-t. Platvorm võib nõuda märkimisväärset haldust, taristu kavandamist, andmetele juurdepääsu seadistamist ja haldustööd.

Hinnad ja juurdepääs

Dataiku pakub iseseisvalt hallatavaks kasutuseks tasuta versiooni ning 14-päevast hallatava Dataiku Cloudi prooviperioodi. Ettevõtete hinnad on kokkuleppelised ja neid avalikult ei avaldata. Prooviperiood ei nõua krediitkaarti, kuid sellel on kasutus- ja funktsioonipiirangud ning see ei hõlma kõiki täiustatud haldus- ega LLM Meshi võimalusi.

Kehtiva prooviperioodi dokumentatsiooni kohaselt sisaldab töökeskkond kahte kasutajat, üht API Node'i API-teenust, nelja protsessorituuma ja 32 GiB elastset arvutusvõimsust. Proovikeskkonnad deaktiveeritakse prooviperioodi lõppedes, välja arvatud juhul, kui prooviperioodi pikendatakse või keskkond teisendatakse. Tasuta versioon on ettevõtteversioonist eraldi ning sellel on piirangud koostööd ja automatiseeritud ettevõttefunktsioone puudutavatele võimalustele.

Platvormid, juurutamine ja haldus

Dataiku Cloud töötab veebibrauseris. Organisatsioonid saavad Dataikut juurutada ka toetatud pilvetaristusse, sealhulgas AWS-i, Microsoft Azure'i ja Google Cloudi, või kasutada seda iseseisvalt hallatava tarkvarana oma keskkonnas. Toote dokumentatsioon kirjeldab ka eksperimentaalset Windowsi paigaldust ning tasuta versiooni Maci paigaldust.

Haldusfunktsioonide hulka kuuluvad projektide ja rühmade õigused, API-võtmed, SAML-i või OpenID Connecti põhine ühekordne sisselogimine, LDAP ja muud autentimisvõimalused, auditijäljed, juurutamise juhtelemendid ning haldusõigused. Need juhtelemendid on olulised, sest paljud Dataiku projektid ühendavad tundlikud äriandmed mudelite või tehisintellektiteenustega, mida võidakse kasutada tootmiskeskkonnas.

Privaatsus ja andmetega seotud kaalutlused

Iseseisvalt hallatavad juurutused võimaldavad klientidel hoida oma andmeid vaikimisi enda pilves või sisemises keskkonnas. Dataiku Cloudi puhul haldab Dataiku kliendiandmeid majutavat hallatavat teenust. Rakendatav juurutus, leping, seadistus ja teenusetingimused määravad, kuidas andmeid talletatakse, säilitatakse, varundatakse ja kustutatakse.

Dataiku avaldatud põhimõtete kohaselt ei kasutata kliendiandmeid Dataiku mudelite treenimiseks, välja arvatud juhul, kui klient on andnud selleks muu nõusoleku. Valikuliste tehisintellektiteenuste lubamisel võivad Dataiku ja seadistatud kolmanda osapoole teenusepakkuja töödelda sisu teenuse osutamiseks, kasutuse analüüsimiseks või vigade lahendamiseks. Seetõttu peaksid organisatsioonid enne konfidentsiaalsete andmete ühendamist LLM-i töövooga üle vaatama teenusepakkujate seadistused, lepingud, säilitamistingimused ja andmete jagamise nõuded.

Tugevused ja piirangud

Tugevused

• Ühendab ühes keskkonnas andmete ettevalmistamise, analüütika, masinõppe, generatiivse tehisintellekti, agendid, juurutamise ja halduse.
• Toetab nii visuaalseid töövooge kui ka professionaalset arendust Pythoni, R-i, SQL-i, märkmike, API-de ja pistikprogrammidega.
• Pakub ulatuslikke ettevõtete ühendusi ning seadistatavaid ühendusi mitme mudelite pakkujaga, sealhulgas Databricks.
• Pakub organisatsioonidele tootmiskasutusse juurutamist, automatiseerimist, API-teenuseid, seiret, õiguste haldust ja ühekordset sisselogimist.
• Toetab pilve-, hübriid- ja iseseisvalt hallatavaid juurutusmudeleid.

Piirangud

• Ettevõtete hinnad põhinevad hinnapakkumisel, mistõttu on otsene kulude võrdlemine keeruline.
• Juurutamine ja haldus võivad olla mahukad, eriti iseseisvalt hallatavate või rangelt reguleeritud juurutuste puhul.
• Saadaolevad funktsioonid sõltuvad versioonist, litsentsist, juurutusarhitektuurist, ühendustest ja seadistatud mudelite pakkujatest.
• Tasuta versioon ja prooviperiood ei paku kogu ettevõtetele mõeldud halduse, automatiseerimise ja LLM-i võimaluste komplekti.
• See on lihtsa isikliku analüütika või vestluspõhise tehisintellekti kasutuse jaoks laiem ja keerukam, kui vaja.
• Generatiivse tehisintellekti käitumine, toetatud keeled, privaatsuse käsitlemine ja väljundite kvaliteet sõltuvad osaliselt valitud välistest või kohapeal majutatud mudeliteenustest.

Kas Dataiku sobib?

Dataiku on tugev kandidaat organisatsioonidele, kes ehitavad mitme meeskonna peale korratavaid ja hallatud andme- ning tehisintellekti töövooge. See on eriti asjakohane siis, kui analüütika, masinõpe, generatiivne tehisintellekt ja tootmiskeskkonna toimingud peavad jagama andmeühendusi, õigusi ja juurutusprotsesse.

See ei ole kõige praktilisem valik juhuslikuks tehisintellekti kasutuseks ega meeskondadele, kes vajavad ainult kitsast funktsiooni, näiteks juurdepääsu vestlusrobotile, lihtsaid juhtpaneele või üht automatiseerimisühendust. Enne otsustamist peaksid potentsiaalsed kasutajad hindama vajalikku juurutusmudelit, saadaolevaid ühendusi, mudelite pakkujate eeskirju, taristu eest vastutajaid ja versioonipõhiseid funktsioone.