Janus

Janus-1.3B

by DeepSeek · Saadaval avatud kaaludega uurimismudelina; Januse seerias on selle välja vahetanud uuemad Janus-Pro variandid, kuid seda saab endiselt alla laadida ja kasutada.

DeepSeek Janus-1.3B on avatud kaaludega ja kohapeal juurutatav multimodaalne mudel, mis toetab piltide mõistmist, teksti genereerimist ning teksti põhjal piltide loomist eraldi visuaalse kodeerimise harude ja ühise keelemudeli tuumiku kaudu.

Tekst Piltide genereerimine Arutlusvõime Programmeerimine
DeepSeek Janus-1.3B on kompaktne avatud kaaludega multimodaalne mudel piltide ja tekstiga seotud katseteks. See suudab pilte tõlgendada, vastata visuaalsetele küsimustele, kirjeldada piltide sisu, genereerida teksti ning luua tekstiviipade põhjal pilte. Selle asemel et olla kasutuspõhine majutatud API-mudel, levitatakse seda DeepSeeki ametlike repositooriumide kaudu kohalikuks juurutamiseks. Seetõttu pakub see eelkõige huvi teadlastele, multimodaalseid töövooge katsetavatele arendajatele ja kasutajatele, kes soovivad proovida ise hostitud järeldamist.
Väljundid

Mida Janus-1.3B suudab teha

Tekst Piltide genereerimine
Sisendid

Mida see mõistab

Tekst Pildid Multimodaalne
Võimekused

Abifunktsioonid

Multimodaalne
Mudeli profiil

Jõudlusnäitajad

4/10 Arutlusvõime
3/10 Programmeerimine
7/10 Kiirus
9/10 Kulutõhusus
Detailid

Tehnilised andmed

Mudeliseeria Janus
Tüüp Multimodaalne
Konteksti maht 4K märki/tokenit
Maksimaalne väljundmärkide arv märki/tokenit
Välja antud 2024-10-17
Olek Saadaval avatud kaaludega uurimismudelina; Januse seerias on selle välja vahetanud uuemad Janus-Pro variandid, kuid seda saab endiselt alla laadida ja kasutada.
Teadmiste ajapiiri märkused

Ametlikus mudelikaardis, repositooriumis ega viidatud Januse artiklis ei leitud autoriteetset mudelispetsiifilist teadmiste lõppkuupäeva.

Mudeli selgitused

Janus-1.3B on algne Januse mudel, mis erineb mudelitest JanusFlow-1.3B ja Janus-Pro-1B. See põhineb mudelil DeepSeek-LLM 1.3B ning kasutab mõistmiseks ja genereerimiseks lahutatud visuaalset kodeerimist. Ametlikus repositooriumis on dokumenteeritud 4096 tokeni pikkune tokenijada ning näited multimodaalseks mõistmiseks ja teksti põhjal piltide genereerimiseks. Ametlikes materjalides ei täpsustata teadmiste lõppkuupäeva, väljundtokenite maksimaalset arvu, majutatud API hinnastust, veebiotsingu tuge, struktureeritud väljundi tuge, viipade vahemällu salvestamise teenust ega pakett-API-t. Mudel on avatud kaaludega ja seda levitatakse MIT-litsentsi alusel.

COST

Hinnad

Sisend Ametlikult hostitud API hinnakiri puudub; mudeli kaalud tuleb ise hostida
Väljund Ametlikult hostitud API hinnakiri puudub; mudeli kaalud tuleb ise hostida.
Mudeli juhend

Janus-1.3B: DeepSeeki kohalik multimodaalne mudel piltide mõistmiseks ja loomiseks

DeepSeek Janus-1.3B on avatud kaaludega 1,3 miljardi parameetriga mudel, mis ühendab ühes kohapeal juurutatavas autoregressiivses süsteemis pildi mõistmise, teksti genereerimise ja teksti põhjal piltide loomise. Selle eraldi visuaalsed kodeerijad on loodud piltide mõistmiseks ja genereerimiseks ning kasutavad ühist keelemudeli alust.

Mis on Janus-1.3B?

Janus-1.3B on DeepSeeki avatud kaaludega multimodaalne mudel. See on loodud kahe omavahel seotud, kuid tehniliselt erineva ülesande jaoks: visuaalse sisendi mõistmiseks ja visuaalse väljundi genereerimiseks. Praktiliselt tähendab see, et mudel saab vastu võtta teksti ja pilte ning täita selliseid ülesandeid nagu pildi kirjeldamine, visuaalsetele küsimustele vastamine ja pildi teisendamine tekstiks, samuti genereerida tekstiliste viipade põhjal pilte.

Mudel kasutab autoregressiivset arhitektuuri, mis tähendab, et väljundid luuakse samm-sammult keelemudelilaadse genereerimisprotsessi abil. Selle eripäraks on visuaalse kodeerimise lahutamine: piltide mõistmiseks ja piltide genereerimiseks kasutatakse eraldi visuaalkoodereid, samal ajal kui mõlemad funktsioonid kasutavad ühist keelemudeli põhiosa. Sellise ülesehituse eesmärk on võimaldada ühel mudelil toetada mitmesuguseid nägemise ja keele ülesandeid, sundimata sama visuaalset representatsiooni sobima igaks otstarbeks.

Janus-1.3B põhineb mudelil DeepSeek-LLM 1.3B. Ametlikus mudelimaterjalis on määratud 4096 märgi pikkune järjestus ning toodud näited multimodaalseks mõistmiseks ja tekstist pildi genereerimiseks lokaalses keskkonnas.

Võimekus ja toetatud modaalsused

Janus-1.3B toetab teksti- ja pildisisendit. Selle piltide mõistmise töövoogu saab kasutada muu hulgas järgmisteks ülesanneteks:

  • Pildi sisu kirjeldamine
  • Pildi kohta esitatud küsimustele vastamine
  • Visuaalse teabe teisendamine tekstiks
  • Eksperimentaalsete nägemise ja keele rakenduste loomine

Samuti toetab see tekstist pildi genereerimist. Selles režiimis kasutatakse tekstilist viipa pildi loomiseks mudeli visuaalse genereerimise töövoo kaudu. Ka tekst on väljundmodaalsus, sest sama süsteem suudab genereerida kirjeldusi, vastuseid ja muid keelelisi vastuseid.

Esitatud tehniline teave ei dokumenteeri heli- ega videosisendit, heli- ega videoväljundit, kõne genereerimist, muusika genereerimist, manuseid ega struktureeritud väljundi garantiisid. Samuti ei ole märgitud sisseehitatud veebiotsingut ega üldist tööriistade ja funktsioonide kutsumist. Need puudujäägid on olulised, kui võrrelda Janus-1.3B-d hostitud multimodaalsete assistentidega, mis ühendavad nägemise veebisirvimise, väliste tööriistade või laiema meediatoega.

Arhitektuur ja 4096 märgi pikkune kontekst

Arhitektuuri keskne omadus on visuaalse kodeerimise eraldamine mõistmise ja genereerimise jaoks. Piltide mõistmisel ja tekstist pildi genereerimisel kasutatakse erinevaid visuaalkoodereid, kuid mudel säilitab ühise keelemudeli põhiosa. See on Januse disaini „lahutamine”: mudel ei tugine kõikide multimodaalsete ülesannete puhul ühele visuaalsele representatsioonile.

Janus-1.3B dokumenteeritud järjestuse pikkus on 4096 märki. Märk on tekstitöötluse ühik ning järjestuse piirang kehtib mudeli toetatud sisendi ja genereeritud järjestuse konteksti kohta, mitte kindla sõnade arvu kohta. Esitatud teadusmaterjal ei täpsusta eraldi maksimaalset väljundmärkide arvu, seega tuleb seda väärtust käsitleda teadmata suurusena, mitte eeldada, et see võrdub konteksti pikkusega.

1,3 miljardi parameetriga Janus-1.3B kuulub multimodaalsete mudelite juurutamisel pigem kergema kaaluga mudelite hulka. See võib muuta mudeli praktiliseks vahendiks lokaalseks katsetamiseks, kuid kasutajad ei tohiks automaatselt eeldada sama sügavusega arutlemist, pildikvaliteeti või töökindlust nagu suuremate ja uuemate süsteemide puhul.

Janus-1.3B koht DeepSeeki mudelivalikus

Janus-1.3B on DeepSeeki Januse seeria algne Januse mudel. Esitatud uuring eristab seda mudelitest JanusFlow-1.3B ja uuematest Janus-Pro variantidest. Neid nimetusi ei tohiks käsitleda vahetatavate toodetena: Janus-1.3B tähistab konkreetselt algset mudelit, millel on eraldi avaldatud kaalud ja teostus.

See on endiselt saadaval avatud kaaludega teadusmudelina, kuid Januse seerias on selle järglasteks saanud uuemad Janus-Pro väljalasked. Seetõttu on Janus-1.3B eriti kasulik algse arhitektuuri mõistmiseks, teaduskatsete kordamiseks või suhteliselt väikese lokaalse prototüübi loomiseks. Kasutajatel, kes otsivad eelkõige Januse seeria parimat praegust kvaliteeti, võib olla põhjust uurida mõnda uuemat sõsarmudelit, kuigi esitatud uuring ei paku otsest võrdlustesti ega Janus-Pro üksikasjalikke tehnilisi andmeid.

Juurutamine ja hinnastamine

Janus-1.3B-i levitatakse DeepSeeki ametliku Hugging Face'i hoidla ja GitHubi hoidla kaudu. Dokumenteeritud kasutusviis hõlmab Transformerit koos Januse hoidlas olevate kohandatud multimodaalsete komponentidega. See on lokaalse mudeli juurutamise töövoog, mitte tavapärane hostitud API-integratsioon.

Janus-1.3B jaoks ei ole esitatud ametlikku hostitud API hinda. Mudeli kaalud on MIT-litsentsi alusel saadaval isehostitud kasutuseks, kuid „tasuta” ei tähenda alati, et kasutamine on praktilises mõttes kuludeta: vaja võib minna sobivat kohalikku riistvara, salvestusruumi, tarkvarasõltuvusi ning elektrit või renditud arvutusressurssi. Kuna esitatud uuringus ei ole dokumenteeritud mõõdetava tasuga teenusepakkuja lõpp-punkti, ei ole võimalik esitada kontrollitud sisendmärgi hinda, väljundmärgi hinda, tellimuse hinda ega pildigenereerimise API tariifi.

Lokaalne juurutus võib olla atraktiivne, kui järelduste tegemise kasutaja kontrolli all hoidmine on hallatud teenusest olulisem. Samuti tähendab see, et mudeli juurutaja vastutab paigaldamise, riistvara ühilduvuse, käitusjõudluse, uuenduste ja töökindluse eest.

Peamised tugevused ja kompromissid

Janus-1.3B-i kõige selgem tugevus on suhteliselt väikeses mudelis pakutav lai funktsionaalsus: see ühendab piltide mõistmise, teksti genereerimise ja tekstist pildi genereerimise, mistõttu ei ole iga katse jaoks vaja eraldi mudeleid. Avatud kaaludega levitamine ja MIT-litsents on samuti kasulikud teadustööks ning isehostitud prototüüpide loomiseks, arvestades hoidlas esitatud tingimusi ja teostusnõudeid.

Visuaalse kodeerimise lahutatud ülesehitus on veel üks oluline tehniline eelis lugejatele, keda huvitab multimodaalne arhitektuur. See annab mudelile eraldi töövood piltide mõistmiseks ja genereerimiseks, säilitades samal ajal ühise keelepõhise põhiosa. Seetõttu on Janus-1.3B enamat kui tekstipõhine keelemudel, millele on lisatud piltide pealkirjastamise funktsioon.

Sama olulised on ka kompromissid. 1,3 miljardi parameetriga on see multimodaalse süsteemi kohta suhteliselt väike. Esitatud uuring kirjeldab seda uuematest Janus-Pro väljalasetest vanemana ning märgib, et piltide genereerimise ja mõistmise kvaliteet võib sõltuda riistvarast, teostuse üksikasjadest, valimi võtmise seadetest ja viipade koostamisest. Seetõttu tuleks mudelit käsitleda pigem kompaktse teadus- ja prototüüpimisplatvormi kui garanteeritud tootmiskvaliteediga visuaalse assistendina.

Arutlemine, kodeerimine, kiirus ja kulud

Janus-1.3B suudab genereerida teksti ja töödelda visuaalset teavet, kuid esitatud materjalid ei dokumenteeri spetsiaalset arutlusrežiimi ega teenusepakkuja avaldatud arutlusvõimekuse võrdlustesti. Seetõttu tuleb selle arutlusvõime hindamisse suhtuda ettevaatlikult. Selle kirje jaoks esitatud toimetuslik hinnang annab arutlusvõimele hindeks 4 punkti 10-st ja kodeerimisvõimele 3 punkti 10-st; need on võrdlevad toimetuslikud hinded, mitte DeepSeeki avaldatud tehnilised andmed ega võrdlustestide tulemused.

Sama toimetuslik hinnang annab kiirusele hindeks 7 punkti 10-st ja kuludele 9 punkti 10-st. Need hinded kajastavad mudeli suhteliselt väikest suurust ja isehostitud olemust, mitte garanteeritud vastamisaega ega lubadust, et kasutuskulud puuduvad. Tegelik kiirus sõltub kohalikust riistvarast, käituskeskkonna teostusest, pildigeneratsiooni seadetest ja töökoormusest. Väike lokaalne mudel võib korduvate katsete puhul olla suurest hostitud süsteemist soodsam, samas kui hallatud API võib olla mugavam, kui seadistamise ja operatiivse hoolduse lihtsus on otsesest kontrollist olulisem.

Janus-1.3B ei dokumenteeri tööriistade kasutamist, funktsioonide kutsumist, veebiotsingut, struktureeritud JSON-väljundit, viipade vahemällu salvestamise teenuseid ega pakett-API-t. Mudelit ei tohiks valida eeldusel, et need võimalused on saadaval.

Parimad kasutusjuhud

Janus-1.3B on mõistlik valik lokaalseks teadustööks ja kergeks multimodaalseks prototüüpimiseks. Sobivate projektide hulka kuuluvad pildi-küsimuse-vastuse töövoogude testimine, pildikirjeldustega katsetamine, tekstist pildi genereerimise uurimine, ühtsete multimodaalsete arhitektuuride analüüsimine ja demonstratsioonide loomine, kus mudeli kaalud peavad töötama arendaja kontrolli all.

See võib olla kasulik ka siis, kui projekt vajab ühes teadustööle suunatud süsteemis nii visuaalset mõistmist kui ka piltide genereerimist. Ühine keelepõhine põhiosa võib muuta katsetamise lihtsamaks kui omavahel mitteseotud mudelite kokkupanek, kuigi ametlik teostus ja kohandatud komponendid tuleb endiselt lokaalselt paigaldada ja käitada.

Millal seda mudelit valida

Vali Janus-1.3B, kui soovid avatud kaaludega DeepSeeki mudelit, mis ühendab piltide mõistmise ja tekstist pildi genereerimise, ning oled valmis korraldama lokaalse juurutuse. Selle kompaktne suurus, MIT-litsents, dokumenteeritud 4096 märgi pikkune järjestus ja teadustööle suunatud väljalase teevad sellest mõistliku kandidaadi katsetamiseks, mitte hostitud tootmisteenusena kasutamiseks.

Mõni muu valik võib olla sobivam, kui vajad ajakohast hallatud API-t, garanteeritud teenuse kättesaadavust, veebipõhist taustainfot, tööriistade kutsumist, struktureeritud väljundeid, heli- või videotuge, täiustatud arutlusvõimet või pidevalt kõrgetasemelist pildigeneratsiooni. Uuemad Janus-Pro variandid võivad pakkuda huvi ka kasutajatele, kes võrdlevad mudeleid konkreetselt DeepSeeki Januse perekonnas, kuid esitatud allikad ei määra kindlaks täpseid jõudluse- ega funktsioonierinevusi.

Piirangud ja dokumenteerimata tehnilised andmed

Selle kirje jaoks esitatud ametlikus materjalis ei täpsustata mudelipõhist teadmiste lõpptähtaega, maksimaalset väljundmärkide arvu, hostitud API hinnastamist, veebiotsingu tuge, struktureeritud väljundi tuge, vahemällu salvestamise teenust ega pakett-API-t. Samuti ei kinnitata heli- ega videovõimekust. Planeerimisel tuleb neid käsitleda teadmata või toetamata funktsioonidena, mitte täita lünki oletustega.

Ka Janus-1.3B-i tegelik väljundikvaliteet sõltub tugevalt juurutustingimustest. Tulemusi võivad mõjutada kohalik riistvara, tarkvaraversioonid, valimi võtmise valikud, viipade koostamine ja valitud ülesanne. Seetõttu on enne mudeli kasutuselevõttu suuremas rakenduses eelistatav teha ametliku hoidla abil väike pilootkatse.

Kokkuvõte

Janus-1.3B on kompaktne avatud kaaludega multimodaalne mudel, mille peamine eripära on piltide mõistmise ja tekstist pildi genereerimise ühendamine ühes arhitektuuris, kus kasutatakse lahutatud visuaalkoodereid. See pakub juurdepääsetavat alust lokaalseks teadustööks ja multimodaalseks prototüüpimiseks, kuid mudeli vanus, väike parameetrite arv, hostitud API puudumine ja dokumenteerimata tootmisfunktsioonid piiravad selle sobivust nõudlike kommertslike assistentide või valmislahenduste jaoks.


KKK - vastused sinu küsimustele

Mis on Janus-1.3B?
Janus-1.3B on DeepSeeki avatud kaaludega multimodaalne mudel, mis toetab piltide mõistmist, teksti genereerimist ja teksti põhjal piltide genereerimist. See kasutab mõistmiseks ja genereerimiseks eraldi visuaalkoodereid, kuid jagab nende vahel ühist keelemudeli tuuma.
Milleks saab Janus-1.3B-d kasutada?
Janus-1.3B suudab pilte kirjeldada, vastata visuaalset sisu puudutavatele küsimustele, teisendada pilte tekstiks, toetada visuaal-keelelisi katseid ning luua tekstiliste viipade põhjal pilte. See sobib eelkõige lokaalseks uurimistööks ja kergete multimodaalsete prototüüpide loomiseks.
Kas Janus-1.3B-d saab lokaalselt käitada ja kui palju see maksab?
Jah. Janus-1.3B on kohapealseks kasutuselevõtuks saadaval DeepSeeki ametlikes Hugging Face’i ja GitHubi hoidlates, kus saab kasutada Transformerit ja kohandatud multimodaalseid komponente. Mudeli kaalud on välja antud MIT-litsentsi alusel, kuid kasutajatel on siiski vaja sobivat riistvara, salvestusruumi, tarkvara ning elektrit või renditud arvutusressurssi.
Millised on Janus-1.3B peamised piirangud?
Janus-1.3B on suhteliselt väike ja vanem mudel, millel on 1,3 miljardit parameetrit. Selle kohta ei ole dokumenteeritud hostitud API hinnastust, veebotsingut, tööriistade kutsumise võimalust, struktureeritud väljundi garantiisid ega heli- või videotuge, samuti puudub sellel spetsiaalne arutlusrežiim. Mudeli kiirus ja väljundi kvaliteet sõltuvad riistvarast, teostusest, viipade koostamisest ja genereerimisseadetest.


Allikad 4
AI ettevõte

Info DeepSeek kohta