Microsoftov VisualGPT izda novo tehnologijo ' VisualGPT «, ki je napredek umetne inteligence in odpira možnosti za bolj privlačne in interaktivne izkušnje umetne inteligence s premoščanjem vrzeli med vizualnimi elementi in jezikom.
Kaj je VisualGPT?
VisualGPT je razširjena različica ChatGPT, ki temelji na modelih NLP (Obdelava naravnega jezika), vendar se v VisualGPT uporablja VFMS, ki lahko besedilne poizvedbe pretvori v slikovno obliko. Tako je, da je kombinacija/integracija besedilnih in slikovnih poizvedb.
Namen VisualGPT
Po sprostitvi ChatGPT na trg, ki je kot edini delal na besedilnem formatu, je za dosego naslednje stopnje napredka na voljo popolno orodje, ki bo delovalo na besedilnem v grafičnem formatu, ob upoštevanju vseh teh razlogov in v tekmi za AI napredek Microsoft izda VisualGPT Glavni namen VisualGPT je ustvarjanje slik AI na zahtevo uporabnika ali analiza slike
Arhitektura VisualGPT
VisualGPT vsebuje uporabniško poizvedbo, upravitelja pozivov, modele Visual Foundation (VFM), sistemski princip, zgodovino dialoga, zgodovino sklepanja in vmesni odgovor.
Če govorimo posebej o njegovem modelu, tj. VFM (modeli vizualne podlage) ”, uporablja se skoraj 22 VFM, kot sta BLIP (Bootstrapping Language-Image Pre-training) in Stable Diffusion.
Kako zagnati Visual ChatGPT?
Če želite zagnati Visual ChatGPT, upoštevajte naslednje korake:
1. korak: Ustvarite okolje
Najprej morate ustvariti okolje Python različice 3.8:
uvoz sys
sys.path.append ( '/usr/local/lib/python3.8/site-packages' )
2. korak: Klonirajte datoteko Visual ChatGPT
Zdaj klonirajte vizualno datoteko ChatGPT iz GitHuba z naslednjim ukazom:
! git klon https: // github.com / deepanshu88 / visual-chatgpt.git 
3. korak: Nastavite nov imenik
Po tem nastavite nov imenik s spodnjim ukazom:
% cd vizualni-klepet4. korak: Namestite zahtevane pakete
Zdaj namestite potrebne pakete s pomočjo » pip »cmdlet:
! curl https: // bootstrap.pypa.io / get-pip.py -O get-pip.py! python3.8 get-pip.py
! python3.8 -m pip namestite -r zahteve.txt
5. korak: Dostopite do API-ja OpenAI
Po namestitvi začetnih paketov dostopajte do API-ja OpenAI tako, da pridobite ključ API-ja od »platform.openai.com« in izvedete overjene klice API-ja:
% okolj OPENAI_API_KEY =sk-xxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxx6. korak: Izberite model
Nazadnje, po dostopu do Openai izberite model, obstaja več kot 20 modelov, ki se uporabljajo v visualGPT, ki jih lahko izberete glede na vaše zahteve:
! python3.8. / visual_chatgpt.py --obremenitev Text2Image_cuda: 0V zgornjem ukazu ' Besedilo2Slika ” ustreza modelu, ki ga boste uporabili. Za več podrobnosti si oglejte ta Google Colab zvezek .
Zaključek
ChatGPT je bil predstavljen za pridobitev specifičnih odgovorov na katero koli poizvedbo, zdaj pa je Microsoft lansiral VisualGPT, ki lahko obravnava besedilne in slikovne podatke. Je takšna, da lahko uporabnik preprosto doda svoje zahteve v besedilni obliki in dobi njen grafični izpis.