Llama 3.2 bring kenmerke soos lip-sinkronisering video vertaling, celebrity stemme en meer na Meta AI

Vandag (25) die Goal Connect 2024, 'n geleentheid deur die maatskappy verantwoordelik vir Facebook, Instagram en WhatsApp, met die aankondiging van sy tegnologiese nuus, aangebied deur die maatskappy self Mark Zuckerberg. Behalwe holografiese bril Orion, Ons het nog nuus gesien oor die Llama 3.2 en Meta AI — wat al die maatskappy se sosiale netwerke integreer. Sien nou die hoogtepunte oor Meta se kunsmatige intelligensie

Nuwe kenmerke kom met Llama 3.2

Die twee grootste nuwe modelle in die versameling Lama 3.2, met 11B en 90B (11 en 90 miljard, onderskeidelik) parameters, staan ​​uit vir hul ondersteuning vir visuele redeneringstake, soos om komplekse dokumente te verstaan, insluitend tabelle en grafieke, sowel as beeldbyskrifte en die identifisering van voorwerpe in visuele tonele gebaseer op natuurlike taalbeskrywings.

'n Praktiese voorbeeld behels Llama 3.2 se vermoë om grafieke te ontleed om vinnig vrae oor 'n maatskappy se verkoopsprestasie in 'n gegewe maand te beantwoord. In 'n ander geval kan die model kaarte te interpreteer, wat aandui wanneer 'n roete steiler word of die afstand van 'n spesifieke roete. Hierdie gevorderde modelle verbind ook visie en taal, om besonderhede uit 'n prent te onttrek en byskrifte te genereer om die toneel te beskryf.

Meta het ook ligter modelle aangekondig, 1B en 3B parameters, vir kleiner toestelle soos slimfone en slimbrille. Hierdie is gemaak om veeltalige teksgenerering en uitvoering van outomatiese opdragte. Hulle maak die ontwikkeling van aanpasbare toepassings moontlik wat direk op toestelle werk, wat volledige privaatheid verseker, aangesien data nie na die wolk gestuur word nie. Hierdie toepassings kan inkomende boodskappe opsom en belangrike items identifiseer om kalender-uitnodigings direk te stuur deur nutsfunksie-oproepfunksionaliteit te gebruik.

Om die modelle plaaslik te laat loop het twee hoofvoordele: amper oombliklike reaksies, as gevolg van direkte verwerking op die toestel, en groter privaatheid, deur te verhoed dat sensitiewe data na die wolk gestuur word. Dit laat beheer toe oor watter navrae op die toestel bly en watter deur groter modelle in die wolk op 'n duidelike en veilige manier verwerk kan word.

Hierdie werk is ondersteun deur ons vennote regoor die KI-gemeenskap. Ons wil graag bedank en erken (in alfabetiese volgorde): Accenture, AMD, Arm, AWS, Cloudflare, Databricks, Dell, Deloitte, Fireworks.ai, Google Cloud, Groq, Hugging Face, IBM watsonx, Infosys, Intel, Kaggle, Lenovo, LMSYS, MediaTek, Microsoft Azure, NVIDIA, OctoAI, Ollama, Oracle Cloud, PwC, Qualcomm, Sarvam AI, Scale AI, Snowflake, Together AI en UC Berkeley – Project vLLM.

Meta Dankie op jou webwerf

Nuwe Meta AI-kenmerke

En die nuus stop nie daar nie! Meta AI sal baat vind by die volgende nuwe kenmerke:

Stemme op WhatsApp, Instagram, Facebook en Messenger

Mark Zuckerberg het 'n nuwe opdatering aan Meta se AI-assistente aangekondig, wat nou celebrity-stemme sal bevat soos Dame Judi Dench, John Cena, Awkwafina, Keegan Michael Key en Kristen Bell. Die idee is om interaksie meer natuurlik en pret te maak, en bied 'n persoonlike ervaring op platforms soos Facebook, Messenger, WhatsApp e Instagram.

Benewens nuwe stemme, is een van die belangrikste innovasies die vermoë van KI-modelle om foto's interpreteer en ander visuele inligting van gebruikers, wat interaksie-alternatiewe uitbrei en selfs meer kontekstuele en relevante antwoorde vir elke gebruiker bied.

Bekyk, verduidelik en wysig beelde

Meta AI se redigeringsvermoë is ook uitgebrei, wat dit moontlik maak om te verwerk visuele inligting. Dit sal nou moontlik wees om 'n foto van 'n blom te neem terwyl jy loop en Meta AI te vra om dit te doen identifiseer dit en/of verduidelik meer daaroor, of doen die laai 'n prent op van 'n gereg en ontvang die ooreenstemmende resep.

Gebruikers sal ook kan doen gedetailleerde wysigings aan jou regte foto's die gebruik van opdragte in alledaagse taal, soos om elemente by te voeg of te verwyder. Voorheen het hierdie kenmerk net gewerk op beelde wat deur Meta AI gegenereer is, maar dit is nou beskikbaar vir foto's wat deur gebruikers geneem is, wat persoonlike aanpassings fasiliteer.

Met die funksie Imagine van Meta AI, sal jy jouself in stories kan plaas, plasings en selfs jou profielfoto op Facebook en Instagram, deel KI-gegenereerde selfies op 'n interaktiewe manier. Die KI kan ook onderskrifte vir jou Instagram- en Facebook-stories voorstel. Kies net 'n prent, en Meta AI sal verskeie onderskrifopsies voorstel, wat dit makliker maak om die een te kies wat die beste by jou plasing pas.

Lipsinkronisering oorklanking op Reels

Meta toets tans ook die outomatiese video-oorklanking met lipsinkronisering op Instagram en Facebook Reels, begin met tale Engels en Spaans. Hierdie funksionaliteit sal gebruikers in staat stel om inhoud in hul moedertaal te kyk, wat dit makliker maak om te verstaan ​​en mee te kommunikeer.

Aanvanklik is die kenmerk beskikbaar vir 'n klein groepie skeppers, maar daar is planne om dit uit te brei na meer skeppers en sluit ander tale in binnekort. Hierdie vooruitgang het die potensiaal om die reikwydte van inhoudskeppers aansienlik te vergroot, wat hul produksies toelaat om taalgrense te oorkom en met 'n wêreldwye gehoor te skakel, ongeag die taal wat gepraat word.

Beskikbaarheid

Die maatskappy beweer dat die Lama 3.2 is nou beskikbaar op Meta-platforms, met die uitsondering van Meta AI-stemopdaterings. Dit is slegs in Engels beskikbaar in Australië, Kanada, Nieu-Seeland en die VSA.

En jy, wat het jy van die nuus gedink? Vertel ons kommentaar!

Kyk ook:

Meta-uitstalling Orion holografiese bril, wat beelde op die skerm vertoon.

Met inligting van: Doelwit [1] e [2].

Teksproefgelees deur: Daniel Coutinho (25 / 09 / 24)