Indhold
Google Pixel 4 og Pixel 4 XL kan prale af virksomhedens bedst mulige softwarefunktioner og kamerafunktioner, som delvis er mulige på grund af inkluderingen af Pixel Neural Core. Denne lille chip sidder sammen med Pixel 4s vigtigste processor for effektivt at køre Googles kraftige maskinlæringsarbejdsbelastning. Disse spænder fra billedbehandling til stemmegenkendelses- og transkriptionskapaciteter.
Neural Core er imidlertid ikke Googles første knæk på en in-house maskinlæringsprocessor til smartphones. Pixel 2 og 3 leveres med Pixel Visual Core, designet til at downloade billeddannelsesopgaver som HDR + for forbedret ydelse og energieffektivitet. Pixel 4's Neural Core bygger på dette fundament med forbedrede kapaciteter og et udvalg af nye brugssager.
Gå ikke glip af: Dette er hvad Pixel 4s Astro-tilstand kan gøre
Hvordan fungerer Pixels Neural Core?
Google har endnu ikke delt detaljer om nøjagtigt, hvad der foregår i dens neurale kerne. Vi ved dog, hvordan dens forrige generation Visual Core fungerer og den type teknikker, der typisk bruges i maskinindlæringsprocessorer (ML).
I modsætning til en traditionel CPU, der er bygget til at håndtere en lang række beregningsopgaver, er maskinelæringsprocessorer (NPU'er), ligesom Neural Core, optimeret til et par specifikke komplekse matematiske opgaver. Dette gør dem mere som digitale signalprocessorer (DSP) eller grafikbehandlingsenheder (GPU), men optimeret til de specifikke operationer, der bruges af maskinlæringsalgoritmer.
Fused multiply-accumulere er en meget almindelig billeddannelse og tale-ML-operation, som du ikke kan finde bred skala support til i en CPU. I modsætning til moderne 32 og 64-bit CPU'er, udføres disse operationer på datastørrelser på kun 16, 8 og endda 4 bit. Tilpassede hardwareblokke kræves for at understøtte disse operationer med maksimal effektivitet.
Neural Core accelererer billed- og stemmealgoritmer, der kører mindre effektivt på en CPU eller GPU.
Neural Core bygger dedikerede aritmetiske logiske enheder i hardware til at håndtere disse instruktioner hurtigt og med minimalt strømforbrug i stedet for at optage flere CPU-cyklusser. Chippen består sandsynligvis af hundreder af disse ALU'er i flere kerner med delt lokal hukommelse og en mikroprocessor, der overvåger opgaveplanlægning.
Google vil næsten helt sikkert have optimeret sit seneste hardwaredesign omkring dets algoritmer til assistent, stemme og billeddannelse. Afhængighed af Neural Core's ALU-muligheder er grunden til, at Pixel 4s nyeste fotografifunktioner ikke kommer til at komme til ældre håndsæt.
Hvad kan Neural Core gøre?
Neural Core ser ud til at være en nøgleingrediens i en række nye funktioner pakket i Google Pixel 4 og Pixel 4 XL. Disse forbedringer fokuserer hovedsageligt omkring billed- og stemmebehandling.
På fotograferingssiden inkluderer listen dobbelt eksponeringskontrol, en astrofotograferingstilstand, live HDR + -eksempler og Night Sight. Googles Pixel 4 udfører dobbelt eksponeringsjusteringer og HDR + i realtid, så brugerne kan se resultaterne af deres billeder, inden de rammer lukkeren. Dette peger på en større stigning i computerkraft for billeder sammenlignet med Pixel 3.
Derudover introducerer disse telefoner læringsbaseret hvidbalance i sit kamerasystem, der fikserer gule nuancer, der ofte er forbundet med lavt lysbilleder. Flere eksponeringsoptagelser, himmeldetektering og billedkombination bruges til Astro Night Sight-tilstand, hvilket kræver en stor mængde bearbejdning og billeddetektering smarts. Endelig identificerer og anbefaler Pixel 4's Frequent Faces-funktion bedre fotos af mennesker, som du ofte fotograferer.
Pixel 4 kan også prale af en opdateret assistent, der har sportslige forbedrede sprogmodeller, der nu kan køre naturligt på enheden snarere end i skyen. Nye stemmefunktioner inkluderer også fortsatte samtaler, lydtranskription via optager-appen og forbedret talegenkendelse. Neural Core spiller sandsynligvis også en rolle i telefonens 3D ansigtslåsningsteknologi.
En bølge af fremtiden
Googles Neural Core er virksomhedens mest kraftfulde stykke internt-smartphone-silicium endnu, hvilket muliggør mere effektiv billedredigering i realtid end før. Google er stolt af sine brancheførende maskinlæringsteknologier, og Pixel 4's største salgspunkter er afhængige af frugterne af disse investeringer.
Pixel 4 er dog ikke den eneste smartphone, der har en stærk maskinindlæringsprocessor. Alle smartphones, der er drevet af en Snapdragon 855, tilbyder dedikeret maskinlæringshardware. Selvom Google helt klart har forskellige behov og måske endda stærkere krav til sine smartphones. Ligeledes præsenterer Huawei's Kirin 990 dobbelt interne NPU'er, der er kraftige nok til real-time bokeh-videoeffekter og mere.
Maskinelæringshardware er hurtigt ved at blive en hjørnesten i flagskibets smartphone-billed-, video- og AI-muligheder. Google placerer med sin Pixel 4 og Neural Core lige nær toppen af pakken.
Dernæst næste: Googles Pixel-kameraer forsøger overhovedet ikke at være kameraer
