Amlogic A311Y3: Hoe zou de volgende generatie AI-apparaten voor edge computing eruit kunnen zien?

Arm-gebaseerde mediaboxen zijn jarenlang voornamelijk ontworpen om video te decoderen, applicaties uit te voeren en beeldschermen aan te sluiten op cloudgebaseerde contentplatformen.

De komst van de Amlogic A311Y3 kan deze rol aanzienlijk uitbreiden.

Op basis van de momenteel beschikbare informatie combineert de A311Y3 twee Arm Cortex-A78-kernen, zes Cortex-A55-kernen, een AI-accelerator met een prestatie tot 8 TOPS, geavanceerde 4K-videoverwerking, camera-ingangen en een breed scala aan snelle interfaces.

Deze mogelijkheden suggereren dat de A311Y3 niet zomaar een upgrade is voor premium tv-boxen. Het zou een veelzijdig platform kunnen worden voor intelligente displays, edge AI-visie, interactieve terminals en andere AIoT-apparaten.

Van een mediaspeler naar een AI-terminal aan de rand van het netwerk.

Een traditionele mediaspeler ontvangt voornamelijk content uit de cloud en toont deze op een scherm. Een edge AI-apparaat kan een stap verder gaan: het kan gegevens verzamelen van camera's, microfoons of sensoren, die informatie lokaal analyseren en in realtime acties initiëren.

Dit verschil is belangrijk.

Lokale AI-verwerking kan de afhankelijkheid van de cloud verminderen, de reactietijden verkorten en de hoeveelheid gevoelige gegevens die het apparaat moet verlaten beperken. Voor commerciële toepassingen kan het ook helpen het bandbreedteverbruik te verlagen en de basisfunctionaliteit te behouden wanneer de internetverbinding instabiel is.

De A311Y3 combineert verschillende mogelijkheden die nodig zijn voor deze transitie:

• Krachtige Cortex-A78 en Cortex-A55 CPU-architectuur
• Een NPU met een nominale waarde tot 8 TOPS
• Ondersteuning voor LPDDR5- en LPDDR5X-geheugen
• Decodering van meerdere videostreams en 4K-videocodering
• Camera-input en geïntegreerde beeldsignaalverwerking
• HDMI-ingang en -uitgang
• Meerdere beeldscherminterfaces
• PCIe-, USB 3.0- en snelle Ethernet-connectiviteit
• Android- en Linux-platformopties

De waarde wordt echter niet alleen bepaald door specificaties. Die ontstaat door de manier waarop deze middelen worden gecombineerd tot praktische producten.

1. AI-gestuurde digitale signage

Digitale signage is een van de meest veelbelovende toepassingen voor de A311Y3.

Een conventioneel reclamescherm toont geplande advertenties. Een reclamescherm met AI-functionaliteit kan ook verbinding maken met een camera of sensor en lokale analyses uitvoeren, zoals:

• Anonieme publiekstelling
• verblijftijdmeting
• Basis demografische of interesseanalyse
• Wachtrij- en verkeersmonitoring
• Gebarengebaseerde interactie
• Contextbewuste contentselectie
• Detectie van scherm- of afspeelafwijkingen

Een scherm in een winkel zou bijvoorbeeld het lokale klantenverkeer kunnen analyseren en adverteerders nuttige prestatiegegevens kunnen verschaffen zonder dat er continu onbewerkte video naar de cloud hoeft te worden geüpload.

Het apparaat kon nog steeds content en beheeropdrachten ontvangen van een centraal signageplatform, terwijl tijdgevoelige visuele analyses lokaal werden uitgevoerd.

Dit creëert een nieuwe productcategorie: niet zomaar een aanbieder van digitale signage, maar een intelligente signage- en analyseterminal.

2. Edge AI Vision Boxes

Met camera-interfaces, een geïntegreerde ISP en een 8 TOPS NPU kan de A311Y3 ook worden gebruikt als de kern van een compacte AI-visiebox.

Mogelijke toepassingen zijn onder meer:

• Voorraadbeheer en schapbewaking in de detailhandel
• Detectie van personen en voertuigen
• Toegangscontroleterminals
• Detectie van veiligheidsapparatuur
• Inspectie van de productielijn
• Slimme gebouwanalyse
• Lichtgewicht bewaking met meerdere camera's
• Landbouw- en milieuobservatie

In plaats van een complete industriële AI-server te vervangen, zou een A311Y3-apparaat gerichte inferentietaken dicht bij de camera's kunnen uitvoeren.

Dit zou met name handig zijn voor projecten die een compact, ventilatorloos en kostenefficiënt apparaat vereisen dat in staat is om een ​​of meerdere geoptimaliseerde AI-modellen uit te voeren.

3. Interactieve displays voor de detailhandel, het onderwijs en vergaderingen

De mogelijkheden van het beeldscherm, de camera en de audio van de A311Y3 bieden ruimte voor een nieuwe generatie interactieve schermproducten.

Voorbeelden hiervan zijn:

• AI-winkelkiosken
• Interactieve productgidsen
• Slimme terminals voor in de klas
• Videoconferentieapparaten
• Digitale receptiesystemen
• Informatieschermen voor zelfbediening
• Spraakgestuurde commerciële schermen

Een apparaat zou een scherm met hoge resolutie, een camera, een microfoonarray en lokaal draaiende AI-modellen kunnen combineren. Het zou spraakopdrachten kunnen herkennen, lokale productinformatie kunnen opzoeken, gebaren kunnen detecteren of een aangepaste interface kunnen bieden op basis van de implementatieomgeving.

Omdat het platform meerdere weergave-interfaces ondersteunt, is het mogelijk geschikt voor zowel externe mediaspelers als ingebouwde displaycontrollers.

4. Geavanceerde mediabewerking en cloudgamingterminals

Video blijft een van Amlogic's sterkste onderdelen.

Voorlopige informatie wijst erop dat de A311Y3 videodecodering tot 4K bij 120 fps, videocodering tot 4K bij 60 fps en meerdere gelijktijdige videostreams ondersteunt. HDMI-ingang en -uitgang zouden de mogelijke productontwerpen verder kunnen uitbreiden.

Mogelijke toepassingen zijn onder meer:

• Toonaangevende spelers op het gebied van digitale signage
• Cloud gaming terminals met lage latentie
• HDMI-opname- en streamingapparaten
• Multiview-bewakingssystemen
• Apparaten voor videoconferenties
• Apparaten voor live productie en presentatie
• Lokale videotranscoderingsterminals

Voor cloudgaming is de belangrijkste waarde wellicht niet het lokaal draaien van veeleisende games. In plaats daarvan kan het gaan om snelle videodecodering, responsieve netwerkcommunicatie en een lage latentie bij de weergave.

5. Slimme edge-gateways en robotica

De A311Y3 bevat ook interfaces die zelden nodig zijn in een gewone tv-box, maar waardevol zijn in AIoT- en embedded-toepassingen.

PCIe-uitbreiding, snelle Ethernet, USB, UART, SPI, I²C en CAN FD zouden het platform in staat kunnen stellen verbinding te maken met camera's, sensoren, draadloze modules, opslagapparaten en besturingssystemen.

Dit biedt mogelijkheden voor:

• Slimme gebouwpoorten
• Mobiele robots
• Service-robots
• Machinevisiecontrollers
• Industriële displaycontrollers
• Sensorfusieterminals
• Lokale automatiseringscentra

In deze toepassingen zou de A311Y3 kunnen fungeren als de brug tussen sensoren, AI-modellen, beeldscherminterfaces en cloudbeheerplatformen.

---

Hardware is slechts het begin.

Een 8 TOPS NPU maakt van een apparaat niet automatisch een AI-product.

De uiteindelijke prestaties zijn afhankelijk van het AI-model, de kwantiseringsmethode, de geheugenconfiguratie, het thermische ontwerp, de camerakeuze, het besturingssysteem en de softwareoptimalisatie.

Productontwikkelaars zouden daarom meer moeten evalueren dan alleen de processor zelf:

• Welke AI-modellen moeten lokaal worden uitgevoerd?
• Hoeveel camera's of videostreams zijn er nodig?
• Welke inferentiesnelheid is nodig?
• Is Android of Linux geschikter?
• Vereist het product een continue werking van 24 uur per dag, 7 dagen per week?
• Wat zijn de thermische en vermogenslimieten?
• Welke interfaces moeten op het uiteindelijke apparaat beschikbaar zijn?
• Hoe worden modellen, firmware en beveiligingsupdates beheerd?

De krachtigste A311Y3-producten zullen voortkomen uit een nauwe integratie tussen hardwareontwerp, BSP-ontwikkeling, implementatie van AI-modellen en applicatiesoftware.

Volgende halte: Spa

De A311Y3 vertegenwoordigt een bredere verandering in de Arm-hardwaremarkt.

De volgende generatie mediaboxen zal niet alleen content afspelen. Ze zullen steeds beter in staat zijn om beelden te begrijpen, te reageren op gebruikers, verbinding te maken met sensoren en lokaal beslissingen te nemen.

Voor Amedia zou de A311Y3 een nieuwe hardwarebasis kunnen bieden voor op maat gemaakte Android- en Linux-producten, waaronder AI-digitale signage-spelers, visionboxen, interactieve displays, cloudgamingterminals en intelligente edge gateways.

Naarmate het platform en het software-ecosysteem volwassener worden, verwachten we dat de meest interessante toepassingen zullen ontstaan ​​op het snijvlak van multimedia, edge AI en interactie met de echte wereld.

Als u een product evalueert dat gebaseerd is op de A311Y3-chip, kan Amedia ondersteuning bieden bij de evaluatie van de hardwarearchitectuur, het ontwerpen van een PCBA op maat, de configuratie van de interface, Android/Linux-ontwikkeling, het ontwerp van de behuizing, het aanpassen van de firmware en massaproductie.

---

Het X96-team verwacht in de tweede helft van het jaar een Amlogic A311Y3 -moederbord uit te brengen.

Heeft u hulp nodig bij de integratie van de A311Y3 in uw volgende product? [ Neem contact op met het X96-team ] voor een adviesgesprek.

Over Amlogic
Amlogic is een wereldwijd toonaangevend fabless halfgeleiderbedrijf dat gespecialiseerd is in het ontwerpen, ontwikkelen en toepassen van zeer intelligente system-on-chips (SoC's). Dankzij geavanceerde technologieën en eersteklas oplossingen heeft het bedrijf zich actief uitgebreid naar nieuwe gebieden, waaronder edge AI-processors, draadloze connectiviteit en auto-elektronica, waarmee een nieuw tijdperk van slim wonen is ingeluid. Door complete turnkey-oplossingen te bieden in combinatie met toonaangevende software- en hardwaretechnologieën – waaronder multimediaprocessing, AI-acceleratoren, geavanceerde beveiligingssystemen en hoogwaardige CPU's en GPU's – kunnen klanten snel marktleidende producten met wereldklasse prestaties optimaliseren en ontwikkelen.
Amlogic zet zich in voor duurzaamheid en maakt gebruik van de modernste siliciumverwerkingstechnieken in combinatie met geavanceerde energiebeheeroplossingen. Amlogic is opgericht in Silicon Valley en heeft wereldwijd R&D-, ondersteunings- en verkoopkantoren. Ga voor meer informatie over de producten van Amlogic naar: https://www.amlogic.com/