Společnost congatec – přední dodavatel výpočetní techniky pro vestavné systémy a edge computing – rozšiřuje svůj ekosystém i.MX 8 o nový startovací balíček pro aplikace inteligentního vestavného vidění využívající umělou inteligenci (AI). Základním přínosem startovací sady založené na formátu SMARC Computer-on-Module s procesorem i.MX 8M Plus je využití nové jednotky NXP Neural Processing Unit (NPU) integrované s procesorem. Tato jednotka má výpočetní výkon až 2,3 TOPS potřebný pro metody umělé inteligence založené na hlubokém učení a může spouštět inferenční stroje a knihovny, jako jsou Arm Neural Network (NN) a TensorFlow Lite. Rovněž jej lze bez problémů integrovat se softwarem vestavného vidění Basler, čímž pro výrobce OEM vytváří platformu připravenou pro aplikace, která je vhodná pro vývoj vestavných systémů strojového vidění nové generace využívajících AI. Typické možnosti použití jsou rozsáhlé, od cenově citlivých automatických kamerou obsluhovaných pokladních terminálů v maloobchodě po techniku pro bezpečnost budov; od systémů strojového vidění určených pro navigaci ve vozidlech až kamerové systémy v autobusech. Mezi možnosti využití v průmyslu patří HMI s identifikací uživatele kamerou a ovládáním stroje gesty, robotika podporovaná systémy strojového vidění a systémy kontroly kvality v průmyslu.

„Vyhrazená procesorová jednotka pro algoritmy neuronových sítí, která je podporována softwarovými řešeními AI s otevřeným zdrojovým kódem, jako je TensorFlow, je akcelerátorem účinnosti pro mnoho systémů založených na strojovém vidění. A když je to vše integrováno jako hardwarově a softwarově ověřená platforma připravená pro aplikace, včetně softwarové sady Basler pylon Camera Software Suite, umožňuje to vývojářům urychlit cestu k navrhování aplikací inteligentního vidění s akcelerací prostřednictvím NPU,“ vysvětluje Martin Danzer, ředitel produktového managementu společnosti congatec.

Softwarová sada Basler pylon Camera Software Suite přináší jednotnou sadu SDK pro BCON pro kamery s rozhraními MIPI, USB3 Vision nebo GigE Vision a umožňuje přístup ke kameře ze zdrojového kódu, grafického uživatelského rozhraní nebo softwaru třetích stran. Vysoce výkonný prohlížeč v softwaru pylon je ideální pro vyhodnocení obrazu z kamer. Díky startovací sadě congatec s integrovaným procesorem i.MX 8M Plus, která je určená pro úlohy strojového vidění akcelerované pomocí AI, získají inženýři okamžitý přístup k důležitým funkcím strojového vidění podporovaným AI, jako jsou spouštění akcí na základě vyhodnocení obrazu, snímání jednotlivých obrazů a vysoce diferencované možnosti konfigurace kamery plus snadný přístup k inferenčním algoritmům přizpůsobeným na míru, které byly vytvořeny na základě ekosystému Arm NN a TensorFlow Lite.

Technické parametry podrobně

Nová startovací sada pro úlohy strojového vidění akcelerované prostřednictvím AI obsahuje celý ekosystém, který vývojáři potřebují k tomu, aby mohli okamžitě začít navrhovat aplikace využívající tuto platformu nové generace, jež umožňuje vysoce efektivní řešení úloh strojového vidění a integraci AI. Srdcem sady je nový vestavný výpočetní modul formátu SMARC 2.1 Computer-on-Module conga-SMX8-Plus. Je vybaven 4 výkonnými jádry Arm Cortex-A53, jedním řadičem Arm Cortex-M72 a jednotkou NXP NPU pro zrychlení algoritmů hlubokého učení. Dodává se s pasivním chlazením. Nosná 3,5palcová deska (carrier board) conga-SMC1/SMARC-ARM přímo, bez dalších převodníkových modulů, prostřednictvím MIPI CSI-2.0, spojuje s procesorem kamerový modul Basler dart daA4200-30mci s rozlišením 13 MP, rozhraním BCON pro MIPI a objektivem F 1,8 / f = 4 mm. Vedle MIPI CSI-2.0 jsou podporovány také kamerová rozhraní USB a GigE. Pokud jde o software, congatec dodává zaváděcí SD kartu s předem nakonfigurovaným zavaděčem (boot loader), softwarovým obrazem OS Yocto, odpovídajícími BSP a softwarem Basler pro integrované vidění, optimalizovaným pro daný procesor. Software umožňuje na základě pořízených obrázků a videosekvencí okamžitě začít trénovat inferenční mechanismus AI.

Další informace o ekosystému congatec pro projekty využívající procesor i.MX 8 lze najít na: https://www.congatec.com/imx8

Společnost congatec představí svůj ucelený ekosystém pro procesory řady i.MX 8 na virtuálním veletrhu NXP Technology Days od 8. do 30. června 2021: https://www.nxp.com/design/training/nxp-technology-days/nxp-technology-days-connectivity:NXP-TECHNOLOGY-DAYS-CONNECTIVITY