【聆思CSK6视觉AI开发套件试用】CSK6系列头肩识别初体验

背景

前言

聆思CSK4002以先进的AI算法, 出色的性价比, 以及优越的头肩追踪能力, 占据80%以上的云台市场, 产品销售渠道覆盖亚马逊、抖音、拼多多等各大电商平台. 与聆思合作的各大方案商和品牌厂商, 在聆思强硬的软硬件实力加持下, 在市场大环境不太理想的情况下, 依旧能逆流而上, 取得傲人的成绩. 鉴于CSK4系取得的巨大成功, 对于升级版6系产品, 更加让人期待. 在看到极术社区和聆思科技联合举办的公开课和开发套件试用活动后, 抱着学习和寻找产品切入点的心态, 全程参与, 并获得了开发套件试用的机会, 倍感荣幸.

硬件配置

CSK6 系列是聆思科技新一代的 AI ，采用多核异构架
构，搭载安谋科技“星辰”ARM STAR 处理器，HiFi4
DSP，以及聆思全新设计的 AI 神经网络处理内核 NPU
csk6011_nanokit_boardres-b784def6a9f249e8e36b19204d8e9007.jpg

环境搭建

软件安装

操作系统: 支持 Windows 10 及以上或支持 Ubuntu 18.04 LTS 及更新的版本.
第一步: 阅读开发指南.
第二步: 安装必要的依赖.

sudo apt install --no-install-recommends git wget

第三步: 下载安装CSK6一键安装包

https://cdn.iflyos.cn/public/cskTools/csk6_integration_installer_v1.6.5.exe

第四步: 检查开发环境

lisa info zep

Operating System - Windows 10 Enterprise LTSC 2019, version 10.0.17763 x64

@listenai/lisa - 2.4.5

Account - jerry

Node.js environment
  Node.js - v16.14.0
  npm - 8.3.1
  yarn - 1.22.19

Global environment
发现可更新的版本: 2.6.1，执行 lisa update 进行更新
  git - git version 2.32.0.windows.1

Plugin info
  zep - 1.6.8 (latest: 1.6.8)

SDK

下载sample

git clone https://cloud.listenai.com/zephyr/applications/app_algo_hsd_sample_for_csk6.git

编译指令

lisa zep build -b csk6011a_nano
lisa zep build -b csk6011a_nano -p

微信截图_20221201162429.png
烧录固件

lisa zep flash

烧录资源文件

lisa zep exec cskburn -s \\.\COM3 -C 6 0x400000 .\resource\cp.bin -b 748800
lisa zep exec cskburn -s \\.\COM3 -C 6 0x500000 .\resource\res.bin -b 748800

初体验

下载PC端工具

git clone https://cloud.listenai.com/zephyr/applications/csk_view_finder_spd.git

体验画面

OK手势

LIKE手势

STOP手势

进阶开发

对于本次试用, 初步了解的CSK6视觉AI开发套件的基本功能和操作, 基本已经达到了我的目标. 由于工作的原因, 没有再深一步的研究, 只能在公司部署实际产品开发时, 再进一步进行开发工作.
在产品设计上, 可以以CSK6为主体, 开发云台,坐姿检测等离线产品. 也可以搭配WiFi芯片, 比如全志XR872, 开发在线产品, 通过串口指令, 与XR872进行通信, 实现对音频的播放和暂停, 坐姿家长端报警等等. 总之, 以聆思强硬的软硬件技术和强力的技术支持, 任何产品形态都能做到最好.

结束语

非常感谢极术社区和聆思科技的这次活动, 让我能第一时间体验到CSK6系列的优异功能和开发流程, 为后续产品定位和开发提供参考方向.相信CSK6系列在AI芯片市场一定能大放异彩.

背景

前言