비용 효율적인 FWD-RK3588 이미지 처리 보드, 최대 2.4 GHz의 클럭 주파수와 8 코어 64 비트 CPU

이 제품은 Rockchip RK3588 프로세서로 구동되는 임베디드 이미지 처리 보드로, 주로 SoM(코어 처리 보드)과 인터페이스 캐리어 보드의 두 가지 구성 요소로 구성됩니다. RK3588은 고급 8nm 공정 노드를 사용하여 제작된 Rockchip의 차세대 주력 고급 프로세서입니다. 8코어 64비트 CPU를 갖추고 있으며 기본 클럭 속도는 최대 2.4GHz입니다. 프로세서는 내장형 AI 가속기 NPU를 통합하여 6 TOPS의 컴퓨팅 성능을 제공하고 주류 딥 러닝 프레임워크를 지원합니다.

이미지 처리 보드에는 MIPI CSI 인터페이스 2개와 BT.1120 디지털 비디오 인터페이스 1개를 포함한 3개의 비디오 입력 인터페이스가 통합되어 있어 멀티 소스 고화질 비디오 캡처가 가능합니다. 풍부한 온보드 통신 인터페이스를 갖춘 이 보드는 고성능 임베디드 비전 시스템의 까다로운 요구 사항을 충족하기 위해 안정적이고 효율적인 비디오 데이터 전송을 달성합니다. 이 제품은 Linux(Ubuntu RootFS) 환경에서 코어 드라이버 적용을 완료하여 사용자가 애플리케이션 계층 개발을 직접 진행할 수 있습니다.

이 제품은 Linux 시스템(기본적으로 Ubuntu 파일 시스템 장착)을 기반으로 모든 핵심 주변 장치 드라이버의 적용 및 검증을 완료했습니다. 사용자는 복잡한 하위 수준 드라이버에 대해 걱정할 필요가 없으며 표준 시스템 호출을 사용하여 애플리케이션 계층 개발을 직접 수행할 수 있습니다.

• 코어 프로세서 드라이버:RK3588의 전원 관리, 클록, 인터럽트 및 DMA 컨트롤러를 채택하여 CPU 및 NPU 컴퓨팅 성능의 효율적인 스케줄링을 보장합니다.

• 비디오 입력 드라이버:

  • MIPI 드라이버:MIPI CSI-2 카메라 인터페이스와 이미지 센서를 채택하여 카메라 이미지 데이터 수집을 지원합니다.

  • BT.1120 드라이버:BT.1120 인터페이스를 통해 비디오 데이터 수집이 가능하도록 디지털 비디오 수신기 칩을 채택했습니다.

• 네트워크 인터페이스 드라이버:RTSP(네트워크 비디오 스트림) 스트리밍 및 원격 명령 제어를 지원하는 적응형 기가비트 이더넷입니다.

• 통신 인터페이스 드라이버:UART, I2C 및 GPIO와 같은 적응형 온보드 인터페이스. 사용자는 파일 작업이나 시스템 호출을 통해 외부 장치와의 제어 및 데이터 상호 작용을 직접 달성할 수 있습니다.

이 보드는 다양한 센서의 연결 요구 사항을 충족하기 위해 두 가지 유형의 비디오 입력 인터페이스를 통합합니다.

• MIPI 디지털 비디오 입력:표준 V4L2 인터페이스를 제공합니다. 사용자는 다음과 같은 표준 시스템 호출을 통해 이미지 프레임 데이터를 얻을 수 있습니다.열려 있는그리고ioctl.

• BT.1120 디지털 비디오 입력:V4L2 프레임워크를 통해 애플리케이션 계층에 통합 비디오 장치 인터페이스를 제공하여 통합 소프트웨어 처리를 촉진합니다.

INT4/INT8/INT16/FP16 하이브리드 작업을 지원하는 트라이 코어 아키텍처 NPU를 통합하여 객체 감지, 분류, 추적과 같은 복잡한 비전 작업을 쉽게 처리합니다. RKNN 모델 로드, 입력/출력 관리, NPU에서 추론 계산 실행을 담당하는 RKNN 런타임 API를 제공합니다.

사용자가 빠르게 시작할 수 있도록 실행 중인 알고리즘 예제를 제공합니다. 사용자는 구현 논리를 참조할 수 있습니다(참고: 예제는 엔지니어링 지침으로만 제공되며 알고리즘 자체의 성능이나 효율성에 대해 책임을 지지 않습니다).

• 물체 감지:캡처된 비디오 스트림에서 실시간 객체 감지를 직접 수행하고 경계 상자 및 카테고리를 출력할 수 있는 YOLOv5의 배포 예를 제공합니다.

• 객체 추적:관련 추적 알고리즘 예제를 통합하여 사용자가 누락 거리 데이터를 기반으로 폐쇄 루프 제어를 달성할 수 있도록 합니다.

• 비디오 스트림과의 통합:예제 프로그램은 추론을 위해 이미지 프레임을 NPU에 공급하고 OSD(온스크린 디스플레이) 기능을 통해 추론 결과(예: 경계 상자)를 출력 비디오에 중첩하여 완전한 엔드투엔드 애플리케이션 폐쇄 루프를 형성하는 방법을 보여줍니다.