Table of Contents
저소득층 기기의 신경망 설계는 제한된 처리 전력, 기억 및 에너지 소비의 제약을 이해합니다. 이 문서는 이러한 환경에 대한 신경 네트워크 모델을 최적화하는 주요 고려 사항, 계산 및 모범 사례를 탐구합니다.
Low-Resource 장치의 제약
스마트 폰, 임베디드 시스템, IoT 장치와 같은 제한된 리소스를 갖춘 장치는 신경 네트워크 배포에 영향을 미치는 제한이 있습니다. 이러한 제약은 낮은 컴퓨팅 용량, 제한 메모리 및 전력 제한이 포함되어 있습니다. 결과적으로 모델은 배수 리소스없이 효과적으로 작동하기 위해 경량화 및 효율적인 작업을해야합니다.
Model Optimization에 대한 계산
낮은 자원 장치를 위한 신경 네트워크를 적응시키기 위하여, 그것은 계산을 실행하는 근본적인 모형 크기와 계산 필요조건입니다. 모형 quantization와 같은 기술은 무게와 활성화의 정밀도를 감소시키고, 기억 사용법을 감소시키고 inference를 가속화합니다. 게다가, pruning는 불필요한 연결을, 모형을 더 optimizing 제거합니다.
Deployment에 대한 모범 사례
모범 사례를 구현하는 것은 제약 기기에서 신경 네트워크의 효율적인 배포를 보장합니다. 이들은 다음과 같습니다:
- 경량 아키텍처를 사용 MobileNet 또는 SqueezeNet과 같은.
- Apply quantization 모델 크기를 줄이기 위해.
- Optimize inference 하드웨어 가속으로 사용 가능
- Perform 모델 pruning 중복 파라미터를 제거하기 위해.