원문정보
Implementation of a Lightweight Neural ISP for Low-Light Automotive Applications
초록
영어
This paper proposes a design and optimization method for a neural image signal processor (Neural ISP) to enhance the real-time image processing performance in automotive environments. An HDR RAW dataset was constructed using an in-vehicle camera sensor under five lighting and weather conditions—day, evening, snow, night, and night lights—and sRGB targets were generated through a traditional pipeline-based baseline ISP with saturation correction. The network architecture was based on a lightweight MW-ISPNet to ensure real-time performance, while a hue hint was introduced to improve color stability under low-light conditions. In addition, a preprocessing layer was implemented to simplify the pipeline from sensor input to Neural ISP and minimize latency. The proposed model achieved superior visual quality compared to conventional hardware ISPs in low-light environments, highlighting its potential for real-time applications in autonomous driving and intelligent transportation systems.
한국어
본 연구는 차량 환경에서의 실시간 영상 처리 성능 향상을 위해 뉴럴 ISP(Neural Image Signal Processor)를 설계하고 최적화하는 방법을 제안한다. 다양한 조도와 기상 조건을 반영한 Day, Evening, Snow, Night, Night Lights 다섯 가지 환경에서 차량용 카메라 센서를 이용해 HDR RAW 데이터셋을 구축하며, 채도 보정을 가미한 전통적 파이프라인 기반의 베이스라인 ISP를 통해 sRGB 타깃을 생성한다. 네트워크 구조는 MW-ISPNet을 기반으로 경량화하여 실시간성을 확보하고, 색조 힌트를 통해 저조도 환경에서의 색 안정성을 높인다. 또한 전처리 레이어를 구 현해 센서 입력부터 뉴럴 ISP까지의 파이프라인을 단순화하고 지연 시간을 최소화한다. 실험 결과, 제안된 모델은 저조도 환경에서 기존 하드웨어 ISP 대비 높은 시각적 품질을 달성했으 며, 자율주행 및 지능형 교통 시스템에 실시간 적용 가능한 수준의 성능을 확인하였다.
목차
ABSTRACT
Ⅰ. 서론
Ⅱ. 본론
1. 시스템 아키텍처 및 데이터 파이프라인
2. 데이터셋 구축
3. 베이스라인 ISP
4. 네트워크 구성
5. 전처리 레이어 구현
Ⅲ. 실험
1. 학습방법
2. 정량적 결과 분석
3. 정성적 결과 분석
Ⅴ. 결론
ACKNOWLEDGEMENTS
REFERENCES
