검색 기능은 준비 중입니다.
검색 기능은 준비 중입니다.

The original paper is in English. Non-English content has been machine-translated and may contain typographical errors or mistranslations. ex. Some numerals are expressed as "XNUMX".
Copyrights notice

The original paper is in English. Non-English content has been machine-translated and may contain typographical errors or mistranslations. Copyrights notice

FPGA Implementation of a Real-Time Super-Resolution System Using Flips and an RNS-Based CNN 플립과 RNS 기반 CNN을 사용한 실시간 초해상도 시스템의 FPGA 구현

Taito MANABE, Yuichiro SHIBATA, Kiyoshi OGURI

  • 조회수

    0

  • 이것을 인용

요약 :

초고해상도 기술은 고해상도 디스플레이와 저해상도 이미지 사이의 격차를 메우는 솔루션 중 하나이다. 손실된 정보를 보간하는 알고리즘은 다양하며, 그 중 하나가 CNN(Convolutional Neural Network)을 사용하는 것입니다. 본 논문에서는 동영상을 실시간으로 처리할 수 있는 새로운 CNN 기반 초해상도 시스템의 FPGA 구현 및 성능 평가를 보여줍니다. 입력 이미지에 확대 대신 수평 및 수직 뒤집기를 적용합니다. 이 뒤집기 방법은 정보 손실을 방지하고 네트워크가 패치 크기를 최대한 활용할 수 있도록 합니다. 또한 FPGA 자원 활용도를 줄이기 위해 네트워크에 잔여수 시스템(RNS)을 채택했습니다. LUT를 통한 효율적인 곱셈 및 덧셈은 고정 소수점 연산을 사용한 구현에 비해 동일한 FPGA에서 구현할 수 있는 네트워크 규모를 약 54% 증가시켰습니다. 제안된 시스템은 960ms 미만의 지연 시간으로 540fps에서 1920×1080부터 60×1까지의 초해상도를 수행할 수 있습니다. FPGA의 리소스 제한에도 불구하고 시스템은 가장자리가 부드러운 선명한 초해상도 이미지를 생성할 수 있습니다. 평가 결과, 피크 신호 ​​대 잡음비(PSNR), 구조적 유사성(SSIM) 지수 측면에서도 다른 방식을 적용한 시스템에 비해 우수한 품질을 나타냈다.

발행
IEICE TRANSACTIONS on Fundamentals Vol.E101-A No.12 pp.2280-2289
발행일
2018/12/01
공개일
온라인 ISSN
1745-1337
DOI
10.1587/transfun.E101.A.2280
원고의 종류
Special Section PAPER (Special Section on VLSI Design and CAD Algorithms)
범주

작성자

Taito MANABE
  Nagasaki University
Yuichiro SHIBATA
  Nagasaki University
Kiyoshi OGURI
  Nagasaki University

키워드