Camera -

업체의 참여를 바랍니다.

크로노스 그룹의 카메라 워킹그룹 발족. 모바일, 임베디드용 카메라 및 센서에 사용될 하위 계층의 향상된 제어를 위한 개방형 표준을 제정할 예정.

• 컴퓨팅 사진(computational photography), 얼굴 및 동작 인식, 증강현실, 3D 물체와 장면의 재구성 등, 최신의 카메라 기반의 응용에 필요한 센서와 프로세싱 파워를 갖춘 모바일 및 임베디드 장치가 크게 증가하고 있다.
• 크로노스 그룹은 이미 비전과 영상처리에 대한 API 표준을 제정 중에 있으나, 최신의 컴퓨팅 사진이나, 컴퓨터 비전에서 요구되는 카메라 센서, 렌즈, 조명 제어를 위한 하위계층의 API는 아직 없었다.
• 카메라 워킹그룹은 산업계의 공감대를 바탕으로, 다음과 같은 기능의 다중 플랫폼 API를 만들 예정이다. 여기에는, 센서, 플래시와 렌즈를 통한 촬영 제어(burst control), 센서 샘플의 시스템 통합 타임 스탬프 기능, 다중 센서 제어, 저장 포맷과 해상도의 선택, ROI(region of interest) 추출, 일관성 있는 장치와 프레임 메타데이터 등이 포함된다.

카메라 워킹 그룹은 크로노스 그룹내의 타 워킹그룹과 다음과 같은 적절한 협력을 할 것이다.

• 데이터 스트리밍과 API 간 센서 동기화와 타임 스탬프 기능을 위해 EGL을 사용할 예정
• 증강현실과 같은 비전 응용의 동작인식을 위해 StreamInput 센서 융합 API와 동기화된 연산
• OpenVG, OpenGL, OpenGL ES 와 OpenCL과의 유연하고 효율적인 연동을 위한 기능 개발

향상된 카메라 제어 사용 예

• 하이 다이나믹 레인지(HDR) 과 컴퓨터 제어 플래시 사진
• 각각의 프레임을 노출과 플래시 제어를 통해 고속 촬영
• 롤링 셔터 제거
• 카메라와 동작 센서 간의 한 프레임 내에서의 정밀 동기화
• HDR 파노라마, 360도 사진
• 일정한 노출과 화이트 밸런스를 유지하는 연속 프레임 캡처
• 물체의 추출과 깊이 추출
• 여러 초점을 포함하는 프레임 제어를 통한 고속 촬영
• Time-of-flight 와 structured light depth 카메라 처리
• 여러 센서로부터 얻어진 정보를 정렬하여 축적
• 증강 현실
• 60Hz로 동작 센서와 동기화된 빠른 캡처
• 다수의 ROI 캡처
• 장면의 스케일링을 위한 다중 센서
• 각 프레임마다 카메라 연산에 대한 상세한 정보 피드백

Camera Control API Complements Acceleration

[image]

카메라 제어 관련 이전 API

[image]

• FCAM – 오픈 소스 프로젝트
• 정밀한 제어를 통한 카메라 이미지 스트림 캡처
• 요청을 이미지 스트림으로 변환하는 파이프라인
• 모든 파라메터는 요청으로 압축 변환 – 글로벌 상태 변수가 없음
• 스트림의 각각의 프레임에 대한 센서 설정을 완전히 프로그래머가 제어
• 초점과 플래시를 통한 제어
• 숨겨져 실행되는 프로세스가 없음
• ISP 제어
• ISP로부터 사용 가능한 보조 통계 자료에 접근 할 수 있다.
• 안드로이드 카메라 HAL (2013)
• 일부 유사한 개념을 채택

예상되는 카메라 제어 API 기능

• 촬영 센서 제어
• 노출, 시간, 게인, 컬러 필터 어레이(CFA) 패턴
• 촬영 렌즈 제어
• 목표 초점 거리, 노출, 심도, 초점 거리, 위치 상태
• 촬영 플래시 제어
• 밝기, 시간, 촬영, 작업 상태
• ISP 제어
• 모자이크 제거 품질, 노이즈 제거 품질, 3A, CCM, 감마, 컬러 공간
• 출력 제어
• 해상도, ROI 추출, 품질, 포맷 (YUV, Bayer 형식 포함)
• 프레임 타임스탬프
• 동작 센서와의 동기화에 사용
• 파라메터 접근
• 표준의 정의된 파라메터와 벤더가 정의한 확장판을 동시에 사용
• 통계자료 피드백
• 히스토그램, 선명도 맵
• 다중 센서 제어
• 동기화, 주 센서에 의한 다른 센서의 제어, 이미지 축적
• 메타 데이터
• 프레임 정보: 초점 거리(fx,fy), principal point (cx,cy), 스큐 (s), 이미지 해상도 (h,w), 노출
• 장치 정보: 카메라와 센서의 물리적 정보, 캘리브레이션 및 렌즈 왜곡도 등

카메라 제어 API 사용예

[image]