WebCam Test

rail

엄격한 평가 방법론으로 시작한 VCX-WebCam 2023은 웹캠을 사용하면서 겪을 수 있는 자극으로 구성된 통제된 환경 조건에서 카메라 성능을 평가합니다.

테스트는 최신 이미지 처리 알고리즘과 동일한 방식으로 작동하는 평가 방법을 기반으로, 기본 이미지 품질 문제 뿐만 아니라 개발 프로세스 전반에 걸쳐 사용자 및 업계 전문가가 보고한 중요한 이슈들도 평가에 포함이 되어 있습니다. Version2023에서는 피사체(face) 움직임 유무 를 구분 평가하고 자동 노출, 화이트 밸런스, 노이즈/해상력(SFR) 등 이미지 성능의 주요 요소에 대해 종합적인 측정결과를 제공합니다. 물론 여기서 높은 VCX 점수는 높은 수준의 이미지 품질을 의미합니다.

light

In the test environment

화상 회의 및 기타 화상 통신에서 주로 발생하는 일반적인 조건을 재현하도록 다양한 조도/광원 조건을 사용한 테스트 환경에서 평가합니다. 웹캠 스튜디오 차트를 촬영한 영상을 통해 각 테스트 데이터들을 생성합니다. 이 스튜디오 차트에는 다양한 피부색의 마네킹과 사람이 카메라에서 얼굴을 돌리는 것과 유사하게 만드는 머리 회전 장치가 포함되어 있습니다. 밝은 피부색, 어두운 피부색 의 경우, 그리고 타겟이 없는 경우를 촬영하여 각 테스트를 반복합니다. 조명환경, 장면 내 피사체 움직임, 주변 배경 등 다양한 사용자 촬영 조건을 반영하여 어느 조건에서 찍어도 안정된 화질이 나오는지 평가하기 위해 이미지와 비디오 영상 모두 포함 합니다.

VCX포럼에서는 소비자가 "일상"에서 경험하는 환경을 어디서나 반복 구현 가능한 실험실 조건을 표준화 하였기 때문에 전 세계 어디에서나 정확한 테스트를 구현 할 수 있습니다.

VCX-WebCam 2023의 대상은 비디오이므로 전용 테스트 애플리케이션 또는 해당 플랫폼의 기본 비디오 캡처 앱에서 이미지를 비디오로 캡처합니다. 특별한 처리는 허용되지 않습니다. 테스트는 공장초기화가 된 디바이스에서 기본 비디오 모드를 통해 수행되는 "즉시 사용 가능한" 경험을 목표로 합니다. 장치는 "배송된 그대로(OOBE)" 상태와 용도에 맞게 방향(일반 사용자가 사용하는 모양)으로 테스트됩니다. 테스트 과정에서 카메라 설정은 기본값으로 설정되며 이미지 캡처 중에는 해상도 설정만 변경됩니다. 일부 장치에서는 ISO, 노출, 화이트 밸런스 및 기타 매개변수를 수동으로 조정할 수 있지만 이러한 설정은 테스트 중에는 변경되지 않습니다.

비디오는 안정화 된 이후의 프레임을 캡쳐 (중간값 추출) 하여 평가합니다. 그런 다음 이러한 각 프레임은 사양 내의 다양한 KPI에 대해 분석됩니다.

테스트는 다음과 같은 조명밝기 조건을 따릅니다:

Bright Light - 밝은 조명 조건에서 카메라는 밝은 외부 조명이 널리 퍼질 수 있는 외부 또는 창 근처에서 사용되는 경우가 가장 많습니다. 광원은 350lux 및 500lux에서 테스트됩니다

o D50 – 상업용 건물에서 주로 쓰는 이 광원은 이 "화창한 날"의 느낌을 내는 조명입니다.

o D65 – D50와 비슷하지만, 약간 흐릿한 날의 느낌의 조명입니다.

Mid Light - 가정과 회사에서 흔히 볼 수 있는 "주간" 조명을 나타내는 이 광원을 80lux와 250lux에서 테스트합니다.

o A – 일반적으로 백열등을 나타내는 따뜻한 황색을 띤 색상입니다. 오늘날 이런 조명이 많이 사용되고 있습니다.

o Warm White LED – A보다 약간 차갑지만 느낌상 여전히 "따뜻함". 전 세계 많은 가정에서 볼 수 있는 일반적인 "흰색" 램프입니다..

o Cool White LED – 파란색에 더 가까운 이 광원은 전 세계 가정과 사무실에서 흔히 볼 수 있는 LED 램프를 구현합니다.

o D50 – 상업용 건물에서 주로 쓰는 이 광원은 이 "화창한 날"의 느낌을 내는 조명입니다.

o D65 – D50와 비슷하지만, 약간 흐릿한 날의 느낌의 조명입니다.

Low Light – 가정 및 기타 저조도 상황에서 가장 일반적인 광원을 나타내기 위해 특별히 구성된 광원을 10lux 및 20lux에서 테스트합니다..

o A - 일반적으로 백열등을 나타내는 따뜻한 황색을 띤 색상입니다. 오늘날 이런 조명이 많이 사용되고 있습니다.

o Cool White LED – 파란색에 더 가까운 이 광원은 전 세계 가정과 사무실에서 흔히 볼 수 있는 LED 램프를 구현합니다.

set

Test Metrics

비디오 이미지 품질은 단순한 픽셀 측정 이상입니다. 카메라 센서, 광학, 소프트웨어, 하드웨어 및 이미지 처리 알고리즘(예: 선명도, 노이즈 감소 및 색상, 노출 및 화이트 밸런스와 같은 동적 동작)은 VCX테스트에서 모두 중요한 역할을 합니다. 테스트 메트릭은 기본 이미지 품질을 평가하는 동시에 최종 사용자에게 가장 불만족스러운 이미지 품질 불량 동작을 식별하기 위해 신중하게 선택되었습니다.

VCX-WebCam 2023 벤치마크의 사양은 6개의 초점 영역에 걸친 24개의 테스트로 구성됩니다. PC 산업 생태계 전반에 걸쳐 있는 우리 회원사들의 튜닝 전문가 및 소비자 대응팀에서 수집한 문제점을 기반으로 개발 중점 영역을 선택했습니다. 자동 노출과 화이트 밸런스를 위한 컨버전스 과정은 물론 메모리 컬러와 움직이는 배경 등 도전적인 AWB 장면 등 지금까지 객관적으로 테스트하기 어려웠던 부분에 주목했습니다.

dr

 

VCX-WebCam 2023의 6가지 핵심 지표는 다음과 같습니다:

 

  • Visual Noise – 인간의 눈과 유사한 방식으로 이미지 노이즈를 측정하는 방법입니다.
  • Contrast, Dynamic Range and Exposure – 이 세 영역은 종종 서로 밀접한 연관이 있습니다. 이미지가 얼마나 밝은지, "밝음"과 "어두움"의 범위, 어두운 영역의 디테일이 얼마나 잘 표현되는지 등이 핵심 영역입니다.
  • Spatial Frequency Response – 이미지가 얼마나 "선명한지" 뿐만 아니라 불쾌한 아티팩트를 추가하지 않고 이미지 세부 사항이 얼마나 잘 보존되고 세심하게 향상되는지 측정하는 방법입니다.
  • Color Reproduction – 카메라가 테스트 차트뿐만 아니라 다양한 테스트 시나리오의 다양한색상의 얼굴에서 원색을 얼마나 잘 재현하는지에 관한 테스트 입니다.
  • Image Uniformity – "Shading"이라고도 하며 전체 이미지에서 밝기와 색상 정확도가 얼마나 일관적인지 측정합니다.
  • Framerate – 실제 장면에 대한 카메라의 반응 속도는 종종 프레임이 캡처되는 빈도에 따라 달라집니다. 저조도 및 중간 조도 조건에서 프레임 속도에 대한 임계값은 문제가 가장 많이 발생하는 위치에 초점을 맞춥니다.
target2

VCX-WebCam 2023 테스트 제품군에서 특히 흥미로운점은 피부 톤 반응에 특별히 주의를 기울인 것입니다. VCX는 여러 피부 톤의 실제 사람을 모델로 한 맞춤형 사실적인 마네킹 머리를 개발하기 위해 소품 회사와 협력했습니다. 카메라 시스템 동작에 도전하기 위해 이 마네킨 얼굴로 거의 모든 테스트를 반복합니다. VCX 연구는 서로 다른 피부색에 반응하는 카메라 시스템의 수에 눈에 띄는 차이가 있음을 보여주었습니다

본 기관은 이러한 최종 유저경험을 테스트 철학의 핵심에 포함함으로써 VCX-WebCam이 모든 사람에게 더 와닿고 현실적으로 경험할 수 있도록 노력하고 있습니다.