기술의 발전과 이미지 처리에 대한 요구 사항이 높아짐에 따라, 비적응형 다중 스케일 객체 표현 방법으로서 곡선 변환 기술이 점점 더 많은 주목을 받고 있습니다. 곡선 변환은 웨이블릿 이론을 기반으로 한 확장 기능으로, 특히 에지 특징이 있는 이미지를 처리하는 데 적합합니다. 하지만 풍경이나 초상화와 같은 자연스러운 이미지에 관해서는 이 기술은 보통의 성능을 보입니다. 왜 그럴까요?
곡선 변환은 모든 스케일에서 방향성이 있다는 점에서 일반 웨이블릿 변환과 다릅니다. 2D나 3D 신호의 경우 방향성 웨이블릿 변환은 위치와 공간 주파수뿐만 아니라 방향성 요소도 고려합니다. 매끄러운 곡선을 따라 특이점이 있는 매끄러운 이미지(기하학적 도형이나 만화 이미지 등)를 처리할 때 곡선 변환의 효율성이 중요합니다. 어떤 의미에서 미세 기저 함수는 해당 방향으로 매우 길게 자라는 모양을 보여주기 때문에 이러한 이미지에서 가장자리 특징을 포착하는 데 더 적합합니다.
그러나 자연스러운 이미지에는 모든 크기마다 세부 묘사가 있기 때문에 이런 이미지에서 곡선의 특성을 효과적으로 활용하는 것이 불가능합니다.
자연스러운 이미지에서는 세부 사항이 특정 비율에 국한되지 않고 모든 비율에 걸쳐 분포됩니다. 곡선 변환의 특징은 부드럽지만 유한한 프레임워크에서 잘 작동한다는 것입니다. 즉, 객체의 길이 척도가 최소화되고 모서리가 매우 부드러울 때 가장 잘 작동합니다. 자연스러운 이미지에서는 이를 유지하는 것이 어렵습니다. 자연스러운 이미지에는 미묘한 변화와 무작위성이 많이 포함되어 있기 때문입니다.
예를 들어, 자연스러운 이미지를 확대하면 점차로 다양한 수준의 세부 묘사가 드러나며 가장자리가 더 이상 완벽한 곡선이 아니게 됩니다. 대신 다양한 질감, 톤, 모양이 나타나는데, 이 모든 것이 곡선 변환 성능을 이상적이지 못하게 만들 수 있습니다. 자연 이미지의 복잡성은 웨이블릿에 필요한 간단하고 균일한 모양과 극명한 대조를 이룹니다.
따라서 자연스러운 이미지에서 더 나은 표현 효과를 얻기 위해서는 방향성 웨이블릿 변환을 사용하는 것이 더 적절할 수 있습니다. 방향성 웨이블릿 변환에서 이러한 웨이블릿의 종횡비는 각 스케일에서 일관됩니다.
이 현상을 더 잘 이해하기 위해, 동일한 이미지에 대한 FFT(고속 푸리에 변환)의 근사 오차와 곡선 변환의 오차를 비교해 볼 수 있습니다. 표현에 n개의 웨이블릿이 사용된다고 가정하면 4계층 변환의 경우 표현의 제곱 오차는 ?O(1/√n)의 비율로만 감소하지만 많은 웨이블릿 변환의 경우 오차는 감소합니다. O(1/n)의 속도로. 이는 곡선 변환의 장점을 보여주는데, 이는 적절한 매끄러움과 모서리가 부족해 자연스러운 이미지에서는 표현하기 어렵습니다.
곡선 변환 계산에는 효율적인 알고리즘이 있지만 계산 비용은 기존 웨이블릿 변환보다 높습니다. 또한, 곡선 변환이 영상 처리, 지진 탐사, 유체 역학 등의 분야에 적용될 경우 영상의 요구 사항 및 속성에 대한 특정 선호도와 제한이 발생합니다.
따라서 자연영상의 세부적인 특성으로 인해 곡선변환은 더 이상 완벽한 도구가 아니라, 특정 상황에서 사용해야 하는 기술이라고 할 수 있습니다.
일반적으로 자연 이미지에 널리 퍼져 있는 세부 사항 때문에 곡선 변환의 역량을 충분히 발휘할 수 없는데, 이는 기술 자체의 한계입니다. 이런 이미지를 처리하기 위해 더욱 적응적인 기술을 찾아야 할까요?