(19) 대한민국특허청(KR) (12) 공개특허공보(A)
(11) 공개번호 10-2015-0043974 (43) 공개일자 2015년04월23일
(51) 국제특허분류(Int. Cl.)H04N 19/70
(2014.01)H04N 19/30
(2014.01) (21) 출원번호 10-2014-0134240(22) 출원일자 2014년10월06일 심사청구일자 없음
(30) 우선권주장
1020130121430 2013년10월11일 대한민국(KR) 1020140031880 2014년03월18일 대한민국(KR)
(71) 출원인
한국전자통신연구원
대전광역시 유성구 가정로 218 (가정동) (72) 발명자
강정원
대전광역시 유성구 지족로 362, 303동 303호(지족 동, 반석마을아파트)
이하현
서울 중랑구 동일로102길 34-8
(뒷면에 계속)
(74) 대리인 특허법인태평양 전체 청구항 수 : 총 19 항
(54) 발명의 명칭 영상의 부호화/복호화 방법 및 이를 이용하는 장치 (57) 요 약
본 발명에 따른 복수의 계층을 포함하는 비트스트림의 복호화 방법은 임의 접근이 발생된 경우, 상기 임의 접근 이 발생된 시점부터 상기 비트스트림을 복호화 하기 위한 파라미터를 설정하는 단계와; 복호화 대상 픽처의 복호 화를 수행하는 단계를 포함하고, 상기 파라미터를 설정하는 단계는,상기 임의 접근이 발생한 경우, 복호화 대상 이 되는 대상 픽처가 IRAP(intra random access point) 픽처이고 상기 복호화 대상 픽처가 속하는 대상 계층의 모든 참조 계층이 정상적으로 복호화 됨으로써, 상기 복호화 대상 픽처가 출력될 수 있는지 여부를 나타내는 초 기화 플래그를 설정하는 단계와; 상기 복호화 대상 픽처가 임의 접근 포인트로 사용되었는지 여부를 나타내는 플 래그 변수(NoRaslOutputFlag)를 설정하는 단계와; 상기 복호화 대상 픽처가 IRAP 픽처이고, 상기 플래그 변수가 1이면 상기 초기화 플래그를 재설정하는 단계를 포함할 수 있다.
대 표 도
(72) 발명자 이진호
대전광역시 유성구 송림로48번길 31 (하기동) 최진수
대전광역시 유성구 반석서로 98, 609동 1605호(반 석동, 반석마을6단지아파트)
김진웅
대전광역시 유성구 학하남로 10, 207동 704호(계산 동,오투그란데 미학)
이 발명을 지원한 국가연구개발사업 과제고유번호 11-921-02-001 부처명 미래창조과학부
연구관리전문기관 한국방송통신전파진흥원 연구사업명 방송통신ETRI연구개발지원사업
연구과제명 무안경 다시점 3D 지원 UHDTV 방송 기술 개발 기 여 율 1/1
주관기관 한국전자통신연구원 연구기간 2011.03.01 ~ 2015.02.28
명 세 서
청구범위 청구항 1
복수의 계층을 포함하는 비트스트림의 복호화 방법에 있어서,
임의 접근이 발생된 경우, 상기 임의 접근이 발생된 시점부터 상기 비트스트림을 복호화 하기 위한 파라미터를 설정하는 단계와;
복호화 대상 픽처의 복호화를 수행하는 단계를 포함하고, 상기 파라미터를 설정하는 단계는,
상기 임의 접근이 발생한 경우, 복호화 대상이 되는 대상 픽처가 정상적으로 복호되어 출력될 수 있는지 여부를 나타내는 초기화 플래그를 설정하는 단계와;
상기 복호화 대상 픽처가 임의 접근 포인트로 사용되었는지 여부를 나타내는 플래그 변수(NoRaslOutputFlag)를 설정하는 단계와;
상기 복호화 대상 픽처가 IRAP 픽처이고, 상기 플래그 변수가 1이고, 상기 복호화 대상 픽처에 대한 상기 초기 화 플래그가 0이고, 상기 대상 계층의 모든 참조 계층에 대한 상기 초기화 플래그가 1이면, 상기 대상 계층에 대한 상기 초기화 플래그를 1로 재설정하는 단계를 포함하는 것을 특징으로 하는 복호화 방법.
청구항 2 제1항에 있어서,
상기 초기화 플래그를 설정하는 단계는,
상기 임의 접근이 발생한 억세스 유닛의 기본 계층에 대하여 1로 설정하고, 상기 기본 계층보다 상위의 계층에 대하여 0으로 설정하는 것을 특징으로 하는 복호화 방법.
청구항 3 제2항에 있어서,
상기 플래그 변수(NoRaslOutputFlag)를 설정하는 단계는,
상기 복호화 대상 픽처가 IDR 픽처 또는 BLA 픽처이거나, 혹은 IRAP 픽처이면서 해당 비트스트림의 대상 계층의 첫번째 픽처인 경우, 상기 플래그 변수를 1로 설정하는 것을 특징으로 하는 복호화 방법.
청구항 4 제2항에 있어서,
상기 플래그 변수(NoRaslOutputFlag)를 설정하는 단계는,
상기 대상 픽처가 IRAP 픽처이고, 상기 대상 픽처가 속하는 계층에 설정된 초기화 플래그가 0이고, 상기 대상 픽처가 속하는 계층의 모든 참조 계층에 대한 초기화 플래그가 1이면, 상기 플래그 변수를 1로 설정하는 것을 특징으로 하는 복호화 방법.
청구항 5 제1항에 있어서,
상기 복호화 대상 픽처의 식별자인 POC를 계산하는 단계와;
상기 복호화 대상 픽처의 화면 간 예측을 위하여 참조 픽처 집합을 구성하고 참조 픽처 형태를 표시하는 단계와;
상기 초기화 플래그에 기초하여 상기 복호화 대상 픽처의 출력 여부를 결정하는 단계와;
상기 참조 픽처 집합에 기초하여 생성된 참조 픽처 리스트 내의 참조 픽처를 이용하여 상기 복호화 대상 픽처에 대한 움직임 예측 및 움직임 보상을 수행하는 단계를 더 포함하는 것을 특징으로 하는 복호화 방법
청구항 6 제5항에 있어서,
상기 복호화 대상 픽처의 출력 여부를 결정하는 단계는,
상기 복호화 대상 픽처가 IRAP 픽처이고, 상기 대상 계층의 상기 초기화 플래그 값이 0인 경우, 상기 복호화 대 상 픽처를 출력하지 않는 것으로 결정하는 것을 특징으로 하는 복호화 방법.
청구항 7 제5항에 있어서,
상기 복호화 대상 픽처의 출력 여부를 결정하는 단계는,
상기 대상 계층이 출력의 대상이 되는 출력 계층이 아니고, 상기 대상 계층이 속하는 억세스 유닛 내에 상기 출 력 계층에 속하는 출력 대상 픽처가 출력되지 않는 것으로 결정되고, 상기 대상 계층이 상기 출력 계층의 참조 로 사용되어 상기 복호화 대상 픽처가 상기 출력 대상 픽처의 참조 픽처로 사용되고, 상기 복호화 대상 픽처가 슬라이스 헤더에서 시그널링 되는 픽쳐 출력 여부를 나타내는 플래그 정보가 1인 복호화된 픽처들 중 가장 상위 픽처인 경우, 상기 복호화 대상 픽처를 출력하는 것으로 결정하는 것을 특징으로 하는 복호화 방법.
청구항 8 제5항에 있어서,
상기 복호화 대상 픽처의 출력 여부를 결정하는 단계는,
상기 대상 계층이 출력의 대상이 되는 출력 계층이 아니고, 상기 대상 계층이 속하는 억세스 유닛 내에 상기 출 력 계층에 속하는 출력 대상 픽처가 출력되지 않는 것으로 결정되고, 상기 대상 계층이 상기 출력 계층의 참조 로 사용되어 상기 복호화 대상 픽처가 상기 출력 대상 픽처의 참조 픽처로 사용되고, 상기 대상 계층에 대한 상 기 초기화 플래그 값이 1이고, 상기 복호화 대상 픽처가 슬라이스 헤더에서 시그널링 되는 픽쳐 출력 여부를 나 타내는 플래그 정보가 1인 복호화된 픽처들 중 가장 상위 픽처인 경우, 상기 복호화 대상 픽처를 출력하는 것으 로 결정하는 것을 특징으로 하는 복호화 방법.
청구항 9 제1항에 있어서,
상기 임의 접근이 발생된 시점에 대응하는 제1 억세스 유닛에 포함되어 있는 픽처들을 복호화 하는 단계와;
상기 제1 억세스 유닛에 포함되어 있는 픽처들의 개별적인 출력 여부를 결정하는 단계와;
상기 제1 억세스 유닛 다음의 제2 억세스 유닛에 포함되어 있는 픽처들을 복호화 하는 단계와;
상기 제1 억세스 유닛 다음의 제2 억세스 유닛에 포함되어 있는 픽처들의 개별적인 출력 여부를 결정하는 단계 를 더 포함하는 것을 특징으로 하는 복호화 방법.
청구항 10 제9항에 있어서,
상기 제1 억세스 유닛에 포함되어 있는 픽쳐 중 출력되는 것으로 결정된 픽처를 출력하는 제 1 억세스 유닛 픽 처 출력 단계를 더 포함하고,
상기 제 1 억세스 유닛 픽처 출력 단계는,
상기 비트스트림이 기본 계층부터 최상위 계층을 포함하고, 상기 기본 계층부터 n번째(0≤n) 계층까지 IRAP(intra random access point) 픽처이고, 출력 계층이 상기 기본 계층 내지 상기 n번째 계층에 속하는
경우, 상기 출력 계층의 출력 픽처를 출력하고,
상기 출력 계층이 n+1번째 계층부터 상기 최상위 계층에 포함되어 있는 경우, n번째 계층의 복호된 픽처를 출력 하는 것을 특징으로 하는 복호화 방법.
청구항 11 제10항에 있어서,
상기 제2 억세스 유닛에 포함되어 있는 픽쳐 중 출력되는 것으로 결정된 픽처를 출력하는 제 2 억세스 유닛 픽 처 출력 단계를 더 포함하고,
상기 제 2 억세스 유닛 픽처 출력 단계는,
상기 제2 억세스 유닛에 포함되는 상기 n+1번째 계층부터 k번째 계층에 (n+1≤k) IRAP 픽처가 포함되고, 상기 기본 계층부터 k번째 계층까지 출력 계층이 포함되어 있는 경우, 상기 출력 계층의 출력 픽처를 출력하고, 상기 출력 계층이 k+1번째 계층부터 상기 최상위 계층에 포함되어 있는 경우, k번째 계층의 복호된 픽처 또는 출력되는 것으로 결정된 픽처를 출력하는 것을 특징으로 하는 복호화 방법.
청구항 12
복수의 계층을 포함하는 비트스트림의 복호화 장치에 있어서,
임의 접근이 발생된 경우, 상기 임의 접근이 발생된 시점부터 상기 비트스트림을 복호화 하기 위한 파라미터를 설정하고, 복호화 대상 픽처의 복호화를 수행하는 예측부를 포함하고,
상기 예측부는 상기 임의 접근이 발생한 경우, 복호화 대상이 되는 대상 픽처가 정상적으로 복호되어 출력될 수 있는지 여부를 나타내는 초기화 플래그를 설정하고, 상기 복호화 대상 픽처가 임의 접근 포인트로 사용되었는지 여부를 나타내는 플래그 변수(NoRaslOutputFlag)를 설정하고, 상기 복호화 대상 픽처가 IRAP 픽처이고, 상기 플 래그 변수가 1이고, 상기 복호화 대상 픽처에 대한 상기 초기화 플래그가 0이고, 상기 대상 계층의 모든 참조 계층에 대한 상기 초기화 플래그가 1이면, 상기 대상 계층에 대한 상기 초기화 플래그를 1로 재설정하는 것을 특징으로 하는 복호화 장치.
청구항 13 제12항에 있어서,
상기 예측부는 상기 임의 접근이 발생한 억세스 유닛의 기본 계층에 대하여 1로 설정하고, 상기 기본 계층보다 상위의 계층에 대하여 0으로 설정하는 것을 특징으로 하는 복호화 장치.
청구항 14 제13항에 있어서,
상기 예측부는 상기 복호화 대상 픽처가 IDR 픽처 또는 BLA 픽처이거나, 혹은 IRAP 픽처이면서 해당 비트스트림 의 대상 계층의 첫번째 픽처인 경우, 상기 플래그 변수를 1로 설정하는 것을 특징으로 하는 복호화 장치.
청구항 15 제13항에 있어서,
상기 예측부는 상기 대상 픽처가 IRAP 픽처이고, 상기 대상 픽처가 속하는 계층에 설정된 초기화 플래그가 0이 고, 상기 대상 픽처가 속하는 계층의 모든 참조 계층에 대한 초기화 플래그가 1이면, 상기 플래그 변수를 1로 설정하는 것을 특징으로 하는 복호화 장치.
청구항 16 제12항에 있어서,
상기 예측부는 상기 복호화 대상 픽처의 식별자인 POC를 계산하고, 상기 복호화 대상 픽처의 화면 간 예측을 위 하여 참조 픽처 집합을 구성하고 참조 픽처 형태를 표시하고, 상기 초기화 플래그에 기초하여 상기 복호화 대상
픽처의 출력 여부를 결정하고, 상기 참조 픽처 집합에 기초하여 생성된 참조 픽처 리스트 내의 참조 픽처를 이 용하여 상기 복호화 대상 픽처에 대한 움직임 예측 및 움직임 보상을 수행하는 것을 특징으로 하는 복호화 장치 청구항 17
제16항에 있어서,
상기 예측부는 상기 복호화 대상 픽처가 IRAP 픽처이고, 상기 대상 계층의 상기 초기화 플래그 값이 0인 경우, 상기 복호화 대상 픽처를 출력하지 않는 것으로 결정하는 것을 특징으로 하는 복호화 장치.
청구항 18 제16항에 있어서,
상기 예측부는 상기 대상 계층이 출력의 대상이 되는 출력 계층이 아니고, 상기 대상 계층이 속하는 억세스 유 닛 내에 상기 출력 계층에 속하는 출력 대상 픽처가 출력되지 않는 것으로 결정되고, 상기 대상 계층이 상기 출 력 계층의 참조로 사용되어 상기 복호화 대상 픽처가 상기 출력 대상 픽처의 참조 픽처로 사용되고, 상기 복호 화 대상 픽처가 슬라이스 헤더에서 시그널링 되는 픽쳐 출력 여부를 나타내는 플래그 정보가 1인 복호화된 픽처 들 중 가장 상위 픽처인 경우, 상기 복호화 대상 픽처를 출력하는 것으로 결정하는 것을 특징으로 하는 복호화 장치.
청구항 19 제16항에 있어서,
상기 예측부는 상기 대상 계층이 출력의 대상이 되는 출력 계층이 아니고, 상기 대상 계층이 속하는 억세스 유 닛 내에 상기 출력 계층에 속하는 출력 대상 픽처가 출력되지 않는 것으로 결정되고, 상기 대상 계층이 상기 출 력 계층의 참조로 사용되어 상기 복호화 대상 픽처가 상기 출력 대상 픽처의 참조 픽처로 사용되고, 상기 대상 계층에 대한 상기 초기화 플래그 값이 1이고, 상기 복호화 대상 픽처가 슬라이스 헤더에서 시그널링 되는 픽쳐 출력 여부를 나타내는 플래그 정보가 1인 복호화된 픽처들 중 가장 상위 픽처인 경우, 상기 복호화 대상 픽처를 출력하는 것으로 결정하는 것을 특징으로 하는 복호화 장치.
발명의 설명
기 술 분 야
본 발명은 영상의 부호화 및 복호화 처리에 관한 것으로서, 보다 상세하게는 비트스트림 임의 접근을 지원하는 [0001]
영상의 부/복호화 방법 및 그 장치에 관한 것이다.
배 경 기 술
최근 HD(High Definition) 해상도를 가지는 방송 서비스가 국내뿐만 아니라 세계적으로 확대되면서, 많은 사용 [0002]
자들이 고해상도, 고화질의 영상에 익숙해지고 있으며 이에 따라 많은 기관들이 차세대 영상기기에 대한 개발에 박차를 가하고 있다. 또한 HDTV와 더불어 HDTV의 4배 이상의 해상도를 갖는 UHD(Ultra High Definition)에 대 한 관심이 증대되면서 보다 높은 해상도, 고화질의 영상에 대한 압축기술이 요구되고 있다.
영상 압축을 위해, 시간적으로 이전 및/또는 이후의 픽쳐로부터 현재 픽쳐에 포함된 화소값을 예측하는 인터 [0003]
(inter) 예측 기술, 현재 픽쳐 내의 화소 정보를 이용하여 현재 픽쳐에 포함된 화소값을 예측하는 인트라 (intra) 예측 기술, 출현 빈도가 높은 심볼(symbol)에 짧은 부호를 할당하고 출현 빈도가 낮은 심볼에 긴 부호 를 할당하는 엔트로피 부호화 기술 등이 사용될 수 있다.
영상 압축 기술에는 유동적인 네트워크 환경을 고려하지 않고 하드웨어의 제한적인 동작 환경하에서 일정한 네 [0004]
트워크 대역폭을 제공하는 기술이 있다. 그러나 수시로 대역폭이 변화하는 네트워크 환경에 적용되는 영상 데이 터를 압축하기 위해서는 새로운 압축 기술이 요구되고, 이를 위해 스케일러블(scalable) 비디오 부호화/복호화 방법이 사용될 수 있다.
발명의 내용
해결하려는 과제
본 발명은 비트스트림의 임의 시점부터 복호화가 가능하도록 하는 방법 및 이를 이용하는 장치를 제공한다.
[0005]
구체적으로, 본 발명의 일 실시예는 임의 접근 시점의 AU(access unit) 내에 IRAP(intra random access point) [0006]
픽처와 IRAP가 아닌 픽처(non- intra random access point picture)가 존재하거나, IRAP 픽처만 존재하지만 NAL 유닛 타입이 두 개 이상인 경우에 임의 접근 가능 시점부터 점진적으로 비트스트림을 복호화 가능하도록 한 다.
과제의 해결 수단
본 발명의 일 실시예에 따른 복수의 계층을 포함하는 비트스트림의 복호화 방법은 임의 접근이 발생된 경우, 상 [0007]
기 임의 접근이 발생된 시점부터 상기 비트스트림을 복호화 하기 위한 파라미터를 설정하는 단계와; 복호화 대 상 픽처의 복호화를 수행하는 단계를 포함하고, 상기 파라미터를 설정하는 단계는, 상기 임의 접근이 발생한 경 우, 복호화 대상이 되는 대상 픽처가 정상적으로 복호되어 출력될 수 있는지 여부를 나타내는 초기화 플래그를 설정하는 단계와; 상기 복호화 대상 픽처가 임의 접근 포인트로 사용되었는지 여부를 나타내는 플래그 변수 (NoRaslOutputFlag)를 설정하는 단계와; 상기 복호화 대상 픽처가 IRAP 픽처이고, 상기 플래그 변수가 1이고, 상기 복호화 대상 픽처에 대한 상기 초기화 플래그가 0이고, 상기 대상 계층의 모든 참조 계층에 대한 상기 초 기화 플래그가 1이면, 상기 대상 계층에 대한 상기 초기화 플래그를 1로 재설정하는 단계를 포함할 수 있다.
상기 초기화 플래그를 설정하는 단계는, 상기 임의 접근이 발생한 억세스 유닛의 기본 계층에 대하여 1로 설정 [0008]
하고, 상기 기본 계층보다 상위의 계층에 대하여 0으로 설정할 수 있다.
상기 플래그 변수(NoRaslOutputFlag)를 설정하는 단계는, 상기 복호화 대상 픽처가 IDR 픽처 또는 BLA 픽처이거 [0009]
나, 혹은 IRAP 픽처이면서 해당 비트스트림의 대상 계층의 첫번째 픽처인 경우, 상기 플래그 변수를 1로 설정할 수 있다.
상기 플래그 변수(NoRaslOutputFlag)를 설정하는 단계는, 상기 대상 픽처가 IRAP 픽처이고, 상기 대상 픽처가 [0010]
속하는 계층에 설정된 초기화 플래그가 0이고, 상기 대상 픽처가 속하는 계층의 모든 참조 계층에 대한 초기화 플래그가 1이면, 상기 플래그 변수를 1로 설정할 수 있다.
상기 복호화 대상 픽처의 식별자인 POC를 계산하는 단계와; 상기 복호화 대상 픽처의 화면 간 예측을 위하여 참 [0011]
조 픽처 집합을 구성하고 참조 픽처 형태를 표시하는 단계와; 상기 초기화 플래그에 기초하여 상기 복호화 대상 픽처의 출력 여부를 결정하는 단계와; 상기 참조 픽처 집합에 기초하여 생성된 참조 픽처 리스트 내의 참조 픽 처를 이용하여 상기 복호화 대상 픽처에 대한 움직임 예측 및 움직임 보상을 수행하는 단계를 더 포함할 수 있 다.
상기 복호화 대상 픽처의 출력 여부를 결정하는 단계는, 상기 복호화 대상 픽처가 IRAP 픽처이고, 상기 대상 계 [0012]
층의 상기 초기화 플래그 값이 0인 경우, 상기 복호화 대상 픽처를 출력하지 않는 것으로 결정할 수 있다.
상기 복호화 대상 픽처의 출력 여부를 결정하는 단계는, 상기 대상 계층이 출력의 대상이 되는 출력 계층이 아 [0013]
니고, 상기 대상 계층이 속하는 억세스 유닛 내에 상기 출력 계층에 속하는 출력 대상 픽처가 출력되지 않는 것 으로 결정되고, 상기 대상 계층이 상기 출력 계층의 참조로 사용되어 상기 복호화 대상 픽처가 상기 출력 대상 픽처의 참조 픽처로 사용되고, 상기 복호화 대상 픽처가 슬라이스 헤더에서 시그널링 되는 픽쳐 출력 여부를 나 타내는 플래그 정보가 1인 복호화된 픽처들 중 가장 상위 픽처인 경우, 상기 복호화 대상 픽처를 출력하는 것으 로 결정할 수 있다.
상기 복호화 대상 픽처의 출력 여부를 결정하는 단계는, 상기 대상 계층이 출력의 대상이 되는 출력 계층이 아 [0014]
니고, 상기 대상 계층이 속하는 억세스 유닛 내에 상기 출력 계층에 속하는 출력 대상 픽처가 출력되지 않는 것 으로 결정되고, 상기 대상 계층이 상기 출력 계층의 참조로 사용되어 상기 복호화 대상 픽처가 상기 출력 대상 픽처의 참조 픽처로 사용되고, 상기 대상 계층에 대한 상기 초기화 플래그 값이 1이고, 상기 복호화 대상 픽처 가 슬라이스 헤더에서 시그널링 되는 픽쳐 출력 여부를 나타내는 플래그 정보가 1인 복호화된 픽처들 중 가장 상위 픽처인 경우, 상기 복호화 대상 픽처를 출력하는 것으로 결정할 수 있다.
상기 임의 접근이 발생된 시점에 대응하는 제1 억세스 유닛에 포함되어 있는 픽처들을 복호화 하는 단계와; 상 [0015]
기 제1 억세스 유닛에 포함되어 있는 픽처들의 개별적인 출력 여부를 결정하는 단계와; 상기 제1 억세스 유닛 다음의 제2 억세스 유닛에 포함되어 있는 픽처들을 복호화 하는 단계와; 상기 제1 억세스 유닛 다음의 제2 억세
스 유닛에 포함되어 있는 픽처들의 개별적인 출력 여부를 결정하는 단계를 더 포함할 수 있다.
상기 제1 억세스 유닛에 포함되어 있는 픽쳐 중 출력되는 것으로 결정된 픽처를 출력하는 제 1 억세스 유닛 픽 [0016]
처 출력 단계를 더 포함하고, 상기 제 1 억세스 유닛 픽처 출력 단계는, 상기 비트스트림이 기본 계층부터 최상 위 계층을 포함하고, 상기 기본 계층부터 n번째(0≤n) 계층까지 IRAP(intra random access point) 픽처이고, 출력 계층이 상기 기본 계층 내지 상기 n번째 계층에 속하는 경우, 상기 출력 계층의 출력 픽처를 출력하고, 상 기 출력 계층이 n+1번째 계층부터 상기 최상위 계층에 포함되어 있는 경우, n번째 계층의 복호된 픽처를 출력할 수 있다.
상기 제2 억세스 유닛에 포함되어 있는 픽쳐 중 출력되는 것으로 결정된 픽처를 출력하는 제 2 억세스 유닛 픽 [0017]
처 출력 단계를 더 포함하고, 상기 제 2 억세스 유닛 픽처 출력 단계는, 상기 제2 억세스 유닛에 포함되는 상기 n+1번째 계층부터 k번째 계층에 (n+1≤k) IRAP 픽처가 포함되고, 상기 기본 계층부터 k번째 계층까지 출력 계층 이 포함되어 있는 경우, 상기 출력 계층의 출력 픽처를 출력하고, 상기 출력 계층이 k+1번째 계층부터 상기 최 상위 계층에 포함되어 있는 경우, k번째 계층의 복호된 픽처 또는 출력되는 것으로 결정된 픽처를 출력할 수 있 다.
본 발명의 다른 실시예에 따른 복수의 계층을 포함하는 비트스트림의 복호화 장치는 임의 접근이 발생된 경우, [0018]
상기 임의 접근이 발생된 시점부터 상기 비트스트림을 복호화 하기 위한 파라미터를 설정하고, 복호화 대상 픽 처의 복호화를 수행하는 예측부를 포함하고, 상기 예측부는 상기 임의 접근이 발생한 경우, 복호화 대상이 되는 대상 픽처가 정상적으로 복호되어 출력될 수 있는지 여부를 나타내는 초기화 플래그를 설정하고, 상기 복호화 대상 픽처가 임의 접근 포인트로 사용되었는지 여부를 나타내는 플래그 변수(NoRaslOutputFlag)를 설정하고, 상 기 복호화 대상 픽처가 IRAP 픽처이고, 상기 플래그 변수가 1이고, 상기 복호화 대상 픽처에 대한 상기 초기화 플래그가 0이고, 상기 대상 계층의 모든 참조 계층에 대한 상기 초기화 플래그가 1이면, 상기 대상 계층에 대한 상기 초기화 플래그를 1로 재설정할 수 있다.
발명의 효과
본 발명의 일 실시예에 따르면, 비트스트림의 임의 시점부터 복호화가 가능하도록 하는 방법 및 이를 이용하는 [0019]
장치가 제공된다.
구체적으로, 본 발명의 일 실시예에 따르면, 임의 접근 시점의 AU(access unit) 내에 IRAP(intra random [0020]
access point) 픽처와 IRAP가 아닌 픽처(non- intra random access point picture)가 존재하거나, IRAP 픽처만 존재하지만 NAL 유닛 타입이 두 개 이상인 경우에 임의 접근 가능 시점부터 점진적으로 비트스트림을 복호화할 수 있는 방법 및 이를 이용하는 장치가 제공된다.
도면의 간단한 설명
도 1은 영상 부호화 장치의 일 실시예에 따른 구성을 나타내는 블록도이다.
[0021]
도 2는 영상 복호화 장치의 일 실시예에 따른 구성을 나타내는 블록도이다.
도 3은 본 발명이 적용될 수 있는, 복수 계층을 이용한 스케일러블 비디오 코딩 구조의 일 실시예를 개략적으로 나타내는 개념도이다.
도 4는 본 발명에 따라 점진적으로 비트스트림을 복호화 하는 방법을 설명하기 위한 도면이다.
도 5는 본 발명의 일 실시예에 따라 임의 접근 가능 시점을 포함하는 비트스트림 구조를 도시한 도면이다.
도 6은 본 발명의 다른 실시예에 따라 임의 접근 가능 시점을 포함하는 비트스트림 구조를 도시한 도면이다.
도 7은 본 발명의 또 다른 실시예에 따라 임의 접근 가능 시점을 포함하는 비트스트림 구조를 도시한 도면이다.
도 8은 본 발명의 또 다른 실시예에 따라 임의 접근 가능 시점을 포함하는 비트스트림 구조를 도시한 도면이다.
도 9는 본 발명의 일 실시예에 따른 영상의 복호화 방법을 설명하기 위한 제어 흐름도이다.
도 10은 본 발명의 일 실시예에 따른 복호화 파라미터의 설정 방법을 설명하기 위한 도면이다.
도 11은 본 발명의 일 실시예에 따른 계층 간 영상의 복호화 방법을 설명하기 위한 제어 흐름도이다.
발명을 실시하기 위한 구체적인 내용
이하, 도면을 참조하여 본 발명의 실시 형태에 대하여 구체적으로 설명한다. 본 명세서의 실시예를 설명함에 있 [0022]
어, 관련된 공지 구성 또는 기능에 대한 구체적인 설명이 본 명세서의 요지를 흐릴 수 있다고 판단되는 경우에 는 그 상세한 설명은 생략한다.
어떤 구성 요소가 다른 구성 요소에 “연결되어” 있다거나 “접속되어” 있다고 언급된 때에는, 그 다른 구성 [0023]
요소에 직접적으로 연결되어 있거나 또는 접속되어 있을 수도 있으나, 중간에 다른 구성 요소가 존재할 수도 있 다고 이해되어야 할 것이다. 아울러, 본 발명에서 특정 구성을 “포함”한다고 기술하는 내용은 해당 구성 이외 의 구성을 배제하는 것이 아니며, 추가적인 구성이 본 발명의 실시 또는 본 발명의 기술적 사상의 범위에 포함 될 수 있음을 의미한다.
제1, 제2 등의 용어는 다양한 구성요소들을 설명하는데 사용될 수 있지만, 상기 구성요소들은 상기 용어들에 의 [0024]
해 한정되어서는 안 된다. 상기 용어들은 하나의 구성요소를 다른 구성요소로부터 구별하는 목적으로만 사용된 다. 예를 들어, 본 발명의 권리 범위를 벗어나지 않으면서 제1 구성요소는 제2 구성요소로 명명될 수 있고, 유 사하게 제2 구성요소도 제1 구성요소로 명명될 수 있다.
또한 본 발명의 실시예에 나타나는 구성부들은 서로 다른 특징적인 기능들을 나타내기 위해 독립적으로 도시되 [0025]
는 것으로, 각 구성부들이 분리된 하드웨어나 하나의 소프트웨어 구성단위로 이루어짐을 의미하지 않는다. 즉, 각 구성부는 설명의 편의상 각각의 구성부로 나열하여 포함한 것으로 각 구성부 중 적어도 두 개의 구성부가 합 쳐져 하나의 구성부로 이루어지거나, 하나의 구성부가 복수 개의 구성부로 나뉘어져 기능을 수행할 수 있고 이 러한 각 구성부의 통합된 실시예 및 분리된 실시예도 본 발명의 본질에서 벗어나지 않는 한 본 발명의 권리범위 에 포함된다.
또한, 일부의 구성 요소는 본 발명에서 본질적인 기능을 수행하는 필수적인 구성 요소는 아니고 단지 성능을 향 [0026]
상시키기 위한 선택적 구성 요소일 수 있다. 본 발명은 단지 성능 향상을 위해 사용되는 구성 요소를 제외한 본 발명의 본질을 구현하는데 필수적인 구성부만을 포함하여 구현될 수 있고, 단지 성능 향상을 위해 사용되는 선 택적 구성 요소를 제외한 필수 구성 요소만을 포함한 구조도 본 발명의 권리범위에 포함된다.
도 1은 영상 부호화 장치의 일 실시예에 따른 구성을 나타내는 블록도이다. 스케일러블(scalable) 비디오 부호 [0027]
화/복호화 방법 또는 장치는 스케일러빌리티(scalability)를 제공하지 않는 일반적인 영상 부호화/복호화 방법 또는 장치의 확장(extension)에 의해 구현될 수 있으며, 도 1의 블록도는 스케일러블 비디오 부호화 장치의 기 초가 될 수 있는 영상 부호화 장치의 일 실시예를 나타낸다.
도 1을 참조하면, 상기 영상 부호화 장치(100)는 움직임 예측부(111), 움직임 보상부(112), 인트라 예측부 [0028]
(120), 스위치(115), 감산기(125), 변환부(130), 양자화부(140), 엔트로피 부호화부(150), 역양자화부(160), 역변환부(170), 가산기(175), 필터부(180) 및 참조영상 버퍼(190)를 포함한다.
영상 부호화 장치(100)는 입력 영상에 대해 인트라(intra) 모드 또는 인터(inter) 모드로 부호화를 수행하고 비 [0029]
트스트림(bit stream)을 출력할 수 있다. 인트라 예측은 화면 내 예측, 인터 예측은 화면 간 예측을 의미한다.
인트라 모드인 경우 스위치(115)가 인트라로 전환되고, 인터 모드인 경우 스위치(115)가 인터로 전환된다. 영상 부호화 장치(100)는 입력 영상의 입력 블록에 대한 예측 블록을 생성한 후, 입력 블록과 예측 블록의 차분을 부 호화할 수 있다.
인트라 모드인 경우, 인트라 예측부(120)는 현재 블록 주변의 이미 부호화된 블록의 화소값을 이용하여 공간적 [0030]
예측을 수행하여 예측 블록을 생성할 수 있다.
인터 모드인 경우, 움직임 예측부(111)는, 움직임 예측 과정에서 참조 영상 버퍼(190)에 저장되어 있는 참조 영 [0031]
상에서 입력 블록과 가장 매치가 잘 되는 영역을 찾아 움직임 벡터를 구할 수 있다. 움직임 보상부(112)는 움직 임 벡터와 참조 영상 버퍼(190)에 저장되어 있는 참조 영상을 이용하여 움직임 보상을 수행함으로써 예측 블록 을 생성할 수 있다.
감산기(125)는 입력 블록과 생성된 예측 블록의 차분에 의해 잔여 블록(residual block)을 생성할 수 있다. 변 [0032]
환부(130)는 잔여 블록에 대해 변환(transform)을 수행하여 변환 계수(transform coefficient)를 출력할 수 있 다. 그리고 양자화부(140)는 입력된 변환 계수를 양자화 파라미터에 따라 양자화하여 양자화된 계수(quantized
coefficient)를 출력할 수 있다.
엔트로피 부호화부(150)는, 양자화부(140)에서 산출된 값들 또는 부호화 과정에서 산출된 부호화 파라미터 값 [0033]
등을 기초로, 심볼(symbol)을 확률 분포에 따라 엔트로피 부호화하여 비트스트림(bit stream)을 출력할 수 있다. 엔트로피 부호화 방법은 다양한 값을 갖는 심볼을 입력 받아, 통계적 중복성을 제거하면서, 복호 가능한 2진수의 열로 표현하는 방법이다.
여기서, 심볼이란 부호화/복호화 대상 구문 요소(syntax element) 및 부호화 파라미터(coding parameter), 잔 [0034]
여 신호(residual signal)의 값 등을 의미한다. 부호화 파라미터는 부호화 및 복호화에 필요한 매개변수로서, 구문 요소와 같이 부호화 장치에서 부호화되어 복호화 장치로 전달되는 정보뿐만 아니라, 부호화 혹은 복호화 과정에서 유추될 수 있는 정보를 포함할 수 있으며 영상을 부호화하거나 복호화할 때 필요한 정보를 의미한다.
부호화 파라미터는 예를 들어 인트라/인터 예측모드, 이동/움직임 벡터, 참조 영상 색인, 부호화 블록 패턴, 잔 여 신호 유무, 변환 계수, 양자화된 변환 계수, 양자화 파라미터, 블록 크기, 블록 분할 정보 등의 값 또는 통 계를 포함할 수 있다. 또한 잔여 신호는 원신호와 예측 신호의 차이를 의미할 수 있고, 또한 원신호와 예측 신 호의 차이가 변환(transform)된 형태의 신호 또는 원신호와 예측 신호의 차이가 변환되고 양자화된 형태의 신호 를 의미할 수도 있다. 잔여 신호는 블록 단위에서는 잔여 블록이라 할 수 있다.
엔트로피 부호화가 적용되는 경우, 높은 발생 확률을 갖는 심볼에 적은 수의 비트가 할당되고 낮은 발생 확률을 [0035]
갖는 심볼에 많은 수의 비트가 할당되어 심볼이 표현됨으로써, 부호화 대상 심볼들에 대한 비트열의 크기가 감 소될 수 있다. 따라서 엔트로피 부호화를 통해서 영상 부호화의 압축 성능이 높아질 수 있다.
엔트로피 부호화를 위해 지수 골룸(exponential golomb), CAVLC(Context-Adaptive Variable Length Coding), [0036]
CABAC(Context-Adaptive Binary Arithmetic Coding)과 같은 부호화 방법이 사용될 수 있다. 예를 들어, 엔트로 피 부호화부(150)에는 가변 길이 부호화(VLC: Variable Lenghth Coding/Code) 테이블과 같은 엔트로피 부호화 를 수행하기 위한 테이블이 저장될 수 있고, 엔트로피 부호화부(150)는 저장된 가변 길이 부호화(VLC) 테이블을 사용하여 엔트로피 부호화를 수행할 수 있다. 또한 엔트로피 부호화부(150)는 대상 심볼의 이진화 (binarization) 방법 및 대상 심볼/빈(bin)의 확률 모델(probability model)을 도출한 후, 도출된 이진화 방법 또는 확률 모델을 사용하여 엔트로피 부호화를 수행할 수도 있다.
양자화된 계수는 역양자화부(160)에서 역양자화되고 역변환부(170)에서 역변환될 수 있다. 역양자화, 역변환된 [0037]
계수는 가산기(175)를 통해 예측 블록과 더해지고 복원 블록이 생성될 수 있다.
복원 블록은 필터부(180)를 거치고, 필터부(180)는 디블록킹 필터(deblocking filter), SAO(Sample Adaptive [0038]
Offset), ALF(Adaptive Loop Filter) 중 적어도 하나 이상을 복원 블록 또는 복원 픽쳐에 적용할 수 있다. 필 터부(180)를 거친 복원 블록은 참조 영상 버퍼(190)에 저장될 수 있다.
도 2는 영상 복호화 장치의 일 실시예에 따른 구성을 나타내는 블록도이다. 도 1에서 상술한 바와 같이 스케일 [0039]
러블 비디오 부호화/복호화 방법 또는 장치는 스케일러빌리티를 제공하지 않는 일반적인 영상 부호화/복호화 방 법 또는 장치의 확장에 의해 구현될 수 있으며, 도 2의 블록도는 스케일러블 비디오 복호화 장치의 기초가 될 수 있는 영상 복호화 장치의 일 실시예를 나타낸다.
도 2를 참조하면, 상기 영상 복호화 장치(200)는 엔트로피 복호화부(210), 역양자화부(220), 역변환부(230), 인 [0040]
트라 예측부(240), 움직임 보상부(250), 필터부(260) 및 참조 영상 버퍼(270)를 포함한다.
영상 복호화 장치(200)는 부호화 장치에서 출력된 비트스트림을 입력 받아 인트라 모드 또는 인터 모드로 복호 [0041]
화를 수행하고 재구성된 영상, 즉 복원 영상을 출력할 수 있다. 인트라 모드인 경우 스위치가 인트라로 전환되 고, 인터 모드인 경우 스위치가 인터로 전환될 수 있다. 영상 복호화 장치(200)는 입력 받은 비트스트림으로부 터 복원된 잔여 블록(residual block)을 얻고 예측 블록을 생성한 후 복원된 잔여 블록과 예측 블록을 더하여 재구성된 블록, 즉 복원 블록을 생성할 수 있다.
엔트로피 복호화부(210)는, 입력된 비트스트림을 확률 분포에 따라 엔트로피 복호화하여, 양자화된 계수 [0042]
(quantized coefficient) 형태의 심볼을 포함한 심볼들을 생성할 수 있다. 엔트로피 복호화 방법은 2진수의 열 을 입력 받아 각 심볼들을 생성하는 방법이다. 엔트로피 복호화 방법은 상술한 엔트로피 부호화 방법과 유사하 다.
양자화된 계수는 역양자화부(220)에서 역양자화되고 역변환부(230)에서 역변환되며, 양자화된 계수가 역양자화/
[0043]
역변환 된 결과, 복원된 잔여 블록(residual block)이 생성될 수 있다.
인트라 모드인 경우, 인트라 예측부(240)는 현재 블록 주변의 이미 부호화된 블록의 화소값을 이용하여 공간적 [0044]
예측을 수행하여 예측 블록을 생성할 수 있다. 인터 모드인 경우, 움직임 보상부(250)는 움직임 벡터 및 참조 영상 버퍼(270)에 저장되어 있는 참조 영상을 이용하여 움직임 보상을 수행함으로써 예측 블록을 생성할 수 있 다.
복원된 잔여 블록과 예측 블록은 가산기(255)를 통해 더해지고, 더해진 블록은 필터부(260)를 거친다. 필터부 [0045]
(260)는 디블록킹 필터, SAO, ALF 중 적어도 하나 이상을 복원 블록 또는 복원 픽쳐에 적용할 수 있다. 필터부 (260)는 재구성된 영상, 즉 복원 영상을 출력한다. 복원 영상은 참조 영상 버퍼(270)에 저장되어 화면 간 예측 에 사용될 수 있다.
상기 영상 복호화 장치(200)에 포함되어 있는 엔트로피 복호화부(210), 역양자화부(220), 역변환부(230), 인트 [0046]
라 예측부(240), 움직임 보상부(250), 필터부(260) 및 참조 영상 버퍼(270) 중 영상의 복호화에 직접적으로 관 련된 구성요소들, 예컨대, 엔트로피 복호화부(210), 역양자화부(220), 역변환부(230), 인트라 예측부(240), 움 직임 보상부(250), 필터부(260) 등을 다른 구성요소와 구분하여 복호화부 또는 디코딩부로 표현할 수 있다.
또한, 영상 복호화 장치(200)는 비트스트림에 포함되어 있는 인코딩된 영상에 관련된 정보를 파싱하는 도시하지 [0047]
않은 파싱부를 더 포함할 수 있다. 파싱부는 엔트로피 복호화부(210)를 포함할 수도 있고, 엔트로피 복호화부 (210)에 포함될 수도 있다. 이러한 파싱부는 또한 디코딩부의 하나의 구성요소로 구현될 수도 있다.
도 3은 본 발명이 적용될 수 있는, 복수 계층을 이용한 스케일러블 비디오 코딩 구조의 일 실시예를 개략적으로 [0048]
나타내는 개념도이다. 도 3에서 GOP(Group of Picture)는 픽쳐군 즉, 픽쳐의 그룹을 나타낸다.
영상 데이터를 전송하기 위해서는 전송 매체가 필요하며, 그 성능은 다양한 네트워크 환경에 따라 전송 매체별 [0049]
로 차이가 있다. 이러한 다양한 전송 매체 또는 네트워크 환경에의 적용을 위해 스케일러블 비디오 코딩 방법이 제공될 수 있다.
스케일러블 비디오 코딩 방법은 계층(layer) 간의 텍스쳐 정보, 움직임 정보, 잔여 신호 등을 활용하여 계층간 [0050]
중복성을 제거하여 부호화/복호화 성능을 높이는 코딩 방법이다. 스케일러블 비디오 코딩 방법은, 전송 비트율, 전송 에러율, 시스템 자원 등의 주변 조건에 따라, 공간적, 시간적, 화질적 관점에서 다양한 스케일러빌리티를 제공할 수 있다.
스케일러블 비디오 코딩은, 다양한 네트워크 상황에 적용 가능한 비트스트림을 제공할 수 있도록, 복수 계층 [0051]
(multiple layers) 구조를 사용하여 수행될 수 있다. 예를 들어 스케일러블 비디오 코딩 구조는, 일반적인 영상 부호화 방법을 이용하여 영상 데이터를 압축하여 처리하는 기본 계층을 포함할 수 있고, 기본 계층의 부호화 정 보 및 일반적인 영상 부호화 방법을 함께 사용하여 영상 데이터를 압축 처리하는 향상 계층을 포함할 수 있다.
여기서, 계층(layer)은 공간(spatial, 예를 들어, 영상 크기), 시간(temporal, 예를 들어, 부호화 순서, 영상 [0052]
출력 순서, 프레임 레이트), 화질, 복잡도 등을 기준으로 구분되는 영상 및 비트스트림(bitstream)의 집합을 의 미한다. 또한 기본 계층은 하위 계층, 참조 계층 또는 Base layer, 향상 계층은 상위 계층, Enhancement layer 를 의미할 수 있다. 또한 복수의 계층들은 서로 간에 종속성을 가질 수도 있다.
도 3을 참조하면, 예를 들어 기본 계층은 SD(standard definition), 15Hz의 프레임율, 1Mbps 비트율로 정의될 [0053]
수 있고, 제1 향상 계층은 HD(high definition), 30Hz의 프레임율, 3.9Mbps 비트율로 정의될 수 있으며, 제2 향상 계층은 4K-UHD(ultra high definition), 60Hz의 프레임율, 27.2Mbps 비트율로 정의될 수 있다. 상기 포맷 (format), 프레임율, 비트율 등은 하나의 실시예로서, 필요에 따라 달리 정해질 수 있다. 또한 사용되는 계층의 수도 본 실시예에 한정되지 않고 상황에 따라 달리 정해질 수 있다.
예를 들어, 전송 대역폭이 4Mbps라면 상기 제1향상계층 HD의 프레임 레이트를 줄여서 15Hz이하로 전송할 수 있 [0054]
다. 스케일러블 비디오 코딩 방법은 상기 도 3의 실시예에서 상술한 방법에 의해 시간적, 공간적, 화질적 스케 일러빌리티를 제공할 수 있다.
비트스트림 내 복수의 계층을 지원하는 비디오의 부호화 및 복호화, 즉 스케일러블 코딩(scalable coding)의 경 [0055]
우, 복수의 계층간에는 강한 연관성(correlation)이 존재하기 때문에 이런 연관성을 이용하여 예측을 수행하면 데이터의 중복 요소를 제거할 수 있고 영상의 부호화 성능을 향상시킬 수 있다. 다른 계층의 정보를 이용하여
예측의 대상이 되는 현재 레이어의 예측을 수행하는 것을 이하에서는 계층간 예측(inter-layer prediction)이라 고 표현한다. 스케일러블 비디오 코딩은 이하 부호화 관점에서는 스케일러블 비디오 부호화, 복호화 관점에서는 스케일러블 비디오 복호화와 동일한 의미를 가진다.
복수의 계층들은 해상도, 프레임 레이트, 컬러 포맷 중 적어도 하나가 서로 다를 수 있으며, 계층간 예측 시 해 [0056]
상도의 조절을 위하여 레이어의 업샘플링 또는 다운샘플링이 수행될 수 있다.
스케일러블 영상 부/복호화(SVC: scalable video coding)에서의 임의 접근에 대하여 설명하기 위하여 하기와 같 [0057]
은 점이 고려될 수 있다.
비트스트림은 적어도 하나 이상의 스케일러빌리티, 예를 들어, 공간, 화질, 시점 스케일러빌리티를 지원할 수 [0058]
있으며, 이와 같이 적어도 하나 이상의 계층 구조를 갖는 비디오가 임의 접근이 가능하도록 부/복호화될 수 있 다.
계층의 개수는 하나 이상의 복수 개일 수 있으며, 최하위 계층을 기본 계층이라고 할 수 있다. 이하에서는, 예 [0059]
시적으로 계층의 개수가 3개 인 경우에 대하여 설명한다. 물론 본 발명은 계층의 개수에 한정되지 않고 적용될 수 있다.
상위 계층 및 하위 계층은 단일 루프(single loop) 또는 다중 루프(multiple loop)의 방법으로 부/복호화될 수 [0060]
있다.
부호화 장치에서 비트스트림의 임의 접근 가능 시점(random access point)이 생성되는 경우, 복호화 장치는 부 [0061]
호화 장치에서 생성된 임의 접근 가능 시점부터 비트스트림의 복호화를 수행할 수 있다.
임의 접근 가능 시점의 억세스 유닛(access unit, AU) 내에 포함된 기본 계층은 IRAP(intra random access [0062]
point) 픽처로 부호화되고 상위 계층들은 IRAP 픽처가 아닌 픽처(이하, non-IRAP 픽처) 혹은 IRAP 픽처들로 부 호화될 수 있다. 억세스 유닛은 동일 시점에 디스플레이될 수 있는(having same output time) NAL 유닛들 또는 픽처들의 집합을 의미한다.
한편, 임의 접근 시점에 해당하는 계층의 모든 픽처들이 임의 접근이 가능한 방식으로 부호화된 경우에만 해당 [0063]
시점부터 비트스트림의 복호화가 가능하였다. 다시 말해 임의 접근 가능 시점에 해당하는 계층들 가운데 임의 접근이 불가능한 픽처가 포함된 경우에는 해당 시점부터 비트스트림의 복호화가 불가능한 문제가 발생할 수 있 다.
본 발명은 임의 접근 시점에 해당하는 계층의 픽처에 임의 접근이 불가능한 픽처가 포함된 경우에도 해당 시점 [0064]
부터 비트스트림의 복호화가 가능하도록 하는 방법을 제안한다.
도 4는 본 발명에 따라 점진적으로 비트스트림을 복호화 하는 방법을 설명하기 위한 도면이다.
[0065]
도시된 바와 같이, 세 개의 계층(layer 0, layer 1, layer 2)이 존재하고, 각 계층은 IRAP 픽처와 non-IRAP 픽 [0066]
처를 포함할 수 있다.
AU A에 포함되어 있는 픽처 중 제1 계층(layer 0)의 픽처는 IRAP 픽처이지만, 제2 계층(layer 1) 및 제3 계층 [0067]
(layer 2)의 픽처는 non-IRAP 픽처이다. 한편, AU B에 포함되어 있는 픽처 중 제2 계층(layer 1)의 픽처는 IRAP 픽처이지만, 제1 계층(layer 0) 및 제3 계층(layer 2)의 픽처는 non-IRAP 픽처이다. 또한, AU C에 포함되 어 있는 픽처 중 제3 계층(layer 2)의 픽처는 IRAP 픽처이지만, 제1 계층(layer 0) 및 제2 계층(layer 1)의 픽 처는 non-IRAP 픽처이다.
본 발명의 경우, 디스플레이되는 영역은 도 4에 표시된 바와 같이, 정상적으로 복호되는 하위 계층부터 점진적 [0068]
으로 디스플레이되어 최종적으로 목표하는 최상위 계층까지 디스플레이할 수 있도록 비트스트림을 부/복호화 할 수 있다.
도 5 내지 도 8은 본 발명의 일 실시예에 따라 임의 접근 가능 시점을 포함하는 비트스트림 구조를 도시한 도면 [0069]
이다.
도 5의 경우, 도 4와 같이 AU에 각각 하나의 IRAP 픽처를 포함하고 있으며, 가장 낮은 하위 계층으로부터 상위 [0070]
계층까지 시간적으로 순차적으로 IRAP 픽처를 포함하고 있다. 도 5의 비트스트스림의 경우, AU A에서부터 제1 계층(layer 0)이 디코딩되고, AU B부터 제1 계층(layer 0) 및 제2 계층(layer 1)이 디코딩되며, AU C에서부터
모든 계층(layer 0, layer 1, layer 2)이 디코딩될 수 있다.
도 6의 경우, AU A에 포함되어 있는 픽처 중 제1 계층(layer 0)과 제2 계층(layer 1)의 픽처가 IRAP 픽처이고, [0071]
다음 AU B의 경우, 제2 계층(layer 1)의 픽처 만이 IRAP 픽처이다.
도 6의 비트스트스림의 경우, AU A에서부터 제1 계층(layer 0)과 제2 계층(layer 1)이 디코딩되며, AU C에서부 [0072]
터 제3 계층(layer 2)까지, 즉 모든 계층(layer 0, layer 1, layer 2)이 디코딩될 수 있다.
도 7의 경우, AU A에 포함되어 있는 픽처 중 제1 계층(layer 0)의 픽처가 IRAP 픽처이고, 제2 계층(layer 1) [0073]
및 제3 계층(layer 2)의 픽처는 non-IRAP 픽처이다. 한편, AU B에 포함되어 있는 픽처 중 제1 계층(layer 0) 및 제2 계층(layer 1)의 픽처가 IRAP 픽처이고, AU C에 포함되어 있는 픽처 중 제2 계층(layer 1)과 제3 계층 (layer 2)의 픽처가 IRAP 픽처이다.
도 7의 경우, 도 5와 같이, AU A에서부터 제1 계층(layer 0)이 디코딩되고, AU B부터 제1 계층(layer 0) 및 제 [0074]
2 계층(layer 1)이 디코딩되며, AU C에서부터 모든 계층(layer 0, layer 1, layer 2)이 디코딩될 수 있다.
도 8의 경우, AU A에 포함되어 있는 픽처 중 제1 계층(layer 0)의 픽처만이IRAP 픽처이고, 제2 계층(layer 1) [0075]
및 제3 계층(layer 2)의 픽처는 non-IRAP 픽처이다. 한편, AU B에 포함되어 있는 픽처 중 제1 계층(layer 0) 및 제3 계층(layer 2)의 픽처가 IRAP 픽처이고, AU C에 포함되어 있는 픽처 중 제2 계층(layer 1)의 픽처만이 IRAP 픽처이다. AU D에는 제3 계층(layer 2)의 픽처만이 IRAP 픽처이다.
도 8의 경우, AU A에서부터 제1 계층(layer 0)이 디코딩되고, AU B에서는 제2 계층(layer 1)의 픽처가 non- [0076]
IRAP 픽처로서 IRAP 픽처가 아니기 때문에 제2 계층(layer 1)은 복호화 될 수 없다. 이 경우, 제2 계층(layer 1)을 참조하는 제3 계층(layer 2)의 픽처들은 정상적으로 출력되지 않을 수 있다. 따라서, AU C부터 제1계층 (layer 0) 및 제 2계층(layer1)이 디코딩 될 수 있거, 그런 후, 제2 계층(layer 1)에 IRAP 픽처를 포함하는 AU D부터 모든 모든 계층(layer 0, layer 1, layer 2)이 디코딩될 수 있다.
본 발명은 도 5 내지 도 8의 구조를 가지는 비트스트림에서 AU A 부터의 임의 접근이 가능한 부호화 및 복호화 [0077]
방법을 제공한다. 다만, 본 발명의 부호화 및 복호화 방법은 도 5 내지 도 8의 비트스트림 구조에 한정적으로 적용되는 것은 아니다.
임의 접근 가능 시점부터 비트스트림을 복호화하는 경우, 기본 계층이 IRAP 픽처이고 상위 계층이 존재하는 AU [0078]
가 비트스트림의 첫 번째 AU인 경우 해당 AU부터의 부/복호화 과정은 이하 기술된다.
본 발명은 임의 접근 가능 시점부터 비트스트림을 복호화하는 방법은 n번째 계층까지의 비트스트림을 입력 받아 [0079]
n번째까지의 계층을 복호화하다가 (n+k)번째 계층(이때 k>0)까지의 계층을 입력 받기 시작한 경우, 즉, 계층 전 환(layer-switching)의 경우에도 적용될 수 있다.
임의 접근 가능 시점부터 점진적 복호화(layer-wise startup)를 시작하는 경우, 비트스트림의 구조는 n번째 계 [0080]
층이 n+1번째 계층보다 (0<=n<=62) IRAP 픽처 주기가 짧을 수 있다.
도 9는 본 발명의 일 실시예에 따른 영상의 복호화 방법을 설명하기 위한 제어 흐름도이다. 도 9를 통해 설명되 [0081]
는 발명의 내용은 영상의 복호화 방법뿐만 아니라 영상의 부호화 방법에도 동일하게 적용될 수 있다.
우선, 영상의 복호화 장치는 복호화에 필요한 파라미터들을 설정 할 수 있다(S910).
[0082]
임의 접근 가능 시점부터 비트스트림을 복호화하는 경우에 다음과 같은 순서로 복호화에 필요한 파라미터들을 [0083]
초기화하거나 재설정 할 수 있다. (4)와 (5)의 순서는 바뀌지 않는다. 구체적으로, (5)에 대한 초기화 과정은 (3) 및 (4) 이후에 수행되어야 하며, (3) 또는 (4)에서 NoRaslOutputFlag가 ‘1’인 경우에만 (5)의 초기화 과 정이 수행될 수 있다.
(1) 임의 접근 가능 시점의 AU에 포함되는 기본 계층이 IRAP 픽처, 즉, IDR(instantaneous decoding refresh) [0084]
픽처, BLA(broken link access) 픽처 또는 CRA(clean random access) 픽처인 경우, 임의 접근 가능 시점의 AU 에 포함되는 모든 픽처가 비트스트림 내에 포함된 각 계층의 첫 번째 픽처임을 알리는 플래그, 예를 들어, FirstPicInLayerDecodedFlag와 같은 플래그는 다음과 같이 초기화 될 수 있다.
현재 부/복호화 대상 픽처가 IRAP 픽처이며 임의 접근 가능 시점의 AU에 포함되어 있는 기본 계층(nuh_layer_id [0085]
=0)의 픽처인 경우에 가능한 모든 상위 계층의 상기 플래그 값, FirstPicInLayerDecodedFlag를 ‘0’으로 초기
화할 수 있다.
즉, 예를 들어, 최대 가능한 상위 계층의 수가 63인 경우, 즉nuh_layer_id=63인 경우에 0<i<=63에 대해 [0086]
FirstPicInLayerDecodedFlag[i]는 0으로 설정될 수 있다.
(2) 임의 접근 가능 시점의 AU에 포함되는 기본 계층이 IRAP 픽처 (즉, IDR 픽처, BLA 픽처 또는 CRA 픽처)인 [0087]
비트스트림을 해당 임의 접근 가능 시점부터 복호화를 하는 경우, 비트스트림 내에 포함된 계층들 가운데 해당 계층이 IRAP 픽처며 해당 계층의 모든 참조 계층들이 정상적으로 초기화되어 해당 계층의 복호된 픽처가 복호화 기의 출력으로 사용될 수 있는지 여부를 알려주는 초기화 플래그(예를 들어, LayerInitialisedFlag라고 명명)는 다음과 같이 설정 될 수 있다. 즉 초기화 플래그는 복호화 대상이 되는 대상 픽처가 정상적으로 복호되어 출력 될 수 있는지 여부를 나타낸다.
현재 부호화, 복호화 대상 픽처가 IRAP 픽처이고 임의 접근 가능 시점의 AU에 포함되어 있는 기본 계층 [0088]
(nuh_layer_id=0)의 픽처인 경우에 LayerInitialisedFlag[0]를 1로 설정하고, 나머지 계층(1<=i<=63)에 대하여 LayerInitialisedFlag[i]를 0으로 설정 할 수 있다.
초기화 플래그는 비트스트림 복호화의 시작 시점에 개별적인 계층에 대하여 0 또는 1로 설정된 후, 아래 설명과 [0089]
같이 플래그 변수와 해당 계층이 참조하는 참조 계층의 정상적인 복호화 여부에 따라 그 값이 재설정될 수 있다.
(3) 현재 부호화, 복호화 대상 픽처가 IDR 픽처, BLA 픽처 혹은 IRAP 픽처이면서 해당 비트스트림에서 해당 계 [0090]
층(nuh_layer_id가 현재 부호화, 복호화 대상 픽처와 동일한 계층)의 첫 번째 픽처인 경우(CRA 픽처인 경우도 포함)에 NoRaslOutputFlag를 ‘1’로 설정할 수 있다. NoRaslOutputFlag는 해당 IRAP 픽처가 임의 접근 포인트 로 사용되었는지 여부를 나타내는 플래그 변수이다.
(4) 복호화 순서상 임의 접근 가능 시점 이후에 복호화되는 AU에 속해 있는 현재 부호화, 복호화 대상 픽처가 [0091]
IRAP(IDR, BLA 혹은 CRA) 픽처이고 nuh_layer_id=n 이며 LayerInitialisedFlag[n]가 0이고 현재 부호화, 복호 화 대상 픽처가 포함된 계층의 모든 하위 참조 계층들이 정상적으로 초기화된(즉, LayerInitialisedFlag[RefLayerId[n][j]]=1, 이때 RefLayerId[n][j]는 n번째 상위계층(nuh_layer_id=n)인 현재 부/복호화 대상 픽처의 j번째 참조 계층의 nuh_layer_id 들을 의미함)경우, NoRaslOutputFlag는 ‘1’로 설정될 수 있다.
즉, 복호화 대상 픽처가 IRAP 픽처이고, 복호화 대상 픽처가 속하는 계층에 설정된 초기화 플래그가 0이고, 복 [0092]
호화 대상 픽처가 속하는 계층의 모든 참조 계층에 대한 초기화 플래그가 1이면 플래그 변수는 1로 설정된다.
(5) 현재 부호화, 복호화 대상 픽처가 n번째 상위 계층(nuh_layer_id=n)이고 IRAP 픽처이며 NoRaslOutputFlag [0093]
가 ‘1’이고 기본 계층(nuh_layer_id=0)의 픽처가 아니고 현재 부호화, 복호화 대상 픽처의 LayerInitialisedFlag[n]가 0인 경우에, 현재 부호화, 복호화 대상 픽처가 포함된 계층의 모든 하위 참조 계층 들이 정상적으로 초기화되었다면(즉, LayerInitialisedFlag[RefLayerId[n][j]가 1이고, 이때 RefLayerId[n]
[j]는 n번째 상위 계층(nuh_layer_id=n)인 현재 부/복호화 대상 픽처의 j번째 참조 계층의 nuh_layer_id 들을 의미함) LayerInitialisedFlag[n]는 ‘1’ 로 설정될 수 있다.
즉, 복호화 대상 픽처가 IRAP 픽처이고, 플래그 변수가 1이고, 복호화 대상 픽처에 설정된 초기화 플래그가 0이 [0094]
고, 복호화 대상 픽처가 속하는 계층의 모든 참조 계층에 대한 초기화 플래그가 1이면, 대상 계층에 대한 초기 화 플래그는 0에서 1로 재설정된다.
복호화 장치는 현재 부/복호하고자하는 픽처의 식별자인 POC를 출력 순서에 따라 값이 증가하도록 계산한다 [0095]
(S920).
픽처 오더 카운터(Picture Order Count, POC)는 부호화된 비디오 비트스트림(coded video stream)에서 동일한 [0096]
nuh_layer_id를 가지는 계층 내의 픽처들을 식별하기 위한 식별자로, DPB에서 출력되는 순서가 늦을 수록 그 값 이 증가할 수 있다. 즉, POC는 픽처가 DPB로부터 출력되어 디스플레이될 수 있는 디스플레이 순서(display order)며, IDR 픽처의 POC는 그 값이 ‘0’이 될 수 있다.
동일 AU 내에 IRAP 픽처와 non-IRAP 픽처가 같이 존재하지 않거나, IRAP 픽처들만 존재하고 IRAP 픽처들의 NAL [0097]
유닛 타입들이 동일한 경우에는 아래와 같은 통상의 방법으로 POC 값이 계산될 수 있다.
POC 값은 POC_MSB(most significant bit)와 POC_LSB(least significant bit)로 구성되며, 전체 POC는 MSB와 [0098]
LSB의 합으로 계산될 수 있다(POC = POC_MSB + POC_LSB). 이 때 POC_LSB 값은 해당 픽처의 슬라이스 헤더에서 시그널링되며, 최대 LSB를 나타내는 MaxPOCLSB 값은 시퀀스 파라미터 세트(sequence parameter set)에서 시그 널링 될 수 있다.
Non-IRAP 픽처의 경우 POC_MSB는 이전에 부호화/복호화된 시간적 서브 레이어의 식별자를 나타내는 temporal_id [0099]
가 ‘0’인 픽처들 가운데 현재 픽처와 가까운 픽처의 POC_MSB(이하, prevPOCMSB라고 표현함), POC_LSB(이하, prevPOCLSB라고 표현함)와 현재 부/복호화하고자 하는 픽처의 POC_LSB값으로 계산될 수 있다.
IDR 픽처의 POC 값은 항상 ‘0’으로 가정될 수 있으며, CRA 픽처가 비트스트림의 가장 처음 픽처인 경우 혹은 [0100]
BLA 픽처의 경우, 픽처의 POC_MSB 값은 ‘0’으로 가정되고 POC_LSB 값은 슬라이스 헤더에서 시그널링될 수 있 다. CRA 픽처가 비트스트림의 가장 처음 픽처가 아닌 경우는 non-IRAP 픽처와 동일하게 POC값이 계산될 수 있다.
동일한 AU 내에 IRAP 픽처와 Non-IRAP 픽처가 동시에 존재하거나, IRAP 픽처만 존재하지만 IRAP 픽처들의 NAL [0101]
유닛 타입이 두 개 이상인 경우에는 POC값을 동일하게 할 수 있다. 이를 위하여 슬라이스 헤더에 poc_reset_flag과 같은 플래그 정보를 시그널링할 수 있다. 복호화 장치는 poc_reset_flag 값이 ‘1’인 경우에 는 해당 슬라이스를 포함하는 AU 내의 모든 픽처들의 POC값을 ‘0’으로 설정할 수 있다. 이때, 복호화 장치는 현재 부호화/복호화 대상 픽처의 통상의 방법으로 계산된 원래 POC 값(POC 1)을 계산하고, 해당 픽처가 포함된 해당 계층의 복호픽처버퍼에 존재하는 참조 계층들의 POC값들을 POC 1만큼 감소시키고, 현재 대상 픽처의 POC값 을 ‘0’으로 설정할 수 있다.
다음으로, 영상의 복호화 장치는 현재 부/복호화 대상 픽처의 화면 간 예측을 위하여 참조 픽처 집합(reference [0102]
picture set)을 구성하고 참조 픽처 형태 표시(reference picture marking)를 수행한다(S930).
POC를 초기화 하는 poc_reset_flag가 ‘0’인 경우, 해당 픽처의 슬라이스 참조 픽처들의 POC 값 혹은 POC_LSB [0103]
값은 다음과 같이 계산될 수 있다.
(1) 단기 참조 픽처(short-term reference picture)들의 경우 해당 슬라이스 헤더에 시그널링 되는 각 단기 참 [0104]
조 픽처를 나타내는 delta_POC 값과 현재 픽처의 POC 값인 ‘POC1’값을 이용하여 단기 참조 픽처들의 POC 값이 계산된다.
이때 delta_POC 값은 현재 픽처와 i번째 단기 참조 픽처의 POC 차이 값이거나, (i+1)번째 단기 참조 픽처와 i번 [0105]
째 단기 참조 픽처의 차이값일 수 있다.
(2) 장기 참조 픽처(long-term reference picture)들의 경우, 각 장기 참조 픽처에 대한 POC_LSB 값, POC_MSB [0106]
값을 계산하기 위한 값(delta_poc_msb_cycle_lt), 현재 픽처의 POC 값인 ‘POC1’값을 이용하여 장기 참조 픽처 들의 POC_LSB 혹은 POC 값이 계산된다. delta_poc_msb_cycle_lt는 해당 슬라이스 헤더에서 시그널링 될 수 있 다.
장기 참조 픽처에 대하여는 기본적으로 POC_LSB만 시그널링되고, 시그널링되는 POC_LSB 값만 가지고 장기 POC를 [0107]
식별한다. 다만, 복수의 참조 픽처 중 해당 장기 참조 픽처의 POC_LSB와 동일한 POC_LSB값을 갖는 참조 픽처가 존재하는 경우 POC_MSB값을 계산하기 위한 값(delta_poc_msb_cycle_lt)이 추가로 시그널링되며, 이를 통하여 각 참조 픽처들의 POC를 식별할 수 있도록 한다.
한편, poc_reset_flag가 ‘1’인 경우, 해당 픽처의 슬라이스 참조 픽처들의 POC 값 혹은 POC_LSB 값은 다음과 [0108]
같이 계산할 수 있다.
(1) 단기 참조 픽처(short-term reference picture)들의 경우 해당 슬라이스 헤더에 시그널링 되는 각 단기 참 [0109]
조 픽처를 나타내는 delta_POC 값과 현재 픽처의 POC 값인 ‘0’값을 이용하여 단기 참조 픽처들의 POC 값을 계 산한다.
이때 delta_POC 값은 현재 픽처와 i번째 단기 참조 픽처의 POC 차이 값이거나, (i+1)번째 단기 참조 픽처와 i번 [0110]
째 단기 참조 픽처의 차이값일 수 있다.
(2) 장기 참조 픽처(long-term reference picture)들의 경우 각 장기 참조 픽처에 대한 POC_LSB 값 및 POC_MSB [0111]
값을 계산하기 위한 값(delta_poc_msb_cycle_lt)과 현재 픽처의 POC 값인 ‘0’값과 현재 픽처의 슬라이스 헤더 에서 시그널링되는 POC_LSB값을 이용하여 장기 참조 픽처들의 POC_LSB값 혹은 POC 값을 계산한다.
delta_poc_msb_cycle_lt는 해당 장기 참조 픽처의 슬라이스 헤더에서 시그널링 될 수 있다.
장기 참조 픽처에 대하여는 기본적으로 POC_LSB만 시그널링되고, 시그널링되는 POC_LSB 값만 가지고 장기 POC를 [0112]
식별한다. 다만, 복수의 참조 픽처 중 해당 장기 참조 픽처의 POC_LSB와 동일한 POC_LSB값을 갖는 참조 픽처가 존재하는 경우 POC_MSB값을 계산하기 위한 값(delta_poc_msb_cycle_lt)이 추가로 시그널링되며, 이를 통하여 각 참조 픽처들의 POC를 식별할 수 있도록 한다.
이와 같이, poc_reset_flag가 ‘1’이면, poc_reset_flag가 ‘1’인 슬라이스를 포함하는 픽처의 슬라이스 헤더 [0113]
에 시그널링되는 참조 픽처들의 POC값 혹은 POC_LSB 값을, DPB에 존재하는 픽처들의 POC 값을 감소시킨 것과 일 치하도록 현재 픽처의 ‘POC1’값을 사용하여 조정할 수 있다.
참조 픽처의 POC가 계산되면, 참조 픽처 집합이 구성되고 DPB 내의 참조 픽쳐의 존재 여부에 따라 참조 픽처의 [0114]
형태가 표시될 수 있다.
영상 복호화 장치는 참조 픽처 집합에 포함되지만, DPB 내에 존재하지 않는 픽처를 위한 가상 참조 픽처를 생성 [0115]
할 수 있다(S940). nuh_layer_id =0 이며 현재 부호화/복호화 대상 픽처가 IRAP 픽처고 NoRaslOutputFlag =1인 경우이거나, 혹은 nuh_layer_id>0 (이 경우, 현재 부호화/복호화 대상 픽처가 FirstPicInLayerDecodedFlag[nuh_layer_id]=1인 IRAP 픽처고 NoRaslOutputFlag = 1 이거나, 또는 FirstPicInLayerDecodedFlag[nuh_layer_id]= 0)인 경우, 현재 부호화/복호화 대상 픽처의 참조픽처 집합에 포 함된 픽처들(즉, 단계 S930에서 구성된 참조픽처들) 가운데 현재 복호픽처버퍼에 존재하지 않는 픽처들을 가상 으로 생성하여 복호픽처버퍼에 저장할 수 있다.
[0116]
생성되는 가상 픽처들의 POC 값은 단계 S920에서 계산된 각 참조 픽처들의 POC값을 가진다. 가상 참조 픽처에 [0117]
대하여 DPB에서 출력되는지 여부를 알려주는 PicOutputFlag 값은 ‘0’으로 설정되고, 이로 인하여 생성된 가상 참조픽처는 출력되지 않는다.
생성된 가상 참조 픽처들은 참조픽처 집합에 시그널링된 내용 대로 단기 참조 픽처 혹은 장기 참조 픽처로 표시 [0118]
될 수 있다. 구체적으로, 현재 픽처가 참조하며 디스플레이 순서 상 현재 픽처 이전의 단기 참조 픽처, 현재 픽 처가 참조하며 디스플레이 순서상 현재 픽처 이후의 단기 참조 픽처, 현재 픽처가 참조하는 장기 참조 픽처, 현 재 픽처 이후의 픽처들에 의해 참조되는 단기 참조 픽처, 현재 픽처 이후의 픽처들에 의해 참조되는 장기 참조 픽처로 표시될 수 있다.
다음으로, 영상 복호화 장치는 현재 부/복호화 대상 픽처의 출력 여부를 결정할 수 있다(S950). 복호화된 픽처 [0119]
의 출력 여부를 나타내는 PicOutputFlag는 다음 순서로 설정할 수 있으며, PicOutputFlag 값이 ‘1’인 경우 복 호픽처버퍼에서 복호화기 출력으로 내보내며, ‘0’인 경우 복호픽처버퍼에서 복호화기 출력으로 내보내지 않을 수 있다.
(1) 만약 현재 픽처가 RASL (random access skipped leading) 픽처이고, 현재 픽처 이전에 부/복호화된 IRAP [0120]
픽처들 가운데 현재 픽처와 가장 가까운 IRAP 픽처의 NoRaslOutputFlag 값이 ‘1’인 경우에 PicOutputFlag 는
‘0’으로 설정할 수 있다.
이때, RASL 픽처는 현재 픽처 이전에 부/복호화된 IRAP 픽처들 가운데 현재 픽처와 가장 가까운 IRAP 픽처보다 [0121]
부/복호화순서는 늦지만 디스플레이 순서는 먼저인 리딩 픽처(leading picture)이며, 해당 IRAP 픽처 이전에 부 /복호화된 픽처를 참조픽처로 사용하여 부/복호화한 픽처를 의미한다.
(2) 상기 (1)의 조건을 만족하지 않고, 해당 픽처의 nuh_layer_id 값이 n이며 LayerInitialisedFlag[n] = 0 인 [0122]
경우에는 PicOutputFlag는 ‘0’으로 설정할 수 있다.
(3) 상기 (1)과 (2)의 조건을 만족하지 않는다면, PicOutputFlag 값은 다음의 방법 중 한가지 방법에 의해 설정 [0123]
될 수 있다.
a. PicOutputFlag 값은 슬라이스 헤더에서 시그널링되는 pic_output_flag 값으로 설정될 수 있다.
[0124]
b. PicOutputFlag 값은 해당 계층이 출력 계층(output layer)인 경우에는 슬라이스 헤더에서 시그널링되는 [0125]
pic_output_flag 값으로 설정되고, 출력 계층이 아닌 경우에는 ‘0’으로 설정될 수 있다.
c. 해당 계층이 출력 계층이 아니며, 해당 계층의 바로 상위 계층이 IRAP 픽처고 상위 계층의 하위 참조 계층들 [0126]
의 LayerInitialisedFlag 값이 모두 ‘1’인 경우, PicOutputFlag은 0으로 설정될 수 있다.
