JOISS 관할해역 해양정보 공동활용시스템은 해양연구자료 전문 리포지토리입니다.
| |

품질관리

01 JOISS 데이터 품질관리의 필요성

해양관측기술의 급속한 발전으로 해양자료의 획득 방법도 다양해지고 있으며, 새로운 관측방법을 사용하는 경우에는 자료의 생산형태, 주기, 포맷 등이 이전과 많이 달라서 기존의 표준 및 품질관리기술을 적용하기 어려운 경우도 발생하고 있다. 기존과 같은 방법을 사용하는 경우에도 저장방식, 포맷 등이 계속 변화하고 있으므로, 고비용 해양자료의 공동활용을 위한 품질관리기술은 지속적인 관심을 갖고 개발할 필요가 있다.

JOISS는 자료를 직접 생산하는 주체는 아니지만, 연구과제에 의해 생산된 자료를 수집하고, 수집된 데이터의 활용 활성화를 위해 사용자에게 데이터를 직접 제공하는 유통자로서 양질의 데이터 관리에 대한 책임이 있다. 따라서 좀 더 표준화 된 품질관리를 수행하기 위해서는 선행된 우수 사례를 참고하고 활용하는 것이 유익하다. 이에 JOISS의 품질관리 정책 및 절차는 국제적으로 권장하는 다수의 품질관리 기준을 참고로 하였다.

또한 데이터 품질 관리 전반에 걸친 프로세스의 문서화가 반드시 수행되어야 한다. 신규로 수집되는 데이터마다 다양한 형태의 데이터가 수집될 수 있으므로 정기적인 업데이트가 필요하고, 이는 향후 JOISS에서 제공하는 데이터를 사용하는 연구자의 데이터에 대한 신뢰도를 높이는 매우 중요한 과정이다.

02 데이터 품질관리 표시(Quality Control flags)

품질 플래그는 각 데이터 값에 지정된다. 품질 플래그는 데이터의 품질을 설명하는데 사용되고 데이터 값은 변경되지 않는다. JOISS의 품질 플래그의 의미는 아래 표와 같다.

[ JOISS 데이터 품질관리 표시 기준 ]
플래그 정의 상세내용
0 미수행(no quality control) QC를 수행하지 않은 데이터 또는 품질관리 대상이 아닌 값
1 양호(good value) QC 결과 검증된 양질의 값
2 양호예상(probably good value) 실제 나타날 수 있는 값이지만 충분한 QC를 하진 못한 값
3 의심(probably bad value) 잘못된 데이터일 가능성이 있는 값
4 불량(bad value) 분명히 잘못된 값

03 데이터 품질관리 수행

JOISS 데이터 품질관리 체계
[ 관할해역 해양정보 공동활용체계의 데이터 품질관리 구조]

04 데이터 품질관리 항목

JOISS에서 수행하고 있는 점검항목은 다음과 같다.

[ JOISS 데이터 품질관리 점검 항목 ]
NO. 점검명 비고
1 날짜와 시간 점검 (Impossible date test) 필수
2 위경도 점검 (Impossible location test) 필수
3 위치 점검 (Position on land test) 필수
4 전지구적 범위 점검 (Global range test) 권장
5 지역적 범위 점검 (Regional range test) 권장
6 튐값 점검 (Spike test) 권장
7 변화도 점검 (Gradient test) 권장
8 분류학적 점검 (Taxonomic match) 제안

날짜와 시간 점검

  • 년도 : 4자리수 확인
  • 월 : 1월 ~ 12월 확인
  • 날짜 : 해당 월에 포함되는지 확인
  • 시 : 0시 ~ 23시 확인
  • 분 : 00분 ~ 59분 확인
  • 날짜와 시간이 연구과제 기간 내에 포함되어 있는지 확인

위경도 점검

  • 위도가 –90 에서 90 까지의 범위 내에 있는지 확인
  • 경도가 –180 에서 180 까지의 범위 내에 있는지 확인

위치 점검

  • 정점이 해양에 위치하고 있는지 확인

위의 날짜와 시간, 위경도, 위치 점검은 필수점검 사항으로써 결과에 이상치가 있을 경우 JOISS 데이터베이스에 입력이 불가능하다.
따라서 이상치가 발견되면 최초 자료 제공자에게 알려 데이터를 확인 및 수정 후 데이터베이스에 입력한다.
이후 데이터에 따라 다음의 권장, 제안 점검을 수행한다.

전지구적 범위 점검

  • 관측 된 매개 변수 값이 해양에서 관측될 수 있는 범위 내에 있음을 테스트 함
    전지구적으로 불가능한 매개 변수의 값으로 GTSPP Real-Time Quality Control Manual_Revised Edition, 2010(Version 1.0)을 참조하고 있으며,
    단위 한계값 및 관측, 실험, 자료처리등에 상용된 기기의 측정 한계값을 고려함

지역적 범위 점검

  • 관측 된 매개 변수 값이 특정 해양에서 관측될 수 있는 범위 내에 있음을 테스트 함
    특정지역의 불가능한 매개 변수의 값으로 WORLD OCEAN DATABASE 2013 USER’S MANUAL을 참조하고 있으며
    서해, 남해, 동해의 지역적으로 구분하여 범위 값 사용함

튐값 점검

  • 측정값이 인접한 값과 상당히 다를 경우, 즉 튀는 값 측정크기와 기울기 확인
    시험 값 = | V2 - (V3 + V1) / 2 | - | (V3 - V1) / 2 |
    여기서 V2는 측정값이고 V1과 V3은 인접한 이전 값과 다음 값을 의미함

변화도 점검

  • 인접 측정 간의 차이가 너무 가파른 경우, 변화도 측정
    시험 값 = | V2 - (V3 + V1) / 2 |
    여기서 V2는 측정값이고 V1과 V3은 인접한 이전 값과 다음 값임

05 데이터 품질관리 표시(QC Flag) 적용

각 점검 항목의 결과마다 미수행, 통과, 탈락에 대한 code가 부여된다.

[ QC 점검 결과코드 ]
code 설명
N 미수행 (na) 해당 점검을 수행하지 않음
P 통과 (pass) 해당 점검을 통과함
E 탈락 (fail) 해당 점검을 통과하지 못함

최종 QC flag 는 각 점검항목 결과를 종합하여 부여된다. 아래 표는 날짜와 시간, 위경도, 위치, 전지구적 범위 점검을 수행하여 통과하였고, 지역적 범위 점검을 수행하지 않은 수심값(10m)에 대한 QC flag 결과를 예시로 설명하고 있다.

[ 수심값(10m)에 대한 QC flag 적용 예시 ]
값 날짜시간 점검 위경도 점검 위치 점검 전지구 범위 점검 지역적 범위 점검 QC Flag
10m P P P P N 2
(양호예상)
  • · 날짜와 시간 테스트 통과
  • · 위경도 테스트 통과
  • · 위치 테스트 통과
  • · 전지구적 범위테스트 통과
  • · 지역적 범위테스트 미수행

06 문서 다운로드

JOISS 품질관리 정의서 V1.1.pdf