공공데이터포털 개방데이터 일제정비 계획

□ 배경 및 필요성

○ 공공데이터포털 개방데이터 중 표준적용이 용이하고 시급성이 있는 용어·형식 표준화 우선 추진을 통한 데이터 가공비용 절감 등 활용성 제고

○ ‘19년 상반기 개방표준 일제정비 결과에 따른 재정비 및 위경도 좌표의 오류 보정을 통한 정확성 향상 추진   ※ 감사원 감사 결과(2019.2) 후속조치

□ 기관 확인점검 및 정비 대상

○ (개방데이터 표준화) 공공데이터포털 파일데이터 중 날짜·숫자 등 4개 형식 표준화 일괄 변환(3~8월, NIA) 결과에 대한 확인점검 및 추가 정비, 지속적 표준화 관리

① 표준화 변환 완료되어 공공데이터포털 해당 목록에 치환(8.13예정)된 데이터 확인점검

② 일괄변환이 불가능한 데이터에 대한 기관 자체 정비 실시*

※ 정비 대상 및 결과(표준화 변환여부, 기관 자체 정비 대상 등)는 공공데이터포털(관리자로그인)→정보공유→품질진단결과 게시판에서 확인 가능(8.13부터)

③ 향후 개방데이터는 기관 자체적으로 표준 형식에 대한 표준 준수 여부를 점검 및 등록 추진  ※ 상기 게시판에 표준화 변환 도구 게시

○ (개방 표준 정비)

① 위경도값이 있는 표준 데이터(61종) 대상 중 위경도 오류 점검 결과* 부적합 데이터에 대한 정비 실시

② ‘19년 상반기 개방표준 기관 일제정비(’19.3~6월) 확인점검(행안부·NIA)  결과 기관 추가 정비*가 필요한 표준데이터 재정비

* ①, ②번 정비 대상은 공공데이터포털(관리자)→정보공유→표준데이터 점검 게시판에서 확인 가능(9.2부터)

□ 그간 추진 경과(행안부·NIA 추진 내용)

○ (개방데이터 표준화) 전체 CSV 파일을 수집 후 표준화 정비대상을 선정 및 표준화 변환 수행(‘19.3~8월) 및 수정된 파일데이터를 공공데이터 포털에 업로드(8.12~13)

- 파일데이터 표준화 변환 도구 개발 및 적용 병행 추진

○ (개방표준 정비) 개방표준 위경도 값과 주소정보를 연속지적도 상에서 확인점검(국토정보공사 협조)하여 위경도값이 다른 경우 주소기반으로 변환토록 개방표준자가점검서비스(gooddata.go.kr) 개선 등(7~8월)

□ 향후 일정

○ 개방데이터 표준화, 개방 표준 등 공공데이터 정비 교육(8.14, 20~22) 및 정비 실시(~9.20)

※ ‘19년 품질수준평가 중 파일데이터 값진단 결과는 9.20까지 공공데이터포털에 등록 정비된 기준으로 반영

○ 기관별 정비 결과* 취합 제출(‘19.10.4까지)

* 제출 서식은 공공데이터포털(관리자로그인)→정보공유→품질진단결과·표준데이터 점검 게시판에 게시

○ 정비 결과 확인점검 및 조치(‘19.10~12월)

☎	개방데이터 표준화 문의(053-230-1537, 1600-2187-내선6번) / 개방표준 정비 문의(053-230-1539, 1577-0025)

붙임1		개방데이터 표준화 정비 및 기관 확인·정비 요청 대상

□ 개방데이터 표준화 정비 대상

○ ‘공공데이터 개방 표준’의 공통항목 개방기준에 따라 날짜, 여부, 번호, 숫자 데이터 형식 정비

< 날짜, 여부, 번호, 숫자 데이터 형식 정비 기준 >

데이터 형식 정비 항목		표준적용(안)	예시
날짜	날짜 구분자 통일	구분자는 연월일은 하이픈(-), 시간은 콜론 (:) 사용	2018-09-05 06:01:04
	연도 4자리 통일	YY → YYYY	18 → 2018
	월 2자리 통일	M → MM	9 → 09
	일 2자리 통일	D → DD	5 → 05
	시/분 2자리 통일	9:99, 9:9, 99:9 → 99:99	1:4 → 01:04
	날짜 값 연도에 쿼테이션(‘) 삭제	‘YY → 20YY	‘18 → 2018
여부		Y/N	O, X -> Y, N
번호		구분자는 하이픈(-) 사용	053)230-1111 → 053-230-1111
숫자		9999	2,000원 → 2000

□ 기관 확인점검(표준화 변환 완료) 및 추가 정비(변환 불가) 대상

< 공공데이터 포털 내 CSV 파일 정비결과(기관 확인점검·정비 대상) >

구분	전체 CSV파일	정비 완료 파일 (기관 확인점검·정비 대상)
중앙행정기관	3,581개	550개
광역자치단체	5,158개	3,484개
기초자치단체	14,332개	5,072개
공공기관	9,946개	6,859개
합계	33,017개	15,965개

※ 개방표준 데이터, CSV구조오류, 표준화 항목(날짜, 여부 등)이 없는 파일은 정비 대상에서 제외

○ 표준화 변환 완료된 데이터값의 적정성 확인* 및 오류데이터로 인해 값의 의미가 훼손되어 NIA에서 표준화 정비 및 변환이 불가능한 데이터의 기관 추가 정비**

* 기관별 정비결과보고서(공공데이터포털 게시)의 ‘일괄정비 결과’ 항목에 ‘일괄정비 완료’로 표기된 항목

** 기관별 정비결과보고서의 ‘오류내용’ 항목에 값이 있는 경우이며, ‘개선방향’도 표기

- (번호) 컬럼명(전화번호, 사업자(등록)번호, 우편번호)과 데이터 값 기준으로 대상 선정

번호	일괄정비 완료				일괄정비 불가(자체개선 필요)
	정비 전		정비 후		정비 전		정비 후
	02 2657 4417	→		02-2657-4417	042-487-1234~5	→		정비불가
	02 - 521-9933	→		02-521-9933	042-487-1234,5	→		정비불가
	051)582-8195	→		051-582-8195	02)324-865	→		정비불가

- (날짜) 컬럼명(‘OO일자’, ‘OO년도’ 등)과 실제 데이터에 입력된 날짜 패턴을 기준으로 정제대상 선정

날짜	일괄정비 완료				일괄정비 불가(자체개선 필요)
	정비 전		정비 후		정비 전		정비 후
	‘18.09.17	→		2018-09-17	1800년대	→		정비불가
	1978221	→		1978-02-21	2014년 3분기	→		정비불가
	`00.4.25.	→		2000-04-25	1908년~1909년	→		정비불가

- (숫자) 날짜, 번호 컬럼을 제외한 나머지 컬럼 중 숫자 데이터로 의미가 있는 데이터 전체를 정제대상으로 선정

숫자	일괄정비 완료				일괄정비 불가(자체개선 필요)
	정비 전		정비 후		정비 전		정비 후
	39,000	→		39000	100kw	→		정비불가
	299,000,000	→		299000000	250kg	→		정비불가
	242 442(공백)	→		242442	2600m3	→		정비불가

- (여부) 컬럼명을 기준(‘OO유무’, ‘OO여부’)으로 정제대상 확정

여부	일괄정비 완료				일괄정비 불가(자체개선 필요)
	정비 전		정비 후		정비 전		정비 후
	개방/미개방	→		Y/N	O,-(공란)	→		정비불가
	여/부	→		Y/N	0/1	→		정비불가

붙임2		공공데이터 개방 표준 정비 절차 및 방법

① (정비대상 확인) 공공데이터포털 소관 표준데이터 목록에서 최신 파일 다운로드

② (데이터 현행화) 표준데이터 파일 대비 추가·변경·삭제 사항 확인 및 현행화

- 단, 기등록 파일이 없는 경우 표준에 맞게 신규 파일 생성

※ 표준데이터는 최신 통합 파일 1개로만 관리(연도별 파일 등 2개 이상의 파일로 등록 금지)

③ (데이터 정비) 개방 표준 자가점검 서비스(gooddata.go.kr)에서 점검 수행

※ 적합 결과가 나올 때까지 오류수정 및 재점검 반복 수행(☞ 자가점검 방법 : 참고1)

- 특히 위경도 데이터는 도로명주소(없으면 지번주소) 기반으로 위경도 정확성 점검 및 부적합 시 오류 발생*

* 2019년 6.8 이전 도로명주소 기반 점검 데이터 및 모든 지번주소 기반 데이터는 재점검 필수(‘19.8월 위경도 점검 기능 고도화 완료)

④ (점검 결과 제출) 점검이 완료되면 최종 점검내역 파일 다운로드 및 제출

*개방표준 파일 다운로드 : 적합 인증된 경우 다운로드

받아 공공데이터포털에 등록

* 점검결과 다운로드 : 적합 인증된 경우,

점검 결과를 다운받아 증빙자료로 제출

⑥ (포털 등록) 개방표준 통합파일*을 다운로드받아 공공데이터 포털 기관별 목록에 등록(기존 파일데이터는 삭제)

※ 주의사항 : 다운로드파일을 반드시 이 파일명* 그대로 공공데이터포털에 등록해야 함.

* 예시 : 서울특별시_중구_주차장정보_20190328_1531960473451_1112.csv) /밑줄 부분이 인증키

** 파일이 변경되면 등록이 안되므로 파일 변경 금지  ☞ 공공데이터포털 등록방법 : 참고2

⑥ (정비결과 제출) 기관별 정비결과 제출

- 제출 자료 : 위경도 오류데이터 정비결과, ‘19년 상반기 일제정비 확인점검에 따른 재정비 결과

* 개방표준 자가진단 서비스에서 해당 데이터에 대한 최종 적합 점검결과를 다운받아 기관이름 폴더로 취합, 압축 제출

☎	공공데이터 개방표준 관련 문의(표준데이터 작성 및 점검 등) 053-230-1539, 1577-0025

참고1		개방표준 데이터 자가점검 방법

[데이터파일 표준점검 절차]

	표준데이터 등록	□	점검결과 확인	□	오류 수정보완	□	적합파일 저장
	·점검시스템(gooddata. go.kr) 접속		·구조점검/항목점검		·오류사항 보완, 재점검 실시		·적합 판정된 데이터는 인증키 발급 및 저장가능

※ 표준데이터 점검 전 데이터파일 1개 개방표준 항목 및 형식에 따라 데이터를 현행화하여 파일 작성

1. (표준데이터 등록) 공공데이터 개방표준에 따라 각 기관에서 작성된 데이터파일을 점검시스템*에 업로드(http://www.gooddata.go.kr)

① 개방표준데이터 점검서비스 접속 및 메인화면 하단의 ‘점검 등록’ 클릭

② 개방표준 분야(스크롤바 선택), 기관명*, 담당자명 등 입력하고 점검대상 파일 업로드

* 기관명에는 제공 기관명 전체를 입력(예 : 서울특별시_중구)

< 메인 화면>	< 표준데이터 점검 등록 화면>

2. (표준데이터 점검 결과 조회) 왼쪽 메뉴바 상단의 위치한 ‘표준데이터점검 결과조회’ 메뉴 클릭하여 ‘처리상황’ 항목 확인

③ 처리상황 항목 확인 점검 처리 중이면 ‘처리 중’으로 표시되며, 완료시 ‘결과조회’로 상태 변경됨

⇒ ‘결과조회’ 버튼이 녹색인 경우 적합, 빨간색인 경우 부적합임

3. (표준데이터 오류 수정)

① ‘표준데이터 점검 결과 조회‘에서 점검결과가 부적합일 경우, 검토 결과에 [부적합]으로 표시

- 점검 결과 ‘구조적 오류(오류내역 : 파일형식/항목명 오류)’는 파일 항목 누락, CSV파일 형태 미준수 등으로 발생하므로,

- 점검 통합파일이 최종 고시된 개방 표준 지정 항목과 일치하는지 등을 확인하여 통합파일을 표준에 맞게 재수정 후 점검 수행

☞ 점검서비스는 파일 자체에 대한 구조적 오류를 우선 점검하고, 이상이 없으면 파일에 등록된 데이터 값에 대한 표준준수 점검을 실시

< 구조적 오류 발생 화면(상세 오류내역 : 파일형식/항목명 오류) >

- 구조적 오류가 없는 경우 데이터 점검 결과 나오는 오류를 웹화면에서 바로 수정하거나 오류내역을 확인하여 통합파일 수정 후 재점검 수행

< 점검 결과 부적합 화면 >

▶ ｢점검결과(오류내역) 다운로드] 버튼 활성화

- 오류가 발생된 항목별 오류현황(항목명, 검토 결과, 오류건수)이 표출되며, 하단 엑셀화면에서 오류상세내역(빨간색 표시)을 확인할 수 있음

▶ 항목별 오류현황

- (항목명) 오류가 검출된 항목명 표출

- (검토 결과) 발생오류 현상과 수정방안 안내

- (오류건수) 해당 항목에서 검출된 오류 건수

- (상세 데이터 내역) 오류항목은 붉은색, 적합항목은 검은색으로 표출됨

▶ 건수가 경미한 경우 웹화면에서 직접 수정하고, 오류 내역이 많은 경우 PC 내 통합파일을 직접 수정

4. (표준데이터 점검 완료)

- 점검이 완료되면 최종 점검내역 파일 다운로드(점검 결과 제출)

참고2		공공데이터포털 표준데이터파일 등록 방법

1. 자가점검 서비스 결과 ‘적합’ 통합 파일 다운로드

인증키가 부여된 적합 데이터 파일

▶ ❶ 점검 처리 상태

- 적합 데이터의 경우는 인증키 값(13자리 인증키+파일사이즈)이 부여됨

※ 다운로드 시 파일은 반드시 열어보지 않고 바로 컴퓨터에 저장해야 함(파일을 열어본 뒤 저장하는 경우, 파일사이즈가 달라져 공공데이터포털에 등록시 오류가 남

▶ ➋ 점검결과 상세데이터 내역 : 적합데이터의 경우는 모두 검은색으로 표출

▶ ➌ csv다운로드 : 인증키값이 부여된 파일을 다운로드하여 공공데이터포털 등록

2. 공공데이터포털 관리자 권한 로그인

≪ 공공데이터포털 접속 방법(관리자) ≫

√ 공공데이터포털(www.data.go.kr) 부서ID로 로그인, 관리자 메뉴 접속

* 인사발령 등으로 담당자가 변경된 경우, 공공데이터포털 헬프데스크에 문의(1566-0025)

3. (표준데이터 갱신) 이전에 동일한 분야 표준데이터파일 등록이 있었던 경우

☞ 이전에 동일한 분야 표준데이터가 없는 경우 표준데이터 신규등록 조치

①〔목록관리〕→〔공공데이터현황 및 등록〕에서 해당하는 공공데이터명
(목록명)을 선택(목록명 더블클릭)

②〔공공데이터 상세내용〕화면에서 데이터〔수정〕을 클릭하여 갱신한 최신 데이터파일을 등록

- 이전 데이터 있는 경우에는 기 등록된 개방표준파일 삭제

4. (표준데이터 신규등록) 이전에 동일한 분야 표준데이터 등록이 없었던 경우

① 공공데이터포털 관리자메뉴로 접속하여〔등록관리〕→〔목록관리〕→〔표준데이터목록등록〕이동

② 신규 등록 데이터파일에 해당하는 표준분야별 공공데이터명(목록명)을 선택한 후〔데이터등록〕버튼을 선택

③ [표준데이터등록서] 화면에서 표준데이터 파일을 신규 등록

	◀파일을 첨부하면 <제공 공공데이터 명칭>은 파일명과 동일하게 자동 생성 ◀파일을 첨부하면 제공 공공데이터 제공형태는 자동입력 <기본 설정 항목> -공공저작물 여부 ‘아니오’ -제3자권리포함유무 ‘미포함’ -비용부과유무 ‘무료’ -제공형태 ‘포털에서 다운로드’ -매체유형은 파일첨부 시 자동 설정 ◀공공데이터 개방표준 ‘예’ 자동 선택

* 표준데이터 목록은 데이터파일 등록을 완료하면 자동 생성됨

* 신규 생성된 목록과 데이터파일은〔공공데이터현황 및 등록〕메뉴에서 확인 가능

* 기 등록된 표준데이터 목록이 있을 경우, 신규 데이터로 재등록을 하게 되면 목록 중복이 발생하므로 등록이 불가하며, 등록되면 반려 처리됨

※  신규데이터파일에 대한 공공데이터활용지원센터 심의 결과 반려되었을 경우 반려사유 확인하여 재정비 및 등록

- 등록된 데이터는 공공데이터활용지원센터에서 심의(데이터 건수(행 개수) 등) 결과 승인 후 포털 제공