2021년 10월 26일_SQL 진단 업무일지 개방데이터 품질 진단 및 개선(SQL) 109. 수도권○○ 주소데이터 452. 대구○○ 소화기설비 국토○○○○기술진흥원_20○○년 국토○○R&D○○별 특허출원 현황. 등등 1. 업무 오늘은 데이터에 오류값이 하나도 없었다. 어제 업무하면서 궁금했던 점들을 오늘 기술매니저님한테 문의했다. 인덱스 지정하는 구문과 관련해 잘 해결되지 않는 점이 있었는데, 기술매니저님이 한 번에 알려주셨다.👍 이것저것/공공데이터 일경험 수련생(2021년) 2021.10.26
2021년 10월 25일_SQL 진단 업무일지 개방데이터 품질 진단 및 개선(SQL) 문화○○_○○○○본부_○○○○_관람객_수_현황_20○○년 ○○-○○30. ○○첨단○○○○단지 6월 용지별 ○○ 현황 19○○년 ○○지 공시지가 등등 1. 업무 육안진단 업무를 하던 사람들은 오늘부터 파일데이터 도구 진단(GDQ File진단도구 활용)으로 업무가 전환됐다. SQL진단은 그대로 업무를 수행한다. 오늘은 배정받은 파일 수는 평소보다 적었으나, 각 파일 당 컬럼수가 22개~127개였다. 127개의 컬럼이 있는 파일을 여는 순간 몹시 막막했다. 그나마 127개 컬럼이 있는 파일은 동일 패턴이었으나 21개 컬럼이 있는 파일은 각 항목마다 각기 다른 SQL구문으로 오류검출을 해야했다. 게다가 매니저님은 오늘 휴일이라서 정말이지 말도 안되게 힘든 날이었다. 파이썬.. 이것저것/공공데이터 일경험 수련생(2021년) 2021.10.25
티스토리하려고 HTML도 조금씩 배운다. 티스토리하려고 HTML도 조금씩 배운다. CSS도 조금씩 배운다. 세상에는 배울 것이 너무 많다. 네이버 블로그가 정말 편하게 만든거구나 새삼스레 깨달았다. 티스토리에 IT전문가들이 괜히 많은게 아니다. 아니, 티스토리를 꾸미려면 HTML도 할 줄 알아야하고 ,CSS도 할 줄 알아야하고, 또 프로그래머처럼 코드블럭도 내가 원하는 대로 넣으려면 또 소스 따와서 적용하고, 스킨에 맞게 편집하고 아주 난리난리다. 한참 걸려서 수정하고나면 마음에 안들어서 또 수정하고. 고등학교 1학년때 정컴시간에 HTML홈페이지 만들기한 걸 여기서 또 써먹는다. 티스토리를 운영하는 것은 새 집에 살림살이 하나씩 채우는 듯한 기분이랄까. 이것저것 2021.10.22
2021년 10월 22일_SQL 진단 업무일지_완전한 툴은 없다?! 개방데이터 품질 진단 및 개선(SQL) 한국○○공단_가축분뇨전자인계관리시스템_분뇨 배출및처리 계획_20○○1201 건설○○인력 훈련기관 정보(20○○년) ○○경찰청_VTS 관제구역도 현황_20○○○○02 등등 1. 업무 오늘은 센터 출근일이라 어제보다 업무량이 많이 줄었다. 컴퓨터를 하루종일해서 그런가 손목이 아프다. 하나의 파일에 오류가 2가지나 있었다. [건설○○인력 훈련기관 정보(20○○년)] 테이블명 : F10001○○○○ 월일 표기 오류다. 개방데이터 품질 진단 및 개선 가이드에서는 월일 표기에 '~월','~일'을 사용하지 않아야한다. 5월 20일을 표현하려면 '05-20'이 맞는 표현이다. 그러나 이 파일은 날짜 데이터이 ~월, ~일을 표시했다. 쿼리박스가 완전한 툴은 아니라는 것을 알게됐다... 이것저것/공공데이터 일경험 수련생(2021년) 2021.10.22
2021년 10월 21일_SQL 진단 업무일지 개방데이터 품질 진단 및 개선(SQL) 한국○○공사_○○기지 월별 역률 현황분석_202○○○31 한국○○공사_○○○○기지 입항선박 데이터_2020○○30 한국○○○공단_자동차 연비표시제도_202○○○31 ○○처리시설 인증제품 정보_19○○○3 한국○○○○공단_○○산업단지 산업○○정보_생산실적_202○○○31 한국○○○○공단_○○산업단지 산업○○정보_생산실적_202○○○30 등등 1. 업무 오늘도 어제처럼 많은 업무를 배정받았다. 이제는 업무량이 이 정도로 고정되는 듯하다. [한국○○공사_○○기지 월별 역률 현황분석_202○○○31] 테이블명 : F100009○○2 엑셀서식오류 파일이다. '○○' 컬럼이 데이터입력값(2020-03-01)과 표시값(Mar-20), 쿼리박스에서의 출력값(2020-03)이 모두.. 이것저것/공공데이터 일경험 수련생(2021년) 2021.10.21
2021년 10월 20일_SQL 진단 업무일지 개방데이터 품질 진단 및 개선(SQL) ○○업계 지원(1989-20○○) ○○업계 지원 내역(1989-20○○) 한국○○○○㈜_○○○ 발전 실적_201○○○31 한국○○○○㈜_○○○ 발전 실적_현황_201○○2○1 한국○○○기술원_○○○산업 對 일본 수출 현황_201○○○31 한국○○○기술원_○○○산업 對 일본 무역수지_201○○2○1 등등 1. 업무 오늘은 평소 업무량의 두 배를 배정 받았다. 이게(ง ᵕᴗᵕ)ว 무슨 ٩(ˊᗜˋ*)و 일이죠 (ง ᵕᴗᵕ)ว매니저님٩(ˊᗜˋ*)و 다행이다. 다른 수련생들도 오늘은 기존 업무량의 두 배를 받았다고 한다. [○○업계 지원(1989-20○○)] 테이블명 : F1000○○○○8 개방데이터 품질진단 가이드에의하면, 빈 값을 별도의 문자로 표기하지 않아야한다. 이 .. 이것저것/공공데이터 일경험 수련생(2021년) 2021.10.20
2021년 10월 19일_SQL 진단 업무일지 개방데이터 품질 진단 및 개선(SQL) ○○○○관광부 국립○○○○_예술○○ 목록_20○○○○22 지점 ○○구역 정보(20○○년 상반기) ○○진흥원_○○기업 ○○자의 전공정보(대학)_202○○○27 등등 1. 업무 오늘 배정 받은 업무에도 오류가 없었다. 다만, [지점 ○○구역 정보(20○○년 상반기)] 파일의 한 컬럼의 SQL구문을 작성하는데 시간이 오래걸렸다. ○○지점, ○○○지점, ○○○○지점만 유효값으로 추출해야하는데, 생각했던 조건식이 제대로 작동하지 않아서 3시간 동안 조건식을 계속 바꿔봤다. 계속 구글링을 하다가 결국 비슷한 유형을 찾아냈다. 이리저리 조합해보니까 이 컬럼에서 필요한 조건식이 나왔다. 힘들게 만들어낸 조건식이 잘 작동하면 기분이 참 좋다. 만든 조건식에서 궁금한게 생겨서 기술매.. 이것저것/공공데이터 일경험 수련생(2021년) 2021.10.19
2021년 10월 18일_SQL 진단 업무일지 개방데이터 품질 진단 및 개선(SQL) ○○청 ○○○○시지방경찰청_연도 및 자치구별 5대 범죄 발생현황_20○○1○○3 20○○ 외국인근로자 ○○클리닉 지원 목록 ○○보험심사평가원_○○○실 평가 정보 20○○.1○ 등등 1. 업무 오늘 업무에도 오류가 없었다. 다만, ○○보험심사평가원_○○○실 평가 정보 20○○.1○은 SQL 구문을 만들 때 조금 더 신경썼다. 이전까지는 사용하지 않았던 패턴의 규칙이 나와서 REGEXP_LIKE 정규 표현식 함수 조건을 응용해볼 수 있었다. 다행히 새로 만든 조건이 오류가 없었다. 덕분에 노트에 SQL구문 한 가지를 더 추가했다. 2. 교육 의무교육 'MZ세대를 위한 인터넷 윤리' 수료 상시교육 (Bb1) 수강 시작 이것저것/공공데이터 일경험 수련생(2021년) 2021.10.18
2021년 10월 15일_SQL 진단 업무일지 개방데이터 품질 진단 및 개선(SQL) ○○청_○○병 지방청별 ○○현황_202○○231 ○○청_운전면허소지자 면허취득경과 현황_201○○231 등등 1. 업무 오늘은 센터 출근일이다. 오전에는 기술매니저님에게 그동안의 업무 피드백을 받고, 궁금했던 점들을 물어본다. 다행히 아직까지는 진척도 관리시스템에 제출한 업무 중 문제가 있어 피드백을 받은 적이 없다. 오늘 배정 받은 업무에는 오류가 한 건도 없다. 2. 기타 며칠전부터, 진척도관리시스템 보고서란에 파일을 제출하려고 하면 계속 파일 업로드에 실패했다는 팝업창이 나온다. 배정받은 업무량의 절반정도가 늘 파일 업로드에 실패한다. 브라우저를 크롬, 익스플로러, 엣지로 바꿔서 업로드해봐도 파일 업로드에 실패했던 보고서는 절대 업로드가 안된다. 똑같은 엑셀(.. 이것저것/공공데이터 일경험 수련생(2021년) 2021.10.15
2021년 10월 14일_개방데이터 파일 SQL진단 업무일지 개방데이터 품질 진단 및 개선(SQL) ○○청_채용공고_20○○10○○ ○○청_메타항목_202○○026 201○년 범죄의 발생 검거상황(○○도지방경찰청) 201○년 범죄의 발생 검거상황(○○○도지방경찰청) 등등 오늘도 구글링으로 SQL 구문을 적어가며 배웠다. 구글링하면 정말 좋은 참고자료가 많이나온다. 가이드대로 하면 참 편하겠지만, 가이드대로만하면 공공데이터 일경험수련생 업무를 하면서 얻는게 없을 것 같아 이것 저것 넣어가면서 SQL구문을 만들어보고 있다. 쿼리박스에서 SQL구문 오류가 나오면 너무 슬프다. ???대체 뭐가 틀린거지?!? 201○년 범죄의 발생 검거상황(○○○도지방경찰청) 테이블명 : F10000○○○2 데이터건수 : 186건 컬럼 수 : 5개 ○○건수, ○○건수, ○○인원 남, ○○.. 이것저것/공공데이터 일경험 수련생(2021년) 2021.10.14