Method of Data Quality Evaluation for Improving Data Quality of DSEM-Trajectory
Seon-Mi Kim, Eui-Jong Lee, Sukhoon Lee · The Journal of Korean Institute of Information Technology · 2022
사용자의 이동 경로를 수집한 데이터셋인 DSEM-Trajectory는 더 정확한 학습을 위해 데이터 수집 시 전처리를 통해 데이터 품질을 향상시켰다. 하지만, 데이터셋에 대한 품질평가 기준이 존재하지 않아 명확하게 품질이 향상되었는지 확인하기 어렵다. 따라서 본 논문은 DSEM-Trajectory 데이터셋의 품질평가 기법을 제안하고 실제 데이터셋의 품질평가 결과를 분석한다. 이를 위하여 데이터 프로파일링 기법에 기반하여 데이터 현상을 파악하고, 기존 품질평가 연구들을 비교하여 데이터셋에 적합한 품질평가 기준을 선정한다. 이후 데이터셋의 데이터 품질을 측정하고, 측정된 결과를 분석하여 평가한다. 본 논문은 데이터 품질평가 결과 8개의 품질관리 기준 중 4개의 기준에서 개선이 필요한 것으로 평가하였으며, 데이터 품질 향상을 위한 각 기준의 개선 방법을 제시하였다.