[김기자's 농업딥썰] 스마트팜과 대용량 데이터 처리

스

마트팜 농법을 활용하는 농가의 또 다른 고충은 방데한 데이터를 처리하는 데 많은 어려움이 따른다는 것이다.

원시 정보에는 누락된 정보, 손상된 정보, 부적절한 정보 및 알려지지 않은 데이터가 포함되어 있다. 따라서 데이터 전처리는 데이터를 정리하는 데 필수적인 단계다.

이 기간 동안 원시 데이터는 합리적인 형식으로 변환된다. 오늘날 데이터는 일관성이 없고 불완전하며 소음이 많은 값을 포함하기 때문에 분석 시 많은 오류를 발생시킨다. 전처리 기법을 사용하여 이 문제를 해결하고, 사전 처리된 데이터를 고려하여 추가 처리를 한다.

속성 및 가변 선택으로 명명되기도 한다. 이 프로세스는 데이터베이스에서 관련 속성을 선택하는 데 사용된다. 특징의 선택은 더 높은 분류 정확도를 가질 수 있게 한다(Peng and Luo, 2018). 이것은 관련 속성을 선택하고 사전 처리된 데이터 세트에 적용되는 관련 속성을 삭제하는 데 사용된다.



김미정 기자 liz4435@hanmail.net