비정형 데이터가 바로 빅데이터이다. 즉, 테이블 형태로 구성하지 않고 정형화되지 않은 데이터이다.
이를 관리하는 시스템이 하둡과 스파크 등이 있으며 추후 학습할 예정.
참고로 하둡개발자 신입 연봉이 개발자 중에서 최상위권이다.
머신러닝에서 트레이닝데이터, 테스트데이터 분리한 것을 저장하고 학습 결과를 저장할 때 사용하게 된다.
uci machine learning repository 링크. 데이터가 많으나 친절하지 않다.
'딥러닝(deep learning) > 인공신경망(Neural Network)' 카테고리의 다른 글
| deep_learning 최종 정리 (0) | 2019.07.29 |
|---|---|
| 데이터 분포가 치우쳐 있다면 (0) | 2019.07.26 |
| seperate function, normalize function (0) | 2019.07.25 |
| not batch를 쓸 경우, 마지막 행의 데이터의 loss의 감소추세가 가지는 의미( 중요) (0) | 2019.07.25 |
| 행렬의 계산 성능 개선 (0) | 2019.07.24 |
