율무의 하루 율무의 하루

데이터 변환(Data Transformation) - 데이터가 가진 특성들을 비교하여 데이터 패턴을 찾을 때, 특성 간 스케일 차이가 심하면 패턴을 찾는데 문제가 발생하기 때문에 변환이 필요함 (정규화, 로그, 평균값 계산 등을 이용하여 데이터를 구간 화 하는 작업) 표준화 (Standardization): 데이터 특성이 Bell Shape 분포를 보이거나, 이상치 (노이즈 등)가 있을 때 유용 정규화 (Normalization): 정규화가 표준화보다 대체로 유용 데이터 정제(Data Cleaning) - 없는 데이터를 채우고, 잡음 데이터 제거, 모순 데이터 교정을 하는 작업 결측 데이터 채우기 from numpy import * import numpy as np x_miss = np.array([[1..

데이터 전처리 기법 데이터 실수화 (Data Vectorization) 데이터 정제 (Data Cleaning) 데이터 통합 (Data Integration) 데이터 축소 (Data Reduction) 데이터 변환 (Data Transformaion) 데이터 균형 (Data Balancing) 데이터 실수화(Data Vectorization) - 범주형 자료, 텍스트 자료, 이미지 자료 등을 실수로 구성된 형태로 전환 범주형 자료의 실수화 ID City 1 Seoul 2 Dubai 3 LA id City1 City2 City3 1 1 0 0 2 0 1 0 3 0 0 1 Scikit-learn의 DictVectorizer함수를 이용하여 범주형 자료를 실수화 from sklearn.feature_extrac..

표준(standard): 정보를 다른 종류의 정보 통신 단말기로 전송하기 위해 정보통신 단말기간에 전기적/물리적/절차적/기능적 특성을 통일 하는 것 Global: ITU(국제 통신 연합), IEEE, ISO(국제 표준화 기구)/IEC JTC1, 3GPP, 3GPP2 Regional: ETSI, ATIS, TIA, CEN, APT National: TTA(한국의 표준화 기구), TTC, ARIB, CCSA, ISACC, ANSI IEEE(Institute of Electrical and Electronics Engineers): IEEE 802는 통신망에 관한 표준화를 추진, 표준화는 OSI 참조 모델의 하위 2계층을 대상 Application Layer Presentation Layer Session L..

사물인터넷(:Internet Of Tings)이란 무엇일까 ? : 센서가 부착된 사물을 연결해 데이터를 사람의 개입없이 인터넷으로 주고받는 기술 혹은 환경 IoT의 센서 종류들 위치/거리 : 적외선, 초음파 센서, 모션/속도/위치변화, 온도, 습도, 소리/진동, 유해가스감지, 물의 흐름, 물리적, 물의 레벨, 전기적/자기적, 가속도/기울기, 카메라 무선 센서 통신 ad hoc network(분산형 네트워크)들의 데이터를 Sink node에서 전부 모은 후 Gateway를 통하여 Core network에 연결하여 End-user(사용자)와 Computer services에서 정보를 활용한다. 무선통신이므로 네트워크는 Low Power Devices에서 작동되어야 한다. 다른 타입의 sensor/actuat..