??? ?? ??
??-?? ??: ??-?? ????? ??? ? ?? ?? ??? ?? ?? ??? ?? ?? ?? ??? ?? ????? ?????. ??? ??? ?? ? ???? ???? ???? ?????? ??????.
Z?? ??? : ?? k-?? ?????, ?? ?? ? ???? ??? ?? ????? ?????. ? ??, ????? 1? ? 0? ??? ?????, ?? ?? ???? ???? ????? ??????.
?? ???: ?? ??? ??(???? ?? 0? ??)? ??, ???? ?? MaxAbsScaler ?? RobustScaler? ?? ??? ???? ?? ??????.
??? ???: ??? ??? ??, ?? ?? ??? ???? ?? ??? ?? ?-? ???? ?? ??? ??????.
??? ??? ??? ???? ?? ??? ?? ??? ???? ????? ????? ?? ????? ?? ???? ???. ?? ??? ??? ??? ???? ???? ?? ???? ????? ???? ?? ?? ?????.
3. ?? ??
?? ??? ??? ??? ?? ?? ?? ??? ??? ????? ? ???? ??? ??? ?????. ?? ??? ??? ?? ???? ?? ?? ?? ? ??? ?? ???? ???? ??? ?? ??? ??? ??? ?? ??? ??? ????. ?? ??? ??? ????? ???? ??? ???? ?? ??? ??? ??? ??? ??? ??? ??? ? ????.
??? ????? ?? ??? ??
???? ??? ML ????? ?? ??? ???? ????? ??, ? ? ???? ??? ?? ??? ?????. ?? ?? ?? ? ?? ??? ????(?: ?? ??)? ? ??? ???? ?? ????? ? ???? ??? ??? ??????. ??, ?? ??? ? ??? ?? ??? ? ?? ??? ???? ??? ??? ? ????. ?????, ??? ?? ??? ??? ??? ??? ??? ?? ?? ??? ? ????.
?? ?? ??
??? ??? ??-?? ???? ? Z-??? ??? ??? ??? ?? ??? ????.
MaxAbsScaler: ??? ?? ? ??? ?? ????? ???????, ???? ??? -1~1???. ??? ?? ?? ?? ???? ?? ?? ???? ???? ?? ??? ?? ???? ?????.
??? ????: ?? ??? ? ???? ??(IQR)? ?? ???? ??? ??? ???? ??? ?????. ???? ??? ??? ??? ??? ??? ?????.
?? ?? ?? ??
?? ??? ?????:
- ???? ?? ??? ???? ?? ??, ???? ?? ?? k-?? ?????? ?? ????? ??? ? ???(Z-?? ???)? ?????.
- ??? ?? ?? ?? ??? ?? ?? ?? ?? ???? ??? ?? ?? ???(??-?? ????)? ?????.
- ??? ??? ?? ??? ?? ??? ?? ?? ???? ??? ? MaxAbsScaler? ??????.
- ??? ?? ????? ???? ?? ??? ??? ??? ??? ??? ?? RobustScaler? ??????.
??? ??? ?? ???(?? ?? ??)? ??, ?? ??? ???? ?? ???(?: ?-? ???)? ??? ? ????.
4. ??? ??? ??
??? ??? ?? ?? ??? ????, ?? ??? ?? ??? ???, ?? ???? ?? ??? ?? ??? ?????.
- ??? ?? ??: ??? ??? ????? ??? ?? ???? ???? ????, ???? ???? ????? ?? ?? ??? ? ????. ????? ???? ? ??? ?? ?? ??? ?????.
- ?? ? ?? ??: ??? ??? ??(?? ?? ???) ?? ??(?? ?? ??)? ? ????. ?? ??? ?? ?? ? ??? ???? ??? ?? ?? ?? ??? ???? ??? ? ????.
- ??? ??: ??? ??? ??? ?? ???? ??? ?-? ???? ??? ??? ??? ???? ? ???, ?? ??? ??? ?????? ?????. ?? ?? ??? ??? ??? ??? ???? ???? ? ????.
??? ?? ??? ??
??? ?? ??? ??? ??? ????.
?? ???: ??? ???? ??? ??? ? ????? ??? ?? ???? ?????. ???? ?? ?? ?? ??? ?? ?? ??? ?????.
Python? scikit-learn? ??? ?? ??? ????.
sklearn.preprocessing?? LabelEncoder ????
le = LabelEncoder()
????_?? = le.fit_transform(['cat', 'dog', 'rabbit', 'dog'])
?? ???: ?-? ???? ??? ???? ? ????? ?? ???? ?? ????, ? ?? ?? ????? ??? ?????. ???? ?? ?? ??? ?? ?? ??? ?????.
??? ??? ???? ????.
??? pd? ????
df = pd.DataFrame({'category': ['A', 'B', 'C', 'A']})
one_hot_encoded = pd.get_dummies(df['category'], prefix='category')
?? ???: ?? ???? 1-? ???? ????? ?? ???? ??????? ??? ???? ?? ???? ? ? ??? ??????. ? ????? ?? ????? ???? ?? ???? ????? ?????.
??? ??? ???? ????.
dummy_encoded = pd.get_dummies(df['category'], prefix='category', drop_first=True)
??? ??? ?? ??
??? ???? ???? ????? ??? ???? ???.
?? ?? ??: ??? ??? ??? ???? ?? ??? ??? ????? ???? ??? ?????.
??? ?? ??: ?? ??? ?? ???? ??? ?? ???? ???? ?? ??? ??? ? ???? ??????.
?? ?????? ?????. ?? ????? ?? ??? ??? ??, ??? ???, ?? ??? ?? PCA? ?? ?? ?? ??? ?? ??? ??????.
?? ?? ??? ???? ?? ? ?? ???? ????? ??? ??????.?
5. ???? ??? ??
???? ???? ???? ?? ????, ?? ? ???(?? ???)? ???? ?? ?? ???(?? ???)?? ?? ?? ?? ???? ?? ???? ?????. ???? ???? ?? ???? ? ??? ??? ??? ?? ? ???, ?? ?? ??? ??? ??? ???? ???? ?? ????? ??? ??? ? ????.?
???? ???? ?? ???? ??? ?? ? ?? ?? ??? ??? ????.
??? ???? ?? ??? ??? ??
???? ???? ?? ??? ??? ?? ??? ??? ??? ??? ??? ???? ????? ??? ????. ?? ?? ?? ???? ?? ??? ??? ? ????. ??, ???? ?? ??? ???? ??? ???? ??? ??? ?? ? ????. ?? ???? ?? ??? ????? ??? ??? ???? ?????? ??? ? ????. ???, ??, F1-score ? ROC ??? ??(AUC-ROC)? ?? ?? ??? ??? ??? ?? ???? ??? ??? ? ?????.
???? ??? ?? ??
???? ???? ???? ?? ???? ??? ?????? ????????. ?????? ?? ??? ???? ?? ???? ?? ??? ??? ???? ???. ????? ?? ??? ??? ??? ?? ?? ??? ???? ?? ??? ?? ?????. ?????? ?????? ???? ????? ?? ??? ?? ?? ????.
??, ?? ???? ?? ??? ???? ???? ?? ???? ??? ??? ???? ???? ? ?? ????? ? ?? ??? ???? ????. ?? ???? ?? ?? ?? ?? ??? ?? ??? ???? ???? ?????? ?????.
??? ??? ?? ??
???? ???? ????? ??? ???? ???.
??? ?? ??: ??? ??? ??? ??? ???? ??? ???? ?????.
??? ??? ?????. ??? ?? ??, ??? ?? ? ??? ???? ?? ?????, ????? ?? ????? ??? ?????.
?? ??: ???, ??, F1-score ?? AUC-ROC ??? ?? ??? ?? ??? ???? ? ??? ???? ?? ??? ?????.
?? ??: ??? ??? ???? ??? ? ?? ?? ?? ???? ?? ?? ?? ?? ?? ?? ??? ?????.
??
??? ???? ML ??? ???? ??? ??? ???? ?? ??? ?? ? ??? ????, ?? ??? ??, ??? ? ??? ??? ???? ??? ????. ??? ???? ???, ???, ??? ?? ? ??? ???? ?? ??? ?????? ??? ? ?? ??? ???? ??? ??? ? ? ??? ???? ?? ???????? ? ?? ?? ??? ?? ? ??? ???.
ML ???? ??? ??? ???? ?? ???? ???? ??? ????, ?? ???? ?? ??? ??????? ?? ?? ???? ??? ? ?? ?? ??? ??? ? ????.
??? ??? ?? ???? ???? ?? AI ? ????? ????? ?????? AI ?????? ???? ? ??? ?? ??????? ?? ??? ??? ???? ???? ?????. AI