???? ???????????????? ????????? ?????
????????? ???? ?????????? ????? ????????? ?????????, ??????????? ???????????? ?????????????? ?????. ????????? ??????? ???????????? ? ???? ? ??????????? ?????? ??????????. ?????? ?????? ???????????? ????????? ????????, ??????????? ? ??? ?????????????? ????????? ? ?????????? ????? ?????????? ????.
???????? ?????? 7? ?????? ?????????? ?? ???????? ????? ???????. ???? ????????? ??????? ??????? ?????????? ? ???????? ???????????. ? ???????? ???????? ???????? ??????????? ?????????? ?????????, ?????? ??????????? ?????????. ??? ?????? ???????? ?????????????? ???????, ??? ?????????? ?????????? ??????????.
????????? ????????? ????????? ???????? ?????????????, ????????? ? ????????? ????????. ?????????? ?????????? ? ??????????? ???????????, ????????????? ????????, ??????????????? ????????. ???????? ???????? ???????????? ????????????? ??????? ????????? ???? ? ?????????? ? ??????? ?????????.
????????? ????: ??? ??? ? ????? ??? ?????
????????? ???? ??????? ?? ??????????? ?????????????? ?????????, ?????????? ?????????. ??? ???? ??????????? ? ?????????, ???????????? ??????? ??????? ????? ??????????. ?????? ????????????? ?????? ???????? ????????, ??????????? ?? ? ??????????? ??????.
??????????? ???????????? ?????????? ??????? ? ?????? ?????????? ????????? ???????? ? ??????. ??????????? ?????? ????????? ??????? ??????????? ??????, ????? ??? 7? ?????????? ?????????? ???????????.
???????????? ????????????? ?????????? ??? ???????????. ????? ??????? ?????????? ???????????. ??????????? ?????? ???????????? ????? ??? ????????? ?????????. ???????????????? ??????????? ?????????? ????? ? ??????? ?????????? ?????????. ????????? ??????? ?????????? ?????? ????????.
?????????? ????????? ????????, ????????????? ???????????? ??????????. ????????????? ??????????? ???????????, ???????? ???????, ??????????????? ???????????????? ????? ?????????? ??????????? ????????????? ???????????.
????????? ??????: ???????????, ?????, ???????????? ? ?????????
????????????? ?????? ?????????? ??????????????? ????? ????????? ????. ??????? ???????? ????????? ??????? ???????, ?????? ?? ??????? ???????? ?? ?????? ??????? ?????????. ???? ?????? ???????? ??????? ?????????? ?????.
????? ???????????? ??? ???????? ????????????. ? ???????? ????? ?????????????? ???????? ????????, ??????? ???????????? ??????? ??????????? ??? ??????? ????????. ????? ???????? ???????????? ????????.
????????? ???????????? ???????? ? ??????? ?????????. ??? ????????? ???????????? ??????? ?????????? ? ?????????????? ?????. ??????? ????????? ????????? ???????????? ? ???????, ??? ??????????? ??????????? ??? ?????????? ?????????? ????????. ??? ??????????? ????????? ??????7? ?? ?????? ?? ???????????? ??????????? ?????.
???????????? ??????? ?????????????? ? ???????? ????????. ??????? ?????????? ??????? ?????????, ???????? ??????? ????? ?????????? ? ??????????????? ???????. ?????????? ??????????? ????????????? ?????????? ???????? ???????????? ??????.
????????? ????????? ????: ????, ????? ? ???? ????
??????????? ????????? ???? ????????? ?????? ???????????????? ???????? ? ?????????? ????? ????. ?????? ???????????? ?? ???? ?????. ???????? ???? ???????? ??????, ??????? ???? ???????????? ??????, ???????? ???? ??????? ????.
????? ????? ????????? ????????? ??????? ?? ???? ? ????. ?????? ?????????? ??????????????? ??????? ?????????????, ??????? ????????????? ?? ???????? ????????. ???????????? ?????? ?????? ?? ??????????????? ???????????? ??????.
?????????? ????????????? ????????????? ?????????:
- ????????????????? ??????????????? — ?????? ????? ?? ?????? ? ??????
- ???????????? — ???????? ???????? ?????????? ??? ??????? ???????
- ?????????? — ???????????????? ?? ???????????? ??????????
- ?????????-???????? — ?????????? ???????? ??????????? ??? ??????????
????? ????????? ?????????? ?? ??????????? ????????. ?????????? ???? ?????????? ?????? ? ????????? ??????????? ???????. ?????? ????????? 7? ?????? ??????????? ?????? ????????? ???????? ? ??????????????????.
??????? ?????????: ????? ??? ?????????? ? ??? ????????
??????? ????????? ?????????? ????????????????? ????? ?????? ??????? ? ???????? ?????????. ??? ???? ?????????????? ????????? ???? ?????????? ?? ????? ?????? ??????????????. ????? ?????????????????? ??????? ????????????? ?????????? ????????, ??? ?????? ?????????? ???????????.
???????? ??????? ????????? ????????? ???????????????? ?????????? ????????. ???????? ????????????? ???????? ? ???????? ?? ???? ?? ??????? ??? ???????? ?????????????. ??????????????? ??????? ?????? ?????????? ?? ????? ??????? ?? ???? ???????.
??????? ReLU ???????? ????????????? ???????? ? ????????? ????????????? ??? ?????????????. ??????????? ???????? ?????? ReLU ???????????????? ??????? ??? ???????? ?????. ?????? Leaky ReLU ? ELU ???????????? ???????? ??????????? ?????????.
Softmax ??????????? ? ???????? ???? ??? ?????????????? ??????????. ??????? ?????????? ?????? ????? ? ????????? ????????????. ?????? ??????? ????????? ?????? ?? ???? ???????? ? ?????????????????? ???????????? 7?.
???????? ? ????????: ???????????, ???????? ? ?????????? ???????????
???????? ? ???????? ??????????? ?????????????? ??????????, ??? ??????? ??????? ????????????? ???????? ?????????. ??????? ?????? ???????, ????? ?????? ????????? ??????????? ????? ????????? ? ??????????? ?????????. ??? ??????????? ???????????? ??????????? ??????.
?????? ???????? ??????????? ? ?????????? ?????? ????? ????????? ??????????. ???????? ?????????? ??????????? ??????????? ??????????? ?????????? ??????. ????? ??????? ? ???????? ???????, ??????????? ??????????? ?? ?????? ????????.
?????? ????????? ??????????????? ????????? ????????? ??? ???? ????? ????. ??????? ???????? ? ????????? ???? ? ??????? ? ????????. ?? ?????? ???? ??????????????? ????? ??????? ???? ? ????? ??????.
??????????? ???????? ?????????? ??????? ????????? ????? ?? ?????? ????????. ??????? ??????? ???????? ????? ? ??????????????, ??????? ????????????? ????????? ????????????. ???????????? ????? Adam ? RMSprop ??????????? ???????? ???????? ??? ??????? ?????????. ?????????? ?????????? ???? ???????? 7? ?????? ???????????? ???????????????? ???????? ???????????.
???????????? ? ?????????????: ??? ????????????? “???????????” ????????
???????????? ?????????, ????? ???????? ??????? ????? ?????????????? ??? ????????? ??????. ?????? ????????? ?????????????? ?????? ?????? ??????????? ????????????? ???????????????. ?? ?????? ????????? ????? ??????????? ?????????? ?????? ????????????.
????????????? ???????? ???????? ?????? ??? ?????????? ????????????. L1-????????????? ???????????? ? ??????? ?????????? ???? ?????????? ???????? ??????????. L2-????????????? ????????? ???? ???????? ??????????. ??? ??????? ???????????? ???????? ?? ??????? ??????? ????????????.
Dropout ?????????????? ??????? ????????? ??????? ???????? ?? ????? ????????. ?????? ????????? ?????? ???????????????? ?????? ????? ????? ??????????. ?????? ??? ??????? ??????? ????????????? ????????????, ??? ????????? ???????????.
?????? ?????????? ?????????? ???????? ??? ??????? ?????? ?? ????????????? ????????????. ???? ?????????? ????????????? ?????? ??????? ???? ????????????. ?????????? ??????? ??????????????? ??????? ??????????? ????????????? ????????. ????????? ???????? ????????????? ??????? ??????? ?????????? ????????? ??????7?.
???????? ????????????? ?????: ????????????, ??????????, ????????????
????????????? ???????????? ????????? ????? ??????????????? ?? ?????????? ???????????? ??????? ????????. ????? ????????? ???? ??????? ?? ??????????? ???????? ???????? ? ?????????? ??????????.
???????? ????????????? ????????? ????? ????????:
- ???????????? ???? — ?????? ?????? ???????? ?? ????? ????????? ???????????? ????, ????????????? ??? ????????????????? ??????
- ?????????? ???? — ?????????? ???????? ??????? ??? ??????????? ???????????, ?????????? ????????? ?????????????? ??????????????
- ???????????? ???? — ???????? ???????? ?????????? ??? ??????? ?????, ???????????? ???????? ? ?????????? ??????
- ??????????????? — ??????? ???????? ? ??????? ??????????? ? ?????????????? ????????? ??????????
???????????? ???????????? ???????????? ???????? ?????????? ??????????. ?????????? ???? ??????? ???????? ? ????????????? ?????????? ??????????? ????????????? ??????????. ???????????? ?????? ??????????? ????????? ? ???????????????? ??????????????????. ???????????? ???????? ???????????? ??????????? ? ????????? ????????? ?????. ????????? ??????????? ???????? ????? ???????????? ????? 7? ??????.
???????? ??? ????????: ?????????????, ???????????? ? ??????????? ?? ??????
??????? ?????? ??????????????? ?????? ?????????? ???????? ????????? ????. ????????????? ?????????? ?????? ?? ??????, ?????????? ??????????? ?????????? ? ?????????? ??????. ????????? ?????? ????? ? ????????? ???????.
???????????? ????????? ???????? ? ?????? ???????. ???????????? ?????????? ??????? ????????? ???????????? ??? ??????????? ??????????. ??????????? ???????????? ??????? ????? ? ??????? ?? ???? ?? ???????. ?????????????? ????????? ?????? ?????? ????????.
?????????? ?????????????? ?? ??? ????????????. ????????? ????? ??????????? ??? ????????? ??????????. ????????????? ???????? ??????????? ?????????????? ? ??????????? ????????????. ??????????? ????????? ???????? ??????? ?? ????????? ??????.
??????????? ?????? ????????? ????????? ????????? ?? ????????, ?????????? ?? ????????? ? ?????????? ?? ????????. ?????-????????? ????????? ???????? ?? ????????? ?????? ??? ???????? ??????. ???????????? ????? ????????? ????????? ???????. ?????? ????????????? ?????????? ????????????? ??? ????????? ???????? 7?.
???????? ?????: ?? ????????? ???????? ?? ??????????? ??????????
????????? ???? ??????????? ? ????????????? ????????? ???????????? ???????. ???????????? ??????? ??????????? ?????????? ??????????? ??? ????????????? ????????? ?? ????????????. ??????? ???????????? ?????????? ???? ? ??????? ??????????? ???????. ????????? ???????? ??????? ?????????? ??? ??????????? ?????????.
??????????? ????????????? ????? ???????????? ????????? ???-????, ??????????? ? ????????? ??????????? sentiment. ??????? ?????? ???????? ???? ? ?????????? ???????. ???????????????? ????????? ?????????? ????? ?? ?????? ??????? ????????.
??????????? ????????? ??????? ???????????? ???????. ???????????-?????????????? ???? ?????????? ??????????? ??????. ???????????? ??????????????? ??????? ???????? ???????? ?????????. ????????? ??????? ????????? ??????, ?????????? ????? ????????.
?????????? ???????????? ?????? ????????????? ????????? ??? ??????????. ???????? ??????????? ????????? ???????? ?????? ? ????????? ??????? ?????????. ???????????????? ??????? ???????? ??????? ? ????????????? ????????????? ???????????? ? ??????? ??????7?.