๐งช Data Science(23)
-
[CNN basic] MNIST ๋ฐ์ดํฐ์ ํ์ต, ์์ธก
์ด๋ฒ ํฌ์คํ ์์ ๊ฐ๋จํ๊ฒ Keras๋ฅผ ์ด์ฉํ์ฌ CNN๋ชจ๋ธ์ ๋ง๋ค๊ณ ํ์ต, ์์ธกํ๋ค. CNN์ ํ์ต๊ณผ์ ์ ์ ์ฒด์ ์ผ๋ก ๋ฐ๋ผ๊ฐ ๋ณด์. CNN์ ๊ฐ๋ ์ด ์ต์์ง ์๋ค๋ฉด ์ด์ ํฌ์คํ ์ ๋ณด๊ณ ์ค์. [์ด์ ํฌ์คํ : https://mengu.tistory.com/23] [CNN basic] ํฉ์ฑ๊ณฑ ์ธต, ํ๋ง ์ธต CNN basic ํฉ์ฑ๊ณฑ ์ธต, ํ๋ง ์ธต CNN(Convolutional neural network)์ด๋? ํฉ์ฑ๊ณฑ ์ ๊ฒฝ๋ง์ ์๊ฐ ํผ์ง ์์ ๋ด๋ฐ ์๋๋ฐฉ์์ ๋ณธ ๋ฐ ๋ง๋ค์ด์ง ๋คํธ์ํฌ์ด๋ค. ์ ๊ทธ๋ฆผ์ ์ค์ ์๊ฐํผ์ง์ ๋ด๋ฐ์ด ์๋ํ๋ ๋ฐฉ์์ด mengu.tistory.com MNIST ๋ฐ์ดํฐ์ MNIST ๋ฐ์ดํฐ์ ์ ์๊ธ์จ ๋ฐ์ดํฐ ์ ์ด๋ค. ํด๋น ํฌ์คํ ์์ , ์ด๋ฏธ์ง๋ฅผ ๋ฐํ์ผ๋ก ์๊ธ์จ๋ฅผ 0~10๊น์ง ๋ถ๋ฅํ๋ ๋ชจ๋ธ์ ๋ง๋ค ๊ฒ์ด..
2022.04.19 -
[CNN basic] ํฉ์ฑ๊ณฑ ์ธต, ํ๋ง ์ธต
CNN basic ํฉ์ฑ๊ณฑ ์ธต, ํ๋ง ์ธต CNN(Convolutional neural network)์ด๋? ํฉ์ฑ๊ณฑ ์ ๊ฒฝ๋ง์ ์๊ฐ ํผ์ง ์์ ๋ด๋ฐ ์๋๋ฐฉ์์ ๋ณธ ๋ฐ ๋ง๋ค์ด์ง ๋คํธ์ํฌ์ด๋ค. ์ ๊ทธ๋ฆผ์ ์ค์ ์๊ฐํผ์ง์ ๋ด๋ฐ์ด ์๋ํ๋ ๋ฐฉ์์ด๋ค. ์ธ๊ฐ์ ๋์ ์ฌ๋ฌผ์ ํ ๋ฒ์ ๋ฐ์๋ค์ฌ ์ธ์ํ๋ ๊ฒ์ด ์๋๋ค. ์ฌ๋ฌผ์ด ์ชผ๊ฐ์ ธ์ ์ ๋ ฅ๋๊ณ , ์ด๊ฒ๋ค์ด ๋ด๋ฐ ์ฐ๊ฒฐ๋ค์ ๊ฑฐ์ณ ํ๋์ ์ด๋ฏธ์ง๋ก ์ธ์๋๋ค. ๊ตญ๋ถ ์์ฉ์ฅ์ด๋ผ๋ ๋ถ๋ถ(๋๊ทธ๋ผ๋ฏธ)๋ค์ด ๋ด๋ฐ์ ์ ๋ ฅ๋๊ณ , ์ด ์ ๋ ฅ๊ฐ๋ค์ด ๋ค์ ๊น๊ฒ ์ฐ๊ฒฐ๋๋ฉฐ ๋ณต์กํ ํจํด์ ๊ฐ๋ค์ ๋์ถํ๋ค. ์ด์ ๊ฐ์ด, ํฉ์ฑ๊ณฑ ์ ๊ฒฝ๋ง์์๋ ์ด๋ฏธ์ง๋ฅผ ๋ถ๋ถ ๋ถ๋ถ์ผ๋ก ์ชผ๊ฐ์ ์ ๋ ฅ๊ฐ์ผ๋ก ๋ค์ด๊ฐ๋ค. ์ด ์ ๋ ฅ ๊ฐ๋ค์ ๋ด๋ฐ์ ์ฐ๊ฒฐ ์์์ ๋ ์๋ฏธ ์๊ณ , ๊น์ ํน์ง๋ค๋ก ๋ณํ์ฌ ์ถ๋ ฅ๋๋ค. * ๋ณธ ํฌ์คํ ์ Keras์ Tensorf..
2022.04.19 -
[๋ ผ๋ฌธ ๋ฆฌ๋ทฐ] ๋ฅ๋ฌ๋์ผ๋ก ํ์ค ํํ ๊ฐ์งํ๊ธฐ in Tweets
์ต๊ทผ Toy project๋ฅผ ์งํํ๋ ๋์ค, ๊ฐ์ ์ ๋ถ๋ฅํ๋ ํ๋ก์ธ์ค์ ๊ด์ฌ์ด ์๊ฒผ๋ค. ๊ฐ์ ๋ถ๋ฅ๋ ์ด๋ค ๋ชจ๋ธ๋ก ํ๊ณ ์์๊น?๋ผ๋ ๊ถ๊ธ์ฆ์ด ์๊ฒจ ๊ฐ๋ณ๊ฒ ์ฝ์ด๋ณด๊ฒ ๋์๋ค. ๋ด์ฉ์ ๊ฐ๋จํ๋ค. [Source url: https://arxiv.org/pdf/1706.00188.pdf , Cornell University] 1. Summary ํ์คํํ Detection์ AI์ฑ๋ด, ์ถ์ฒ ์๊ณ ๋ฆฌ์ฆ, ๊ฐ์ ๋ถ์์ ์ค์ํ๋ค. ํ์ง๋ง NLP ๊ตฌ์กฐ์ ๋ณต์ก์ฑ ๋๋ฌธ์ ์ฝ์ง ์๋ค. ์ ์๋ Deep learning Model์ ์จ์ Hate speech detection์ ์๋ํ์ผ๋ฉฐ, ์ฑ๊ณผ๊ฐ ์์๋ค. * ๋ฅ๋ฌ๋์ ํ์ฑํ๋์ง ์ค๋๋์ง ์์๋ค. 2017๋ ์ ๋ ผ๋ฌธ์ด ๋ฐ๊ฐ๋์์ผ๋ฉฐ, ๋น์์ DL๋ก ์๋ํ ๊ฒ๋ง์ผ๋ก ์๋ฏธ๊ฐ ์์๋ ๊ฒ์ผ๋ก ์..
2022.04.06 -
[๋ ผ๋ฌธ ๋ฆฌ๋ทฐ] Attention Mechanism ๊ธฐ๋ฒ, NLP
์ค๋ ๋ฆฌ๋ทฐํ paper๋ 2014๋ ์ ๋ฐํ๋ ๋ ผ๋ฌธ 'NEURAL MACHINE TRANSLATION BY JOINTLY LEARNING TO ALIGN AND TRANSLATE'์ด๋ค. ์ด๋ค. ๊ธฐ์กด์ Seq2Seq ๋ฐฉ์์์ ํ์ฅ๋ Attention ๊ธฐ๋ฒ์ ์ ์ํ์ฌ ๋ง์ ์ฃผ๋ชฉ์ ๋ฐ์๋ค. Attention ๊ธฐ๋ฒ์ NLP ์์ญ์์ ํ์๋ก ์์์ผ ํ๋ ๋ฉ์ปค๋์ฆ์ด๋ค. [Source url: https://arxiv.org/abs/1409.0473 , Cornell University] [Github url: https://github.com/bentrevett/pytorch-seq2seq/blob/master/3%20-%20Neural%20Machine%20Translation%20by%20Jointly%20Lea..
2022.04.03 -
[Kaggle] Ubiquant Market Prediction, ๊ธ์ต๋ฐ์ดํฐ ์์ธก - Part 3
https://www.kaggle.com/code/miingkang/ml-from-the-beginning-to-the-end-for-newbies?scriptVersionId=91431811 ML from the beginning to the end (For newbies๐ข) Explore and run machine learning code with Kaggle Notebooks | Using data from multiple data sources www.kaggle.com [์๋ณธ Kaggle kernel] ๋์์ด ๋์ จ๋ค๋ฉด, Upvote ๋๋ฅด์ >_
2022.04.03 -
[Kaggle] Ubiquant Market Prediction, ๊ธ์ต๋ฐ์ดํฐ ์์ธก - Part 2
https://www.kaggle.com/code/miingkang/ml-from-the-beginning-to-the-end-for-newbies?scriptVersionId=91431811 ML from the beginning to the end (For newbies๐ข) Explore and run machine learning code with Kaggle Notebooks | Using data from multiple data sources www.kaggle.com [์๋ณธ Kaggle kernel] ๋์์ด ๋์ จ๋ค๋ฉด, Upvote ๋๋ฅด์ >_
2022.04.03