AI505 Paper list for share

1. ADAM: A METHOD FOR STOCHASTIC OPTIMIZATION https://arxiv.org/pdf/1412.6980.pdf 2. SVRG https://papers.nips.cc/paper/4937-accelerating-stochastic-gradient-descent-using-predictive-variance-reduction.pdf 3. SGD: General Analysis and Improved Rates https://arxiv.org/pdf/1901.09401.pdf 4. A CLOSER LOOK AT DEEP LEARNING HEURISTICS: LEARNING RATE RESTARTS, WARMUP AND DISTILLATION https://openreview.net/pdf?id=r14EOsCqKX 5. QSGD: Communication-Efficient SGD via Gradient Quantization and Encoding https://arxiv.org/abs/1610.02132 6. SAGA: A Fast Incremental Gradient Method With Support for Non-Strongly …

Read moreAI505 Paper list for share

MIT 18.06 선형대수 – 기초 (Lec01~Lec03)

이 포스트는 MIT 길버트 스트랭 교수 (Gilbert Strang) 님의 선형대수학 강의 1장에서 3장까지의 내용을 다루고 있습니다. (‘Linear Algebra’ ; MIT 18.06). 이 포스트는 선형대수의 기초에 대해서 알고자하는 분들을 위해서 작성되었습니다. (해당 강의의 YouTube 영상 링크 : Here ) 포스트의 내용을 작성하기 위해, 마이크로소프트 One-Note 프로그램을 사용하여 수기 필기내용을 옮겼습니다. 따라서 포스트의 내용은 One-Note 에서 저장된 …

Read moreMIT 18.06 선형대수 – 기초 (Lec01~Lec03)

마스터 알고리즘

마스터 알고리즘, 비즈니스북스 페드로 도밍고스 지음 [목차] 제1장 머신러닝의 혁명이 시작됐다 머신러닝은 무엇인가 / 최고의 기업들이 머신러닝을 채택하는 이유 / 머신러닝이 과학을 혁신한다 / 국가의 운명을 바꾼다 / 지상 전쟁에 한 명, 가상 전쟁에 두 명 / 우리는 어디로 향하는가 제2장 마스터 알고리즘은 어떻게 탄생하는가 신경과학에서 / 진화론에서 / 물리학에서 / 통계학에서 / 컴퓨터 과학에서 …

Read more마스터 알고리즘

ISLR chapter 01. Introduction

“An Introduction to Statistical Learning with R” 은 참 잘 쓰여진 책입니다.  통계학 비 전공자가 이해하기 쉽도록 구성되어 있으며, 영어 문장 역시 간결하고 꼭 필요한 내용만으로 이뤄져 문장들의 완결성이 무척 높은 편입니다. 개인적으로는 읽었던 내용을 복기해 보며 내용들을 상기하고, 다른 분들께는 책의 내용을 직접 인용하거나 개인적으로 정리한 내용을 토대로 하여 소개하고자 합니다. 첫 내용은 chapter …

Read moreISLR chapter 01. Introduction

나이브 베이즈 분류기 응용 (Naive Bayes Classifier Application)

이전 포스트 에서 Naive Bayes Classifier 의 알고리즘에 대해서 알아보았다. 여기서는 Spam Mail Filter 와 NewsGroup 분류에 사용된 Naive Bayes 에 대해서 알아보자. 인터넷에도 굉장히 많은 예제들을 쉽게 확인 할 수 있다. 나는 “Python Machine Learning By Example” 이라는 책에서 다룬 스팸(Spam) 메일 필터링 예제를 설명하려고 한다. 2. Naive Bayes Classifier Applications 1) Spam mail filtering Spam 분류해야 …

Read more나이브 베이즈 분류기 응용 (Naive Bayes Classifier Application)

나이브 베이즈 분류기 알고리즘 (Naive Bayes Classifier Algorithm)

이 글에서는 나이브 베이즈 분류기 (Naive Bayes Classifier) 에 대해서 다루고자 한다. 크게 2가지 영역으로 나누어서 얘기해 볼 수 있겠다. 이 포스트에서는 알고리즘을 다루고, 다음번 포스트에서 Spam Mail 및 NewsGroup 을 활용한 응용 부분을 확인해 보자. Naive Bayes Classifier Algorithm Naive Bayes Classifier Applications 1. Naive Bayes Classifier Algorithm 나이브 베이즈 분류기는 머신러닝(Machine Learning) 알고리즘 중에서 …

Read more나이브 베이즈 분류기 알고리즘 (Naive Bayes Classifier Algorithm)