본문 바로가기

분류 전체보기279

ML 뉴스 모음 - 201704 1. 2017년초 스탠포드 강의 : cs224n [동영상 링크] 소쳐님의 NLP 훌륭한 강의가 통합되어 새롭게 버젼업이 되었습니다.다행히 이번에도 공개를 해주어서 메이져 강의를 유지할 수 있을 듯합니다^^ 2. 최신 논문들 보기 : Arixv Sanity [페북 페이지 링크] 이제 페북에서도 편히 즐감? 할 수 있게 되었습니다.그 덕분에 상대적인 압박은 더해지게 되었죠^^ 3. 새로운 플레폼 : pyTorch [사이트 링크] 대략적으로 살펴본 결과 훨씬 좋아보이고 평도 아직까지는 좋은것 같습니다텐서플로우를 대체할 수 있을까요?^^리쿤 교수님의 페북에서 활약이 대단하십니다하지만, 아직 베타라서 Linux와 Mac cpu만 지원합니다 4. 머신러닝 이미지처리의 주요변화 [사이트 링크] 컴퓨터 비젼의 영역에서.. 2017. 4. 12.
Extensions of RNN LM (Recurrent Neural Network) EXTENSIONS OF RECURRENT NEURAL NETWORK LANGUAGE MODEL,2011 http://www.fit.vutbr.cz/research/groups/speech/publi/2011/mikolov_icassp2011_5528.pdf Abstract 오리지널 RNN에서 몇가지 수정을 해서 더 좋은 성능을 냈다 이러한 개선으로 15배의 학습 속도 증가를 보였고, BPTT의 중요성을 보여줄것이다, 마지막에 파라미터의 양을 줄이는 가능성을 논의한다 이로인해 강력한 RNN 모델이 되었다 Introduction 기존의 언어학적인 통계학적인 모델이 주축을 이루고 있었는데 NN이 나오면서 이러한 모델들의 성과를 초과했다 NN 모델은 언어만이 아니라 다른 정보들도 학습을 한기에 저차원에서 단어.. 2017. 3. 24.
RNN LM (Recurrent neural network based language model) 언어모델에 사용된 RNN 관련 논문을 읽고 발로 요약정리한 내용입니다.흠. 좀 심하게 막장 요약이라서 올리기가 좀 그랬지만, 시간이 되면 정리해서 다시 올리겠습니다.^^혹시라도 관련해서 궁금하신 내용이 있으시면 댓글에 남겨주시면 겸사겸사 수정/정리하는 것으로 일단 하려고 합니다 Recurrent neural network based language model, 2010http://www.fit.vutbr.cz/research/groups/speech/publi/2010/mikolov_interspeech2010_IS100722.pdf AbstractLanguage model 기반의 RNN이 음성인식에서 perplexity가 50% 감소하는 결과를 보였다. 여러개의 RNN LMs를 사용했다. 1.Intro.. 2017. 3. 21.
ML 뉴스 모음 - 201703 1. 바이두에서 공개한 음성인식 원리 링크 핵심은 Combine the phonemes, the durations, and the frequencies 이라고 합니다^^ 2. Keras 2.0 릴리즈 링크 Keras의 약진이 눈에 띄네요~ 3. 초간단 선형대수 정리 링크 선형대수의 기본을 쉽고 비쥬얼하게 설명하는 블로그입니다 2017. 3. 21.
ML 뉴스 모음 - 201702 1. NIPS 2016 VIDEOS 링크 엄청난 양의 비디오들과 문서들...근데 언제 볼런지^^ 2. Tensorflow v1.0 출시 링크 텐서플로우 정식버전이 출시되었습니다.하위버전에서 정식버전으로 마이그하는 방법도 제공해주고 있습니다. 3. Tensorflow 를 위한 ODBC reader 링크 이젠 직접 DB 접속까지 가능하겠네요.오픈 소스라고 합니다. 4. 2016년 TOP10 Articles 링크 작년 한해동안의 핫했던 TOP 10들입니다.좋은 강좌와 소스들 뿐만 아니라 무료 데이터도 많습니다.그리고 딥마인드가 참 많은것을 했네요~ 대단합니다. 5. Tensorflow Dev Summit 링크 텐서플로 1.0 정식버젼 출시와 함께 개발자서밋을 진행하였습니다.텐서플로에 대한 다양한 내용을 다루고.. 2017. 2. 18.
Tensorflow version 확인 설치되어 있는 텐서플로우 버전을 확인하는 방법입니다. $ python> import tensorflow as tf> tf.__version__'0.12.1' 정식버젼 업그레이드 했더니 안되는 것이 많아서 당분간은 두가지 버전 다 사용해야 할 것 같습니다. 2017. 1. 30.
ML 뉴스 모음 - 201701 1. Deep Learning News http://news.startup.ml/ 업계의 다양한 뉴스 정보들이 올라옵니다. 2. NIPS 2016 Tutorial: Generative Adversarial Networks https://arxiv.org/pdf/1701.00160v1.pdf 무조건 한번은 봐야하는 GAN 3. BigDL: Distributed Deep learning on Apache Spark https://github.com/intel-analytics/BigDL 아니 벌써 이런걸...참 빠르다^^ 4. AI 100, stanford report https://ai100.stanford.edu/2016-report 스탠포드 대학에서 진행하고 있는 AI 100년 프로젝트에서 발행한 20.. 2017. 1. 28.
21. Mac(맥북)에 Tensorflow(텐서플로) GPU 설치하기 맥북에서 Tensorflow GPU를 설치해보겠습니다. 최근에 출시되는 맥북에는 그래픽 카드가 Nvidia 제품이 아니므로 2015년 이전의 맥북에서만 가능한 방법이니 참고해주세요. 자신의 맥북에 그래픽 카드를 확인하시려면, 왼쪽 상단에 애플 로고를 클릭하시고 - 이 Mac에 관하여 - 시스템 리포트 - 그래픽/디스플레이로 이동하시면 사양을 확인할 수 있습니다. 설치 준비 1. CUDA 다운로드 https://developer.nvidia.com/cuda-toolkit 사용하고 있는 Mac OS 버전에 맞는 CUDA 8.0 설치 파일을 다운로드합니다.다운로드 하실때 로컬 설치 파일의 dmg(local)로 다운로드 하는 것이 좋습니다. 파일용량이 커서 원격으로 설치하는 것보다 빠르게 설치할 수 있습니다. .. 2017. 1. 27.
Docker for Mac (맥북에 도커 설치, 빌드, 생성등) 최근 엄청난 인기를 누리고 있는 가상화 머신을 아주 쉽게 제공해주는 도커(Docker)를 맥북에 설치하고 생성해보면서 정리한 내용입니다. 아주 쉽게 가상화 머신을 생성하고 제거하고 관리를 할 수 있어 다양한 OS를 마음것 사용할 수도 있지만, 자신의 원본 PC를 아주 깨끗하게 유지 하면서도 다양한 시도와 테스트를 해볼 수 있는 장점이 있습니다.더욱이 다른 사람과 공유도 단순히 파일(Dockerfile) 하나만 공유하면 상대방이 바로 같은 셋팅의 머신을 생성할 수 있어 아주 좋습니다. 설치와 셋팅도 정말 간단합니다.Mac 뿐만 아니라 윈도우, 우분투등에서 사용이 가능하여 호환성도 좋습니다. 도커 사이트https://docs.docker.com/docker-for-mac/ 공식 사이트에서 아주 쉽게 설치부터.. 2017. 1. 21.
Hadoop & Spark Resources spark summit 2016https://spark-summit.org/2016/schedule/ Apache Spark로 시작하는 머신러닝 입문https://www.youtube.com/watch?v=PRLz11vv7VA Hadoophttp://hadoop.apache.org/ Spark guide & bookhttp://spark.apache.org/docs/latest/programming-guide.htmlhttps://jaceklaskowski.gitbooks.io/mastering-apache-spark/content/https://www.pdf-archive.com/2016/04/21/learning-spark-o-reilly-2015/learning-spark-o-reilly-2015... 2017. 1. 16.