2017년 11월 9일 목요일

R 3.4.1의 설치 및 기존 rstudio와의 연동

›
예전에 쓰던 버전의 R (가령 3.3.2)를 그대로 놔둔 상태에서, 새로운 버전의 R 3.4.1을 써야 할 경우가 있습니다.  이때는 아래 절차에 따라 설치하시면 됩니다. 먼저, 아래 link에서 제가 ppc64le(POWER8) 상에서 빌드한 R...
2017년 11월 6일 월요일

IBM POK Benchmark Center에서 LSF 이용하여 ResNet cifar10 training 수행하기

›
먼저 우리가 수행할 queue 확인하시고 (여기서는 s822lc_p100nvme 입니다) b7p286za@p10login1:/gpfs/gpfs_gl4_16mb/b7p286za/models/official/resnet$ bqueues QUEUE_N...
2017년 11월 1일 수요일

caffe2, tensorflow 1.3, pytorch가 설치된 docker image 만들기

›
docker hub에서 제공되는 nvidia/cuda-ppc64le 이미지를 이용하여, 거기에 이것저것 원하는 package를 설치하고 docker commit 명령을 통해 새로운 이미지를 만드는 방법을 보시겠습니다. 먼저 parent ubuntu...
2017년 10월 30일 월요일

ppc64le에서의 nvidia-docker의 설치 (2017.10)

›
전에 nvidia-docker를 ppc64le에서 build하는 방법을 올린 적( http://hwengineer.blogspot.kr/2017/02/minsky-ubuntu-1604-xenial-ppc64le.html )이 있습니다.   그 사이에 ...
2017년 10월 27일 금요일

caffe-ibm의 LMS 기능에 대한 설명

›
전에 올린 DDL 관련 포스팅( https://hwengineer.blogspot.kr/2017/10/caffe-ddl-alexnet-training.html )에서, LMS(large model support) 기능을 믿고 batch_size를 화끈...

caffe DDL을 이용한 Alexnet training

›
지난 9월 포스팅( http://hwengineer.blogspot.kr/2017/09/ibm-powerai-40-caffe-distributed-deep.html )에서 PowerAI에 포함된 DDL(Distributed Deep Learning),...