2017년 11월 6일 월요일

IBM POK Benchmark Center에서 LSF 이용하여 ResNet cifar10 training 수행하기

›
먼저 우리가 수행할 queue 확인하시고 (여기서는 s822lc_p100nvme 입니다) b7p286za@p10login1:/gpfs/gpfs_gl4_16mb/b7p286za/models/official/resnet$ bqueues QUEUE_N...
2017년 11월 1일 수요일

caffe2, tensorflow 1.3, pytorch가 설치된 docker image 만들기

›
docker hub에서 제공되는 nvidia/cuda-ppc64le 이미지를 이용하여, 거기에 이것저것 원하는 package를 설치하고 docker commit 명령을 통해 새로운 이미지를 만드는 방법을 보시겠습니다. 먼저 parent ubuntu...
2017년 10월 30일 월요일

ppc64le에서의 nvidia-docker의 설치 (2017.10)

›
전에 nvidia-docker를 ppc64le에서 build하는 방법을 올린 적( http://hwengineer.blogspot.kr/2017/02/minsky-ubuntu-1604-xenial-ppc64le.html )이 있습니다.   그 사이에 ...
2017년 10월 27일 금요일

caffe-ibm의 LMS 기능에 대한 설명

›
전에 올린 DDL 관련 포스팅( https://hwengineer.blogspot.kr/2017/10/caffe-ddl-alexnet-training.html )에서, LMS(large model support) 기능을 믿고 batch_size를 화끈...

caffe DDL을 이용한 Alexnet training

›
지난 9월 포스팅( http://hwengineer.blogspot.kr/2017/09/ibm-powerai-40-caffe-distributed-deep.html )에서 PowerAI에 포함된 DDL(Distributed Deep Learning),...
2017년 10월 25일 수요일

Minsky에서의 Caffe2 설치 및 jupyter notebook에서 MNIST 돌려보기

›
PyTorch와 함께 Caffe2를 찾으시는 고객분들도 점점 늘고 계십니다.  PyTorch처럼 Caffe2도 아직 PowerAI 속에 포함되어 있지는 않지만, 그래도 ppc64le 아키텍처에서도 소스에서 빌드하면 잘 됩니다.  현재의 최신 Caff...
2017년 10월 16일 월요일

Minsky 서버에서 Tensorflow r1.3을 source로부터 build하기

›
2017년 10월 현재 최신 PowerAI 버전은 4.0으로서, 이 속에 포함된 tensorflow는 버전 r1.1입니다. root@ubuntu:/tmp/kkk# dpkg -l | grep mldl ii  mldl-repo-local      ...
댓글 1개: