HW 엔지니어를 위한 Deep Learning

레이블이 hadoop인 게시물을 표시합니다. 모든 게시물 표시
레이블이 hadoop인 게시물을 표시합니다. 모든 게시물 표시
2019년 1월 9일 수요일

ppc64le Redhat 서버에서 x86 hadoop cluster에 대해 PyHive로 query 수행하기

›
지난 포스팅 에 이어 이번에는  x86 hadoop cluster에 대해 ppc64le Redhat 서버에서 PyHive를 이용하여 query를 수행하는 방법을 정리했습니다.  이 방법의 장점은 ppc64le 서버에 hadoop이나 hive 등을 ...

ppc64le Redhat 서버에서 x86 hadoop cluster에 대해 hive로 query 수행하기

›
POWER9 CPU와 V100 GPU를 장착한 AC922 서버를 deep learning 용도로 사용하는 환경에서, training에 필요한 dataset은 x86 Cloudera hadoop cluster로부터 가져와야 할 필요가 있을 수 있습니다....

Redhat ppc64le 상에서의 hadoop 및 hive 설치

›
HortonWorks (HDP)를 사용하는 것이 정식이겠습니다만, 여기서는 source로부터 build하는 방법을 다루겠습니다. 먼저 다음과 같이 maven 등 필요 OS package들을 yum으로 설치합니다. [bsyu@centos0...
2018년 11월 22일 목요일

x86 hadoop cluster의 HDFS를 IBM POWER linux (ppc64le) 서버에 mount하기

›
x86 서버로 구성된 hadoop cluster의 HDFS에 AC922과 같은 IBM POWER linux (ppc64le) 서버가 access해야 할 경우가 있습니다.  이럴 때 가장 편리한 방법은 HortonWorks나 Cloudera 등에 포함된...
›
홈
웹 버전 보기
Powered by Blogger.