AI, BigData and Other

apache impala

Impala + kudu 환경 구성

impala를 빌드 한 뒤, 시스템에 적용하기 위해 빈 서버를 준비했다. ( CentOS 7.7 , 최소설치 ) 444-11 먼저 임팔라가 작동하려면 statestored catalogd impalad 이렇게 3가지가 필요하다. 그리고 impala-shell은 기본세팅으로 kudu-master를 보고있으므로 kudu-master와, kudu-tserver가 필요하다. catalogd는 hive 서비스를 필요로 하고, hive는 hadoop에 job을 날리는 구조기 때문에 hadoop

apache kudu

Apache Kudu 1.12 설치

시작전에...... 만약 kudu가 필요하다면 임팔라를 빌드하는것이 더 좋다. kudu가 포함되어있어요! 빌드하고 나니 용량이 62기가! IMPALA에 비하면 빌드가 굉장히 친절하다. https://kudu.apache.org/releases/1.12.0/docs/installation.html 요기서 하라는 데로 하면되고, 예상되는 에러까지 같이 적어주더라. 보통 이 많은 파일중에 필요한건 아래

apache impala

apache impala 3.4 설치 ( Cent 7 )

어느덧 임팔라의 버전이 3.4까지 올라갔다. 그리고 설치방법은 더욱 어려워졌다. 다운로드는 아래 링크에서 받을 수 있다. https://impala.apache.org/downloads.html 함정이 하나 있는데, 설치 스크립트 안의 ant 버전이 9.14로 되어있지만 인터넷으로 다운받아오는 과정에서 해당 링크가 잘려있다. 9.15로 수동으로 변경해주자. 이런것만