Vertica-pyspark 연동1 vertica-spark 연동 Vertica와 pyspark 연동 (특히, spark -> Vertica로 데이터 적재)을 위해 버티카쪽에서 필요한 설정 ( load() 의 경우 필요한 .jar 파일만 있으면 가능) 1. VERIFY_HADOOP_CONF_DIR 연동하고자 하는 hadoop의 core-site.xml, hdfs-site.xml 파일을 버티카 전체 노드마다 /etc/hadoop/conf 에 위치시킴. 아래 쿼리를 수행하여 각 노드별로 정상 적용 여부 체크 가능 SELECT VERIFY_HADOOP_CONF_DIR(); #참고 https://www.vertica.com/docs/8.1.x/HTML/index.htm#Authoring/SQLReferenceManual/Functions/VerticaFunctions/VERI.. 2021. 4. 5. 이전 1 다음 728x90