목록전체 글 (1964)

스택큐힙리스트

아파치 스파크는 하둡 없이 실행 가능한가요?

Spark와 Hadoop 사이에는 의존성이 있나요? 아니라면, Hadoop 없이 Spark를 실행할 때 놓치게 되는 기능은 있나요?답변 1스파크는 하둡 없이 실행할 수 있지만, 그 중 일부 기능은 하둡의 코드에 의존합니다 (예: Parquet 파일 처리). 메소스와 S3에서 스파크를 실행하고 있으며, 설정하는 것은 약간 까다로웠지만 한 번 설정하면 정말 잘 작동합니다 (정확한 설정 방법에 대한 요약은 여기에서 확인할 수 있습니다). (편집) 참고: 2.3.0 버전부터 스파크는 쿠버네티스에 대한 기본 지원도 추가되었습니다.답변 2아파치 스파크는 하둡 없이 사용할 수 있나요? 아파치 스파크는 분산 데이터 처리를 위한 인기있는 오픈 소스 프레임워크입니다. 많은 사람들이 스파크를 하둡과 함께 사용하는 것을 보통..
카테고리 없음 2023. 12. 1. 00:02
스파크 + 파이썬 - 자바 게이트웨이 프로세스는 드라이버에게 포트 번호를 전송하기 전에 종료되었나요?

브라우저 화면에서 이 오류가 발생하는 이유는 무엇인가요, : 자바 게이트웨이 프로세스가 드라이버에게 포트 번호를 전송하기 전에 종료되었습니다 args = ('자바 게이트웨이 프로세스가 드라이버에게 포트 번호를 전송하기 전에 종료되었습니다',) 메시지 = '자바 게이트웨이 프로세스가 드라이버에게 포트 번호를 전송하기 전에 종료되었습니다' 이유는, #!/Python27/python print Content-type: text/html; charset=utf-8 print # 디버깅 가능하도록 설정 import cgitb cgitb.enable() import os import sys # Spark 소스 폴더 경로 os.environ['SPARK_HOME'] = C:\Apache\spark-1.4.1 # py..
카테고리 없음 2023. 12. 1. 00:02
Slick Carousel 오류: $(...).slick 함수가 없습니다.

어떻게 해서인지 slick carousel (http://kenwheeler.github.io/slick/)을(를) 제대로 사용할 수 없습니다. 다음과 같은 오류가 발생합니다: Uncaught TypeError: $(...).slick은(는) 함수가 아닙니다 다음과 같은 코드를 자바스크립트 파일에서 실행하고 있습니다: function initSlider(){ $('.references').slick({ dots: false, infinite: true, speed: 300, slidesToShow: 1, autoplay: true, prevArrow: '', nextArrow: '' }); } 제일 최신의 jQuery 버전 (2.1.4)을 bower로 포함시켰습니다. 또한 head 부분에 jQuery C..
카테고리 없음 2023. 12. 1. 00:02
Spark와 MLlib를 사용하여 (원래 라벨, 예측 라벨)의 튜플을 생성하는 방법은 무엇인가요?

저는 MLlib의 Spark에서 받은 모델을 사용하여 예측을 하려고 합니다. 목표는 (원래 데이터의 레이블, 예측된 레이블)의 튜플을 생성하는 것입니다. 그런 다음 이러한 튜플을 모델 평가 목적으로 사용할 수 있습니다. 이를 얻기 위한 가장 좋은 방법은 무엇인가요? 감사합니다. parsedTrainData가 LabeledPoint의 RDD인 것으로 가정합니다. from pyspark.mllib.regression import LabeledPoint from pyspark.mllib.tree import DecisionTree, DecisionTreeModel from pyspark.mllib.util import MLUtils parsedTrainData = sc.parallelize([LabeledPo..
카테고리 없음 2023. 12. 1. 00:02
이전 Prev 1 ··· 221 222 223 224 225 226 227 ··· 491 Next 다음