반응형
Notice
Link
일 | 월 | 화 | 수 | 목 | 금 | 토 |
---|---|---|---|---|---|---|
1 | 2 | 3 | 4 | |||
5 | 6 | 7 | 8 | 9 | 10 | 11 |
12 | 13 | 14 | 15 | 16 | 17 | 18 |
19 | 20 | 21 | 22 | 23 | 24 | 25 |
26 | 27 | 28 | 29 | 30 | 31 |
Tags
- 데이터구조
- 데이터과학
- 소프트웨어공학
- 2
- 데이터분석
- 빅데이터
- 보안
- 인공지능
- 소프트웨어
- Yes
- 컴퓨터공학
- 알고리즘
- 네트워크보안
- 자료구조
- 웹개발
- 프로그래밍언어
- 코딩
- 사이버보안
- 컴퓨터과학
- 파이썬
- 데이터베이스
- 프로그래밍
- I'm Sorry
- 클라우드컴퓨팅
- 자바스크립트
- 버전관리
- 네트워크
- 머신러닝
- 딥러닝
- 컴퓨터비전
Archives
- Today
- Total
목록In Spark (1)
스택큐힙리스트
Spark에서 작업이란 무엇인가요? Spark 워커는 jar 파일을 어떻게 실행하나요?
JavaSparkContext spark = new JavaSparkContext( new SparkConf().setJars(...).setSparkHome....); JavaRDD file = spark.textFile(hdfs://...); // 단계1 JavaRDD words = file.flatMap(new FlatMapFunction() { public Iterable call(String s) { return Arrays.asList(s.split( )); } }); // 단계2 JavaPairRDD pairs = words.map(new PairFunction() { public Tuple2 call(String s) { return new Tuple2(s, 1); } }); // 단계3 ..
카테고리 없음
2023. 11. 29. 00:02