스택큐힙리스트

나는 판다 스의 배경에서 왔으며 CSV 파일에서 데이터를 데이터프레임으로 읽어서 간단한 명령인 다음과 같이 열 이름을 유용한 이름으로 변경하는 것에 익숙합니다: df.columns = new_column_name_list 그러나 sqlContext를 사용하여 생성된 PySpark 데이터프레임에서는 동일한 방법이 작동하지 않습니다. 이를 쉽게 수행하기 위한 유일한 해결책은 다음과 같습니다: df = sqlContext.read.format(com.databricks.spark.csv).options(header='false', inferschema='true', delimiter='\t').load(data.txt) oldSchema = df.schema for i,k in enumerate(oldSche..

두 개의 id: bigint가 있고, 하나를 삭제하고 싶습니다. 어떻게 할 수 있을까요?답변 1Spark 문서를 읽다 보니 더 간단한 해결책을 찾았습니다. Spark의 1.4 버전부터는 데이터프레임에서 사용할 수 있는 drop(col) 함수가 있습니다. 두 가지 방법으로 사용할 수 있습니다 df.drop('age') df.drop(df.age) Pyspark 문서 - Drop답변 2어떻게 PySpark 데이터프레임에서 열을 삭제할까요? 이 주제에 관한 SEO 친화적인 한국어 에세이를 작성해 드리겠습니다. PySpark은 Apache Spark를 사용하는 Python 라이브러리로, 대규모 데이터 처리를 위해 설계되었습니다. 데이터프레임은 PySpark에서 가장 주요한 데이터 구조 중 하나로, 열과 행으로 ..