홈>
나는 불꽃이 처음이다. 스파크 데이터 프레임이 있습니다 :
print(df)
[Row(feature=Row(a=u'enabled', b=None, c=None, d=u'enabled', e=None, f=None)),
Row(feature=Row(a=None, b=None, c=None, d=u'enabled', e=None, f=None))]
모든 기능 이름을 목록으로 가져 오려고합니다
experiments = [a, b, c, d, e]
내가 시도했다 :
a = df.rdd.map(lambda r: r.feature).collect()
이 나에게 모든 키 값 쌍을 제공한다.
즉.
[Row(a=u'enabled', b=None, c=None, d=u'enabled', e=None, f=None), Row(a=None, b=None, c=None, d=u'enabled', e=None, f=None)]
위 단계 이후에 목록으로 고유 한 기능을 얻는 방법 또는 다른 고급 솔루션이 있습니까?
즉
final_list = [a, b, c, d, e, f]
- 답변 # 1
관련 자료
- typescript - 지도 또는 개체에서 키 가져 오기
- python - Pandas 데이터 프레임에서 목록 가져 오기
- php - JSON에서 키를 얻는 방법
- java - arraysaslist에서 get ()을 사용할 때 npe - 명부
- python - URL에서 순수한 JSON을 얻을 수 없습니다
- pandas - python - 열의 고유 한 현재 값으로 dataframe의 열 채우기
- python - id discordpy에서 사용자 객체를 얻는 방법
- Xamarin.Android - xamarinandroid - 웹 사이트에서 json을 얻는 방법
- image - flutter - changenotifier에서 파일을 가져올 수 없습니다
- c# - linq를 사용하여 SQL에서 테이블을 얻는 방법은 무엇입니까?
- Bash를 사용하여 파일에서 특정 텍스트를 가져 오는 방법
- android - 날짜부터 날짜까지 데이터를 가져올 수 없습니다 SQLite
- c# - LINQ를 사용하여 XML에서 ParentNode 및 ChildNodes 가져 오기
- python - 데이터 프레임 헤더와 각 열의 모든 고유 값 가져 오기 i
- javascript - 필터링 된 키 값 가져 오기
- python 3.x - 웹 스크랩을 통해 ajax로 만든 그래프에서 텍스트 가져 오기
- 날짜 SwiftUI에서 하루 가져 오기
- javascript - nodejs에서 promise를 사용하여 URL에서 데이터 가져 오기
- firebase - Firestore에서 문서 ID를 얻고 싶습니다
- import - 가져온 파이썬 파일에서 목록을 가져 오는 방법
관련 질문
- python : 다른 열의 해당 값이 동일한 동일한 열의 값으로 Pyspark Dataframe 열의 null 값을 채우는 방법
- python : pyspark F.create_map 내에서 혼합 데이터 유형 값을 갖는 방법
- python : Pyspark Shell에서 Spark 렌즈를 사용하려고 할 때 java.lang.NoClassDefFoundError: scala/Product$class 오류가 발생합니다.
- python : pyspark 단어 공동 발생, 두 개의 RDD
- python : 특정 파일을 읽고 이러한 스키마 진화 파일을 단일 Spark 데이터 프레임으로 병합/통합
- 데이터브릭의 addSparkListener에 해당
- python : 서로 다른 수준의 두 목록이 있는 중첩 JSON 파일 분해
- python : PySpark를 사용한 뮤추얼 펀드의 YTD 및 MTD
- python : 데이터 흐름을 사용하여 CSV 파일을 읽지만 Google BigQuery에 행을 수집하기 전에 두 개의 열 op_type 및 op_time을 추가합니다.
- python : " 쿼리가 결과를 반환하지 않았습니다 " Gdelt
Rdd_name.keys()
당신은 RDD 작업하는 경우 당신이 필요로하는 것입니다.로는 문서 설명,
df.columns
Spark 데이터 프레임에서 열 목록을 가져 오는 데 필요한 것입니다.다음과 같이 행을 사전으로 변환하여 키에 액세스 할 수도 있습니다.