程序師世界是廣大編程愛好者互助、分享、學習的平台,程序師世界有你更精彩!
首頁
編程語言
C語言|JAVA編程
Python編程
網頁編程
ASP編程|PHP編程
JSP編程
數據庫知識
MYSQL數據庫|SqlServer數據庫
Oracle數據庫|DB2數據庫
 程式師世界 >> 編程語言 >> 更多編程語言 >> 編程綜合問答 >> spark求平均-關於spark RDD求平均的問題

spark求平均-關於spark RDD求平均的問題

編輯:編程綜合問答
關於spark RDD求平均的問題

hi,
假設我有一個spark RDD裡面記錄的是(時段,分數,次數)
我現在想求:每個時段的平均分數,即:同一個時段下,總分數 / 總次數
不知有什麼好方法沒有,因為我發現無論是action操作也好,轉換成其他Rdd也好,
總沒有滿意方法,只能分成兩個rdd然後關聯處理

求大俠幫忙,謝謝

最佳回答:


先轉化為pairrdd,以時段為鍵,分數次數為值,然後以鍵aggregate聚合,統計每個鍵下的值就行了

  1. 上一頁:
  2. 下一頁:
Copyright © 程式師世界 All Rights Reserved