看過來,需要大量數據集的人兒們~Spark基準測試平臺BigDataBench

做實驗在收集大量數據集的時候發現了這個——BigDataBench

如果需要大量數據集and性能測試的人兒們,可以看過來,並且支持hadoop等其他框架

教程主要來自這位大神~https://blog.csdn.net/qq_25745863/article/details/88743750

記錄一哈,除了上文提到的出現的問題,還報過這幾個問題

1、文件夾權限問題

sudo chmod -R 777 /usr/local/你的bigdatabench文件夾

2、還有文件找不到

把genData_xx_sh裏面的第6行改成完全路徑就ok了

測試了一哈。生成了1G的wordcount

 

 

發表評論
所有評論
還沒有人評論,想成為第一個評論的人麼? 請在上方評論欄輸入並且點擊發布.
相關文章