下載地址:

鏈接: https://pan.baidu.com/s/1MwVQY_T0vehm0pUUsuqstQ 提取碼: vsgu

步驟如下:

cd dbgen

cp makefile.suite makefile

subl?makefile

make

./dbgen -s 5?([1]表示想要生成5G大小的數據集，但是實際生成似乎不是那么大，一般都會偏小)

然后會生成數據集lineitem.tbl

丟給給Spark使用參考[2]

?

Reference:

[1]TPC-H生成測試數據集-Ubuntu

[2]Spark如何處理數據傾斜

總結

以上是生活随笔為你收集整理的TPC-H生成Spark测试用的伪数据集(转载)的全部內容，希望文章能夠幫你解決所遇到的問題。

如果覺得生活随笔網站內容還不錯，歡迎將生活随笔推薦給好友。