Shell将文件平均切分为n份原创
- 计算文件行数
- 计算平均行数+1
- 按照平均行数+1 进行文件切分
row_num=`less test.csv | wc -l`
average_num=`expr ${row_num} / 10 + 1`
split -l ${average_num} test.csv -d -a 3 test_shard_
1
2
3
2
3
- 01
- Dolphin+XXL-JOB监控Hadoop任务执行结果量级 原创01-04
- 02
- 调度Hive定时删除30天之前的分区 原创01-04
- 03
- Java第三方SDK的使用方法 原创12-16