问答博客资讯标签用户活动
logo极客观点logo项目管理logoHarmonyOS
开发者社区
javascript
前端
python
node.js
react
vue.js
php
laravel
go
人工智能
mysql
linux
ios
java
android
css
typescript
spring
程序员
logoONES 研发管理logo思否企业问答

Spark RDD中的partition的形成过程

头像
hust_sheng
    1566

    一直搞不清楚spark中的RDD中划分出来的partition是在哪一步进行的，是HadoopRDD里面的
    val inputSplits = inputFormat.getSplits(jobConf, minPartitions)过程形成了RDD里面的partition吗？

    apache-spark
    阅读 6k
    撰写回答
    你尚未登录，登录后可以
    • 和开发者交流问题的细节
    • 关注并接收问题和回答的更新提醒
    • 参与内容的编辑和改进，让解决方法与时俱进
    推荐问题