如果使用Spring Boot,你不应该使用spark-submit。
Spring Boot是一个用于快速构建独立的、生产级别的Spring应用程序的框架。它提供了自动配置和约定优于配置的原则,使得开发者可以更加专注于业务逻辑的实现而不必过多关注底层的配置细节。
而spark-submit是Apache Spark提供的一个命令行工具,用于提交Spark应用程序到集群中执行。Spark是一个用于大规模数据处理的开源分布式计算框架,它提供了丰富的API和工具,支持在分布式环境中进行数据处理、机器学习、图计算等任务。
由于Spring Boot和Spark是两个不同的框架,它们的设计目标和应用场景也不同。Spring Boot主要用于构建Web应用程序和微服务,而Spark主要用于大数据处理和分析。因此,在使用Spring Boot时,通常不需要使用spark-submit来提交Spark应用程序。
相反,如果你需要在Spring Boot应用程序中进行大数据处理,你可以考虑使用Spring提供的其他相关模块,如Spring Batch或Spring Data等。这些模块可以与Spring Boot无缝集成,帮助你更好地处理和管理大数据任务。
总结起来,如果你使用Spring Boot,不需要使用spark-submit。相反,你可以考虑使用Spring提供的其他相关模块来处理大数据任务。
领取专属 10元无门槛券
手把手带您无忧上云