放开源代码版本上的数据机制改良
假设您正在寻觅关于Kubernetes上的Spark的初级引见,请签出在Kubernetes上运转Spark的优缺陷,假设您正在寻觅更深的技术潜水,那么浏览咱们的指南设置,治理和监控Spark在kubernetes上。
Data Mechanics是一个托管的Spark平台,部署在客户的云帐户内的Kubernetes集群上,可在AWS,GCP和Azure上经常使用。因此,咱们整个公司都建设在Kubernetes上的Spark之上,并且经常被问到与便捷地在Kubernetes开源上运转Spark有何不同。
冗长的答案是,咱们的平台成功了许多性能,这些性能使Kubernetes上的Spark愈加易于经常使用且更具老本效益。经过关照设置和保养,咱们的目的是让您专一于并减速其驳回,并节俭少量保养上班。咱们的目的是经过使Spark变得应有的便捷,灵敏和高性能来减速您的数据工程名目。
让咱们来谈谈基于Spark-on-Kubernetes的关键改良。
直观的用户界面
Data Mechanics用户将取得一个仪表板,他们可以在其中检查其每个Spark运行程序的日志和目的。他们还可以访问Spark UI,该UI很快将被咱们自己开发的监督工具Data>
© 版权声明