社区开发者专栏 | MariaCarrie撰写的Linkis1.0.2安装及使用指南
原文章发布地址:https://www.jianshu.com/p/d0e8b605c4ce 点击“阅读原文”或访问 https://linkis.apache.org/#/ 了解更多Apache linkis相关内容 社区开发者:MariaCarrie GitHub :mindflow94 本文主要用于指导用户进行 Linkis及 DataSphereStudio 的安装、部署, 以及对 Scriptis 功能中 Hive、Spark、Flink引擎脚本的测试,以便用户可以快速入手 Linkis 和认识其核心功能。对于其数据交换、数据服务、数据质量、任务调度等功能未做测试,可以结合官方文档进行安装、测试。 1. 背景 公司自主研发的大数据中台产品,用以帮助用户快速收集数据、整理数据、构建数仓、数据服务以及数据资产管理。其中涉及很多大数据组件,各个组件都有各自的API,导致开发者学习成本较高,也不易于维护。 故考虑抽离出计算层,负责对接上层应用,连接大数据底层存储、计算引擎的工作也由计算层统一处理,而 Linkis提供了这种能力,打通了多个计算存储引擎(如:Spark、Flink、...