首页  软件  游戏  图书  电影  电视剧

请输入您要查询的软件:

 

软件 Linkis 分布式服务框架 v1.3.2 
内容

 Linkis是一个打通了多个计算存储引擎如:Spark、TiSpark、Hive、Python和HBase等,对外提供统一REST/WebSocket/JDBC接口,提交执行SQL、Pyspark、HiveQL、Scala等脚本的计算中间件。

Linkis基于微服务架构,提供了金融级多租户隔离、资源管控、权限隔离等企业级特性,支持统一变量、UDF、函数、用户资源文件管理,具备高并发、高性能、高可用的大数据作业/请求全生命周期管理能力。

核心特点:

1、统一作业执行服务:一个分布式的REST/WebSocket服务,用于接收用户提交的各种脚本请求。

目前支持的计算引擎有:Spark、Python、TiSpark、Hive和Shell等。

支持的脚本语言有:SparkSQL、Spark Scala、Pyspark、R、Python、HQL和Shell等;

2、资源管理服务: 支持实时管控每个系统和用户的资源使用情况,限制系统和用户的资源使用量和并发数,并提供实时的资源动态图表,方便查看和管理系统和用户的资源;

目前已支持的资源类型:Yarn队列资源、服务器(CPU和内存)、用户并发个数等。

3、应用管理服务:管理所有系统的所有用户应用,包括离线批量应用、交互式查询应用和实时流式应用,为离线和交互式应用提供强大的复用能力,并提供应用全生命周期管理,自动释放用户多余的空闲应用;

4、统一存储服务:通用的IO架构,能快速对接各种存储系统,提供统一调用入口,支持所有常用格式数据,集成度高,简单易用;

5、统一上下文服务:统一用户和系统资源文件(JAR、ZIP、Properties等),用户、系统、计算引擎的参数和变量统一管理,一处设置,处处自动引用;

6、物料库:系统和用户级物料管理,可分享和流转,支持全生命周期自动管理;

7、元数据服务:实时的库表结构和分区情况展示。

RoadMap

1. Linkis管理台

用户可以查看和管理自己的Job

用户可以查看和管理自己的引擎

用户可以查看Yarn的资源使用情况和用户资源使用排名

用户可以配置引擎的启动参数

用户可以设置变量

2. 支持标签功能

支持给EngineManager打标签

启动引擎时,支持为引擎打标签

支持通过标签访问目标引擎

3. AppGovernance应用治理实现

系统级、用户级应用全生命周期管理,包括离线批量、交互式查询和实时流式应用

为离线和交互式应用提供复用能力和智能切换能力

智能限流、应用智能保护

4. 支持Flink和Spark Structured Streaming

标签 Linkis,分布式,服务,框架
缩略图
软件名称 Linkis 分布式服务框架 v1.3.2
软件图标
软件大小 9.5MB
发布时间
软件平台
软件语言 简体中文
软件授权 开源软件
操作系统 Scala
系统类型
用户评分 3
软件版本
官方网站
官方网址
软件截图
软件总类 源码系统
软件大类 源码下载-其它源码-分布式服务框架
软件小类 其它源码
开发者
主办单位名称
ICP备案名
备案号
使用年龄
下载链接
攻略教程
详细介绍
操控设备
隐私政策
查看权限
敏感权限获取说明
软件类型 国产软件
安全警示 适度休息有益身心健康,请勿长期沉迷于使用电脑或刷手机。
随便看

 

传承兰台文化,共同保存历史记忆!兰台网收藏软件、游戏、图片、图书、电影、电视剧等互联网档案,是免费和可借阅文本、电影、音乐等档案的数字图书馆。

 

Copyright © 2004-2025 xlantai.com All Rights Reserved
更新时间:2025/5/11 20:06:06