Linkis 0.9.4 版本发布

栏目: 软件资讯 · 发布时间: 6年前

内容简介:什么是计算中间件Linkis Linkis是微众银行自研的一个打通了多个计算存储引擎如:Spark、TiSpark、Hive、Python和HBase等,对外提供统一REST/WebSocket/JDBC接口,提交执行SQL、Pyspark、HiveQL、Scala等脚本的计算...

什么是计算中间件Linkis

Linkis是微众银行自研的一个打通了多个计算存储引擎如:Spark、TiSpark、Hive、 Python 和HBase等,对外提供统一REST/WebSocket/JDBC接口,提交执行 SQL 、Pyspark、HiveQL、Scala等脚本的计算中间件。

Linkis 0.9.4发布,新增统一上下文服务模块以及基于统一上下文服务模块对其他Linkis模块如执行服务、gateway、存储服务等进行改造;新增统一数据源服务模块,为上层接入Linkis的应用提供统一的数据源服务,现在已经有社区伙伴开始基于Linkis统一数据源进行服务开发;对Linkis公共包的依赖以及启动脚本进行了优化,同时修复了若干社区用户提出的bug。

特性增强

  • [Linkis-371] 添加上下文服务的客户端模块。

  • [Linkis-372] 支持上下文服务的搜索功能。

  • [Linkis-376] 添加上下文的服务端模块。

  • [Linkis-375] 支持上下文服务的持久化。

  • [Linkis-368] 添加上下文服务的缓存机制和数据结构模块。

  • [Linkis-428] Linkis执行模块基于上下文服务进行改造。

  • [Linkis-432] 添加上下文服务公共模块。

  • [Linkis-434] Linkis-gateway模块基于上下文服务进行改造,支持上下文服务器的HA。

  • [Linkis-388] http依赖模块的优化,去除dispatch依赖,并优化Linkis底层包的依赖。

  • [Linkis-395] 将ListenerBus的queue默认改为ArrayBlockingQueue的实现。

  • [Linkis-297] 添加数据源管理的公共模块。

  • [Linkis-298] 添加 mysql 数据库数据源管理模块。

  • [Linkis-299] 添加数据源管理服务端模块。

  • [Linkis-300] 添加Hive数据源服务模块。

  • [Linkis-301] 添加ElasticSearch数据源服务模块。

  • [Linkis-302] 添加数据源管理公共模块。

  • [Linkis-303] 添加数据源管理服务端模块。

Bug修复

  • [Linkis-406] 修改数据源模块的目录结构,优化编译。

  • [Linkis-407] 修复向导性建表中ds字段重复的bug。

  • [Linkis-383] 修改Linkis ujes client的测试类适配Linkis的更新。

  • [Linkis-438] Linkis0.9.4编译问题修复。

· 新贡献者

· Linkis0.9.4的发布,离不开WeDataSphere社区的贡献者,他们无私地贡献自己的代码,积极地与社区伙伴进行技术交流,有了他们的助力,Linkis0.9.4才能顺利地发布,在此感谢各位社区的贡献者! 排名不分先后:

liangqilang:贡献了httpclient替换dispatch的代码

Davidhua1996: 贡献了数据源管理的基础模块和功能实现.

zhengfan199525:添加了hive的数据源管理模块.

alexzyWu: 贡献了数据源管理的服务端模块.

jaminlu:优化了数据源管理的目录结构和编译.

bleachzk: 贡献了数据源管理的公共模块.

liaoyt:添加数据源管理的rest接口.

SelfImpr001: 贡献了数据源管理的部分内容.

Linkis开源项目地址如下,欢迎大家提交issue及star:

gitee地址:https://gitee.com/WeBank/Linkis

Github地址:https://github.com/WeBankFinTech/Linkis


以上就是本文的全部内容,希望对大家的学习有所帮助,也希望大家多多支持 码农网

查看所有标签

本站部分资源来源于网络,本站转载出于传递更多信息之目的,版权归原作者或者来源机构所有,如转载稿涉及版权问题,请联系我们。

智能

智能

[法]弗雷德里克·马特尔 / 君瑞图、左玉冰 / 商务印书馆 / 2015-8 / 59.90

揭示数字化主流大趋势的最新权威论著 《主流》作者的最新力作!与法国秋季新版同步上市! 面对数字化时代的到来,美国、欧盟、中国、俄罗斯、印度、巴西、古巴、伊朗、南非、韩国、新加坡、肯尼亚、墨西哥、日本等世界各国各地区正在如何应对? 在国际地缘政治格局下如何把握数字化主流的大趋势? 谷歌、苹果、脸书、亚马逊、阿里巴巴、腾讯、中兴、华为等大家熟知的网络巨头接受了作者的采访。作者的......一起来看看 《智能》 这本书的介绍吧!

JSON 在线解析
JSON 在线解析

在线 JSON 格式化工具

Base64 编码/解码
Base64 编码/解码

Base64 编码/解码

URL 编码/解码
URL 编码/解码

URL 编码/解码