星环大数据平台-平台的使用

内容纲要


星环大数据平台-平台的使用
TDH(Transwarp Data Hub )

源起

在2018,19年就听说过星环的平台,很多公司都会使用华为或者星环的平台来进行大数据平台的建设。
但是我一直没有接触过,直到20年底加入了一个以星环平台为开发基础的项目。
这个项目花费了我们大量的精力,让我们在年底疯狂加班,给我留下了不可磨灭的印象。
21年之后,我们开始使用网易的猛犸平台,但是没想到,又有项目要用到星环了。所以我准备好好整理一下,为以后的开发打好基础,希望可以顺利一些。

版本

第一个星环项目用的5.0-6.0的版本,有很多组件没能用上。
现在星环已经升级到8.0了。使用手册页更新到7.0了。希望可以有更好的体验。

星环TDH

全名Transwarp Data Hub。
包含了很多组件

  • Inceptor 其实就是hive
  • Slipstream 我觉得就是对sparkstream的二开。
  • Hyperbase 其实就是hbase,不过星环对它进行了比较好的开发,原生支持二次索引。用起来还是比较方便。
  • Search 就是ES

最常用的就是这几个组件了。

默认图片
大鹏
一个爱读书,不求甚解的码农。
文章: 11

留下评论