Shark (Hive on Spark)

Shark(Hive on Spark)。Shark的开发已经结束。【Shark (Hive on Spark)。Development in Shark has been ended.】

  • 所有者: amplab/shark
  • 平台: BSD, Cross-platform, Linux, Mac, Solaris, Unix-like, Windows
  • 许可证: Apache License 2.0
  • 分类:
  • 主题:
  • 喜欢:
    0
      比较:

Github星跟踪图

Shark (Hive on Spark)

Shark的开发已经结束, 并被 Spark SQL 纳入其中。有关详细信息, 请参阅此博客文章

Shark构建在Hive代码库上,通过交换Hive的物理执行引擎部分来实现性能改进。虽然这种方法使Shark用户能够加速他们的Hive查询,但是Shark从Hive继承了一个庞大而复杂的代码库,这使得很难进行优化和维护。当我们开始推动性能优化的边界并将复杂的分析与SQL集成时,我们受到为MapReduce设计的遗留问题的限制。

正是出于这个原因,我们将Shark中的开发作为一个单独的项目结束,并将所有开发资源转移到Spark SQL,这是Spark中的一个新组件。我们正在将我们在Shark中学到的知识应用到Spark SQL中,它是从头开始设计的,以充分利用Spark的强大功能。这种新方法使我们能够更快地进行创新,并最终为用户提供更好的体验和能力。


主要指标

概览
名称与所有者amplab/shark
主编程语言Scala
编程语言Shell (语言数: 5)
平台BSD, Cross-platform, Linux, Mac, Solaris, Unix-like, Windows
许可证Apache License 2.0
所有者活动
创建于2012-04-14 09:39:53
推送于2015-08-11 10:52:52
最后一次提交2014-10-01 21:35:31
发布数10
最新版本名称v0.9.3 (发布于 )
第一版名称v0.2.0 (发布于 2012-10-15 15:28:12)
用户参与
星数1k
关注者数199
派生数327
提交数1.3k
已启用问题?
问题数0
打开的问题数0
拉请求数230
打开的拉请求数12
关闭的拉请求数59
项目设置
已启用Wiki?
已存档?
是复刻?
已锁定?
是镜像?
是私有?

Shark (Hive on Spark)

Development in Shark has been ended and subsumed by Spark SQL. Please see this blog post for more information.