运维开发网

HBase

0
  • 基于Phoenix对HBase建索引

    参考: Phoenix与HBase集成进行数据分析 HBase查询速度慢原因排查   在DBeaver中执行下列语句: select * from ASSET_NORMAL WHERE ASSET_ID=‘19-1151444153020846080‘; 返回信息: 3d8f2cf978094a47b2f24dea58fa697c 19-115144415...[详细]

    2020-05-16 18:33 分类:大数据
  • HBase的rowkey设计(含实例)

    转自:http://www.aboutyun.com/thread-7119-1-1.html 对于任何系统的数据设计,我们都想提高性能,达到资源最大化利用,那么对于hbase我们产生如下问题: 1.hbase rowkey设计如何才能提高性能? 2.hbase rowkey如何设计才能散列到不同的...[详细]

    2020-05-16 17:40 分类:大数据
  • HBase Scan – RowKey过滤器

    那么,让我们看看我是否可以简要解释一下我的问题. 想象一下,我们有一个HBase表,其中包含每次访问迪斯科舞厅的信息: 每个迪斯科都会记录其名称,访客姓名以及访问者的日期. (是的,这是一个愚蠢的例子,我知道……). 因此,例如,这些将是表的...[详细]

    2020-05-16 17:33 分类:大数据
  • 与REST / Thrift相比,为何HBase Java Client速度较慢

    我正在HBase Java客户端/ Thrift / REST接口上运行一些性能测试. 我有一个名为“航空公司”的表,有500K行. 我通过4个不同的Java程序从表中获取所有500K行. (使用JAVA Client,Thrift,Thrift2和REST) 以下是具有各种提取大小的性能数字. 对...[详细]

    2020-05-16 17:29 分类:大数据
  • 如何使用HBase和Hadoop来提供实时流量并执行分析? (单个群集与单独的群集?)

    我们的主要目的是使用Hadoop进行分析.在这个用例中,我们进行批量处理,因此吞吐量比延迟更重要,这意味着HBase不一定非常适合(尽管接近实时分析确实听起来很吸引人).我们正在玩Hive,到目前为止我们都喜欢它. 虽然分析是我们希望在不久的将来...[详细]

    2020-05-16 15:42 分类:大数据
  • 如何在文本文件中转储hbase表?

    我需要在HBase中转储一个表并以文本文件/ csv格式需要它吗?我在HBase shell中寻找扫描,导出和获取命令,但它不起作用. 有很多方法可以从HBase表中获取数据,例如运行导出映射/减少作业.你可以在这里阅读这个和其他 http://blog.sematext.c...[详细]

    2020-05-16 15:35 分类:大数据
  • hadoop – HBase中的压缩

    我正在使用HBase存储大量传感器数据. 我试图使用txt文件来存储我的传感器数据,对于20MB的文件,如果我压缩它,它将减少到1MB的磁盘. 我的问题是:HBase本身在将数据存储到磁盘时会自动进行压缩吗? 谢谢 你可以使用lzo,gzip或snappy进行hba...[详细]

    2020-05-16 15:15 分类:大数据
  • hadoop – 使用coprocesor HBase创建二级索引

    我一直在尝试编写自己的协处理器,使用prePut钩子创建二级索引.首先,我一直在努力让prePut协处理器工作.到目前为止,我可以将协处理器添加到传递给它的put对象.我发现我无法让协处理器写入与传入的put对象写入的行分开的行.显然要创建一个二...[详细]

    2020-05-16 14:34 分类:大数据
  • 如何在HBase 0.96.0下使用avro?

    我的项目正在使用Avro与其他项目集成.该项目开始使用HBase,使用一些HBase Avro API会很有用,但根据 HBASE-6653,在HBase 0.96.0中删除了avro网关支持. 是否有可能在开源土地的任何地方找到这个网关?我正在挖掘github和* .apache.org,但没...[详细]

    2020-05-16 14:32 分类:大数据
  • HIVE JOIN不起作用

    JobTracker和TaskTracker正在运行,简单的查询正在运行! 它的’metaore是 mysql并与hbase-0.94.16集成. 我的桌子是外部的 我的加入查询: SELECT * FROM t1 JOIN t2 ON (t1.key = t2.key); 要么 SELECT * FROM t1 x JOIN t2 y ON (x.key...[详细]

    2020-05-16 13:40 分类:大数据