运维开发网

HBase

0
  • scala – 丰富SparkContext,而不会导致序列化问题

    我正在尝试使用Spark来处理来自HBase表的数据. This blog post给出了如何使用NewHadoopAPI从任何Hadoop InputFormat读取数据的示例. 我做了什么 由于我需要多次这样做,所以我试图使用implicits来丰富SparkContext,这样我就可以从HBase中给...[详细]

    2020-05-30 11:20 分类:编程语言
  • python3.7通过thrift操作hbase的示例代码

    HBase是一个分布式的、面向列的开源数据库,其是Apache的Hadoop项目的子项目。HBase不同于一般的关系数据库,它是一个适合于非结构化数据存储的数据库。另一个不同的是HBase基于列的而不是基于行的模式。其数据结构类[详细]

    2020-05-24 12:56 分类:Python
  • 详解spring封装hbase的代码实现

    前面我们讲了spring封装MongoDB的代码实现,这里我们讲一下spring封装Hbase的代码实现。[详细]

    2020-05-19 12:05 分类:编程语言
  • 长期更新一些HBase有用的工具和特性

    1、HBase存储图片,文档等字节流的内容 https://issues.apache.org/jira/browse/HBASE-11339 2、compact的速度控制 https://issues.apache.org/jira/browse/HBASE-8329 3、关于scan强制控制超时的一个问题,相当与给scan本身加了一个心跳...[详细]

    2020-05-18 17:55 分类:大数据
  • HBase-Java-API操作表

    package com.itheima; import org.apache.hadoop.conf.Configuration; import org.apache.hadoop.hbase.*; import org.apache.hadoop.hbase.client.*; import org.apache.hadoop.hbase.filter.*; import org.[详细]

    2020-05-18 17:21 分类:大数据
  • [转帖]hdfs hbase hive hbase适用场景

    hdfs hbase hive hbase适用场景 https://www.cnblogs.com/liyulong1982/p/6001822.html   Hive 不想用程序语言开发MapReduce的朋友比如DB们,熟悉SQL的朋友可以使用Hive开离线的进行数据处理与分析工作。 注意Hive现在适合在离线下进行数...[详细]

    2020-05-18 16:50 分类:大数据
  • hbase 由于zookeeper问题导致连接失败问题

    问题现象: 使用hbase shell 连接报如下问题: 2019-10-09 10:37:18,855 ERROR [main] zookeeper.RecoverableZooKeeper: ZooKeeper exists failed after 4 attempts 2019-10-09 10:37:18,856 WARN [main] zookeeper.ZKUtil: hconnec[详细]

    2020-05-18 16:39 分类:大数据
  • HBASE手动触发major_compact

    1.定时执行脚本 #!/bin/bash source /etc/profile sh ./hbase shell <<EOF major_compact ‘table_name‘ EOF 语法: #Compact all regions in a table: hbase> major_compact ‘t1‘ #Compact an entire region: h[详细]

    2020-05-18 16:29 分类:大数据
  • 连接Couchbase

    web.config中增加 <configSections> <sectionGroup name="couchbaseClients"> <section name="couchbase" type="Couchbase.Configuration.Client.Providers.CouchbaseClientSection, Couchbase.NetCl...[详细]

    2020-05-18 15:49 分类:大数据
  • HBase原理总结

    HBase是基于Hadoop HDFS的一个高可用、高性能、面向列、可伸缩、实时读写的分布式数据库系统,主要存储非结构化和半结构化数据。其利用Hadoop HDFS作为文件存储系统,Hadoop MapReduce处理HBase中的海量数据,Zookeeper作为分布式协同服务...[详细]

    2020-05-18 14:44 分类:大数据