欢迎光临
一直在努力

大数据

redis-cluster集群调优之cluster-require-full-coverage参数-运维资源

redis-cluster集群调优之cluster-require-full-coverage参数

心生阅读(406)评论(0)

今天在群里聊到cluster全部做主的话,如果一台down机,数据还可以不可以写入。 默认情况下,其中一台主(如果没有做slave的话),down机后,集群会显示不可用状态。 但是在配置redis集群中,有个配置叫做cluster-requ...

Redis Cluster集群学习总结-运维资源

Redis Cluster集群学习总结

心生阅读(399)评论(0)

Redis 3.0之后,节点之间通过去中心化的方式,提供了完整的 sharding、replication(复制机制仍使用原有机制,并且具备感知主备的能力)、failover 解决方案,称为 Redis Cluster。即:将 proxy/...

Redis之RediSearch强大的搜索引擎-运维资源

Redis之RediSearch强大的搜索引擎

心生阅读(327)评论(0)

RediSearch是一个高性能的全文搜索引擎,可作为一个Redis Module 运行在Redis上,是由RedisLabs团队开发的。 特点是:Faster, in-memory, highly available full text ...

用Redis-ML模块实现实时机器学习-运维资源

用Redis-ML模块实现实时机器学习

心生阅读(362)评论(0)

Redis主要区别 (1)高性能 (2)简单-多种数据结构 (3)可扩展-Redis Modules Redis主要的数据结构概括 Redis Modules:一种革命的方式 任何C/C++程序现在都可以运行在Redis上 Modules是...

如何让Redis支持JSON数据类型-运维资源

如何让Redis支持JSON数据类型

心生阅读(326)评论(0)

ReJSON介绍 ReJSON 是一个Redis Module,它实现了ECMA-404 The JSON Data Interchange Standard 作为本地数据类型。它允许从Redis Keys(documents)中存储,更新...

Redis集群技术研究之四大集成者-运维资源

Redis集群技术研究之四大集成者

心生阅读(325)评论(0)

一、阿里云ApsaraCache 先介绍一下阿里云开源的飞天缓存ApsaraCache项目(https://github.com/alibaba/ApsaraCache),这是在社区2.8版基础上开始维护的分支,并backport了部分3....

面试题–spark中cache和persist的区别

心生阅读(635)评论(0)

昨天面试被问到了cache和persist区别,当时只记得是其中一个调用了另一个,但没有回答出二者的不同,所以回来后重新看了源码,算是弄清楚它们的区别了。 cache和persist都是用于将一个RDD进行缓存的,这样在之后使用的过程中就不...

Spark 调优 (翻译自Tuning Spark)

心生阅读(304)评论(0)

由于大多数Spark计算任务是在内存中运行计算,任何集群中的资源限制都可能成为Spark程序的瓶颈,比如:CPU、网络、带宽、内存。通常情况下,如果内存能容纳所处理数据,主要的瓶颈则仅是网络带宽。但有些时候您也需要做一些调优,比如利用RDD...

把csv入库到hadoop集群

心生阅读(426)评论(0)

[root@MASTER01 ~]# hadoop fs -copyFromLocal /root/008.csv /user/hive/warehouse/tmp.db/ [root@MASTER01 ~]# hadoop fs -ls ...

QEDEV 运维分享 运维实战

联系我们关于作者