大数据
-
达拉斯小牛与QYBET千亿体育科技公司达成合作，研究睡眠如何提升球员赛场表现
躺在床上却翻来覆去怎么也睡不着对于任何人来说都是非常沮丧的一件事。而对于职业运动员来说，遇到这样的事就更加让人发愁了，因为对于他们来说睡眠时长和质量同身体健康、体能恢复以及竞技表现都有重要关系。既然睡眠健康对于运动员来说...[详细]
2020-04-08 09:33 分类：大数据 -
-
ELK+filebeat+kafka+zookeeper构建海量日志分析平台
海量日志分析平台，由ElasticSearch、Logstash，Kiabana，filebeat，kafka，zookeeper等多个开源工具构建而成 平台构建后可以大大减轻运维人员对于日志管理的负担，检索方便，定位问题快捷。 1,本平台参考的建构图如下： 上面架构图分为五...[详细]
2020-04-07 19:45 分类：大数据 -
阿里面试官：大数据量下的集合如何过滤？
算法背景如果想判断一个元素是不是在一个集合里，一般想到的是将集合中所有元素保存起来，然后通过比较确定。链表、树、散列表（又叫哈希表，Hashtable）等等数据结构都是这种思路，存储位置要么是磁盘，要么是内存。很多时候要么是以时间...[详细]
2020-04-07 18:19 分类：编程语言 -
大数据系列之kafka(一)
什么是Kafka Kafka是一个分布式流处理平台，我们可以初步理解为一个Kafka就是一个存储消息的篮子(broker)，可以实时去放消息或取消息，不同的消息按照不同的标签(topics)分类，这个篮子是可扩展的(Kafka集群)，篮子里的消息高可靠不会丢失...[详细]
2020-04-07 18:19 分类：大数据 -
在大数据里：Hadoop可能是你的救命稻草
原文地址 用于数据分析的开源Hadoop架构的巨大增长是由其结构化和非结构化数据量的增长所驱动的，并且很多权威组织也预测，未来Hadoop架构还将继续增长，并需要复杂的可访问工具来从数据中提取业务和市场信息。 对于Hadoop来说，前景很乐...[详细]
2020-04-07 18:18 分类：大数据 -
大数据学习[07]:elasticsearch5.6.1集群与问题
摘要：elasticsearch5.6.1集群与问题总结 前置 接着上一篇：大数据学习[06]:elasticsearch5.6.1初探 前面只是感性地看了一眼elasticsearch,还未知道方向，今天学习了一下集群的内容，并把一些数据加入其中，进行了搜索。 配置 # --------...[详细]
2020-04-07 16:08 分类：大数据 -
大数据学习[06]:elasticsearch5.6.1初探
摘要：主要初步接触一下ES及其相关组件。安装的ES版本为5.6.1，先在单节点上运行，初步探一探。然后安装IK，用来作中文的分词的，接着安装X-pack用来作各集群的监控的，再安装Kibana, 用来显示数据的。 前置 代码下载：git源码安装(linux...[详细]
2020-04-07 15:39 分类：大数据 flume的多agent连接
1.需求 将tail命令产生的信息在example01机器上用flume收集，并且将数据传到example02机器上，在example02机器上会将这些接收到的数据存储在hdfs集群上。 2.实现 1）example01机器上的tail-avro.conf文件 a1.sources = r1 a1...[详细]
2020-04-07 15:31 分类：大数据-
hadoop入门（一）之HDFS
转自：http://blog.csdn.net/zbc1090549839/article/details/51853944 虽然Hadoop经历了多年的发展，作为技术人员都或多或少的使用过或者了解过。这里还是做一个简单的总结，主要原因是之前主要是做hadoop的开发，对hadoop的运维知之甚少...[详细]
2020-04-07 15:11 分类：大数据
加载中,请稍侯......