运维开发网

大数据

0
  • 【赵强老师】如何分析Java的内存溢出问题

    【赵强老师】如何分析Java的内存溢出问题[详细]

    2020-05-22 08:44 分类:编程语言
  • redis数据类型及常用命令

    一.redis数据类型 Redis的五大数据类型 1.string(字符串)   String(字符串)   string是redis最基本的类型,你可以理解成与Memcached一模一样的类型,一个key对应一个value。   string类型是二进制安全的。意思是redis的string可...[详细]

    2020-05-21 14:33 分类:大数据
  • 大数据的前置知识

    linux 与网络相关的命令     1. ifconfig # 查看linux系统中的ip     2. 设置临时的ip地址       ifconfig eth0 eth0       ifconfig eth0 192.168.153.10 # 需要查看自己的虚拟网络编辑器[详细]

    2020-05-21 14:12 分类:Linux
  • redis 五大数据类型以及操作

    一、redis的两种链接方式 1、简单连接 import redis conn = redis.Redis(host=‘10.0.0.200‘,port=6379) conn.set(‘k1‘,‘年后‘) print(conn.get(‘k1‘)) 2、连接池 如果要连接redis的时候推荐用连接池的方式;如果每次操作都用同一...[详细]

    2020-05-21 10:09 分类:大数据
  • Redis详解(三)------ redis的五大数据类型详细用法

    我们说 Redis 相对于 Memcache 等其他的缓存产品,有一个比较明显的优势就是 Redis 不仅仅支持简单的key-value类型的数据,同时还提供list,set,zset,hash等数据结构的存储。本篇博客我们就将介绍这些数据类型的详细使用以及顺带介绍R...[详细]

    2020-05-19 19:43 分类:大数据
  • Python大数据之从网页上爬取数据的方法详解

    本文实例讲述了Python大数据之从网页上爬取数据的方法。分享给大家供大家参考,具体如下:[详细]

    2020-05-19 12:57 分类:Python
  • 大数据--hive查询

    一、全表查询和特定列查询 1、全表查询: ------------------------------------------------------------------- hive (db_test)> select * from dept; OK dept.deptno dept.dname dept.loc 10 ACCOUNTING 1700 20 RESEARCH 1800 30 ...[详细]

    2020-05-18 15:43 分类:大数据
  • Hive2优化参数

    最近为了调试hive试了很多hive参数,对于hive任务优化,减少使用内存有一些自己的见解,在此做一个记录。 一:Hive是什么  Hive是面向大数据的数据仓库,是一种将SQL转换为mapreduce的工具。 二:mapreduce的基本流程及阶段可进行的优化...[详细]

    2020-05-18 14:02 分类:大数据
  • Hive调优-萌贝树母婴无骗子

    1 Fetch 抓取   Hive调优-萌贝树母婴无骗子,Fectch 抓取是指对某些情况下的查询不必使用 MapReduce 计算将 hive.fetch.task.conversion 设置成 more,在全局查找、字段查找、limit查找等都不走 MapReduce2 本地模式   Hive调优-萌贝...[详细]

    2020-05-18 13:58 分类:大数据
  • 大数据第二章hadoop概述

    hadoop简介 hadoop是基于Java语言开发的,具有很好的跨平台性,并且可以部署在廉价的计算机群众,hadoop的核心是分布式文件系统HDFS(hadoop distributed file system)和mapreduce,HDFS具有较高的读写速度和和好的容错性和可伸缩性并且具...[详细]

    2020-05-18 13:54 分类:大数据