首页 » 2017 » 七月

hadoop 之Hive介绍

 
hive_logo_medium

1.Hive的简介 hive是基于Hadoop的一个数据仓库工具,可以将结构化的数据文件映射为一张数据库表,并提供简单的sql查询功能,可以将sql语句转换为MapReduce任务进行运行。 其优点是学习成本低,可以通过类SQL语句快速实现简单的MapRedu … 阅读全文

Python Flask Restful API

 
u=4113128843,3085613975&fm=26&gp=0

目前Web应用这块,restufl API用得非常普遍,因为,你手上的前端设备五花八门,各种系统的手机,pad等等,而且网站和手机APP经常会有需要资源共享的时候。 如果网站做个app,手机端再独立一个app,要保持2者同步,估计做开发的要做死了。 所以,RE … 阅读全文

python查询mysql中文乱码问题

 
u=4113128843,3085613975&fm=26&gp=0

问题: python2.7 查询或者插入中文数据在mysql中的时候出现中文乱码 --- 可能情况: 1.mysql数据库各项没有设置编码,默认为'latin' 2.使用MySQL.connect的时候没有设置默认编码 3.没有设置python的编码,pyth … 阅读全文

对某企业销售额的数据分析(一)

 
4

最近研究了下大数据,想着还是偏应用方面的比较好。就扒了一个某公司的年度销售额的Excel 装备用来分析分析,虽然Excel也可以做一些数据分析。但是这次介绍的是大数据分析工具进行分析。希望在以后的学习中也是,尽量去尝试多的东西去解决问题,不能用什么就可以了就不 … 阅读全文

最全解析:大数据和机器学习有什么区别[转]

 
149437842639187383

大数据的定义 大数据(big data),指无法在一定时间范围内用常规软件工具进行捕捉、管理和处理的数据集合,是需要新处理模式才能具有更强的决策力、洞察发现力和流程优化能力的海量、高增长率和多样化的信息资产。 大数据是一个笼统的概念暂未发现和准确的定义。 大数 … 阅读全文

Floodlight安装

 
201047013341723

Floodlight项目Github地址 Linux环境要有java环境,针对jdk版本有不同的要求: Floodlight master分支以上需要JDK8 Floodlight v1.2版本一下需要JDK7 安装必要软件,对于不同的版本配置不同的JDK环境 … 阅读全文

消息总线(AMQP)

 
20160122212755148

一、消息总线 OpenStack的设计原则:项目之间通过RESTful API进行通信;项目内部通过,不同服务进程之间通过消息总线进行通讯。这种设计思想保证了各个项目对外可以被不同类型的客户端接受,同时也保证了内部项目通信接口的可扩展性和可靠性,以支持大规模的 … 阅读全文

虚拟化的设计与实现

 
20160119153121785

一、虚拟化技术的概述 虚拟化技术对大家来说都不陌生,比如虚拟内存和虚拟服务器等,为了更好的理解虚拟化我们应该首先来了解一下计算机系统的层次结构。 每一层都向上层提供一个抽象,并且每一层只需要知道下层抽象的接口,而并不需要了解其内部运作机制。例如,操作系统看到的 … 阅读全文