Hadoop学习笔记(3)-HA高可用集群搭建 发表于 2016-07-15 | 分类于 后端 , 大数据 , Hadoop | | 阅读次数 概述 HA(High Available), 高可用性集群,是保证业务连续性的有效解决方案,一般有两个或两个以上的节点,且分为活动节点及备用节点。通常把正在执行业务的称为活动节点,而作为活动节点的一个备份的则称为备用节点。当活动节点出现问题,导致正在运行的业务(任务)不能正常 ... 阅读全文 »
Hadoop学习笔记(2)-Mapreduce 发表于 2016-07-14 | 分类于 后端 , 大数据 , Hadoop | | 阅读次数 什么是MapReduce MapReduce是一种分布式计算模型,由Google提出,主要用于搜索领域,解决海量数据的计算问题。 MapReduce是处理大量半结构化数据集合的编程模型。编程模型是一种处理并结构化特定问题的方式。例如,在一个关系数据库中 ... 阅读全文 »
Hadoop学习笔记(1)-HDFS 发表于 2016-07-12 | 分类于 后端 , 大数据 , Hadoop | | 阅读次数 Hadoop概述Hadoop是一个由Apache基金会所开发的分布式系统基础架构。 Hadoop 由许多元素构成。其最底部是 Hadoop Distributed File System(HDFS),它存储 Hadoop 集群中所有存储节点上的文件。HDFS的上一层是Ma ... 阅读全文 »
MyCat快速入门 发表于 2016-07-09 | 分类于 后端 , Database , MySql | | 阅读次数 MyCat概述 MyCat是基于Cobar二次开发的数据库中间件。它可以低成本的将现有的单机数据库和应用平滑迁移到“云”端,解决数据存储和业务规模迅速增长情况下的数据瓶颈问题。 从定义和分类来看,它是一个开源的分布式数据库系统,是一个实现了MySQL ... 阅读全文 »
ActiveMQ消息队列 发表于 2016-07-03 | 分类于 后端 , 消息队列 | | 阅读次数 介绍 ActiveMQ 是Apache出品,最流行的,能力强劲的开源消息总线。ActiveMQ 是一个完全支持JMS1.1和J2EE 1.4规范的 JMS Provider实现,尽管JMS规范出台已经是很久的事情了,但是JMS在当今的J2EE应用中间仍然扮演着特殊的地位。 主 ... 阅读全文 »
SolrCloud初体验 发表于 2016-06-30 | 分类于 后端 , 全文检索 , Solr | | 阅读次数 什么是SolrCloudSolrCloud是基于Solr和Zookeeper的分布式搜索方案,它的主要思想是使用Zookeeper作为集群的配置信息中心。 SolrCloud的特点1.近实时搜索立即推送式的replication(也支持慢推送)。可以在秒内检索到新加入索引。 2.自动容错SolrC ... 阅读全文 »
如何搭建与维护一个Redis集群 发表于 2016-06-27 | 分类于 后端 , Database , Redis | | 阅读次数 Redis集群架构 每一个Redis节点使用PING-PONG的形式互相通信。 当半数以上的节点fail时,则整个集群失效。 客户端不需要连接集群所有节点,只要连接集群中任意一个节点即可。 Redis集群中内置了16384个哈希槽,当操作数据时,Redis会对key使用crc16算法算出一 ... 阅读全文 »
如何安装与搭建一个Nginx服务器 发表于 2016-06-24 | 分类于 后端 , 负载均衡 , Nginx | | 阅读次数 Nginx介绍Nginx是一款轻量级的Web 服务器/反向代理服务器及电子邮件(IMAP/POP3)代理服务器,并在一个BSD-like 协议下发行。由俄罗斯的程序设计师Igor Sysoev所开发,供俄国大型的入口网站及搜索引擎Rambler使用。 Nginx应用场景 作为http服务器使用并独 ... 阅读全文 »
使用Lucene实现全文检索 发表于 2016-06-19 | 分类于 后端 , 全文检索 , Lucene | | 阅读次数 1. Lucene介绍 Lucene是apache下的一个开源的全文检索引擎工具包,但它不是一个完整的全文检索引擎,而是一个全文检索引擎的架构,提供了完整的查询引擎和索引引擎,部分文本分析引擎(英文与德文两种西方语言)。它为软件开发人员提供一个简单易用的工具包(类库),以方便的在目标系统中实现全文检 ... 阅读全文 »
Spring MVC进阶应用 发表于 2016-06-17 | 分类于 后端 , Java , Spring | | 阅读次数 Spring MVC 进阶应用参数绑定 客户端发送请求时传递的参数默认是键值对格式,Spring MVC通过参数绑定组件将请求的参数串进行类型转换。 Spring MVC使用Controller方法的形参接收请求传来的参数。 1. Spring MVC默认内置的形参类型 HttpServletReq ... 阅读全文 »