Clik here to view.
Hadoop开源启示录
[前言]对中国大数据产业来说，2016年是从垂直领域野蛮生长到爆发全国范围关注热潮的一个转折点。不论是人山人海巨头云集的贵阳数博会，还是首次在华举办的全球顶级大数据会议Strata + Hadoop...
View ArticleApache HBase的适用场景
原文： http://blog.cloudera.com/blog/2011/04/hbase-dos-and-donts/ 最近我在 洛杉矶Hadoop用户组 做了一次关于 HBase适用场景...
View ArticleClik here to view.
Atlas Data Structure
Kerf introduces a new data structure called an “Atlas” that we think is a helpful thing to have inside of a programming language. We’ve found it very useful to have database Tables inside of a...
View ArticleClik here to view.
MongoDB 的介绍和使用
MongoDB 介绍 之前学过 SQL Server , mysql , SQLite , 除了 SQL Server 学习过原理之外，其它的也只是学习简单的使用就草草了事了，现在又开始入手 MongoDB 了，其实个人感觉所有的数据库操作起来都基本差不多，并不难学。那么我为什么要学习 MongoDB 呢？ 因为我想要存取我爬取的数据，最近在学习 python...
View ArticleClik here to view.
Clik here to view.
ASP.NET基础与入门：WebForm，事件驱动编程，Page类
注：因为这个暑假做了一个ASP.NET的项目（WebForms模式），暑假期间太忙没有来得及整理，现在统一梳理下知识（有些我认为可以跟HTML共通的就没记） 推荐几个学习ASP.NET的网站：W3School菜鸟教程书的话。。因为当时项目太紧张。直接动手实战，有不会的直接在上面两个网站查询的。 当时我入门看的书有：ASP.NET 1.1入门经典-Visual C#.NET...
View Article常见的等待事件（一）
一、Buffer busy waits 从本质上讲，这个等待事件的产生仅说明了一个会话在等待一个Buffer（数据块），但是导致这个现象的原因却是有很多种，常见的两种是： （1）当一个会话试图修改一个数据块，但这个数据块正在被另一个会话修改时。 （2）当一个会话需要读取一个数据块，但这个数据块正在被另一个会话读取到内存中时。...
View ArticleClik here to view.
MongoDB索引详解
索引能够提高数据库的查询效率，没有索引的话，查询会进行全表扫描（scan every document in a collection）,严重降低了查询效率。默认情况下，Mongo在一个集合（collection）创建时，自动地对集合的_id创建了唯一索引。 (NOTE:In sharded clusters, if you do not use the _id field as the shard...
View Articleredis（带联接池）结合关系数据库
首先Maven导入org.springframework.dataspring-data-redis1.4.2.RELEASEredis.clientsjedis2.4.2再配置spring.xml文件，我这是已经整合好Spring，Mybatis和struts2的xmlmysql.driverName}">LOG4J没整合的也可只需加入创建redis工厂部分即可。如果用的联接池则也不需要配置...
View ArticleClik here to view.
在windows环境下搭建mysql集群
1. 前(fei)言(hua) 最近实训老师给我们布置了一个建立mysql集群的任务，并扔了两个博客链接给我们参考，然后就没有然后了。根据老师给的博客上面的步骤试了一下，发现并不能成功建立，于是自己百度，找到了一个挺靠谱的博客，于是参考了一下，感觉总体还是不错的~ 2. 理论基础知识 首先需要了解什么是管理节点、数据节点和SQL节点~...
View ArticleClik here to view.
【深入浅出Mysql】MySql存储引擎之MyISAM(二)
一、MyISAM 1.1 数据存储 MyISAM是默认的mysql插件式存储引擎。它不支持事务和外键。 优势：访问速度快，基本上以SELECT、INSERT为主的应用基本上都可以使用这个引擎来创建表。 每个MyISAM在磁盘上存储称3个文件，其文件名和表名相同，扩展名不同，分别是： .frm(存储表自定义) .MYD(MYDATA,存储数据) .MYI(MYIndex,存储索引)...
View ArticleClik here to view.
MongoDB3.2.9分布式集群搭建
手把手搭建MongoDB集群目标搭建带有安全认证的mongodb集群准生产环境。一共3个shard，每一个shard有3个replica set，replicat set采用primary、secondary、secondary方式。9个mongod实例，另外，3个config server，3个mongod实例，3个mongos实例。mongodb版本 3.2.9 社区版本Cores 4OS...
View ArticleClik here to view.
mysql-proxy解决只能内网访问线上数据库问题
CleverCode的线上数据库，只能通过内网连接到线上。每次都需要登录ssh终端上操作。为了操作方便在在内网开发机上装了一个mysql-proxy去访问线上数据库。1 架构如下架构说明 线上数据库，只授权了192.168.1.*网段的用户能够访问线上数据库。其它网段都不能访问。2 线上数据库创建用户登录到192.168.2.101机器，创建一个授权用户。 # mysql -uclevercode...
View ArticleClik here to view.
Clik here to view.
数据库高可用架构(MySQL、Oracle、MongoDB、Redis)
一、mysql MySQL小型高可用架构方案：MySQL双主、主从 + Keepalived主从自动切换服务器资源：两台PC Server优点：架构简单，节省资源缺点：无法线性扩展，主从失败之后需要手动恢复主从架构 MySQL中型高可用架构方案：MMM + MySQL双主 + 多从高可用方案服务器资源：1、至少五台PC Server，2台MySQL主库，2台MySQL从库，1台MMM...
View ArticleClik here to view.
SQL复习
TOP/LIMIT操作符当数据过多的时候用于分页操作。mysql: SELECT column_name(s) FROM table_name LIMIT number; Oracle: SELECT column_name(s) FROM table_name WHERE ROWNUM <=number; SQL Server SELECT TOP number|percent...
View ArticleJava实现基于Redis的分布式锁
单JVM内同步好办， 直接用JDK提供的锁就可以了，但是跨进程同步靠这个肯定是不可能的，这种情况下肯定要借助第三方，我这里实现用Redis，当然还有很多其他的实现方式。其实基于Redis实现的原理还算比较简单的，在看代码之前建议大家先去这里看看原理，我就不翻译了，免得变味了，看懂了之后看代码应该就容易理解了。...
View ArticleClik here to view.
A Recipe for Cooking with the Hadoop Ecosystem
It’s part of my job to cover the ecosystem of Hadoop, the open source big data technology, but sometimes it makes my head spin. If this is not your primary job, how can you possibly keep up? I hope...
View Article