Fake Ransomware Targets Redis Instances
Researchers have found that more than 18,000 instances of the Redis data store service are exposed to the Internet and open to complete compromise by remote attackers using simple commands. Duo Labs...
View Article数据导入主键冲突问题
0、导读 用LOAD DATA导入数据却一直提示主键冲突问题解决案例。 1、问题描述 有位学生遇到数据导入时一直提示1022主键冲突问题，而导入的数据明明完全没有任何冲突，百思不得其解，请我帮忙协查。 下面是关于该问题现象描述： 1、表结构DDL CREATE TABLE `wcp` ( `id` int(10) unsigned NOT NULL AUTO_INCREMENT, `txcode`...
View ArticleClik here to view.
Redis主从复制
Redis主从复制Redis主从复制功能可以实现读写分离操作，一般情况下主数据库提供读写功能，从数据库提供只读功能（但是从数据库也可以提供写功能，后面有介绍）。当对主数据库进行写操作时，主数据库会自动将数据同步到从数据库中，从而保证数据一致性。主数据库和从数据库间是一对多的关系，即一个主数据库可以有多个从数据库，但是一个从数据库只能有一个对应的主数据库。从数据库也可以有对应的从数据库，形成一棵树状结...
View ArticleClik here to view.
RMAN初学
RMAN是oracle推荐的备份和恢复工具(Recovery Manager) RMAN能够即开即用 关于备份: 在备份之前需要明确几个目标: 1. 冷备份还是热备份 2. 全部备份还是局部备份 3. 全备还是增备? 1....
View ArticleHBase客户端访问超时原因及参数优化
默认的HBase客户端的参数配置是没有做过优化的，所以对于低延时响应的HBase集群，需要对客户端的参数进行优化。 1. hbase.rpc.timeout 以毫秒计算的所有HBase RPC超时，默认为60s。 该参数表示一次RPC请求的超时时间。如果某次RPC时间超过该值，客户端就会主动关闭socket。 如果经常出现java.io.IOException: Connection reset...
View ArticleMySQL查询优化-explain
一、mysql 查询优化器是如何工作的MySQL 查询优化器有几个目标,但是其中最主要的目标是尽可能地使用索引,并且使用最严格的索引来消除尽可能多的数据行。最终目标是提交 SELECT 语句查找数据行,而不是排除数据行。优化器试图排除数据行的原因在于它排除数据行的速度越快,那么找到与条件匹配的数据行也就越快。如果能够首先进行最严格的测试,查询就可以执行地更快。 EXPLAIN...
View ArticleClik here to view.
BIEE建模
BI创建（数据）分析、仪表盘、报表前，都需要对数据进行建模，在oracle biee里称为创建“资料档案库”-该文件后缀为RPD，所以一般也称为创建RPD文件。 步骤： 1、从windows开始菜单里，找到"BI 管理"，如下图： 2、点击工具栏第一个按钮“创建”一个(脱机/离线的)RPD文件，这里我们命名为Scott.rpd，同时注意记好密码，比如Admin123...
View ArticleMSSQL之九视图
视图是一张虚拟表，它表示一张表的部分数据或多张表的综合数据，其结构和数据是建立在对表的查询基础上视图中并不存放数据，而是存放在视图所引用的原始表（基表）中同一张原始表，根据不同用户的不同需求，可以创建不同的视图. 视图的用途筛选表中的行防止未经许可的用户访问敏感数据降低数据库的复杂程度将多个物理数据库抽象为一个逻辑数据库CREATE VIEW view_nameAScreate table...
View ArticleClik here to view.
数据库的方向-行vs列
前言： 转载的好文不多，但此篇的确是难得一见的好文，如若不信，请仔细阅读。 此篇文章没有波涛汹涌的起伏，没有繁多的代码，只有悠然自得的文笔。 因此，分享此文给大家。 如果你是一位数据库专家的话，这篇博客可能帮不了你什么。 如果你是一位IT人士，但对数据库技术只知其然的话，这篇博客会很适合你。 如果你是非IT人士，又或者你是我的家人，谢谢你们的阅读，但是显然你应该去寻求更适合你的阅读材料。...
View ArticleClik here to view.
架构优化之MSSQL数据库高可用实战案例
说到高可用,看官们会想到很多方案,也许是自亲身经历过系统从单机变成高可用的痛苦过程,也许有的看官只是在自己的虚机上搭建过测试的玩具。今天本篇用我自己的真实经历给大家讲述，不管怎么样实战和测试玩耍还是很大的区别的!可能你觉得搭建一套高可用方案很简单，配置配置就OK了，但在真正的复杂系统中一切就没有那么轻松了!...
View Article快速体验mongoDB分片
随着大数据海量数据的不断涌现，分布式，横向扩展是系统扩展的重要方式之一。基于文档的NoSQL领头羊mongoDB正是这样一个分布式系统，通过分片集群将所有数据分成数据段，并将每个数据段写入不同的节点。本文简要描述mongoDB分片特性，以及给出演示，快速体验mongoDB分片方式。一、为什么需要shard 存储容量需求超出单机磁盘容量...
View Article离线安装ClouderaManager5(5.1.3)和CDH5(5.1.3)
关于CDH和Cloudera ManagerCDH是cloudera公司开发的一个快速部署、高效管理Hadoop和其各种组件的一个商业化产品。主要分为两部分，分别为Cloudera Manager和CDH软件包。其中Cloudera Manager负责集群的部署与管理。CDH软件包囊括了hdaoop各类的组件的安装包，例如hive、hdfs、Spark等等。CDH (Cloudera's...
View Article每日一博 | Netty 模拟 Redis 服务器
Redis的客户端与服务端采用叫做 RESP(Redis Serialization Protocol) 的网络通信协议交换数据，客户端和服务器通过 TCP 连接来进行数据交互， 服务器默认的端口号为 6379 。客户端和服务器发送的命令或数据一律以 \r\n （CRLF） 结尾。 RESP支持五种数据类型： 状态回复（status reply）：...
View ArticleClik here to view.
Clik here to view.
Data preparation strengthens Hadoop information chain
Hadoop has driven an enormous amount of data analytics activity lately. And this poses a problem for many practitioners coming from the traditional relational database management system (RDBMS) world....
View ArticleClik here to view.
Quality Assurance at Cloudera: Highly-Controlled Disk Injection
Recently installed fault-injection techniques are making quality assurance processes yet more rigorous. In aprevious installment of our series about quality assurance inside Cloudera, we described the...
View ArticleHadoop for .NET Developers
My latest Pluralsight course is out now: Hadoop for .NET Developers It takes you through running Hadoop on windows and using .NET to write MapReduce queries - proving that you can do Big Data on the...
View ArticleClik here to view.
Cloudera asked Intel for $1 billion to build a cloud service
Open-source big data software company Cloudera wants to do more. About one month ago, Tom Reilly, the company’s chief executive, approached Intel with a proposal requesting $1 billion in new money, a...
View ArticleClik here to view.
Clik here to view.
Benchmarking with Go
Every now and then, you really need to get out of your comfort zone, I decided that what I want to do is to play a bit with Go, which I haven’t done yet. Oh, I have read Go code, quite a lot of it,...
View Article