对于springframework的mongoTemplate扩展自定义的分享 数据库 数据库学习 springframe ...
对于springframework的mongoTemplate扩展自定义。之前对于spring的mongoTemplate真的是有点又爱又恨，由于它对mongodb的驱动做了一层封装，使得在开发的时候方便了许多，但是它的语法和mongo的原生js有很大不同，有时候在mongo官方文档里的API接口很多时候在mongoTemplate中的使用完全不一样，导致有些时候用的很别扭，而且一些语句完全不知道怎...
View ArticleMybatis插件 数据库 数据库学习 数据库知识 MyBatis Mybatis插件
Mybatis1.插件接口。 在Mybatis中使用插件的时候，就必须实现Interceptor接口。 public interface Interceptor{ Objectintercept(Invocation invocation) throws Throwable; Objectplugin (Object target); voidsetProperties(Properties...
View ArticleClik here to view.
stressapptest使用介绍 数据库 数据库学习 stressapptest stressapptest教程
stressapptest使用介绍。stressapptest 其是：Stressful Application Test (stressapptest) 的简称。 Stressful Application Test试图让来自处理器和I/O到内存的数据尽量随机化，以创造出模拟现实的环境来测试现在的硬件设备是否稳定，Google就在使用它，现在是Apache...
View Article图片服务器搭建 数据库 数据库学习 图片服务器搭建
图片服务器搭建。1. 分析需求图片服务器的原因在网站开发过程中使用tomcat集群时，可能存在在一个tomcat服务器中上传，在另外一个tomcat中进行访问，这样就会导致资源访问失败，而很好的解决这一问题的方法，就是搭建一个专门的服务器来实现文件的存储与读。2. 搭建环境linux CentosOS6.3 Nginx Vsftbd FileZilla3.安装http服务3.1.安装Linux虚拟机...
View Articlecassandra实战---认证和授权 数据库 数据库学习 cassandra 认证和授权
cassandra实战---认证和授权，修改conf目录下cassandra.yaml文件 1.将authenticator修改为PasswordAuthenticator ,决定是否继续用户登录 将authorizer修改为CassandraAuthorizer，通过授权决定登录之后用户具有哪些权限 重新启动cassandra并且根据默认用户登录cqlsh，用户名密码都是cassandra 2....
View ArticleClik here to view.
Executing Traditional SAS Workloads on Hadoop
In this blog, we will be discussing, SAS Grid Manager for Hadoop . There are some very compelling reasons to modernize data architectures with Hadoop. Anyone responsible for administering SAS...
View ArticleClik here to view.
Call For Abstracts - DataWorks and Hadoop Summit, San Jose 2017
The deadline to submit DataWorks Summit/Hadoop Summit Abstracts for San Jose is Feb 10 th . Please consider submitting an abstract and help encourage the community to do the same (tweet, post, blog,...
View ArticleClik here to view.
大数据计算架构三国争霸胜负未明
短短几年时间，大数据这个词便已家喻户晓。但在大数据这个名词被命名之前，人类对数据的搜集与分析已有着悠久的历史。从人工统计分析到电脑/大型机再到今天的分布式计算平台，数据处理速度飞速提高的背后则是整体架构的不断演进。今天大数据架构最火热的莫过于Hadoop，Spark和Storm这三种，而Spark和Storm这两个后起之秀更是抢了不少Hadoop的风头，也让网上逐渐开始有一种声音说Hadoop的日子...
View ArticleClik here to view.
Hadoop2.x 让你真正明白yarn
相同点 hadoop2.x的发展是由于hadoop1.x的问题造成的。 那么是什么问题造成的。比较流行的说法是jobtracker的问题，比如单点故障，任务过重。我们知道了除了Jobtracker，同时还有一个TaskTracker。我们看下图： 上图中，有一个JobTracker，多个TaskTracker。 Yarn比较 我们在来看yarn...
View ArticleClik here to view.
威胁蔓延 Hadoop集群面临勒索风险
2017年初，大数据生态基础软件就陷入了一场全球范围内的大规模勒索攻击。随着MongoDB、ElasticSearch等软件系统遭遇勒索攻击以外，战火已经蔓延到Hadoop集群系统，黑客删除或破坏用户数据后，利用比特币平台进行匿名勒索，称缴纳赎金以后才能提供恢复数据的方法。该事件已在全世界范围内造成了广泛的影响并给相关组织造成了严重的经济损失。 勒索事件综述：...
View ArticleClik here to view.
DBA 101: What you may be missing with “Missing indexes”
If you’ve read my blog, I’m sure by now you know that I have no love for GUI tools. I will say they are improving every day and maybe, just maybe, we will see the day when you can click happily away...
View ArticleAnnouncing Ratelimit
Today we are excited to open source Ratelimit, a Go/gRPC service designed to enable generic rate limit scenarios from different types of applications. For example, per IP rate limiting, or rate...
View Article数据库自动化DBA和DevOps
本文要点： 为使数据库与敏捷开发与生产相匹配，DBA付出了极大的努力，但是该工作需要一种新的方法。新方法实现的关键在于更大程度上的系统化和自动化，确保不间断的一致性贯穿整个DevOps工作流，即从任务定义直至应用部署。 为使数据库成为整个开发中的单一可信数据源，必须对数据库做自动的、强制的版本控制，以避免破坏开发的不稳定性因素。...
View ArticleHBase Bulk Load
概述 BulkLoad是一种高效写入HBase的方式，适用于将数据批量迁移到HBase。BulkLoad使用MapReduce作业直接生成HBase的StoreFile，并将生成的StoreFile直接装载入正在运行的HBase集群。较之使用HBase的API，使用BulkLoad耗费的CPU和网络资源都相对较少。...
View ArticleMapR Announces the Converged Data Platform for Docker
MapR Technologies, Inc ., the provider of the first and only converged data platform, today announced the immediate availability of the industry's first persistent storage for containers that offers...
View ArticleClik here to view.
A New Twist On Adding Data Persistence To Containers
Containers continue to gain momentum as organizations look for greater efficiencies and lower costs to run distributed applications in their increasingly virtualized datacenters as well as for...
View ArticleClik here to view.
Apache Beam Moves To Top Level
Apache Beam Moves To Top Level Written by Kay Ewbank Tuesday, 07 February 2017 Apache Beam, a distributed processing tool with a unified programming model for both batch and streaming data processing,...
View ArticleClik here to view.
OceanBase 1.0 分布式技术架构
OceanBase 1.0项目从2013年初开始做总体设计，2014年开始编码、测试，2015年底正式上线并无缝迁移部分集团mysql业务，直到2016年中才正式上线蚂蚁核心业务，包括会员视图、花呗、账务，等等，最后“丝般柔顺”地通过了2016年双十一大考。...
View Articlekeepalived+redis 高可用redis主从解决方案
目前，Redis还没有一个类似于mysql Proxy或Oracle RAC的官方HA方案。 #Redis 2.8版开始正式提供名为Sentinel的主从切换方案(后面附上，未测试) 因此，如何在出现故障时自动转移是一个需要解决的问题。...
View ArticleData analytics experts share advice for 2017
One of a company’s main measures of success is through its customers. Nothing is more rewarding for us than learning about how data analytics experts are implementing a data-driven strategy. I spoke...
View Article