Introduction to Spring Data
We have learned aboutJava Persistence API andMongoDBin another tutorial series.Here, we will learn about spring data which mainly deal with spring data variants i.e. jpa and mongodb. Spring Data:...
View ArticleClik here to view.
Connected
The Stereo MC’s song “Connected” could be about some recently gained insight and the realization that maybe some of the people you held dear are phonies and while the reality of the situation is scary,...
View ArticleRedis源码剖析--通知Notify
Redis在2.8版本以后，增加了键空间（Keyspace Notifications future）通知功能，此特性允许客户端可以以订阅/发布的模式，接收那些对数据库中的键和值有影响的操作事件。Redis关于通知的源代码均在notify.c文件中实现，源码中只有三个功能函数，相对较为简单，但是要想理解其功能，就需要配合server.c和pubsub.c里面的部分代码。 Notify概述...
View ArticleClik here to view.
发生在Optimizely公司的由批量到流式分析的故事
本文原作者为Optimizely的分布式系统工程师David Yu。 我们在Optimizely公司的使命就是帮助决策者们把数据转变为行动。这需要我们能够快速并可靠地移动数据。我们每天要处理几十亿个用户事件，包括浏览网页、点击和定制事件等。能以最快的速度将与用户有关的关键业务信息提供给我们的客户，这一直都是我们最高优先级的任务。正因如此，我们一直都在寻求创新的方式来改进我们的数据处理流水线。...
View Article如何使用redis存储海量小数据
最近有个需求，需要存储海量小数据，大概几十亿的规模，每个数据是6位的数字加一个32位的md5（16进制显示）。因为数据很小，数据总量并不算大，我们计划根据md5做分片，存储到多个redis中，每个redis大概存储1亿的数据，纯数据大概 (6+32)*10^9 = 3.8G ，这是redis很擅长存的量。 1 快速加载数据到redis redis已经非常快了，高达 10w/s...
View ArticleClik here to view.
N25第四周作业
1、复制/etc/skel目录为/home/tuser1，要求/home/tuser1及其内部文件的属组和其它用户均没有任何访问权限。 [root@localhost ~]# cp -r /etc/skel/ /home/tuser1[root@localhost ~]# ls -a /home/tuser1/. .. .bash_logout .bash_profile .bashrc...
View ArticleMongoDB 分片的原理、搭建、应用
一、概念： 分片 （sharding）是指将数据库拆分，将其分散在不同的机器上的过程。将数据分散到不同的机器上，不需要功能强大的服务器就可以存储更多的数据和处理更大的负载。...
View ArticleClik here to view.
MongoDB 索引创建
在数据量超大的情形下，任何数据库系统在创建索引时都是一个耗时的大工程。MongoDB也不例外。因此，MongoDB索引的创建有两个选择，一个是前台方式，一个是后台方式。那这两种方式有什么差异呢，在创建索引是是否能观察到索引完成的进度呢。本文将是基于此的描述，同时也描述了索引创建相关的注意事项。 一、索引创建方式 前台方式...
View ArticleClik here to view.
Dear Air Canada: a systems analysis of a comically colossal cascading failure
I’ll be blunt; I’m here to vent my fury. On your behalf, dear reader! Honest. When a corporation gets things terribly wrong, those of us with platforms need to turn our wrath upon them. It’s the only...
View Article[01000][unixODBC][DriverManager]Can‘topenlib’/usr/lib64/libmyodbc5.so':fileno...
提示libmyodbc5.so文件不存在，但确实存在。 解决方法： cd /.../unixODBC/lib ln -s libodbcinst.so.2.0.0 libodbcinst.so.1 ln -s libodbc.so.2.0.0 libodbc.so.1
View ArticleSPRINGDATAJPA查询关键字 SPRINGDATAJPA 查询关键字
Keyword Sample JPQL snippet And findByLastnameAndFirstname … where x.lastname = ?1 and x.firstname = ?2 Or findByLastnameOrFirstname … where x.lastname = ?1 or x.firstname = ?2 Is,Equals...
View Article用SQL语句向表格中插入数据 数据库 数据库教程 SQL语句 用SQL语句向表格中插入数据
用SQL语句向表格中插入数据 向表格中插入数据 SQL语言使用insert语句向数据库表格中插入或添加新的数据行。Insert语句的使用格式如下：insert into tablename(first_column,…last_column)values (first_value,…last_value);例如：insert into employee(firstname, lastname,...
View ArticleClik here to view.
Redis的复制 Redis 复制 服务器
复制 通过持久化，保证了即使重启服务也不会损失（或少量损失）数据。但是如果服务器的硬盘出现故障，也会导致数据丢失。为了避免这种情况发生，我们希望将数据库复制多个副本部署在不同的服务器上，即使有一台出现故障，也不会影响使用。这就要求当一台服务器上的数据库更新后，可以自动将更新数据同步到其他服务器上，Redis提供了复制功能可以实现这一过程。 1.1 配置...
View Article数据操作语言 语言 数据
SELECT <目标列名序列> 需要哪些序列 AS 指定列别名格式 SELECT COT AS 人数 FROM TA 消除取值相同的行 DISTINCT 用在序列中。 统计行数 COUNT (*) 格式 SELECT COUNT(*) FROM ST 统计部分行数 COUNT (DISTINC SJ) 格式 COUNT (DISTINC SJ) FROM ST 计算列值总和 SUM...
View Article第13章用户控制访问 用户
第13章 用户控制访问13.1用户访问控制及其访问权限常见的DBA权限 Create user 创建用户 Drop user 删除用户 Drop any table Back any table Select any table Create any table13.2权限分类13.3创建用户及授予权限13.3.1创建用户的语法Create user[用户名]...
View ArticleClik here to view.
万能数据库查询分析器7.023版本发布 分析器 版本 数据库
中国本土程序员马根峰（CSDN专访马根峰：海量数据处理与分析大师的中国本土程序员）推出的个人作品----万能数据库查询分析器，中文版本《DB 查询分析器》、英文版本《DB Query Analyzer》。它具有强大的功能、友好的操作界面、良好的操作性、跨越各种数据库平台乃至于EXCEL和文本文件。DB 查询分析器在中关村在线 下载量超过12万...
View Article轻松使用crontab调度作业 crontab 调度作业
很容易用crontab命令创建一个任务，定期运shell脚本，如：# 修改文件属性为可执行chmod 755 /root/regular_etl.sh# 编辑crontab文件内容crontab -e# 添加如下一行，指定每天2点执行定期装载作业，然后保存退出0 2 * * *...
View ArticleR中一些常用的命令 命令 常用 R
转自：http://www.cnblogs.com/eifer/p/4602610.html getwd()：查看当前工作路径 setwd(str)：设置工作路径为str library()：查看当前可用包 library(x)：载入包x citation(x)：查看包x的引用信息 search()：查看已载入的包 detach(package:x)：取消包x的载入...
View Article使用DBMS_LOGMNR分析归档日志应用一例 日志
有个项目提出的需求是这样的：部署两个相同的数据库应用A、B，两个库之间没有网络连接，要定期把A库里的数据复制到B库。要求：应用程序不做修改实现增量数据更新（不能重复导入）我提出了使用DBMS_LOGMNR分析归档日志并redo变化的方案：A库上线前数据库需要启用归档日志每次同步数据时对A库先执行一次日志切换，然后拷贝归档日志文件，拷贝后删除（最新生成的归档日志文件不要拷贝和删除）在B库上使用DBMS...
View Articlecentos7系统安装Mariadb centos7 系统安装 Mariadb
从最新版本的centos系统开始，使用命令yum install mysql 默认安装的是 Mariadb而不是mysql！ yum install mariadb mariadb-server systemctl start mariadb ==> 启动mariadb systemctl enable mariadb ==> 开机自启动...
View Article