随笔记录

Redis设计与实现——RDB和AOF持久化区别

2016-1-6 diaba Redis

原文：http://blog.csdn.net/jackpk/article/details/30073097 aof，rdb是两种 redis持久化的机制。用于crash后，redis的恢复。 rdb的特性如下： Code: fork一个进程，遍历hash table，利用copy on write，把整个db dump保存下来。 save, shutdown, slave 命令会触发这个操作。 粒度比较大，如果save, shutdown, slave 之前crash了，则中间的操作没办法恢复。 aof有如下特性： Code...

阅读全文>>

标签: RDB AOF

评论(0) 浏览(3108)

Redis设计与实现——常用命令

2016-1-6 diaba Redis

    Redis提供了丰富的命令，允许我们连接客户端对其进行直接操作.这里简单介绍一下作为常用的一些命令，包括对字符串、列表、集合、有序集合、哈希表的操作，以及一些其他常用命令。 【 基本操作】 1. 添加记录：通常用于设置字符串(string)类型，或者整数类型；如果key已经存在，则覆盖其对应的值。 Shell代码   set name James   ...

阅读全文>>

标签: redis 命令

评论(0) 浏览(1993)

Java文件压缩操作

2016-1-5 diaba Java

原文：http://hello-nick-xu.iteye.com/blog/2002613      在web开发过程中，进行文件的压缩传输是一种常见的需求。比如一种场景：用户需要下载定时生成的报表，我们需要先对报表文件进行压以方便用户的下载，并减少文件的存储空间。      事实上，JDK已经提供了文件压缩/解压缩的支持，可以生成zip/gzip的压缩格式，并且支持支持“校验和”以检查压缩文件的完整性。通常会使用CRC（循环冗余校验）算法进行校验。      遗憾的是，JDK...

阅读全文>>

标签: java文件压缩

评论(0) 浏览(3652)

Java加密解密下篇【包括MD5、BASE64、DES、RSA等算法】

2016-1-5 diaba Java

原文：http://hello-nick-xu.iteye.com/blog/2103781 在上一篇博客中已经简要的介绍了MD5、BASE64、DES、RSA等算法在Java中的具体应用。现在可以考虑对这些代码封装成一个工具类EncryptUtil，然后再补充一下Commons Codec对BASE64的扩展支持！   <一>. EncryptUtil工具类：  1. 使用commons-logging记录异常日志。  2. 提取常量字段、公共字段。  3...

阅读全文>>

标签: 加密 解密

评论(0) 浏览(3548)

Java加密解密上篇【包括MD5、BASE64、DES、RSA等算法】

2016-1-5 diaba Java

原文 http://hello-nick-xu.iteye.com/blog/2103775  搞Java的攻城狮应该比较欣喜若狂的，不仅Sun公司的JDK提供了庞大的类库，而且还有众多的开源组织和个人不断地丰富着Java的生态系统。没错的，诸如MD5、BASE64、DES、RSA等经典加密解密算法，JDK都有提供专门的API来封装相关操作。程序猿只需要了解算法的思想，以及学习如何使用API即可。当然，针对BASE64算法，JDK仅仅提供了非常标准的实现，在某些场景下无法满足应用需求。在最后一部分，将学习Apache提供的Commons C...

阅读全文>>

标签: 加密 解密

评论(0) 浏览(3222)

MySQL 数据库引擎

2016-1-4 diaba Mysql

    MySQL有以下几种引擎：ISAM、MyISAM、HEAP、InnoDB和Berkley（BDB）。     注意：不同的版本支持的引擎是有差异的。当然，也能使用MySQL++来创建自己的数据库引擎，具体操作可以参照MySQL++ API帮助来实现。     下面逐一叙述这5种引擎各自的特性：     ISAM     ISAM是一个定义明确且历经时间考验的数据表格管理方法，它在设计之时就考虑到数据库被...

阅读全文>>

标签: mysql 数据库引擎

评论(0) 浏览(2974)

2016年

2016-1-2 diaba 随笔记录

2016年开始，希望一切安好！

阅读全文>>

标签: 2016

评论(0) 浏览(2967)

发布&订阅的消息系统 Kafka的深度解析

2015-12-29 diaba Kafka

发布&订阅的消息系统 Kafka的深度解析 2015-01-27 10:25 Jason Guo Jason Guo的博客 字号：T | T 一个典型的kafka集群中包含若干producer（可以是web前端产生的page view，或者是服务器日志，系统CPU、memory等），若干broker（Kafka支持水平扩展，一般broker数量越多，集群吞吐率越高），若干consumer group，以及一个Zookeeper集群。Kafka通过Zookee...

阅读全文>>

标签: kafka

评论(0) 浏览(3432)

Kafka各个组件介绍

2015-12-29 diaba Kafka

Kafka组件介绍 Broker     Kafka集群包含一个或多个服务器，这种服务器被称为broker Topic     每条发布到Kafka集群的消息都有一个类别，这个类别被称为topic。（物理上不同topic的消息分开存储，逻辑上一个topic的消息虽然保存于一个或多个broker上但用户只需指定消息的topic即可生产或消费数据而不必关心数据存于何处） Partition  &nbs...

阅读全文>>

标签: kafka

评论(0) 浏览(3347)

JVM服务参数调优实战

2015-12-27 diaba JVM

大型网站服务器案例 承受海量访问的动态Web应用 服务器配置：8 core CPU, 8G MEM, JDK 1.6.X 参数方案： -server -Xmx3550m -Xms3550m -Xmn1256m -Xss128k -XX:SurvivorRatio=6 -XX:MaxPermSize=256m -XX:ParallelGCThreads=8 -XX:MaxTenuringThreshold=0 -XX:+UseConcMarkSweepGC 调优说明： -Xmx&...

阅读全文>>

标签: jvm

评论(0) 浏览(3420)

垃圾回收器选择及jvm参数介绍

2015-12-27 diaba JVM

垃圾回收器选择 JVM给出了3种选择：串行收集器、并行收集器、并发收集器。串行收集器只适用于小数据量的情况，所以生产环境的选择主要是并行收集器和并发收集器。 默认情况下JDK5.0以前都是使用串行收集器，如果想使用其他收集器需要在启动时加入相应参数。JDK5.0以后，JVM会根据当前系统配置进行智能判断。 串行收集器 -XX:+UseSerialGC：设置串行收集器。 并行收集器（吞吐量优先） -XX:+UseParallelGC：设置为并行收集器。此配置仅对年轻代有效。即年轻代使用并行收集，而年老代...

阅读全文>>

标签: gc

评论(0) 浏览(3163)

JVM参数说明

2015-12-27 diaba JVM

-Xmx3550m：设置JVM最大堆内存为3550M。 -Xms3550m：设置JVM初始堆内存为3550M。此值可以设置与-Xmx相同，以避免每次垃圾回收完成后JVM重新分配内存。 -Xss128k：设置每个线程的栈大小。JDK5.0以后每个线程栈大小为1M，之前每个线程栈大小为256K。应当根据应用的线程所需内存大小进行调整。在相同物理内存下，减小这个值能生成更多的线程。但是操作系统对一个进程内的线程数还是有限制的，不能无限生成，经验值在3000~5000左右。需要注意的是：当这个值被设置的较大（例如>2MB）时将会在很大程度上降低系统的性能。 ...

阅读全文>>

标签: jvm参数

评论(0) 浏览(3487)

并行与并发的概念

2015-12-27 diaba 多线程

并行：同一时刻，同时发生    类似网络带宽概念 并发：同一时间间隔内发生    类似网络吞吐量概念

阅读全文>>

标签: 并发 并行

评论(0) 浏览(2907)

【转】Java 如何有效地避免OOM：善于利用软引用和弱引用

2015-12-24 diaba JVM

想必很多朋友对OOM（OutOfMemory）这个错误不会陌生，而当遇到这种错误如何有效地解决这个问题呢？今天我们就来说一下如何利用软引用和弱引用来有效地解决程序中出现的OOM问题。下面是本文的目录大纲： 一.了解 强引用、软引用、弱引用、虚引用的概念 二.进一步理解软引用和弱引用 三.如何利用软引用和弱引用解决OOM问题 如果有不正之处，希望谅解和批评指正，不胜感激。 请尊重作者劳动成果，转载请标明原文链接：   http://www.cnblogs.com/dolphin0...

阅读全文>>

标签: OOM 软引用 弱引用

评论(0) 浏览(2989)

【转】Java多线程-工具篇-BlockingQueue

2015-12-22 diaba 多线程

前言：      在新增的Concurrent包中，BlockingQueue很好的解决了多线程中，如何高效安全“传输”数据的问题。通过这些高效并且线程安全的队列类，为我们快速搭建高质量的多线程程序带来极大的便利。本文详细介绍了BlockingQueue家庭中的所有成员，包括他们各自的功能以及常见使用场景。 认识BlockingQueue 阻塞队列，顾名思义，首先它是一个队列，而一个队列在数据结构中所起的作用大致如下图所示： 从上图我们可以很清楚看到，通过一个共享的队列，可以使得数据由队列的一端输入，从另外一端输出；...

阅读全文>>

标签: BlockingQueue

评论(0) 浏览(2886)

spring-ioc配置

2015-12-19 diaba 技术框架

通过xml配置bean时，可以控制spring容器中保留几个实例 默认是单例的，如果想要实现每次从容器中取得实例，都是新实例，那么只需要配置 scope="prototype" 参数即可。 默认是： scope="singleton"

阅读全文>>

标签: spring ioc

评论(0) 浏览(2909)

Mysql-ifnull，if语句

2015-12-17 diaba Mysql

取某行数据多个数值字段最大的一个值 select if(field1>field2,field1,field2) as bigger, if(if(field1>field2,field1,field2)>if(field3>field4,field3,field4),if(field1>field2,field1,field2),if(field3>field4,field3,field4)) as biggest from dual;

阅读全文>>

标签: mysql if ifnull

评论(0) 浏览(3192)

Paxos 算法/协议

2015-12-6 diaba 分布式

基于消息传递的一致性算法。 节点通讯存在两种模式：共享内存（Shared memory，需要锁)和消息传递（Message passing)。

阅读全文>>

标签: paxos 分布式一致性

评论(0) 浏览(2980)

MySQL Query Cache 小结

2015-12-6 diaba Mysql

作者：Sky.Jian | 可以任意转载, 但转载时务必以超链接形式标明文章原始出处 和 作者信息 及 版权声明 链接：http://isky000.com/database/mysql-query-cache-summary 最近经常有人问我 MySQL Query Cache 相关的问题，就整理一点 MySQL Query Cache 的内容，以供参考。 顾名思义，MySQL Query Cache 就是用来缓存和 Query 相关的数据的。具体来说，Query Cache 缓存了我们客户端提交给 MySQL 的 SELECT 语句以及该语句的结果集。大概来讲，就是将 SE...

阅读全文>>

标签: cache mysql query

评论(0) 浏览(3071)

Mysql-如果为null返回0

2015-12-4 diaba Mysql

1、如果为空返回0 select ifnull(null,0) 2、如果为空返回0，否则返回1 select if(isnull(col),0,1) as col.

阅读全文>>

标签: 数据库 mysql 如果为null

评论(0) 浏览(3789)