文章列表
一共有4台机器，各自挂接一个存储，希望实现：
1.尽量节约存储
2.高可用性
3.存储大量数据
配置方案：
1.每一台机器做一个分片的主数据库
2.每一台机器做一个分片的后备数据库
3.每一台机器做一个分片的仲裁服务
4.两个两个一组交叉作对方的后备
5.有三台机器开配置服务
6.有一台机器开路由服务（生产环境可以在每一台Windows App服务器上开路由服务，App服务器集群做负载均衡）
这样的话，任何一台服务器完全离线（或者交叉的两台服务器离线），都能保证整个系统正常运行。不过在服务器和服务器起来之后需要：
1.在升级成为主数据库的那个后备数据库上运行rs.St ...
一个局部变量导致的血案
- 博客分类：
- Java
今天接到一个临时任务，排查一个网站的诡异问题，是这样的，这个网站访问量很大，上了一个模块，在页面服务端发出一个http请求，读取另一个java网站提供的数据，上线之后发现一旦存在并发，或是比较多的访问，http请求 ...
先说说自己对Memcache和Mongodb的一些看法，主要是抛砖引玉了，希望看到大家的意见和补充。
Memcache
Memcache的优势我觉得总结下来主要体现在：
1） 分布式。可以由10台拥有4G内存的机器，构成一个40G的内存池，如果觉 ...
Mongodb亿级数据量的性能测试
- 博客分类：
- MongoDB
进行了一下Mongodb亿级数据量的性能测试，分别测试如下几个项目：
（所有插入都是单线程进行，所有读取都是多线程进行）
1） 普通插入性能 （插入的数据每条大约在1KB左右）
2） 批量插入性能 （使用的是官方C#客户端 ...
MINA,xSocket同样的性能缺陷及陷阱,Grizzly better
MINA,Grizzly[grizzly-nio-framework],xSocket都是基于 java nio的 server framework.
这里的性能缺陷的焦点是指当一条channel上的SelectionKey.OP_READ ready时,
1.是由select thread读完数据之后再分发给应用程序的handler,
2.还是直接就分发,由handler thread来负责读数据和handle.
mina,xsocket是1. grizzly-nio-framework是2.
尽管读channel ...
Connection-Oriented网络应用教程
这是一个使用xSocket2.0编写connection-oriented网络应用的初学者教程。 如果您需要更多的帮助，不要犹豫，使用 xSocket的支持论坛 。xsocket-develop@lists.sourceforge.net
核心功能
主要的抽象，以支持面向流的沟通是 连接 。 读取数据，并书面使用 IBlockingConnection 或 INonblockingConnection 对象。 一个连接对象提供了多种方便的方法来读取和写入批量模式在一个特定的数据类型记录或。
一个方面，还实现了 GatheringByteC ...
Clustering(集群)
ActiveMQ从多种不同的方面提供了集群的支持。
1、 Queue consumer clusters
ActiveMQ支持订阅同一个queue的consumers上的集群。如果一个consumer失效，那么所有未被确认（unacknowledged）的消息都会被发送到这个queue上其它的consumers。如果某个consumer的处理速度比其它 consumers更快，那么这个consumer就会消费更多的消息。
需要注意的是，笔者发现AcitveMQ5.0版本的Queue consumer clusters存在一个bug：采用 ...
分类 项目名 说明 开发语言
服务器
（共20） Apache HTTP Server 全球第一HTTP服务器 C/C++
Tomcat Java的Web服务器 Java
James 邮件服务器 Java
SpamAssassin 反垃圾邮件 C/C++
Perl Apache的Perl编程语言支持 C/C++
Tcl TCL脚本语言 C/C++
Directory Server 超 ...
本文基于环境hadoop-0.16.4 和 hbase-0.1.3 编写
Hbase是一个分布式开源数据库，基于Hadoop分布式文件系统，模仿并提供了基于Google文件系统的Bigtable数据库的所有功能。
Hbaes的目标是处理非常庞大的表，可以用普通的计算机处理超过10亿行数据，并且有数百万列元素组成的数据表。
Hbase可以直接使用本地文件系统或者Hadoop作为数据存储方式，不过为了提高数据可靠性和系统的健壮性，发挥Hbase处理大数据量等功能，需要使用Hadoop作为文件系统，那么我们就先要了解Hadoop文件系统的基本特性和原理，才能更好地理解Hbase的工作方式。
...
序列化与反序列化，有如下结论：
1. 当父类继承Serializable接口，所有子类都可以被序列化
2. 子类实现了Serializable接口，父类没有，父类中的属性不能序列化（不报错，数据会丢失），但是子类中属性人能正确序列化
3. 如果序列化的属性是对象，这个对象也必须实现Serializable接口，否则会报错
4. 在反序列化时，如果对象的属性有修改或删减，修改的部分属性会丢失，但不会报错
5. 在反序列化时，如果serialVersionUID被修改，调用tairManager.get(dcNameSpace, key) .getValue().getValue()
...
建立安装目录mkdir -p /local/software/zookeeper/cd /local/software/zookeeper/1.2) 下载压缩包 curl -O http://apache.oss.eznetsols.org/hadoop/zookeeper/zookeeper-3.3.1/zookeeper-3.3.1.tar.gz 1.3) 解压缩文件 tar xzf zookeeper-3.3.1.tar.gz cd /local/software/zookeeper/
2. Config我们把提供相同应用的服务器组称之为一个quorum，quorum中的所有机器都有相同 ...
Zookeeper能帮我们作什么事情呢?简单的例子:假设我们我们有个20个搜索引擎的服务器(每个负责总索引中的一部分的搜索任务)和一个总服务器(负责向这20个搜索引擎的服务器发出搜索请求并合并结果集),一个备用的总服务器(负责当 ...
Web2.0的兴起，掀起了互联网新一轮的网络创业大潮。以用户为导向的新网站建设概念，细分了网站功能和用户群，不仅成功的造就了一大批新生的网站，也极大的方便了上网的人们。但Web2.0以用户为导向的理念，使得新生的网站有了新的特点——高并发，高流量，数据量大，逻辑复杂等，对网站建设也提出了新的要求。
本文围绕高并发高流量的网站架构设计问题，主要研究讨论了以下内容：
首先在整个网络的高度讨论了使用镜像网站，CDN内容分发网络等技术对负载均衡带来的便利及各自的优缺点比较。然后在局域网层次对第四层交换技术，包括硬件解决方案F5和软件解决方案LVS，进行了简单的讨论。接下来在单服务器 ...
后面介绍的不同方式都有测试数据，这些测试数据都是在同一的测试环境下得出的测试结果：
测试机器的配置如下：
64位5核CPU, E5620 @ 2.40GHz，内存8G
CDN端缓存
由于计数器的价值并不在，具体的值是多少，尤其是对一些大 ...
简介： I/O 问题可以说是当今互联网 Web 应用中所面临的主要问题之一，因为当前在这个海量数据时代，数据在网络中随处流动。这个流动的过程中都涉及到 I/O 问题，可以说大部分 Web 应用系统的瓶颈都是 I/O 瓶颈。本文的目的正是分析 I/O 的内在工作机制，你将了解到：Java 的 I/O 类库的基本架构；磁盘 I/O 工作机制；网络 I/O 的工作机制；其中以网络 I/O 为重点介绍 Java Socket 的工作方式；你还将了解到 NIO 的工作方式，还有同步和异步以及阻塞与非阻塞的区别，最后我们将介绍一些常用的关于 I/O 的优化技巧。
.Java 的 I/O 类库的基本架 ...