ITeye博客

2012 年文章归档

共 26 篇文章

Memcached无单点解决方案

一.Repcached (memcached同步补丁) 下载地址: http://sourceforge.net/projects/repcached/files/repcached/2.2.1-1.2.8/ 版本号:memcached 1.2.8 repcached 2.2.1 1、repcached介绍 repcached是日本人开发的实现memcached复制功能,它是一个单 master单 slave的方案,但它的 master/slave都是可读写的,而且可以相互同步,如果 master坏掉, slave侦测到连接断了,它会自动 listen而成为 master;而如果 slave…

2012-12-25 19:24 · memcache

MySQL 系统架构 说明

说明:本文转自 简朝阳(MySQL ACE)的 《MySQL性能调优与架构设计》 一.逻辑模块组成 总的来说,MySQL 可以看成是二层架构,第一层我们通常叫做SQL Layer,在MySQL 数据库系统处理底层数据之前的所有工作都是在这一层完成的,包括权限判断,sql 解析,执行计划优化,querycache 的处理等等;第二层就是存储引擎层,我们通常叫做Storage Engine Layer,也就是底层数据存取操作实现部分,由多种存储引擎共同组成。所以,可以用如下一张最简单的架构示意图来表示MySQL 的基本架构,如图2-1 所示: 虽然从上图看起来MySQL 架构非常的简单,就是简单…

2012-12-07 22:07 · MySQL

基于InnoDB存储引擎的mysql数据库表结构详解

前言 前一篇文章 基于InnoDB存储引擎的mysql数据库文件详解 中的数据文件就是本篇文章的表文件。基于InnoDB存储引擎的mysql数据库所有数据都存在这个表文件中,可以叫做表空间。InnoDB存储引擎的表空间由段(segment),区(extent),页(page)组成。 理解一个概念:如果一台运行mysql数据库的服务器内存大小为1G,那么如果你查询大于1G的数据,必挂无疑。像select * from table的数据小于1G那么也会很慢,但是可以查询。mysql数据库把所有的数据传送完之后会存储一部分数据到内存。提供给下次的查询。 InnoDB存储引擎表空间结构图 虽然表空间…

2012-12-07 22:05 · MySQL

MySQL技术内幕:InnoDB存储引擎读书笔记(下)

第六章、锁 锁是区别文件系统和数据库系统的一个关键特性。 6.1、什么是锁? 锁是用来管理对共享文件的并发访问。innodb会在行级别上对数据库上锁。不过innodb存储引擎会在数据库内部其他多个地方使用锁,从而允许对不同资源提供并发访问。例如操作缓冲池中的LRU列表,删除,添加,移动LRU列表中的元素,为了保证一致性,必须有锁的介入。 6.2、innodb存储引擎中的锁 6.2.1、锁的类型 S lock 共享锁 允许事务读一行数据 X lock 排它锁 允许事务删除或者更新一条数据 IS lock 意向共享锁 事务想要获得一个表中某几行的共享锁 IX lock 意向拍他所 事务想要获得一…

2012-12-07 21:58 · MySQL

MySQL技术内幕:InnoDB存储引擎读书笔记(中)

第四章、表 4.1、innodb存储引擎表类型 innodb表类似oracle的IOT表(索引聚集表-indexorganized table),在innodb表中每张表都会有一个主键,如果在创建表时没有显示的定义主键则innodb如按照如下方式选择或者创建主键。 首先表中是否有唯一非空索引(unique not null),如果有则该列即为主键。 不符合上述条件,innodb存储引擎会自动创建一个6字节大小的指针,rowid(). 4.2、innodb逻辑存储结构 innodb的逻辑存储单元由大到小分别是 tablespace,segment,extent,page(block)组成。 4…

2012-12-07 21:54 · MySQL

MySQL技术内幕:InnoDB存储引擎读书笔记(上)

第一章、mysql体系结构和存储引擎 1.1、数据库和实例的区别 数据库:物理操作系统或其他形式文件类型的集合。在mysql下数据库文件可以是frm,myd,myi,ibd结尾的文件。 数据库实例:由数据库后台进程/线程以及一个共享内存区组成。 mysql数据库是但进程多线程的程序。 1.2、mysql的体系结构 mysql由连接池组件、管理服务和工具组件、sql接口组建、查询分析器组件、优化器组件、缓存组件、插件是存储引擎、物理文件。 示意图见书:P4. 1.3、mysql存储引擎 1.3.1、innodb存储引擎,特点支持外键、行锁、非锁定读(默认情况下读取不会产生锁)、mysql-4.…

2012-12-07 21:53 · MySQL

Java入门-简单的RMI示例

RMI是一种分布式技术,使用RMI可以让一个虚拟机上的应用程序请求调用位于网络上另一处JVM上的对象方法。这是的以分布式方式部署应用成为了可能。 RMI的两个核心所在分别为Skeleton和Stub: Skeleton只在位于服务器端的程序,负责接受客户端发来的请求数据,并交由服务器端业务处理程序处理,最后将处理结果返回给客户端。 Stub则负责在客户端向服务器端发送相关数据。 开发RMI应用程序需要以下几步: 定义远程接口:继承自java.rmi.Remote定义应用接口:IAppInterface 实现服务端对象:需继承自java.rmi.UnicastRemoteObject,同时要实…

2012-12-06 11:11 · Java

Java入门-BitSet的使用

在使用PAT-Tree的中文实现中需要用到大量的位运算,BitSet在效率上的表现可能尚待商榷,不过拿来做实验是没有问题的。 在Java的文档中说明了BitSet实现了Vector接口,是一个可按需增长的存储位的数据结构,位的值位布尔型,初始大小为64bit,初始值均为“false”。 常用方法: void set(int bitIndex)、void set(int bitIntex, boolean value) : 将bitIndex位置的值设为“true”或者给定的值 boolean get(int bitIndex) :获取bitIndex位置处的值 BitSet get(int …

2012-12-06 11:01 · Java

google的下一代http协议

http://www.xiuwz.com/site/tech-open-spdy/

2012-10-26 00:26 · google · spdy · nginx

java利用class的load机制实现单例模式

先上代码 public class Singleton { private static Singleton instance = null; public static Singleton getInstance() { if(instance == null) { instance = SingletonLazy.lazy; } return instance; } private static class SingletonLazy { public static Singleton lazy = new Singleton(); } } classloader首先会加载Singlet…

2012-10-23 16:43

由12306.cn谈谈网站性能技术

12306.cn网站挂了,被全国人民骂了。我这两天也在思考这个事,我想以这个事来粗略地和大家讨论一下网站性能的问题。因为仓促,而且完全基于本人有限的经验和了解,所以,如果有什么问题还请大家一起讨论和指正。(这又是一篇长文,只讨论性能问题,不讨论那些UI,用户体验,或是是否把支付和购票下单环节分开的功能性的东西) 业务 任何技术都离不开业务需求,所以,要说明性能问题,首先还是想先说说业务问题。 其一 , 有人可能把这个东西和QQ或是网游相比 。但我觉得这两者是不一样的,网游和QQ在线或是登录时访问的更多的是用户自己的数据,而订票系统访问的是中心的票量数据,这是不一样的。不要觉得网游或是QQ能行…

2012-10-17 16:35 · Java · MySQL · 云计算 · 12306

mysql水平切分

在大中型项目中,在数据库设计的时候,考虑到数据库最大承受数据量,通常会把数据库或者数据表水平切分,以降低单个库,单个表的压力。我这里介绍两个我们项目中常用的数据表切分方法。当然这些方法都是在程序中使用一定的技巧来路由到具体的表的。首先我们要确认根据什么来水平切分?在我们的系统(SNS)中,用户的UID贯穿系统,唯一自增长,根据这个字段分表,再好不过。 方法一:使用MD5哈希 做法是对UID进行md5加密,然后取前几位(我们这里取前两位),然后就可以将不同的UID哈希到不同的用户表(user_xx)中了。 function getTable( $uid ){ $ext = substr ( m…

2012-10-17 13:22 · MySQL

开源Paas平台

Open Source PaaS Platform - OpenShift https://openshift.redhat.com

2012-09-20 15:08 · 云计算

Server redirected too many times

我之前遇到过这种问题,有些网站是这样的,他判断cookie里面是否有某个值,如果没有就定向到另外一个页面去把COOKIE的值设置了,然后再跳转回来,但是如果我们通过HttpURLConnection去的话,cookie里面一直都没有那个值,所以他就一直在那里跳来跳去,所以我们就需要一个CookieManager,在使用URLConnection之前设置它,只需要设置一次。 目前还不清楚这样的设置是否会带来更多的内存开销。 如果有人愿意研究,请告知。 System.setProperty("http.maxRedirects", "100"); It's apparently redirect…

2012-09-17 16:54 · Java

CentOS下搭建Git服务器Gitosis

1.编译安装git 1$ wget http://kernel.org/pub/software/scm/git/git-1.7.3.tar.gz #目前最新版本 2$ tar -xzvf git-1.7.3,tar.gz #解压出来 3$ cd git-1.7.3 #进入目录 4$ yum install -y gettext-devel expat-devel curl-devel zlib-devel openssl-devel #-y是默认自动安装,安装编译时用到的东东 5$ ./configure --with-curl=/usr/local #git安装路径 6$ make &&…

2012-08-29 16:47 · git · Gitosis

mysql主从复制(半同步方式)

一、半同步复制原理介绍 如果还不了解Semi-sync可以阅读( Mannul | 概述 ) 1. 优点 当事务返回客户端成功后,则日志一定在至少两台主机上存在。 MySQL在加载并开启Semi-sync插件后,每一个事务需等待备库接收日志后才返回给客户端。如果做的是小事务,两台主机的延迟又较小,则Semi-sync可以实现在性能很小损失的情况下的零数据丢失。 2. 缺点 完成单条事务增加了额外的等待延迟,延迟的大小取决于网络的好坏。 Semi-sync不是分布式事务,主库会在自己完成事务后,等待备库接收事务日志。 3. 主机Crash时的处理 备库Crash时,主库会在某次等待超时后,关闭…

2012-08-15 12:22 · MySQL

克隆镜像文件

有时候需要创建多个虚拟机,配置基本上相同的,我使用的virtual box,为了省事,先使用原始方法创建一台虚拟机并 安装操作系统,然后使用如下命令克隆出多个系统,并创建多个虚拟机配置文件,然后把虚拟硬盘挂载到虚拟机上即可,非常省事。 VBoxManage clonehd D:/vdi/win2003_target.vdi D:/vdi/win2003_clone.vdi

2012-08-13 17:49 · virtual box

在junit中使用open session in view

废话不多说直接上代码: jpa的 import org.hibernate.Session; import org.hibernate.SessionFactory; import org.junit.After; import org.junit.Test; import org.junit.runner.RunWith; import org.junit.Before; import org.springframework.beans.factory.annotation.Autowired; import org.springframework.orm.hibernate3.Sessi…

2012-08-07 11:22 · Java

geohash:用字符串实现附近地点搜索

http://code.google.com/p/geospatialweb/ https://github.com/kungfoo/geohash-java http://en.wikipedia.org/wiki/Geohash http://tech.idv2.com/2011/07/05/geohash-intro/

2012-07-17 15:02

抓包工具Wireshark

抓包工具 http://baike.baidu.com/view/640594.htm

2012-06-29 17:42 · 网络