qmkemail
qmkemail · 共 151 篇文章
[置顶] 1 与众不同的Liferay
本章介绍Liferay的基本原理及入门知识。 Java Portlet的承诺:从失望到满足 进一步了解Liferay Liferay支持LGPL开源协议,并另外提供一个商用的企业版 Liferay是一个应用程序聚合器 Liferay是一个内容管理器 Liferay是一个理想的协作工具 Liferay可以变成你所需要的任何东西和任何样子 Liferay是怎样构成的 高级视图 用户、角色、组织、用户组 添加内容到页面集 配置portlet的作用域 Liferay扫视 建立你的虚拟站点
2012-06-30 16:55 · Liferay.in.Action · 评论(0)
Cassandra 分布式数据库详解,第 1 部分:配置、启动与集群
原文 http://www.ibm.com/developerworks/cn/opensource/os-cn-cassandraxu1/ Cassandra 分布式数据库详解,第 1 部分:配置、启动与集群 许 令波 , Java 工程师, 淘宝网 简介: 本文首先介绍了 Cassandra 服务器的配置文件各个配置项的意义,接着讨论了它的启动过程,包括 Cassandra 在启动过程中主要都完成了那些操作,为什么要执行这些操作,最终达到什么状态等。接着介绍如果在集群情况下,集群中节点如何自治理,节点间如何通信、如何控制数据在集群中的分布等关键问题。 本文的标签: cassandra ,…
Cassandra 分布式数据库详解,第 2 部分:数据结构与数据读写
原文 http://www.ibm.com/developerworks/cn/opensource/os-cn-cassandraxu2/ Cassandra 的数据存储结构 Cassandra 中的数据主要分为三种: CommitLog:主要记录下客户端提交过来的数据以及操作。这个数据将被持久化到磁盘中,以便数据没有被持久化到磁盘时可以用来恢复。 Memtable:用户写的数据在内存中的形式,它的对象结构在后面详细介绍。其实还有另外一种形式是 BinaryMemtable 这个格式目前 Cassandra 并没有使用,这里不再介绍了。 SSTable:数据被持久化到磁盘,这又分为 Dat…
让 WordPress 使用 Redis 缓存来进行加速
原文 http://www.oschina.net/question/12_60107 Redis 是一个高级的 key-value 存储系统,类似 memcached,所有内容都存在内存中,因此每秒钟可以超过 10 万次 GET 操作。 我下面提出的解决方案是在 Redis 中缓存所有输出的 HTML 内容而无需再让 WordPress 重复执行页面脚本。这里使用 Redis 代替 Varnish 设置简单,而且可能更快。 安装 Redis 如果你使用的是 Debian 或者衍生的操作系统可使用如下命令安装 Redis: 1 apt-get install redis-server 或者阅…
Linux 下 Redis 安装详解
原文 http://www.oschina.net/question/12_18065 redis作为NoSQL数据库的一种应用,响应速度和命中率上还是比较高效的。项目中需要用集中式可横向扩展的缓存框架,做了一点调研,即便redis、memcached存在效率上的差异(具体比较参考http://timyang.net/data/mcdb-tt-redis/),但其实都能满足目前项目的需求;但是redis还是比较风骚的,支持链表和集合操作,支持正则表达式查找key,目前项目缓存的结果大多是链表,如果链表新增或者修改数据的话,redis就体现出了极大的优势(memcached只能重新加载链表,r…
Redis作者:深度剖析Redis持久化
原文 http://www.iteye.com/news/24675 Redis是一种面向“key-value”类型数据的分布式NoSQL数据库系统,具有高性能、持久存储、适应高并发应用场景等优势。它虽然起步较晚,但发展却十分迅速。 近日,Redis的作者在博客中写到, 他看到的所有针对Redis的讨论中,对Redis持久化的误解是最大的 ,于是他写了一篇长文来对Redis的持久化进行了系统性的论述。文章主要包含三个方面: Redis持久化是如何工作的、这一性能是否可靠以及和其它类型的数据库比较 。以下为文章内容: 一、Redis持久化是如何工作的? 什么是持久化?简单来讲就是将数据放到断电…
Google在新的内容索引系统中放弃MapReduce
原文 http://www.hadoopor.com/thread-1880-1-1.html Google在新的内容索引系统中放弃MapReduce mapreduce , google , 云计算 有消息表明,Google在新型网络内容索引系统——Caffeine中,将放弃以MapReduce为基础架构的分布式计算平台。 据Google高级主管Eisar Lipkovitz表示,在Caffeine中,Google的后端索引系统将从MapReduce上移除,并向Google新建的分布式数据库平台——BigTable上进行迁移。他表示,谷歌将于下月在USENIX研讨会上提交一项新的文件讨论系…
2012-07-31 10:30 · Hadoop · 评论(0)
Yahoo!的分布式数据平台PNUTS简介及感悟
原文 http://timyang.net/architecture/yahoo-pnuts/ Yahoo!的分布式数据平台PNUTS简介及感悟 Sunday, Jun 21st, 2009 by Tim | Tags: CAP , PNUTS 在分布式领域有个CAP理论( Brewer’s CAP Theorem ) ,是说Consistency(一致性), Availability(可用性), Partition tolerance(分布) 三部分在系统实现只可同时满足二点,没法三者兼顾。所以架构设计师不要把精力浪费在如何设计能满足三者的完美分布式系统,而是应该进行取舍,选取最适合应用需…
2012-07-31 10:23 · 架构设计 · 评论(0)
微软展开“大数据”蓝图,推进Hadoop至Azure和Windows Server
原文 http://www.iteye.com/news/23045 微软已经展开了他们的“大数据”蓝图,其中担当主要角色的就是Apache Hadoop。 Hadoop是一个分布式系统基础架构,由Apache基金会开发。它是一个能够对大量数据进行分布式处理的软件框架。用户可以在不了解分布式底层细节的情况下,开发分布式程序,充分利用集群的威力高速运算和存储。 在12日西雅图召开的微软PASS(Professional Association for SQL Server,SQL Server专家协会) Summit会议上,微软公司副总裁Ted Kumert 描绘了这一蓝图 。Ted Kume…
淘宝数据魔方技术架构解析
原文 http://www.programmer.com.cn/7578/ 淘宝网拥有国内最具商业价值的海量数据。截至当前,每天有超过30亿的店铺、商品浏览记录,10亿在线商品数,上千万的成交、收藏和评价数据。如何从这些数据中挖掘出真正的商业价值,进而帮助淘宝、商家进行企业的数据化运营,帮助消费者进行理性的购物决策,是淘宝数据平台与产品部的使命。 为此,我们进行了一系列数据产品的研发,比如为大家所熟知的量子统计、数据魔方和淘宝指数等。尽管从业务层面来讲,数据产品的研发难度并不高;但在 “海量”的限定下,数据产品的计算、存储和检索难度陡然上升。本文将以数据魔方为例,向大家介绍淘宝在海量数据产品…
Hadoop分布式文件系统:架构和设计要点
摘自 http://www.blogjava.net/killme2008/archive/2008/06/05/206043.html Hadoop分布式文件系统:架构和设计要点 原文:http://hadoop.apache.org/core/docs/current/hdfs_design.html 一、前提和设计目标 1、硬件错误是常态,而非异常情况,HDFS可能是有成百上千的server组成,任何一个组件都有可能一直失效,因此错误检测和快速、自动的恢复是HDFS的核心架构目标。 2、跑在HDFS上的应用与一般的应用不同,它们主要是以流式读为主,做批量处理;比之关注数据访问的低延迟问…
Apache Hadoop 2.0 Alpha 版发布
原文 http://www.iteye.com/news/25197 **Apache Hadoop社区近日发布了最新的Apache Hadoop 2.0 Alpha版本,**这标志着Apache Hadoop进入了一个新的分支。 Hadoop是Apache的顶级开源项目,由前雅虎开发者Doug Cutting(也是Nutch和Lucene的创始人)开发的分布式计算平台,是一个能够对大量数据进行分布式处理的框架。用户可以在不了解分布式底层细节的情况下开发分布式程序,充分利用集群的威力高速运算和存储。 该版本提供了一些新的、重要的功能,包括: HDFS HA ,当前只能实现人工切换。 YARN…
云计算成为现实
原文 http://www.jdon.com/34888 2008年下半年这些日子,虽然微软还在表示进军 云计算 ,但是 云计算 在Java世界实际上已经从口号变成现实。 这是一篇Web服务器Jetty集群文章的翻译,也就是说:Jetty已经可以嵌入下面这些 云计算 软件,而你只要将你的Web应用部署到Jetty,就能实现 云计算 ,是不是很简单,现在就可以去做。 将你的应用部署到Cloud computing 云计算 环境. 再也无需你管理,可以很容易伸缩,大大提高处理能力,提供失败的可恢复性,硬件上 云计算 由一批成本低廉的服务器器组成。这些成本远低于传统数据库集中模型。 Softwar…
2012-07-30 16:06 · 架构设计 · 评论(0)
安全第一!VMware云安全八项新举措
云与安全,就这种双重组合而言,它与饼干和牛奶,节奏和布鲁斯还不完全是一回事儿。 这对于那种有志于花费大量经费来销售公共云服务或公共云基础设施的公司来说是个问题。云也许(或不)是“安全的”,但这并不是问题的关键。只要潜在的消费者不确定该怎么认为,那想要在这上面挣钱就绝非易事。 因此,你该如何打消潜在客户心中关于云与安全方面的疑虑,并使他们把这两者自然地和鱼和薯条似的相提并论呢? VMware已经彻底地考虑过了这个问题,而且Don Drapers也已经提出了一个方案。它并不是什么特别有新意的想法,但它或许是个可行的方案:这个虚拟化技术公司已经开始与一些在安全领域有名号的大公司加强合作并提出了一系…
2012-07-30 16:03 · 云计算 · 评论(0)
MongoDB Hadoop Connector 1.0 正式版发布
原文 http://www.iteye.com/news/24811 10gen(MongoDB数据库开发商)今天发布了MongoDB Hadoop Connector 1.0 正式版本。 **MongoDB Hadoop Connector的核心功能是允许读取MongoDB数据到Hadoop MapReduce工作中,以及将MapReduce工作的结果写回到MongoDB。用户可以针对每个实例来选择结合使用或单独使用MongoDB的读、写操作。**该连接器的目标是根据用户的反馈和需求,继续完善对Hadoop生态系统中组件的支持。 10gen称,1.0版是一个长期支持版本,将提供超过1年的维…