看看这个logo，有些像python的小蛇吧 。这次介绍的数据库codernityDB是纯python开发的。先前用了下tinyDB这个本地数据库，也在一个api服务中用了下，一开始觉得速度有些不给力，结果一看实现的方式，真是太鸟了，居然就是json的存储，连个二进制压缩都没有。 这里介绍的CodernityDB 也是纯开发的一个小数据库。 CodernityDB是开源的，纯Python语言（没有第三方依赖），快速，多平台的NoSQL型数据库。它有可选项支持HTTP服务版本（...
步骤一: 下载Redis步骤二: 编译源程序[plain] viewplaincopy[root@localhost 4setup]# ll 总计 29168 -rw-r--r--1 root root455240 2011-07-22 redis-2.2.12.tar.gz [root@localhost 4setup]# tar xzf redis-2.2.12.tar.gz [root@localhost 4setup]# cd redis-2.2.12 [root@localhost redis-2.2.12]# make cd src && make all make[1]: Entering directory `/root/4setup/redis-2.2.12/src‘ ...
算法和思想进行了详细的讲解。文章很长，由@juliashine 进行翻译投稿。感谢译者的共享精神！ 译者介绍：Juliashine是多年抓娃工程师，现工作方向是海量数据处理与分析，关注Hadoop与NoSQL生态体系。 英文原文：《Distributed Algorithms in NoSQL Databases》 译文地址：《NoSQL数据库的分布式算法》 系统的可扩展性是推动NoSQL运动发展的的主要理由，包含了分布式系统协调，故障转移，资源管理和许多其他特性。这么讲使得NoSQ...
本文译自 Distributed Algorithms in NoSQL Databases 系统的可扩展性是推动NoSQL运动发展的的主要理由，包含了分布式系统协调，故障转移，资源管理和许多其他特性。这么讲使得NoSQL听起来像是一个大筐，什么都能塞进去。尽管NoSQL运动并没有给分布式数据处理带来根本性的技术变革，但是依然引发了铺天盖地的关于各种协议和算法的研究以及实践。正是通过这些尝试逐渐总结出了一些行之有效的数据库构建方法。在这篇文章里，我将针对...
基于上篇Hadoop2.6集群部署博文：http://lizhenliang.blog.51cto.com/7876557/1661354接下来部署HBase1.0分布式NoSQL数据库，HBase中涉及到HMaster和HRegionServer两个概念。（注：以下概念来着百度百科）HMaster主要负责Table和Region管理工作： 1. 管理用户对Table的增、删、改、查操作 2. 管理HRegionServer的负载均衡，调整Region分布 3. 在Region Split后，负责新Region的分配 4. 在HRegionServer停机后，负责失效HRegion...
HBase是一个高可靠性、高性能、面向列、可伸缩的分布式存储系统，同时也是知名的NoSQL数据库之一。NoSQL数据库的产生就是为了解决大规模数据集合多重数据种类带来的挑战，尤其是大数据应用的难题。本文对NoSQL数据库的定义、分类、特征、当前比较流行的NoSQL数据库系统等进行了简单的介绍，并对NoSQL和SQL语法进行了简单的比较，为大家对NoSQL数据库的学习提供了有益的参考。 一、NoSQL的出现关系型数据库系统多年来在解决数据存储...
CRM、CMS系统。 master-master复制对于多站点部署是非常有用的。 （编注2：master-master复制：是一种数据库同步方法，允许数据在一组计算机之间共享数据，并且可以通过小组中任意成员在组内进行数据更新。） 2. Redis所用语言：C/C++ 特点：运行异常快 使用许可： BSD 协议：类 Telnet 有硬盘存储支持的内存数据库， 但自2.0版本以后可以将数据交换到硬盘（注意， 2.4以后版本不支持该特性！） Master-slave复制（见编注3） 虽然...
NoSQL数据库：数据的一致性读取一致性强一致性 在任何时间访问集群中任一结点，得到的数据结果一致；用户一致性 对同一用户，访问集群期间得到的数据一致； 解决用户一致性：使用粘性会话，将会话绑定到特定结点来处理； 这样会降低负载均衡器的性能；最终一致性 集群中各结点间由于数据同步不及时造成暂时的数据不一致，但数据同步完成后，最终具有一致性；更新一致性悲观方式 使用写锁 大幅降低系统响应能力 可能导致死锁 乐...
NoSQL数据库的分布式模型单一服务器 在一个服务器完全能够胜任工作时就没必要考虑分布式，这样部署简单，维护也方便很多； 分片 特点 数据的各个部分存放在集群的不同服务器中； 比如按字母来划分：以a-g开头的键值都存放到第一台服务器上，以h-n开头的存放到第二台… 需要考虑的问题如何存放数据，让用户基本上只需从一台服务器上获取数据 如果经常需要与多个结点交互才能取到需要数据，可能分片策略不合适，或者该场景中分片不...
摘要：随着大数据的不断发展，非关系型的数据库现在成了一个极其热门的新领域，非关系数据库产品的发展非常迅速。现今的计算机体系结构在数据存储方面要有庞大的水平扩展性，而NoSQL也正是致力于改变这一现状。目前Google的 BigTable和Amazon 的Dynamo使用的就是NoSQL型数据库，本文介绍了10种出色的NoSQL数据库。 NoSQL的分类 NoSQL仅仅是一个概念，NoSQL数据库根据数据的存储模型和特点分为很多种类。 类型部分代表特点列存储Hb...
传统MySQL+ Memcached架构遇到的问题实际MySQL是适合进行海量数据存储的，通过Memcached将热点数据加载到cache，加速访问，很多公司都曾经使用过这样的架构，但随着业务数据量的不断增加，和访问量的持续增长，我们遇到了很多问题：1.MySQL需要不断进行拆库拆表，Memcached也需不断跟着扩容，扩容和维护工作占据大量开发时间。2.Memcached与MySQL数据库数据一致性问题。3.Memcached数据命中率低或down机，大量访问直接穿透到DB，My...
本章概述了一些NoSQL数据存储常见的基本概念、技术与模式，并不仅限于一类非关系型数据库或一个单一的NoSQL存储。众多NoSQL数据存储和个别产品的具体概念和技术将在随后的章节中讨论。3.1 一致性 3.1.1 CAP理论 在2000年的ACM PODC研讨会上主题为“走向鲁棒的分布式系统”的演示文稿中，Eric Brewer提出了所谓的CAP理论（[ Bre00 ]），它目前在大型网络公司（如Amazon，参见[ Vog07 ]、[ Vog08 ]）以及NoSQL社区中广泛采纳。缩...
在本章中将研究第三类NoSQL数据存储：面向列的数据库。以列来替代行存储和处理数据的方法起源于分析和商业智能，在一个无共享的大规模并行处理（注：MPP）架构中的列存储可用于构建高性能应用。这一领域引人注目的产品是Sybase IQ和Vertica（[ Nor09 ]）。然而，在这一章中，面向列的存储类型被视为少一些纯粹性，也包括了整合面向列和行的数据存储。它们也被描述为“[稀疏的]、分布式的、持久的多维排序[映射]”（例如[Int10 ]）。...
适用案例 现在讲几个适合使用键值数据库的情况。 1 存触会话信息 通常来说，每一次网络会话都是唯一的，所以分配给它们的session id 也各不相同。如果应用程序原来要把session id 存在磁盘上或关系型数据库中，那么将其迁移到键数据库之后， 会获益良多， 因为全部会话内容都可以用一条PU T 请求来存放，而且只需一条GET 请求就能取得。由于会话中的所有信息都放在一个对象中，所以这种" 单请求操作" (single-request operation ) ...
HBase 是 Apache Hadoop 中的一个子项目，属于 bigtable 的开源版本，所实现的语言为Java（故依赖 Java SDK）。HBase 依托于 Hadoop 的 HDFS（分布式文件系统）作为最基本存储基础单元。 HBase在列上实现了 BigTable 论文提到的压缩算法、内存操作和布隆过滤器。HBase的表能够作为 MapReduce 任务的输入和输出，可以通过Java API来访问数据，也可以通过REST、Avro或者Thrift的API来访问。 1. 特点 1.1 数据格式HBash 的数据存储是基...