作者归档:kaisin

memcache start parameters

【黑体字的参数较为常用】 -p<num> 监听的TCP端口(默认:1 … 继续阅读

发表在 cache | 标签为 , | memcache start parameters已关闭评论

memcached code analyse

名词 Slab 用于表示存储的最大size数据,仅仅只是用于定义(通俗的讲就是表 … 继续阅读

发表在 cache | 标签为 , | memcached code analyse已关闭评论

C# LRU

  using System.Collections.Generic; … 继续阅读

发表在 C# Code | C# LRU已关闭评论

MySQL 全文索引(fulltext index)

1.创建全文索引(FullText index) 旧版的MySQL的全文索引只能 … 继续阅读

发表在 db | 标签为 | MySQL 全文索引(fulltext index)已关闭评论

LDAP

1. LDAP简介 LDAP(轻量级目录访问协议,Lightweight Dir … 继续阅读

发表在 technologys | 标签为 | LDAP已关闭评论

MySQL FullText

1.创建全文索引(FullText index) 旧版的MySQL的全文索引只能 … 继续阅读

发表在 db | 标签为 | MySQL FullText已关闭评论

5种开源协议比较

BSD开源协议 BSD开源协议是一个给于使用者很大自由的协议。基本上使用者可以” … 继续阅读

发表在 article | 标签为 | 5种开源协议比较已关闭评论

iptables cases

#查看iptables现有规则 iptables -L -n #先允许所有,不然 … 继续阅读

发表在 linux | 标签为 | iptables cases已关闭评论

移动网络NAT心跳过期时间

心跳典型值 WhatsApp Line GCM WIFI 4分45秒 3分20秒 … 继续阅读

发表在 android, network, push/pull | 移动网络NAT心跳过期时间已关闭评论

中国国际互联网的接口

海底光缆是国际互联网的骨架。光缆的多少,代表一国与互联网的联系是否紧密。 有人利 … 继续阅读

发表在 network | 中国国际互联网的接口已关闭评论

some license

BSD-3 + 专利 Facebook => React (license … 继续阅读

发表在 article | some license已关闭评论

OpenSSL 生成自签名证书(简)

OpenSSL 是 SSL 和 TLS 协议的开放式源代码实现。它在标准通信层上 … 继续阅读

发表在 web server | OpenSSL 生成自签名证书(简)已关闭评论

Protocol Buffers

RPC(Remote Procedure Call,远程过程调用)框架是分布式服 … 继续阅读

发表在 rpc | Protocol Buffers已关闭评论

Apache Thrift

Thrift源于大名鼎鼎的facebook之手,在2007年facebook提交 … 继续阅读

发表在 rpc | Apache Thrift已关闭评论

大数据量存储见解

百万级的数据,无论侧重OLTP还是OLAP,当然就是MySql了。
过亿级的数据,侧重OLTP可以继续Mysql,侧重OLAP,就要分场景考虑了

实时计算场景:强调实时性,常用于实时性要求较高的地方,可以选择Storm;
批处理计算场景:强调批处理,常用于数据挖掘、分析,可以选择Hadoop;
实时查询场景:强调查询实时响应,常用于把DB里的数据转化索引文件,通过搜索引擎来查询,可以选择solr/elasticsearch;
企业级ODS/EDW/数据集市场景:强调基于关系性数据库的大数据实时分析,常用于业务数据集成,可以选择Greenplum;

数据库系统一般分为两种类型:
一种是面向前台应用的,应用比较简单,但是重吞吐和高并发的OLTP类型;
一种是重计算的,对大数据集进行统计分析的OLAP类型。

传统数据库侧重交易处理,即OLTP,关注的是多用户的同时的双向操作,在保障即时性的要求下,系统通过内存来处理数据的分配、读写等操作,存在IO瓶颈。
OLTP(On-Line Transaction Processing,联机事务处理)系统也称为生产系统,它是事件驱动的、面向应用的,比如电子商务网站的交易系统就是一个典型的OLTP系统。OLTP的基本特点是:
数据在系统中产生;
基于交易的处理系统(Transaction-Based);
每次交易牵涉的数据量很小;
对响应时间要求...

继续阅读

发表在 db | 大数据量存储见解已关闭评论