超级课程表技术架构变迁.ppt

超级课程表技术架构变迁 about me c，php，python 热衷于搜索，社交，数据挖掘 提纲 全文搜索 缓存/存储 分布式爬虫 推送/IM JVM/内核系统优化 云平台 IaaS 阿里云，腾讯云，qingcloud，ucloud，金山云，aws 适合中小创业公司 vm隔离性，安全性强 缺点：同一物理机混合批处理与低延迟是一对矛盾！ PaaS Tae Bae Sae Gae 适合大型互联网公司，docker容器 全文搜索 Sphinx Solr Lucene Elasticsearch 中文分词 MMseg 倒排索引 内存--文件系统 memcache--sphinx key1---{id1,id2.id3} memcached sphinx mysql key2---{id1,id2.id3} key3---{id1,id2.id3} cache build index 缓存/存储 根据时间维度划分冷热数据 存储同时也是缓存（一级，二级） redis+mysql 缺点：一致性无法保证，只能保证最终一致性 缓存/存储 redis master redis slave redis slave2 redis 链式复制 master只写，关闭aof，开启rdb slave 只读 slave2 开启