架构师之旅之---设计大型分布式网站可能遇到的问题（获奖名单已公布-2014-10-24）

tianwuyan

mark 学习学习

yestreenstars

回复 8# Shell_HAT

牛，学习了！先顶再看！
   

wenhq

1．如何实现基于HTTP协议和TCP协议的RPC调用，它们之间有何差别？
HTTP与RPC存在差异是：
HTTP请求是使用具有标准语义的通用的接口定向到资源的，这些语义能够被中间组件和提供服务的来源机器进行解释。结果是使得一个应用支持分层的转换（layers of transformation）和间接层（indirection），并且独立于消息的来源，这对于一个Internet规模、多个组织、无法控制的可伸缩性的信息系统来说，是非常有用的。而TCP协议的RPC的机制是根据语言的API（language API）来定义的，而不是根据基于网络的应用来定义的。
2．常见的分布式系统存储解决方案有哪些？
存储有fastdfs,glusterfs,hdfs,ceph,sheepdog,nfs,lustre,
cache  repli-memcache, redis+twemproxy,ssdb
文档存储， mongoDB+replicset+sharding,riak
列存储： Hbase
RMDB数据库  mysql m/s  ，mysql proxy.

3．常见的Web攻击手段和防御方法？
SQL注入，解决办法就是强化SQL的语句的判断以及相应字段的校验。
DDos  服务器需要开启sync_cookies以便减少服务攻击
SSRF a. 过滤返回信息，验证远程服务器对请求的响应是比较容易的方法。b. 统一错误信息，避免用户可以根据错误信息来判断远端服务器的端口状态. c.黑名单内网ip。避免应用被用来获取获取内网数据，攻击内网。d.禁用不必要的协议。等。

4．如何进行集群的监控？
zabbix,ganglia,再加服务器本身脚本监控以及修复措施。

5.  说说您读完试读样章后的启发
书写的挺好，对细节的描述有些地方不够详细。。

action08

（4）假消息攻击

DNS高速缓存污染
防御：在防火墙上过滤入站的DNS更新，外部DNS服务器不应能更改你的内部服务器对内部机器的认识。


这个有详细的研究么？？貌似外部dns压根就不管内部服务器的认识吧

所谓dns高速缓存污染，比如8888就肯定被污染了，

laputa73

1．如何实现基于HTTP协议和TCP协议的RPC调用，它们之间有何差别？
http是基于tcp之上的，web service,RESTful,xml-rpc,json-rpc都是典型的基于http的rpc调用
优点是有很多现成的高性能webserver, 底层接口通用，适合不同系统之间的调用。
http是现有的使用广泛的tcp协议之一 .proxy,keep-alive,route这些都是现成的。
二进制，流媒体,分块下载这些也都可以支持。

tcp就底层一些，开发工作量也大。如果有http做不了的特殊场合，可以考虑tcp实现。不过通用性肯定会差一些

5.  说说您读完试读样章后的启发
样章主要介绍了mysql.hbase,redis,lucene的一些基本功能和原理。希望多一些实际应用的经验和例子。

蓝色蜻蜓

分布式存储方式：使用缓存进行存储中 ，memcache没怎么用到，但是在实际项目中使用了另外一个和这个相似的产品（商用产品名字就不用说了，免得有做广告的嫌疑），用来存储基础数据和session； 这个产品的提供了一部分数据库的功能，通过将一些基本参数表存储到缓存中，减少数据库的访问，以低成本的内存缓存节省数据库资源；将session数据存放于缓存中，实现分布式访问，以前应用的session数据存放在jvm内存中，负载均衡通过F5等网络负载的服务器实现请求数据的分发，并且随着在线用户量的增加需要扩大jvm内存和系统session数据的优化来提高系统的承载。
通过看书中部分章节的内容能够开拓分布式架构的思路，对一些开源的框架和技术有了大体了解，实际使用中还需要对每个技术方面进行深入研究。

niao5929

我一直在想能不能再LINUX内核中定义一套管理命令子集，让集群系统节点能有那种自动加入集群组群并进行任务自动分摊的功能。避免现在的双机热备模式带来的系统资源浪费。同时避免那种主备切换带来的应用离线。以及传统模式中那种集权主控节点压力巨大的问题

niao5929

感觉数据库要真的集群化部署，现在的关系型数据库系统很难上任。目前的传统数据库多采用主备模式，而实际上访问的压力还是需要由当前主系统来承担，而备机基本属于没什么事干的主。如何真正的实现那种多主机对等服务的并行和分布式系统一直是我最感兴趣的。这样的话传统集群系统就不存在所谓的下线时间了。

niao5929

对MEMCACHE架构最感兴趣，不知道这种架构是否确实已经实现了主机节点的自动加入和退出集群。同时群系统也可以感知到它的退出并进行删除操作。这样的集群系统如何扩展又如何收缩呢？？！！应用场景实例又是个什么样子。能不能举个实例说说便于理解。

send_linux

niao5929 发表于 2014-09-28 08:38
对MEMCACHE架构最感兴趣，不知道这种架构是否确实已经实现了主机节点的自动加入和退出集群。同时群系统也可 ...

请 @南非蚂蚁帮忙看看~