论坛徽章:: 0

81楼 [报告]

发表于 2012-05-21 16:33 |只看该作者

呵呵呵，我又来了！
朋友们之前谈了Apache，Nigx等，虽然我不同非常的懂，但愿我的一些帖子起到抛砖引玉的效果！

那我接着谈
如何设计比较智能的缓存

很多的时候，我们再添加缓存的时候，采用的是键值对的形式，
例如
key                value
demokey       demoValue

很多的缓存组件，也是采用字典的形式进行数据的存取的。

我们在获取缓存中的数据的时候，也是通过这样的方式，例如get("demokey")

这样的方式，没有问题。但是如果需要缓存一些比较动态的信息，例如：根据用户的查询关键字来缓存数据，那么问题就出来了。

试想这样一个场景：在购物站点中，用户在查找产品的时候，肯定会输入很多的不同的关键字，而每次用户查询的关键字对应的产品有很多，而我们采用之前讲述的“全缓存，半缓存”等策略的时候，这个缓存就不是很高效。

举个例子，如果用户查询“海尔冰箱”，那么，我们在缓存中数据就是这样的：
key                value
海尔冰箱       XXXXX（表示很多的数据）

如果用户再输入“冰箱”，那么此时，缓存结果为：
key                   value
海尔冰箱       XXXXX（表示很多的数据）
冰箱             YYYYYY（表示很多的数据）

以此类推.

其实”海尔冰箱“与”冰箱“有相似之处，或者换句话说：冰箱的结果，可能会包含”海尔冰箱“中的数据。

此时，我们很有可能就把两份数据缓存了两次。浪费了内存！

如何处理？？？

实战分享：从技术角度谈机器学习入门| 【大话IT】RadonDB低门槛向MySQL集群下战书 | ChinaUnix打赏功能已上线！ | 新一代分布式关系型数据库RadonDB知多少？

lsstarboy

版主

论坛徽章:: 54

82楼 [报告]

发表于 2012-05-22 11:29 |只看该作者

回复 79# 方兆国

这个根据配置不同会有不同结果，很容易暴露源代码，并且在nginx下此路不通，所以还是扩展名为php为好。

实战分享：从技术角度谈机器学习入门| 【大话IT】RadonDB低门槛向MySQL集群下战书 | ChinaUnix打赏功能已上线！ | 新一代分布式关系型数据库RadonDB知多少？

方兆国

大富大贵

论坛徽章:: 19

83楼 [报告]

发表于 2012-05-22 11:56 |只看该作者

回复 82# lsstarboy

我测试了,Nginx下确实不可以，不过，你说得那个暴露源代码，我不认可

对于index.html文件

我的源代码

<html>
<body>
<?php
echo "PHP and Apache2.2 is working !";
?>
<a href="./test.html">test</a>
</body>
</html>

复制代码

浏览器中的源代码

<html>
<body>
PHP and Apache2.2 is working ! <a href="./test.html">test</a>
</body>
</html>

复制代码

对于test.html文件

我的源代码

<html>
<body>
<?php
echo "Test is OK !";
?>
</body>
</html>

复制代码

浏览器中的源代码

<html>
<body>
Test is OK ! </body>
</html>

复制代码

实战分享：从技术角度谈机器学习入门| 【大话IT】RadonDB低门槛向MySQL集群下战书 | ChinaUnix打赏功能已上线！ | 新一代分布式关系型数据库RadonDB知多少？

lsstarboy

版主

论坛徽章:: 54

84楼 [报告]

发表于 2012-05-22 18:11 |只看该作者

本帖最后由 lsstarboy 于 2012-05-22 18:16 编辑

回复 83# 方兆国

直接上图：

实战分享：从技术角度谈机器学习入门| 【大话IT】RadonDB低门槛向MySQL集群下战书 | ChinaUnix打赏功能已上线！ | 新一代分布式关系型数据库RadonDB知多少？

飞鸿无痕

腰缠万贯

论坛徽章:: 0

85楼 [报告]

发表于 2012-05-23 09:15 |只看该作者

本帖最后由飞鸿无痕于 2012-05-23 09:17 编辑

讨论很热烈，楼主辛苦，看了了所有回复，收益匪浅。看到很少人提到现在linux下比较流行的lnmp架构的相关缓存情况，我这里稍微总结一下：
缓存顺序从前端（或者CDN）---代理---web server--memcache缓存--DB，从目前我较常用的架构来说：
前端缓存：我们可以设置squid、varnish缓存，这两个太常用就不详细解释了。如果公司出点钱，用CDN的效果更好。目前我们用的CDN。
代理缓存：通过nginx做代理，在上面配置expires来在客户端缓存一些图片以及js、css文件，注意图片可以设置过期时间长一点，js、css文件不要设置太长。nginx上也有自带的缓存，这个根据需要启用，如果有前端缓存就不需要在这里设置缓存了，如果前端没有设置，这里设置会取到比较好的效果。
web server缓存：楼主说的内核缓存是一方面，另外还有一些低三方的缓存，比如php的xcache以及eaccelerator等加速器，都能对php进行预编译，并执行计划进行缓存。
memcache缓存：采用memcache来缓存数据库的查询结果，尽量将压力往前推，减少数据库的压力。
DB缓存：DB缓存的就是开启query_cache。这里有一个陷阱：如果是更新非常频繁的表最好使用SQL_NO_CACHE不缓存结构，不然会频繁更新query cache内容，导致性能下降！
就说那么多，欢迎高手拍砖！