我们小公司，也没技术大牛，但有时候活动参数人数能引爆到百万级，我唯一能想到的办法就是堆服务器了。负载均衡，数据库，对象存储，redis，消息队列都用阿里云的，磕磕绊绊几年，问题最后都能完美解决。

很有营养的话题，希望能看到最后的解决方案。 我一直以来处理并发都是堆服务器，反正服务器便宜，最便宜的几十块一个月，曾经一个项目堆到 2000 台阿里云最低配服务器，活动期结束，服务器释放掉，也没花多少钱，感觉非常划算。

#2 楼 @jiemoon #1 楼 @jimrokliu 其实困扰我的问题就是

在并发的情况下，S 端获取 D 端结果返回时间太长

不过已经解决了，原因就在 file_get_contents 这个方法上面，因为是 php 的问题，就不多做说明了。

支持 2 楼，php 是世界上最好的语言。

感谢做出贡献的前辈。

哎，这个帖子咋不早发布半个月，半月前遇到问题，折腾了两天。

工作时老爱看个新闻什么的，怎么办？废了还能修好吗？

那么小得门！

看起来不是我一人经常采用抓取的方式获取数据

我也想要有这么一个区块，能给公司增加点业务。

好吧，我是小地方小公司，经常做简单的企业网站，可以外包给我们公司。

楼主新产品是啥啊？发来看看。

看了 37 楼的评论，突然挺替 coding 觉得委屈，毕竟吃了人家的月饼！

我对加盟这个很有兴趣，之前做过某小学简单 oa 办公和家校沟通平台，这方向上前景真的很好。不过我技术估计达不到要求，不知道做本地代理商的门槛高不高，对这个有兴趣。

刚搜了下，才明白 1024 的含义，又学一个专业术语！

顶啊，今年搞过微博关键词搜索抓取，不少坑啊。

支持啊，我也做过类似需求的。有用 ruby 写过，有用 php 写过，一直没总结出来比较通用的。有空研究研究。

@mojidong Thanks，我 google 一下 fork

好文收藏！

大神就是大师，拜服！

谁能告诉我这个站 怎么知道是 php 的？

关注中

感谢楼主

确实希望能学习下

+1

c#实在做不好，上次做的客户端卡的原因也找了好久，一直解决不了

去年我尝试过这个项目，用c#做的客户端，服务器端只放了个数据库，去年年底完成之后，项目在配置低的电脑上非常卡，客户也反应不能进行推广，后来就搁浅了。现在考虑用B/S模式，但客户仍希望付费会员有个客户端可以用，浏览器上只能访问公开内容。我在考虑用node-webkit是否可以简单实现，或者有什么办法封装一下浏览器，做一些安全措施。

谢谢 @Rei @willmouse 两位的介绍，我其实目前的需求是这样的：有做一个地方物流平台的需求，但同时客户希望能做单独的客户端出来给付费会员用。所以考虑想用 node-webkit 来实现。后期还想增加手机客户端...