scige

在服务器抓取淘宝搜索结果页失败，本地可以正常抓取

scige — Tue, 24 Nov 2015 14:07:48 +0800

淘宝搜索结果页：https://s.taobao.com/search?q=iphone 在本地可以成功抓取，在服务器上就会失败被淘宝的反作弊拦截，跳转到登录页

加上 user-agent 和 cookies，设置 http 代理都试过了，仍然不行

用 nokogiri，wget 都是一样的，本地正常，服务器失败

有同学直到如何解决码？万分感激

请问 Rails 中可以动态创建数据库表或动态在表中添加字段吗？而不是通过 db:migrate

scige — Thu, 10 Jan 2013 13:27:26 +0800

现在在做一个数据管理系统，希望能够实现这样的功能：

用户可以创建一个新的表，并指定表中有哪些字段，然后就可以向表中添加数据。
也希望以后也可以修改或添加新的字段。

实现上想到可能有两种做法：

每个用户的表对应一个真实的数据库表，该如何实现？
所有用户的表对应同一个数据库表，该如何实现？或者还有其他更好的方法？

大家有什么好办法吗？谢谢！

测试了几个常去的网站，发现 QPS 到 26 左右就上不去，就是单机 Rails 应用的极限了吗？

scige — Sun, 25 Nov 2012 00:54:37 +0800

工具用 http_load，在公司的服务器上做的测试，我这边的带宽不是问题

我在云服务器上的 Rails 应用，nginx+passenger $ http_load -p 5 -s 10 urls 175 fetches, 5 max parallel, 1.48505e+06 bytes, in 10 seconds 8486 mean bytes/connection 17.5 fetches/sec, 148505 bytes/sec msecs/connect: 11.7533 mean, 100.123 max, 1.872 min msecs/first-response: 253.544 mean, 1797.26 max, 50.015 min HTTP response codes: code 200 -- 175

$ http_load -p 30 -s 10 urls 255 fetches, 30 max parallel, 2.16393e+06 bytes, in 10 seconds 8486 mean bytes/connection 25.5 fetches/sec, 216393 bytes/sec msecs/connect: 231.678 mean, 450.523 max, 1.917 min msecs/first-response: 595.631 mean, 2215.58 max, 142.245 min HTTP response codes: code 200 -- 255

$ http_load -p 30 -s 30 urls 784 fetches, 30 max parallel, 6.65302e+06 bytes, in 30 seconds 8486 mean bytes/connection 26.1333 fetches/sec, 221767 bytes/sec msecs/connect: 310.235 mean, 450.555 max, 2.066 min msecs/first-response: 481.559 mean, 1282.8 max, 133.443 min HTTP response codes: code 200 -- 784

$ http_load -p 50 -s 30 urls 780 fetches, 50 max parallel, 6.61908e+06 bytes, in 30 seconds 8486 mean bytes/connection 26 fetches/sec, 220636 bytes/sec msecs/connect: 518.74 mean, 750.023 max, 2.041 min msecs/first-response: 779.266 mean, 1890.49 max, 142.368 min HTTP response codes: code 200 -- 780

QPS 到 26 就上不去了，Latency 在不断变大同时也测试了 ruby-china 和 codecampo 也是这样的

请教一下，Rails 没有使用数据库层面进行数据完整性验证的吗？

scige — Sun, 18 Nov 2012 13:06:16 +0800

写一下示例代码，商品和类别是一对多的关系

class Product < ActiveRecord::Base
  belongs_to :category
  attr_accessible :name
  validates :category_id, presence: true
end

class Category < ActiveRecord::Base
  has_many :products
  attr_accessible :name
end

设置 Category 只有 1~4，这里新建 Product 的类别是 10，期望应该是失败的

p = Product.new
p.category_id = 10
p.save

上面的代码竟然会成功！ 查了一下 Rails Guides，加上了验证，也是无效

belongs_to :category, :validate => true

Rails 的完整性验证应该会让上面的创建失败吧，为何没有生效呢？难道 Rails 提供的完整性验证是程序层面的而没有使用数据库层面的外键进行验证？或者是我的用法不对，请教大家，谢谢！

有多少同学像俺一样靠 C/C++ 吃饭，Rails 只是个爱好？

scige — Thu, 15 Nov 2012 12:13:32 +0800

俺是 C++ 程序员，做的是推荐系统和搜索引擎平时弄 Rails 玩玩，很喜欢 Web 开发的东西想知道有多少同学像俺一样？

请教一个路由的问题：RESTful 里自定义路由的如何指定参数？

scige — Sun, 04 Nov 2012 11:47:48 +0800

我想让 http://xxxx/filters/category/1 用下面的 Controller 处理

class FiltersController < ApplicationController
    def category
        @category = Category.find_by_id(params[:id])
    end
end

于是使用了下面的 Routes

resources :filters do
  collection do
      get :category
  end
end

我在 View 里是这么用的：

%a{:href => category_filters_path(@category)}
  = @category.cn_name
  %span>= "(#{@category.products.size})"

但是却生成了 http://xxxx/filters/category.1 然后就出错了，这种在 RESTful 里自定义路由的如何指定参数？

顺便问一下，haml 里用 link_to 能在文字里使用 span 吗？上面 view 的代码三行能合并为一行吗？

haml 里，一行可以写多个标签吗？

scige — Tue, 30 Oct 2012 00:42:25 +0800

haml 里，一行可以写多个标签吗？比如下面的 HTML 代码

<span class="word">价值</span><span class="num">¥252</span>

如果分开两行写感觉很不直观

.word 价值
.num ¥252

haml 中大家是怎么处理这种重复代码的？

scige — Tue, 30 Oct 2012 00:33:32 +0800

haml 中大家是怎么处理这种重复代码的？

- @products.each do |product|
  - if product.id % 2 == 1
    .item-even
      代码片段1
  - else
    .item-odd
      代码片段2

代码片段 1 和代码片段 2 完全一样，if 判断只是想对两个部分做不同样式展示比如奇数列和偶数列

请教大家，Rails 做网站的一般流程是怎样的？从设计到开发过程

scige — Sat, 15 Sep 2012 10:06:37 +0800

也看过论坛之前的一些讨论，但是没有哪位完整地描述过这个过程，很疑惑。希望各位前辈能不吝分享自己的宝贵经验，相信这个问题新手开发项目时都会遇到，之后我会把完善的流程总结一下，整理到 wiki 上！

说一下我理解的这个过程，请大家指正，谢谢！

[需求]：首先有个最初想法或需求
[设计]：然后用 Photoshop 做出设计稿（之后是否还有切图的过程？是否还有用 Dreamweaver 组合切图修改网页的过程？）（PS 的设计稿只是参考作用吗？设计稿要切图作为素材吗？）
[静态]：之后就用 Html+CSS+JS 做出网页，用 Chrome 或 Firebug 看效果，不使用其他工具（这个过程是不是完全没有 Rails 代码？最终产出就是静态页面？）
[整合]：把上面做出的网页源代码整合到 Rails 项目中，view 和 style，js
[动态]：开发 Rails 后台，这个过程中也不断调整 view 和 style，js
[部署]：开发测试完成，部署上线

我是否遗漏了那些步骤，或者有些步骤根本没有，甚至完全就不是这个过程？

ruby-china.com 是怎样的？ shopqi.com 是怎样的？ codecampo.com 是怎样的？

谢谢大家！