zfjoy520 (小朱)

[写给一些还不知道的 PG 们] Array#dig, Hash#dig, OpenStruct#dig, New features in ruby 2.3

zfjoy520 — Thu, 12 May 2016 17:54:45 +0800

原文：https://blog.blockscore.com/new-features-in-ruby-2-3/ discussion: http://stackoverflow.com/questions/34346653/how-do-i-use-arraydig-and-hashdig-introduced-in-ruby-2-3

Array#dig, Hash#dig, OpenStruct#dig in ruby 2.3, 抛弃老旧的 xx[:a][:b][:c]，xx.fetch(:a, {}).fetch(:b, {}).fetch(:c, nil) 吧

Array

results = [[[1, 2, 3]]]
results.dig(0, 0, 0) # => 1
results.dig(0, 1, 2) # => nil

Hash

user = {
  user: {
    address: {
      street1: '123 Main street'
    }
  }
}

user.dig(:user, :address, :street1) # => '123 Main street'
user.dig(:user, :address, :street2) # => nil

OpenStruct

address = OpenStruct.new('city' => "Anytown NC", 'zip' => 12345)
person = OpenStruct.new('name' => 'John Smith', 'address' => address)
person.dig(:address, 'zip') # => 12345
person.dig(:business_address, 'zip') # => nil

低版本 ruby patch

class Array
  def dig(index, *indices)
    Array[index, indices].flatten.inject(self) { |result, index| result.send(:[], index) rescue nil }
  end unless Array.method_defined?(:dig)
end

class Hash
  def dig(name, *names)
    Array[name, names].flatten.inject(self) { |result, name| result.send(:[], name) rescue nil }
  end unless Hash.method_defined?(:dig)
end

class OpenStruct
  def dig(name, *names)
    begin
      name = name.to_sym
    rescue NoMethodError
      raise TypeError, "#{name} is not a symbol nor a string"
    end
    @table.dig(name, *names)
  end unless OpenStruct.method_defined?(:dig)
end

也可以将 Array 和 Hash 合成一个，因为他们都 include Enumerable

module Enumerable
  def dig(arg, *args)
    Array[arg, args].flatten.inject(self) { |result, arg| result.send(:[], arg) rescue nil }
  end unless Enumerable.method_defined?(:dig)
end

Rails Log 格式化 + Kids日志收集

zfjoy520 — Wed, 23 Mar 2016 04:04:22 +0800

晚上无意间翻到了@taojay315 的关于日志收集的帖子 (https://ruby-china.org/topics/27523)，正好这段时间也在研究知乎的 Kids

所以就借了@taojay315的思想和代码，根据自己的想法，写了一个 demo，见：https://github.com/zfjoy520/lograge_service_demo

lograge_service_demo

基于 lograge + kids + taojay315 的一篇文章

Rails Log Process

写的一个即可以让 Rails 保持原生本机文件 LOG 不变，又可以将 request / sql / exception 等日志发往 kids 的一个 demo.

原作者在这里：https://ruby-china.org/taojay315

其中，对 Rails 原生的丑日志的重新格式化部分抄自: concise_logging: https://github.com/gshaw/concise_logging

并有所修改。

开始吧

安装 Kids

下载 Kids 源码发布包（文件名为 kids-VERSION.tar.gz），运行：

tar xzf kids-VERSION.tar.gz
cd kids-VERSION
./configure
make && make install

Kids 编译好后，运行：

$ kids -c lograge_service_demo/config/conf/kids_server.conf

kids 使用 redis 协议，打开一个 rails console：

2.3.0 :xxx > r = Redis.new(port: 3388)
2.3.0 :xxx > r.psubscribe('*') do |on|
2.3.0 :xxx >   on.pmessage do |pattern, channel, message|
2.3.0 :xxx >     puts "pattern: #{pattern}, channel: #{channel}, message: #{message}"
2.3.0 :xxx >   end
2.3.0 :xxx > end

可以观察日志的收集情况

启动 web server

因为在 lib/lograge_service/railtie.rb 中指定了 development 环境不生效，所以需要以 production 来跑

$ puma -p 3000 -e production -t 32:32 -w 1

额外的代码

只需要在 config/application.rb 中引入 lib/lograge_service 即可：

# [config/application.rb]
...

require File.expand_path('../../lib/lograge_service', __FILE__)

# Require the gems listed in Gemfile, including any gems
# you've limited to :test, :development, or :production.
Bundler.require(*Rails.groups)

module LogrageServiceDemo
  class Application < Rails::Application
     ...

代码写得不好，轻拍

moonscript：看了一部分文档，老外真够懒的！

zfjoy520 — Thu, 24 Apr 2014 15:45:59 +0800

moonscript: A programmer friendly language that compiles to Lua.

http://moonscript.org/

MoonScript is a dynamic scripting language that compiles into Lua. It gives you the power of one of the fastest scripting languages combined with a rich set of features.

最近在研究 lua。文档看了一大半。越往后看，越觉得地球人已经无法阻止该语言的发明者偷懒了。

有兴趣的童鞋可以关注一下，只是稍稍有点不喜他这个靠严格缩进来支撑的逻辑。

抄几句官网的 code：

func_a = -> for i=1,10 do i

class Inventory
  new: =>
    @items = {}

  add_item: (name) =>
    if @items[name]
      @items[name] += 1
    else
      @items[name] = 1

真心有点叼炸天的感觉。

一大早无聊。来发发没有参考价值的 benchmark

zfjoy520 — Thu, 24 Apr 2014 09:38:35 +0800

环境和测试结果与下面这个 github 上的兄弟基本一致，我的 mac mini 跑出来还要高一点点

https://github.com/luislavena/bench-micro

抄一个过来。免得有人懒不想点过去

Requests/sec

Framework            Requests/sec  % from best
----------------------------------------------
rack                      8808.74       100.0%
mustermann                7673.94       87.12%
cuba                      7550.91       85.72%
hobbit                    7447.90       84.55%
lotus-router              7346.17        83.4%
rack-response             6847.69       77.74%
brooklyn                  6513.61       73.94%
rambutan                  5991.08       68.01%
nancy                     5762.34       65.42%
nyny                      4111.48       46.68%
sinatra                   2879.52       32.69%
scorched                  1654.10       18.78%
ramaze                    1341.83       15.23%

当然，任何以 hello world 来跑的 benchmark 都是瞎扯蛋。

但 lua 的 gin (http://gin.io/) + openresty(http://openresty.org/) 即能跑 35K，还是让人觉得比较爽。

因为 gin 是纯 json 的 framework，硬性规定 header 里头 Accept 的格式，有兴趣的可以关注一下： http://gin.io/docs/api_versioning.html

所以在用 wrk 跑的时候需要指定 header，配置文件如下：

#config.lua
wrk.headers["Accept"] = "application/vnd.xxxx.v100+json"

测试一： 返回定值json：{'hi': 'gin'}

wrk -t12 -c400 -d10s  http://127.0.0.1:7200 --script="config.lua"
Running 10s test @ http://127.0.0.1:7200
  12 threads and 400 connections
  Thread Stats   Avg      Stdev     Max   +/- Stdev
    Latency    11.64ms   12.63ms 149.18ms   91.22%
    Req/Sec     3.09k     0.95k   12.92k    84.73%
  355662 requests in 10.00s, 84.10MB read
  Socket errors: connect 0, read 201, write 0, timeout 0
  Non-2xx or 3xx responses: 355662
Requests/sec:  35561.76
Transfer/sec:      8.41MB

测试二： 一次ssdb get之后再返回定值json：{'hi': 'gin'}

配合上 redis 或者是 ssdb(http://www.ideawu.com/ssdb/zh_cn/)。带一个简单的 get 查询。效率低了不少。但感觉应该还是会比 rails，rack 这一类快上不少。

wrk -t12 -c400 -d10s  http://127.0.0.1:7200 --script="config.lua"
Running 10s test @ http://127.0.0.1:7200
  12 threads and 400 connections
  Thread Stats   Avg      Stdev     Max   +/- Stdev
    Latency    50.77ms   46.63ms 119.63ms   48.43%
    Req/Sec     1.70k     0.94k    7.00k    79.68%
  163995 requests in 10.00s, 32.05MB read
  Socket errors: connect 0, read 403, write 0, timeout 0
Requests/sec:  16399.01
Transfer/sec:      3.21MB

16K，是带了一个 ssdb get 的，返回值还是 json 的一个 benchmark 哟。

说到最后。其实我是来打广告的

ssdb: http://www.ideawu.com/ssdb/zh_cn/

gin: http://gin.io/ -- 一个基于 lua 的 JSON-API framework，做 web service 不错

openresty：http://openresty.org/ -- a fast web app server by extending nginx

有兴趣的童鞋可以关注一下。

[Rainbows] 论坛里有大大在用这个么？今天测试的时候内存暴涨几十 G。

zfjoy520 — Fri, 21 Mar 2014 16:30:56 +0800

硬件： 24 线，48G 内存。

环境： centos6 + ruby 2.1 + rails4 + nginx +rainbows

rainbows.rb 配置文件：

worker_processes 24
worker_connections 16

在简单的并发测试，内存占用由 2G，几分钟之后暴涨至 40G

对比之前一直在用的 unicorn，unicorn 有 workerkiller，所以内存一直处于比较稳定的状态。

请问，是不是需要额外配置一些参数来控制 Rainbows 的内存占用？

这是一个 BUG 么？头像上传之后，之前同一 ID 的头像图片还在。

zfjoy520 — Thu, 05 Sep 2013 18:31:53 +0800

，刚改了个头像。

新头像地址： //l.ruby-china.com/user/big_avatar/958.png

旧头像地址： //l.ruby-china.com/user/big_avatar/958.jpg

新头像原图是 png，旧头像原图是 jpg，是因为后缀名不一样，而导致 958 这个编号文件没被覆盖，还是说本身就是这种设计？

生命在于折腾！谈一谈我这个 MAC 盲的 10 小时成长历程。

zfjoy520 — Fri, 21 Jun 2013 16:09:05 +0800

职业：Ruby 服务器开发

背景：公司有个闲置的 mac mini，想尝试一下

SO：

前天

前天下午下班的时候拿到的 mini，接上几大线，开机。听他们管事的说，要把系统内的数据清掉（因为之前有人用过这个 mini）。

so，google 一下，大致看了下，是硬盘抹掉，然后重装。 so，果断开机，“磁盘工具” -> “Macintosh HD” -> "抹掉" -> “重启”。

然后，众所周知的，然后，重启之后，没系统了，果断灰屏，闪问号。

之所以抹掉，只因进“磁盘工具”后，花了 0.5 秒时间，瞟了一眼，看他貌似除了这个“Macintosh HD”之外，还有个啥系统区之类的，便误以为会像某些高级系统一样，有个隐藏分区，内置原始系统，可一键重装。

然后，没系统了。身边 mac 系统的兄弟都下班了，我只有 win7 机。然后 google，说 win7 下，也可制作 U 盘安装盘，于是，拿出天天带身上的 8G mini U 盘。

花了半小时时间，网上搞了个 10.8.4 dmg 花了 20 分钟写好了第一个启动盘，插上，开机 option，找不到 U 盘

再 google，有人说 U 盘格式不对，不能是 ntfs，果断格成 fat32，redo 以上 20 分钟的事。

sleep(20.minutes)

插上，无果

so，关机，回家。

第二天，也就是昨天

托有 mac 机的同事再 redo 前一天的 20 分钟的事，不过用的不是我自己下载的那个 dmg，最后 1% 报错。google 一下，说是能用。

so，插上，开机 option，U 盘出来了，可，onclick => 带左斜线的灰圈，禁止符果断跳了出来。无果，找同事再找了个 8G U 盘，无果。

中午，叫旁边的 mac 哥们，用头天下载下来的的 4.* G 的 dmg 重新搞了个。插上，果断 OK 了。

一路顺利，连 next 都不带一个。

然后是sleep(25.minutes)。系统装好了，重启。

0 基础学 MAC 正式开始。

先是装了个 QQ，没 QQ 可不行。

再是装了个迅雷，MAC 下想充分利用公司 2.5M/S 的下载速度，没迅雷可不行

然后是，装 chrome，没 chrome 都不好意思跟别个打招呼。

然后是，xcode，versions(用了svn)，git，sublime text 2，netbeans，iTerm 2，office for mac 2011，ForkLift（ftp 有时会用到，比如：新版本不敢部署，因为变动太大，但需要修改测试服上的旧有版本的某些东西时），Sequel Pro 也装一个，虽然已经好几年没用过 GUI 的 Mysql 管理工具了，早就习惯了代码方式，然后是 BetterZip，SourceTree

然后再是 ruby, mysql, redis

虽然 mac 有预装 ruby，但不买帐。看好多大牛都用 rvm 装，但个人对多版本 ruby 没兴趣，工作上也几乎用不着。线上项目的 ruby 版本，除非有重大漏洞，一般不会升级。所以找到预装的版本，位置：/System/Library/Frameworks/Ruby.framework/Versions

果断把那个软链“Current”干掉之。因为/usr/bin 目录下，链接了 ruby,irb,ri,rdoc,rake,testrt 等一系列的执行文件到这个 Current

自己下了个 1.9.3 p****源码，编译之。

发现 error，没 c 编译器，于是 google，xcode command line 果断安装之

再编译，过！

果断 sudo vim /etc/profile

export PATH="$PATH:/usr/local/ruby/bin:/usr/local/mysql/bin"

当然，后面那个 mysql 的是后面装了 mysql 才加上的。

然后是gem install bundler --no-ri --no-rdoc 然后是bundle install

发现提示 libyaml 没装。然后把装好的 ruby 删了。解压出来的文件夹也删了

brew install libyaml，发现没有 brew，然后 google，然后装了个 homebrew

重编 ruby，重来

然后是 bundle install，卡 mysql2，果断 sudo ln -s /usr/local/mysql/lib/libmysqlclient.18.dylib /usr/lib/libmysqlclient.18.dylib

继续往下走。全过

然后是改 mysql 默认编码，因为 mysql 几乎不用，平时都在用 redis，mysql 只用做日志流、统计时用。

cp 了一份 my.cnf 到/etc 下。简单写了几行

[mysql]
default-character-set=utf8

[mysqld]
character-set-server=utf8
default-storage-engine=MyISAM

因为是自己的开发机、也很少用到 mysql，就懒得去重新设置日志目录，数据目录。

mysql 完事了，然后是 redis，

redis 的安装几乎可以忽略

最后，为什么选择 iTerm 2 呢。仅因为他有一个特殊功能，“鼠标选中即复制”，解放生产力的好东西

然后是做点 bash 下的重命名：

sudo vim ~/.bash_profile

alias c='/usr/local/ruby/bin/rails c'
alias s='/usr/local/ruby/bin/rails s'

一个 c，一个 s 就能进到控制台，或是启个 server，能解放生产力，何不为之！

之前也尝试过手动编译安装 mysql，可坑爹，到然后发现 mac 上，没有 groupadd mysql 这个东东，简单查了一下。麻烦，算了，pass，选择了 mysql.dmg

之所以选择 netbeans 这个 IDE，只为看上他的一个功能，点方法名，可快速跳转到源码

然后猛然发现，sublime text 2，下的 super 和 netbeans 的 meta 键。其实就是所谓的 win7 键。用不习惯。。。果断将 control 和 command 互换。

然后试着 git clone，发现没权限

发现～下面默认不带.ssh 目录，果断 ssh-keygen -t rsa，一路回车，再把生成的文件全删了。

copy 一份之前 win7 机器下的 id_rsa id_rsa.pub 过来。

git clone 成功。

然后果断 OK 了。

装了个 QQ 输入法，因为带五笔，对拼音不好的川人，五笔是个不错的选择。

一只巨型 MAC 菜鸟完成了从 0 -> 0.1 的蜕变。

中间，好些软件，纯破解版，切误模仿。如有需要请购买正版。

离职正好一周了，刚发了第一份求职信

zfjoy520 — Tue, 13 Nov 2012 23:55:59 +0800

离职正好一周了，刚发了第一份求职信，希望他们公司还在招 RoR，也希望 HR 大神能扫到我的简历，祈祷 ing~！！！地点在成都。呵呵。

分享最近服务器迁移遇到的一个怪问题 (REE + passenger + nginx)

zfjoy520 — Wed, 27 Jun 2012 18:06:57 +0800

最近这几天在搞服务器迁移，在配置新机器环境的时候遇到个怪问题： REE 不能安装到服务器的除系统盘之外的挂载分区上，否则会造成 passenger 的进程卡死。重启一次 nginx。只能访问一次，第二次开始便会卡死。

个中原因，没时间去深究。之前不知道有这个原因，所以昨天折腾了一天，换 nginx 版本，换 rails 版本，找 passenger 版本，均不得其果。今天上午，想到把 ruby 装回那 10 个 G 的系统分区上试试。果然。一切 OK 了。。

个中原因，还盼高手出来解答。。