nine

使用 Windows 10 + WSL 进行无缝 Ruby 开发

nine — Thu, 09 May 2019 22:46:47 +0800

最近使用 Windows 10 比较多，越来越觉得 Mac 的 GUI 是上个世纪的产物了，所以一直在琢磨要不要在 Win 上搞 Ruby。刚巧，本月微软公布了 3 个讨好 Linux/Unix 开发者的产品/功能。

Windows Subsystem for Linux 2 ( WSL2 ) ，预期年底发布。
Windows Terminal ，预期年底发布，现在可以自行编译（功能没有视频上的牛 X）。
VSCode Remote ，VS 的插件，现在可以安装。

其中 VSCode Remote 是一组插件，由 3 个插件组成

Remote SSH
Remote Containers
Remote WSL

具体介绍可以看 VS Code Remote 发布！开启远程开发新时代

于是尝试了一把 Win 下开发。之前也 try 了一下虚拟机方案，感觉不是我想要的，而且挂载系统有 bug。看到新闻后，想起来之前同事在 2017 年就使用 WSL 了，而且在我们公司的实际项目中使用了大半年，并没有什么不妥。

WSL

在 Windows 上运行的 Linux，和虚拟机不同，WSL 和宿主 Windows 是几乎无缝的。

有很多发行版可以用，我选择的是 Ubuntu，WSL 2 还早，目前可安装的 WSL 1 完全可以胜任（如何安装？在 Microsoft Store 里点击安装，网上有图文详细教程，可自行 Google）

Windows Terminal

编译过程比较麻烦，我没有编译成功，用网友编译好的版本，提示证书问题，装不上。后来按第 45 期 Windows Terminal 微软新版终端工具安装教程的步骤，把证书搞定，安装成功了。不过实际体验和 Hyper、ConEmu 没有什么质的差别。

附 2 个网友编译版下载地址：

https://cloud.natfrp.org/s/AaxfrxK96JebHsj

http://cdn.lr3800.52qdw.cn/Terminal.7z

VSCode Remote

VSCode 的 Remote 方案也尝试了，实际结果是没有什么卵用。

实际需要做的是

安装 WSL
使用任意终端（包括 cmd、powershell 都可以），进入工作目录，输入 wsl + 回车，即可进入 wsl 的 shell 实际的效果如下

也就是说使用任意 Windows 的编辑器/IDE 对 win 上的目录进行编码，实际代码运行在 WSL 内。rails s 后，打开 Windows 的浏览器，输入http://localhost:3000 即可访问 rails 项目。完全无缝。

其中 windows 的文件系统按盘符，自动挂载在 WSL 的“/mnt/盘符”目录下，图中的 d:\work\demo3 挂载在 /mnt/d/work/demo3 目录下。所以也可以输入 wsl 后 cd 到 /mnt/d/work/demo3 运行 rails s

在 WSL 下可以使用 windows 命令，输入 code-insiders . 之后会自动使用 VSCode 预览版打开 wsl 的目录，并且安装 VSCode 的 Remote WSL 插件

此时新打开的 VSCode 左下角会多出一个 WSL 的图标

点击 WSL 图标会出现菜单

这个模式用于编辑 WSL 系统内文件比较方便。但是对于 Rails 开发，WSL 模式是没有什么用的，直接在 mnt 目录下编辑代码就行了。毕竟我对 WSL 的文件系统不是很放心，不想把代码放在上面。另外 WSL 的文件系统默认在 C 盘的某个目录下，还没有研究如何更改位置。

最后，说下数据库。

我这边数据库是在 win 下安装的，理由也是对 WSL 不太放心，所以此时 Rails 的 database.yml 文件需要配置上 host 和 port。不配 host 和 port 的话会默认连接 WSL 里的 unix 数据库套接字。

也就是说这套方案只有程序运行环境在 WSL 内，而程序代码、编辑器、数据库，和所有开发配套装备全部都是 windows 上的。

坑

Win10 和 WSL 是两个系统使用的是不同的公钥，这点需要注意一下。
WSL 系统长时间不使用会挂起，第一次做 apt-get update 的时候切到别的界面了，回来发现不动了，然后按回车之后就开始动了，不知道是挂起了还是 terminal 的 bug。
直觉上速度不是那么快，不知道和上一条是否有关。
node 的 hmr 有时不太灵光，目前还不能确定是不是 WSL 的锅。

不过

台式机 CPU 总比笔记本快。
程序运行效率不是第一位，最重要的还是 GUI 对 CPU 的利用率和 GUI 软件操作的便捷性。
比起虚拟机 WSL 可以使用全部的 CPU 内核和内存。可以按 htop 看下效果（具体性能待测试）

其他：想到再补充。

适用人群

对 Windows 有需求的，比如经常装机刷机，经常使用带 VBS 的 Excel，经常测试各种 CS ERP，经常使用 IE 专属系统的，经常使用 Win 专有软件的，等等……
对 Mac 特性需求不强烈的，或对移动办公需求不强烈的。
对 Linux/Mac 操作系统不满的。
资金紧张的新手，或对 Linux/Mac 系统不熟悉的新手。
资金紧张的团队，或需要大规模招募新手的团队。

顺便说下 VSCode Remote SSH 的用法。

安装插件后，按 Ctrl + Shift + P 调出菜单选择 Connect to Host 选择 Configure SSH Hosts 编辑远程服务器

编辑后点击左侧电脑图标，可以看到常用的 host，点击后可以连接到服务器

之后会打开一个新的 VSCode 窗口，左下角显示 SSH 连接标志。

之后可以编辑服务器上的文件

RemoteSSH 默认使用公钥连接，所以连接服务器之前需要安装 OpenSSH，生成公钥，然后在服务器上配置好公钥，不然就会一直连接不上。

Remote Containers

连接容器的，容器没怎么玩过，未测试，理论上应该和 Remote SSH 差不太多。

于是

SOHO 的 007 们可以在工作累了的时候无缝切换到游戏模式了。 (逃

补充，dd 测试磁盘写入 IO 基本测试

dd if=/dev/zero of=/mnt/e/test conv=fdatasync bs=1M count=1024 #1M写入性能
dd if=/dev/zero of=/mnt/e/test conv=fdatasync bs=4k count=262144   #4K写入性能

Mac 没有 fdatasync 参数，默认使用 osync，输出结果为 bytes/s

硬件环境	dd 测试路径	配置	系统	1M 写	4K 写
台式机+SSD 系统盘	/tmp/test	7700K + 32G 内存 + 960EVO 1TB	WSL	870 MB/s	409 MB/s
台式机+SSD 非系统盘	/mnt/d/work/test	7700K + 32G 内存 + 960EVO 1TB	WSL	963 MB/s	470 MB/s
台式 + 机械硬盘	/mnt/e/test	7700K + 32G 内存 + 西数 3T 蓝盘	WSL	132 MB/s	127 MB/s
Surface Pro4	/tmp/test	I7 + 8G 内存 + 256G 硬盘	WSL	177 MB/s	105 MB/s
Macbook Pro 15 2016	/tmp/test	I7 + 16G + 512SSD	macOS 10.14.4	≈340MB/s	≈570MB/s
国内某云（非阿里云）高性能磁盘	/tmp/test	2 核 4G 高性能磁盘	CentOS 7.4	266MB/s	234MB/s
国内某云（非阿里云）企业磁盘	/tmp/test	4 核 8G 企业级磁盘	CentOS 7.4	137MB/s	127MB/s
Google 云 + SSD 永久性磁盘	/tmp/test	4 核 15G SSD 永久性磁盘	CentOS 7.4	213MB/s	199MB/s
Google 云 + 标准磁盘	/tmp/test	4 核 15G 标准磁盘	CentOS 7.4	116MB/s	113MB/s

结论：

Mac 由于 dd 参数不同，结果仅供参考，不过 Mac 磁盘似乎是针对小文件优化过的，4K 写速度要快于 1M 写速度。 960EVO 仅仅 4k 写速度似乎略小于 Macbook Pro 512SSD（缺少 fdatasync 参数）。所以担心磁盘 IO 的基本可以放心了，即使是普通的机械蓝盘，也不会差太多。

速度瓶颈，主要应该在 CPU 上，对比之前将 i7 的 MacBook Air 更新为 Macbook Pro，程序运行实际感官提升超过不止 10 倍。（完）

Passenger 能否开启 JIT？

nine — Tue, 05 Feb 2019 18:31:13 +0800

目前没有找到正确的打开方式。

Ruby 的 Websocket Server 发送压缩后的 Binary Frame 格式的数据。

nine — Mon, 14 May 2018 02:50:30 +0800

正常使用 websocket，通常发送的数据格式都是 json。但是在做强实时应用时，如果每秒发几百 k 的数据的话，带宽还是比较捉急的，需要压缩一下。

Node js

用 nodejs 做 server 的话比较简单。 nodejs 可直接推送 gzip 后的数据。引入一个叫 pako 的处理 gzip 的库 https://github.com/nodeca/pako pako.deflate

var WebSocket = require('faye-websocket'),
    http      = require('http');
var pako = require('pako');

var server = http.createServer();


server.on('upgrade', function(request, socket, body) {
  if (WebSocket.isWebSocket(request)) {
    var ws = new WebSocket(request, socket, body);
    ws.on('open' , function(event){
      setInterval(function(){
        var data = {'aaa' : 'aaa' , 'bbb' : 'bbb'}
        var input = JSON.stringify(data)
        var output = pako.deflate(input , {to: 'string'});
        ws.send(output)
      } , 1000)
    });
    ws.on('message', function(event) {

    });

    ws.on('close', function(event) {
      console.log('close', event.code, event.reason);
      // ws = null;
    });
  }
});

server.listen(8080);

前端直接解压数据后即可使用 pako.inflate

var ws = new WebSocket('ws://localhost:8080/websocket')
ws.onopen = function(){
  ws.send('hello')
}

ws.onmessage = function(e) {
  var blob = e.data;
  console.log(pako.inflate(e.data, { to: 'string' }))
}

我们看到的效果是这样的

看起来是 text 格式的。

ruby gzip 压缩只需要

require 'active_support/gzip'

string = 'balabala'
gzip_string = ActiveSupport::Gzip.compress(string)

但是在 Ruby 的 websocket server 中，压缩后的数据，无法直接 send，因为 Ruby 的 websocket 发送的 text 数据格式只能是 utf8。

websocket-eventmachine-server

websocket-eventmachine-server 中提供了二进制模式，只要指定数据类型是 binary 即可。

ws.send gzip_string , :type => :binary

require 'json'
require 'active_support/gzip'
require 'websocket-eventmachine-server'



h ={aaa: 'bbb' , ccc: 'ddd'}
string = JSON(h)
gzip_string = ActiveSupport::Gzip.compress(string)


EventMachine.run do
  WebSocket::EventMachine::Server.start(:host => "0.0.0.0", :port => 8080) do |ws|

    ws.onopen do
      puts "Client connected"
    end

    ws.onmessage do |msg, type|
      ws.send gzip_string , :type => :binary
    end

    ws.onclose do
      puts "Client disconnected"
    end

  end
end

这时前端看到的效果有点酷了

事实上这也是目前主流的 websocket 的做法。自带加密效果。

（如果想达到更好的加密，需要把客户端 send 的 message 也 gzip 一下。）

前端 js 接收数据的方式要改变一下了，用 FileReader 读取二进制流。

var ws = new WebSocket('ws://localhost:8080/websocket')
ws.onopen = function(){
  ws.send('hello')
}

ws.onmessage = function(e) {
  var blob = e.data;
  var reader = new FileReader();
  reader.readAsBinaryString(blob);
  reader.onload = function (evt) {
    var data = pako.inflate(evt.target.result, { to: 'string' })
    console.log(JSON.parse(data))
  };
}

faye-websocket-ruby

使用 websocket-eventmachine-server 需要自己管理进程，比较烦，用faye的话就可以随 passenger 启动。

faye 也是支持 binary frame 的，但要求我们手工转成二进制 array 转换的方法

zip_string =  ActiveSupport::Gzip.compress(JSON(data))
unpack = zip_string.unpack('C*')

全部代码

#config.ru
require 'faye/websocket'
require 'active_support/gzip'
require 'json'

app = lambda do |env|
  if env['PATH_INFO'] == '/websocket'
    ws = Faye::WebSocket.new(env)

    timer = EM.add_periodic_timer(3) do
      data = {aaa: :bbb , ccc: :ddd}
      zip_string =  ActiveSupport::Gzip.compress(JSON(data))
      unpack = zip_string.unpack('C*')
      ws.send(unpack)
    end

    ws.on :message do |event|
      ws.send("You sent: #{event.data}")
    end

    ws.on :close do |event|
      EM.cancel_timer(timer)
      p 'close'
      ws = nil
    end

    # Return async Rack response
    ws.rack_response

  else
    [404, { "Content-Type" => "text/plain" }, ["Not found"]]
  end
end

# See https://www.phusionpassenger.com/library/config/tuning_sse_and_websockets/
if defined?(PhusionPassenger)
  PhusionPassenger.advertised_concurrency_level = 0
end

run app

随 passenger 的启动方式见 https://github.com/phusion/passenger-ruby-faye-websocket-demo

Action Cable

并没有发现 ActionCable 有提供 Binary 传输参数。

分析了一下。ActionCable 利用了 redis 的 pub/sub。而直接往 redis 里推 gzip 后的数据是推不进去的，但是可以把 gzip 后的数据 base64 一下。

class CommentRelayJob < ApplicationJob
  def perform(data)
    ActionCable.server.broadcast "messages:1:comments", Base64.encode64(ActiveSupport::Gzip.compress(data.to_json))
  end
end

这时我们看到的数据是酱紫的前端只需要 base64 解码后 gzip 解压数据即可食用。

App.comments = App.cable.subscriptions.create "CommentsChannel",
  collection: -> $("[data-channel='comments']")

  connected: ->
    #code

  received: (data) ->
    # console.log data
    console.log JSON.parse pako.inflate(atob(data), { to: 'string' })

压缩效果对比

ActiveSupport::Gzip.compress(data , 9 , 1) #最大压缩比

压缩效果对比

压缩比	Base64	体积	压缩比	base64 体积增大百分比	平均耗时
不压缩		121713	0%
default		27106	22.27%		0.005862s
default	是	36747	30.19%	35.56%	0.005878s
max		24761	20.34%		0.012196s
max	是	33567	27.58%	35.56%	0.012197s

对比结果，默认压缩性价比比较高。最大压缩比耗时多用了 1 倍。base64 看起来不耗时。

不压缩测试字符串 121k，默认压缩后 27k，base64 后 36k，base64 后体积增大 9k、增大 35.56%。

对于没有太多保密需求的应用，用 actioncable + gzip+base64 体积压缩了 70%，应该还是可以接受的。

代码改动量很小，业务比较容易写，websocket 进程管理又可以丢给 nginx+passenger。

Action Cable Patch

仔细研究了一下 action cable 源码，发现其实在 ActionCable::Connection::ClientSocket 里二进制传输是有预留的，只要给的 message 是个 array 就行了。

module ActionCable
  module Connection
    class ClientSocket
      ...
      def transmit(message)
        return false if @ready_state > OPEN
        case message
        when Numeric then @driver.text(message.to_s)
        when String  then @driver.text(message)
        when Array   then @driver.binary(message)
        else false
        end
      end
      ...
    end
  end
end

不过从 redis pub 过来的数据肯定是个 string。

所以需要通过配置或参数，通知 actioncable 将数据转成 binary array。

翻看源码，只需要在 ActionCable::Connection::Base 初始化时指定 encode decode 的 coder 即可，默认是 ActiveSupport::JSON

module ActionCable
  module Connection
    class Base
      include Identification
      include InternalChannel
      include Authorization

      attr_reader :server, :env, :subscriptions, :logger, :worker_pool, :protocol
      delegate :event_loop, :pubsub, to: :server

      def initialize(server, env, coder: ActiveSupport::JSON)
        @server, @env, @coder = server, env, coder

        @worker_pool = server.worker_pool
        @logger = new_tagged_logger

        @websocket      = ActionCable::Connection::WebSocket.new(env, self, event_loop)
        @subscriptions  = ActionCable::Connection::Subscriptions.new(self)
        @message_buffer = ActionCable::Connection::MessageBuffer.new(self)

        @_internal_subscriptions = nil
        @started_at = Time.now
      end
  end
end

coder

module ActionCable
  module Connection
    class coder
      def self.encode(data)    
        ActiveSupport::Gzip.compress(data.to_s)
      end
      def self.decode(data)
        ActiveSupport::Gzip.decompress(data)
      end
    end
  end
end

不过 actioncable 启动时并没有给配置 coder 的地方，所以看来需要打 patch 或提 PR 了。

另外 js 里还需要解决 channel 相关的逻辑。是个比较麻烦的问题。留个坑慢慢填吧。

如有大神知道有先人有解决的方案的话，麻烦告知一下

Tips

数据未经压缩也可以用 Binary Frame 格式推送。
在小数据的时候 gzip 后体积反而增大。

[郑州] 民生药业集团，招聘 Ruby on Rails 高级开发，JS 高级开发。

nine — Mon, 22 Aug 2016 16:31:20 +0800

关于民生药业集团

民生药业集团是在国家中成药重点生产企业——民生制药厂（始建于 1911 年）的基础上，由北京天地民生国际投资有限公司全资控股、重新组建的，集中成药、生物医药、科研、医疗、生产、销售、贸易、电子商务等为一体的大型综合性医药产业集团。集团现有员工 3600 余人，各类技术人员 300 余人。其中，研究员、高级工程师、硕士、博士、执业药师、注册会计师等 100 多人。建立了以世界著名免疫学科学家乔治﹒西博博士为核心的科研团队和博士后工作站，拥有发明和实用新型专利 150 余件。集团旗下拥有十余家全资或控股子公司，截止 2015 年底，年销售额近百亿。

医药电商和信息化系统

致力发展产业链 B2B 电商和 B2C 网络售药，开发医药行业 ERP 和物流仓储 WMS 管理系统 SaaS 平台。

招聘岗位

Ruby 开发工程师

10-15K

1 两年以上 Ruby on Rails 开发经验。 2 熟练掌握 Bootstrap，jQuery 等前端技术。 3 熟悉 linux 环境，熟练使用 git。 4 熟悉单元测试流程。 5 具有良好的团队精神，优秀的沟通技巧，能适应快节奏的工作环境。

有电商、ERP 开发经验优先。熟悉 React、Ember.js、Vue.js 优先。如有 Github 账号请附带。五险一金、双休、班车，水平高者薪资可面议。

JS 高级开发工程师

10K-15K

1 熟练掌握 HTML CSS Javascript 基础，熟练掌握 Bootstrap，jQuery 和各种插件。 2 熟悉不同浏览器内核 API 差异。 3 熟练掌握 React.js / Vue.js / Angular.js / Ember.js 等任意一种前端框架。 4 熟练掌握 grunt / gulp / webpack 之一，了解 PHP / Python / Ruby / Java 等任意一种后端语言。 5 对前端模块化开发有心得。

如有 github 账号请附带。

五险一金、双休、班车，水平高者薪资可面议。

简历可发往

kyuubi#chinacluster.com

工作地点

河南郑州，郑东新区，电子商务大厦 20 楼。图片随后补~

可加我微信

Rake 任务中如何关闭 PostgreSQL 事务？

nine — Thu, 21 Apr 2016 14:17:41 +0800

目前服务器上运行了 Rake 任务来持续导入数据，使用 God 管理进程。但是某些异常会导致数据回滚，最多一次回滚了 8 天，超级吓人。是否有方法仅在 rake 任务中关闭 PostgreSQL 的事务？

Mina 部署的 Ruby 默认版本为何被锁定在 2.2.0?

nine — Wed, 04 Nov 2015 10:26:23 +0800

虚拟机是一个干净的 CentOS 7 rvm 干净安装了 2.2.3

使用 mina 部署时，提示我重新安装已安装过的 gem

进入 shared/bundle/ruby 目录下赫然停放着一个 2.2.0 的目录

在 current 目录下运行 rails c 也是 2.2.0

可是

find / -name ruby

什么也没有

这是什么情况？

[已解决] 制作 Gem 包时，在 .gemspec 添加了 add_dependency，可仍然要在 Rails 的 Gemfile 里写上依赖的包，否则不能正常运行？

nine — Sat, 31 Oct 2015 20:46:01 +0800

打了个 gem 包需要加载 kaminari

如果在 .gemspec 里写上

spec.add_dependency 'kaminari'

bundle install 就可以正常执行了。但是在项目里仍然需要添加

gem 'kaminari'

否则会提示

undefined method `page' for #<ActiveRecord::Relation []>

求正确的打开方式。

Rails.cache.fetch 不可以缓存对象集合的么？

nine — Tue, 13 Oct 2015 04:18:46 +0800

@cates = Rails.cache.fetch :cates do 
  Cate.all 
end

而单个对象是可以的真奇怪

Rails 版本 4.2.4

ActiveRecord 有无按数量切割结果的内置方法？

nine — Sat, 11 Jul 2015 02:37:01 +0800

达到如下效果

pool  = []
ModelName.all.each_with_index do |obj , index|
  pool.push [] if index % num == 0
  pool.last.push obj
end
pool

有没有网页去噪的 gem？

nine — Sun, 05 Jul 2015 23:56:55 +0800

抽取 html 主体内容。不用正则。

Gemfile 里使用 git repo 之后这个 gem 安装到哪里去了？

nine — Sat, 04 Apr 2015 23:24:33 +0800

gem 'twitter-bootstrap-rails' , git: 'https://github.com/seyhunak/twitter-bootstrap-rails'

我想知道 bundle install 之后，这个 gem 安装到系统哪个地方了。

.gem 或是“源代码”的位置都可以。

不可能每一次 rails s 都去 github 上获取一次吧？

如何实时获得 stdout 里的内容？

nine — Tue, 16 Dec 2014 18:17:03 +0800

run.rb

puts  ·ruby sleep.rb·

sleep.rb

10.times do |t|
  p t
  sleep 1
end

运行 ruby run.rb 的时候需要 10 秒之后才能打印出信息，而不是每秒打印一个。

真实的需求是在 web 上 textarea 里输入 sleep.rb 的内容，并实时在另一个 texarea 里看到类似 console 里执行的效果最好可以终止代码运行

[北京 - 保福寺桥] Ruby 开发工程师（代招）

nine — Sat, 30 Aug 2014 00:31:26 +0800

1、精通 Ruby，2 年以上 Ruby On Rails 经验，3 年以上互联网应用开发经验； 2、精通 HTML、CSS、JSP、Ajax、JS 等 Web 应用开发技术； 3、精通社交网站的设计与实现，精通 Ruby 远程调用技术和数据库编程； 4、了解 Linux 文件系统优先； 5、了解或者精通 Git 优先；

工作地点：北京中关村东路四环交叉口（保福寺桥）世纪科贸大厦

薪水：12K-20K 公司简介

简历请投至 service#cyhz.com

出个 HHKB pro2 9.9 成新，黑色有刻，包顺丰 [郑州可同城交易，送货上门^_^]

nine — Sat, 19 Jul 2014 01:18:51 +0800

已出

turbolinks 中如何 reload 页面 dom？

nine — Tue, 01 Apr 2014 21:35:18 +0800

location.reload() 会刷新页面求不刷新方法

请问大家 InnoDB count (*) 问题都是怎么解决的？

nine — Wed, 19 Feb 2014 10:35:32 +0800

目前用的 WiceGrid

默认的分页是 select count(*) 随便有点数据都巨慢

大家都怎么解决的？自己 hack 吗？

Macbook Air 能否连双显示器 (非苹果显示器)？

nine — Sat, 25 Jan 2014 13:39:22 +0800

苹果显示器应该可以串雷电接口，但是不考虑那个，成本太高。希望是外接双 Dell U2412，哪位有经验的来说说知乎上也有提问 http://www.zhihu.com/question/22600143