dawei (¶Lw)

请求帮助 Ruby [hash] 与 Python [dict]

dawei — Mon, 15 Jun 2020 13:21:06 +0800

2.5.1 :007 > hash = {a: '1', b: '2', c: '3'}
 => {:a=>"1", :b=>"2", :c=>"3"}
2.5.1 :008 > hash.to_json
 => "{\"a\":\"1\",\"b\":\"2\",\"c\":\"3\"}"
2.5.1 :009 > hash.to_json.length
 => 25

2.5.1 :010 > JSON.dump(hash)
 => "{\"a\":\"1\",\"b\":\"2\",\"c\":\"3\"}"
2.5.1 :011 > JSON.dump(hash).length
 => 25

>>> import json
>>> dict = {'a': '1', 'b': '2', 'c': '3'}
>>> json.dumps(dict)
'{"a": "1", "b": "2", "c": "3"}'
>>> len(json.dumps(dict))
30

怎样用 ruby 得到和 python 同样得结果呢？

已经尝试过：

2.5.1 :015 > JSON.generate(hash, space: " ")
 => "{\"a\": \"1\",\"b\": \"2\",\"c\": \"3\"}"
2.5.1 :016 > JSON.generate(hash, space: " ").length
 => 28
# space: a string that is put after, a : or , delimiter (default: '')

ruby json string : 或 , 后无空格

py json string : 或 , 后存在空格

[求解] 奇怪的异常: find_or_create_by!

dawei — Thu, 10 Oct 2019 18:42:06 +0800

# email.rb
serialize :receive_permissions, Array

2.3.1 :042 > Email.find_or_create_by!(code: "TestEmail02", title: "TestEmail_02", receive_permissions: ["country", "high_end"])
  Email Load (0.4ms)  SELECT  "emails".* FROM "emails" WHERE "emails"."code" = $1 AND "emails"."title" = $2 AND "emails"."receive_permissions" IN ('country', 'high_end') LIMIT 1  [["code", "TestEmail02"], ["title", "TestEmail_02"]]
   (0.2ms)  BEGIN
  Email Exists (0.4ms)  SELECT  1 AS one FROM "emails" WHERE "emails"."code" = 'TestEmail02' LIMIT 1
  Email Exists (0.3ms)  SELECT  1 AS one FROM "emails" WHERE "emails"."title" = 'TestEmail_02' LIMIT 1
  SQL (0.3ms)  INSERT INTO "emails" ("code", "title", "receive_permissions", "created_at", "updated_at") VALUES ($1, $2, $3, $4, $5)
RETURNING "id"  [["code", "TestEmail02"], ["title", "TestEmail_02"], ["receive_permissions", "---\n- country\n- high_end\n"], ["created_at", "2019-10-10 17:59:54.716189"], ["updated_at", "2019-10-10 17:59:54.716189"]]
   (1.6ms)  COMMIT
 => #<Email id: 29, code: "TestEmail02", title: "TestEmail_02", description: nil, receive_permissions: ["country", "high_end"], created_at: "2019-10-10 09:59:54", updated_at: "2019-10-10 09:59:54">

2.3.1 :043 > Email.find_or_create_by!(code: "TestEmail02", title: "TestEmail_02", receive_permissions: ["country", "high_end"])
  Email Load (0.4ms)  SELECT  "emails".* FROM "emails" WHERE "emails"."code" = $1 AND "emails"."title" = $2 AND "emails"."receive_permissions" IN ('country', 'high_end') LIMIT 1  [["code", "TestEmail02"], ["title", "TestEmail_02"]]
   (0.2ms)  BEGIN
  Email Exists (0.3ms)  SELECT  1 AS one FROM "emails" WHERE "emails"."code" = 'TestEmail02' LIMIT 1
  Email Exists (0.4ms)  SELECT  1 AS one FROM "emails" WHERE "emails"."title" = 'TestEmail_02' LIMIT 1
   (0.2ms)  ROLLBACK
ActiveRecord::RecordInvalid: Validation failed: Code has already been taken, Title has already been taken
        from /Users/iewad/.rvm/gems/ruby-2.3.1/gems/activerecord-4.2.3/lib/active_record/validations.rb:79:in `raise_record_invalid'
        from /Users/iewad/.rvm/gems/ruby-2.3.1/gems/activerecord-4.2.3/lib/active_record/validations.rb:43:in `save!'
        from /Users/iewad/.rvm/gems/ruby-2.3.1/gems/activerecord-4.2.3/lib/active_record/attribute_methods/dirty.rb:29:in `save!'
        from /Users/iewad/.rvm/gems/ruby-2.3.1/gems/activerecord-4.2.3/lib/active_record/transactions.rb:291:in `block in save!'
        from /Users/iewad/.rvm/gems/ruby-2.3.1/gems/activerecord-4.2.3/lib/active_record/transactions.rb:351:in `block in with_transaction_returning_status'
        from /Users/iewad/.rvm/gems/ruby-2.3.1/gems/activerecord-4.2.3/lib/active_record/connection_adapters/abstract/database_statements.rb:213:in `block in transaction'
        from /Users/iewad/.rvm/gems/ruby-2.3.1/gems/activerecord-4.2.3/lib/active_record/connection_adapters/abstract/transaction.rb:184:in `within_new_transaction'
        from /Users/iewad/.rvm/gems/ruby-2.3.1/gems/activerecord-4.2.3/lib/active_record/connection_adapters/abstract/database_statements.rb:213:in `transaction'
        from /Users/iewad/.rvm/gems/ruby-2.3.1/gems/activerecord-4.2.3/lib/active_record/transactions.rb:220:in `transaction'
        from /Users/iewad/.rvm/gems/ruby-2.3.1/gems/activerecord-4.2.3/lib/active_record/transactions.rb:348:in `with_transaction_returning_status'
        from /Users/iewad/.rvm/gems/ruby-2.3.1/gems/activerecord-4.2.3/lib/active_record/transactions.rb:291:in `save!'
        from /Users/iewad/.rvm/gems/ruby-2.3.1/gems/activerecord-4.2.3/lib/active_record/persistence.rb:51:in `create!'
        from /Users/iewad/.rvm/gems/ruby-2.3.1/gems/activerecord-4.2.3/lib/active_record/relation.rb:151:in `block in create!'
        from /Users/iewad/.rvm/gems/ruby-2.3.1/gems/activerecord-4.2.3/lib/active_record/relation.rb:302:in `scoping'
        from /Users/iewad/.rvm/gems/ruby-2.3.1/gems/activerecord-4.2.3/lib/active_record/relation.rb:151:in `create!'
        from /Users/iewad/.rvm/gems/ruby-2.3.1/gems/activerecord-4.2.3/lib/active_record/relation.rb:219:in `find_or_create_by!'
        from /Users/iewad/.rvm/gems/ruby-2.3.1/gems/activerecord-4.2.3/lib/active_record/querying.rb:6:in `find_or_create_by!'
        from (irb):43
        from /Users/iewad/.rvm/gems/ruby-2.3.1/gems/railties-4.2.3/lib/rails/commands/console.rb:110:in `start'
        from /Users/iewad/.rvm/gems/ruby-2.3.1/gems/railties-4.2.3/lib/rails/commands/console.rb:9:in `start'
        from /Users/iewad/.rvm/gems/ruby-2.3.1/gems/railties-4.2.3/lib/rails/commands/commands_tasks.rb:68:in `console'
        from /Users/iewad/.rvm/gems/ruby-2.3.1/gems/railties-4.2.3/lib/rails/commands/commands_tasks.rb:39:in `run_command!'
        from /Users/iewad/.rvm/gems/ruby-2.3.1/gems/railties-4.2.3/lib/rails/commands.rb:17:in `<top (required)>'
        from bin/rails:4:in `require'
        from bin/rails:4:in `<main>'

屏幕出问题了，不知道怎么搞成这样的，求最优维修方案。

dawei — Sun, 09 Jun 2019 12:44:21 +0800

有什么好的建议 (SEO) 实现这种搜索结果？

dawei — Tue, 20 Nov 2018 13:56:04 +0800

看到一篇关于 ruby-china 的文章！

dawei — Wed, 14 Nov 2018 10:04:21 +0800

什么是纯粹的开源社区精神，我用了十年去探索

ActiveAdmin 数据图表

dawei — Fri, 26 Oct 2018 11:19:19 +0800

Gemfile

Gemlist:

#Gemfile
gem 'groupdate'
gem "chartkick"

执行$ bundle install

ActiveAdmin 引入图表 js 库

#config/initializers/active_admin.rb
ActiveAdmin.setup do |config|
  config.register_javascript 'https://www.gstatic.com/charts/loader.js'
end

# app/assets/javascripts/active_admin.js.coffee
#= require active_admin/base
#= require chartkick

ActiveAdmin 添加图表页面

$ rails g active_admin:page StuUserChart
Running via Spring preloader in process 87926
      create  app/admin/stu_user_chart.rb

#  app/admin/stu_user_chart.rb
ActiveAdmin.register_page "StuUserChart" do
  content do
    #para column_chart [["2016-01-01", 30], ["2016-02-01", 54]], stacked: true, library: {colors: ["#D80A5B", "#21C8A9", "#F39C12", "#A4C400"]}
    para line_chart StuUser.group_by_day(:created_at).count
  end
end

有帮助的链接

Rails 中使用 Nokogiri 和 Watir 实现 Spider

dawei — Fri, 24 Aug 2018 10:11:36 +0800

最近我的 Rails App. 中，有场景需要抓取学校官网某栏目的新闻内容为小程序提供数据，故使用了Nokogiri来实现，因该页面的分页是用 Js 来渲染的导致在 Nokogiri 查找分页节点的时候出现异常，后经搜索得知有Watir这个 Gem。

附分页渲染代码：

<SCRIPT>
//createPageHTML(9, 0, "index", "html");
var currentPage = 0;//所在页从0开始
//var headPage = "index"+"."+"html";//首页
//var tailPage = "index_" + (countPage-1) + ".html"//尾页
var prevPage = currentPage-1;//上一页
var nextPage = currentPage+1;//下一页
var countPage = 17;//共多少页


//设置上一页代码
if(countPage>1&&currentPage!=0&&currentPage!=1)
document.write("<td><a href=\"index.html\">首页</a></td><td><a class='prev' href=\"index"+"_" + prevPage + "."+"html\">上一页</a></td>");
else if(countPage>1&&currentPage!=0&&currentPage==1)
document.write("<td><a href=\"index.html\">首页</a></td><td><a class='prev' href=\"index.html\">上一页</a></td>");
else
document.write("<td><a class='prev'>首页</a></td><td><a class='pre'>上一页</a></td>");
//循环
var num = 8;
for(var i=0+(currentPage-1-(currentPage-1)%num) ; i<=(num+(currentPage-1-(currentPage-1)%num))&&(i<countPage) ; i++){
if(currentPage==i)
document.write("<td><a class='curr'>"+(i+1)+"</a></td>");
else if(i==0){
document.write("<td><a class='num'href=\"index"+"."+"html\">"+1+"</a></td>");}
else
document.write("<td><a class='num' href=\"index"+"_" + i + "."+"html\">"+(i+1)+"</a></td>");
}
//设置下一页代码 
if(countPage>1&&currentPage!=(countPage-1))
document.write("<td><a  class='next' href=\"index"+"_" + nextPage + "."+"html\">下一页</a></td><td><a  class='prev' href=\"index_" + (countPage-1) + ".html\">末页</a></td>");
else
document.write("<td><a class='next'>上一页</a></td><td><a class='prev'>末页</a></td>");


function toPage(){
var _num = document.getElementById("num").value;
var str = "index"+"_"+(_num-1)+"."+"html";
var url = location.href.substring(0,location.href.lastIndexOf("/")+1);
if(_num<=1||_num==null)
location.href = url+"index"+"."+"html";
else if(_num>countPage)
alert("本频道最多"+countPage+"页");
else
location.href = url+str;
} 
</SCRIPT>

安装

#Gemfile
gem 'watir', '~> 6.12'

bundle install 总是不难的

接下来在 Spider Task 中使用

namespace :spiders do
  require 'watir'

  desc 'Spider => describe'
  task get_xshd: :environment do
    @start_url = "http://example.edu.cn"
    get_lists(@start_url, 'get_all')
  end


  def get_lists(url, mode = 'update')
    browser = Watir::Browser.new :chrome, headless: true
    browser.goto url
    #browser = Watir::Browser.start url
    doc = Nokogiri::HTML.parse(browser.html)
    browser.close
    ·······
  end

可以看到，我开始是直接 browser = Watir::Browser.start url 但是这样在我的服务器上出现了异常，经过折腾改变了写法，异常如下：

Selenium::WebDriver::Error::UnknownError: unknown error: Chrome failed to start: exited abnormally
  (unknown error: DevToolsActivePort file doesn't exist)
  (The process started from chrome location /usr/bin/google-chrome is no longer running, so ChromeDriver is assuming that Chrome has crashed.)
  (Driver info: chromedriver=2.41.578700 (2f1ed5f9343c13f73144538f15c00b370eda6706),platform=Linux 4.4.0-91-generic x86_64)

我感觉是因为new 和 start的区别，我没有去验证这个区别。

至此已经可以正常使用了。

一些需要注意的

Watir 是会用到 browserdriver 的，所以务必安装好browserdriver，我这里使用的是chromedriver
服务器上安装 google-chrome

sudo curl -sS -o - https://dl-ssl.google.com/linux/linux_signing_key.pub | apt-key add
sudo echo "deb [arch=amd64]  http://dl.google.com/linux/chrome/deb/ stable main" >> /etc/apt/sources.list.d/google-chrome.list
sudo apt-get -y update
sudo apt-get -y install google-chrome-stable

安装 chromedriver(这里要根据自己的环境做适当修改)

wget https://chromedriver.storage.googleapis.com/2.41/chromedriver_linux64.zip
unzip chromedriver_linux64.zip
mv chromedriver /usr/bin/
### 或者
sudo apt-get install chromium-chromedriver

在 MacOS High Sierra 安装 Ruby on Rails

dawei — Fri, 20 Apr 2018 19:59:25 +0800

在 MacOS High Sierra 安装 Ruby on Rails

本篇文章将教您在 MacOs High Sierra 上安装 Ruby on Rails 的最新版本。会对安装故障进行描述和排查。这份安装指南可以用来被专业开发人员来参照配置他们的工作环境。初学者也可使用。

附上原文链接：Install Ruby on Rails 5.2 · macOS High Sierra

摘要

更新你的系统至 MacOS High Sierra
安装 XCode Command Line Tools
安装配置 Git
安装 Homebrew
安装 GPG
安装 RVM
安装 Ruby
更新 RubyGems
安装 Rails

更新 MacOS 至 10.13

怎样升级到 macOS High Sierra

终端程序

你可以使用 Mac 自带的终端，当然我推荐你使用iterm2

检查是否安装了 `XCode`

检查你是否安装过 XCode:

$ xcode-select -p

如果出现：

xcode-select: error: unable to get active developer directory...

则是未安装。下一个节我们将一起安装 XCode

如果出现：

/Applications/Xcode.app/Contents/Developer

或者

/Library/Developer/CommandLineTools

则证明你的电脑已经安装过 XCode

XCode 更新请到 App Store

注意：如果你看到了这样的路径 /Applications/Apple Dev Tools/Xcode.app/Contents/Developer

你必须删除XCode 重新安装。如果这样 RVM 将会安装失败。

RVM cannot accommodate spaces in a path.

安装 `XCode Command Line Tools`

命令：$ gcc

如果 XCode 未安装，你将看到如下图：

另外一种安装方法是：$ xcode-select --install

你也会看到如上图，接下来点击“安装”就 OK（这将需要一些时间，依照您的网络环境而定）。

最后确定安装是否成功：

$ xcode-select -p

/Library/Developer/CommandLineTools

确定 gcc 是否成功安装：

$ gcc --version
Configured with: --prefix=/Library/Developer/CommandLineTools/usr --with-gxx-include-dir=/usr/include/c++/4.2.1
Apple LLVM version 7.0.0 (clang-700.1.76)
Target: x86_64-apple-darwin15.0.0
Thread model: posix

配置 Git

关于 Git 的使用请参照 Git 官方文档 Git-Book

安装 Homebrew

如果你的 Mac 未设置密码，那么你不能安装 homebrew 检查 Homebrew 是否安装：

$ brew
-bash: brew: command not found

RVM 需要依赖Homebrew，Homebrew 是 MacOS 的包管理器。很多开发者利用它安装和管理各种各样的 Unix 软件包。安装命令：

/usr/bin/ruby -e "$(curl -fsSL https://raw.githubusercontent.com/Homebrew/install/master/install)"

安装脚本将会警告询问你的 Mac 密码：

WARNING: Improper use of the sudo command could lead to data loss...
To proceed, enter your password...
Password:

输入密码的过程中你不会看到字符，输入完成之后尽管按下 Enter 键

你可能注意到我们用到 ruby 来安装 Homebrew。我们使用 MacOS 内置的 Ruby 来安装 Homebrew，等下我们将使用 RVM 添加一个新的 Ruby 版本。

安装 GPG

你可以使用 Homebrew 安装gpg, 这是一个加密程序用来检查 RVM 下载的安全性。

brew install gpg

当 GPG 安装完成之后，我们将安装 RVM 的安全秘钥：

$ command curl -sSL https://rvm.io/mpapis.asc | gpg --import -

如果你跳过这个步骤后续可能导致不能安装 RVM

安装 RVM

RVM，Ruby 版本管理器，可以用它来安装和管理 Ruby 和 Rails 版本。如果你的 Mac 用户名包含了空格字符，你必须删除空格。 RVM 网站教你怎样安装 RVM。这是更简单的方式：

$ \curl -L https://get.rvm.io | bash -s stable

如果在安装过程中看到如下信息：

mkdir: /etc/openssl: Permission denied
mkdir -p "/etc/openssl" failed, retrying with sudo
your password required for 'mkdir -p /etc/openssl':

请输入你的 Mac 密码。在安装过程中你可能需要安装 Jave SE 6

如果你已经安装了 RVM

更新命令：

$ rvm get stable --autolibs=enable

RVM 故障处理

你可以使用rvm implode删除 RVM 痕迹 (当然你的.bash_profile 文件除外) 如果你遇到任何困难，你可以得到 RVM 团队的帮助： [http://webchat.freenode.net/?channels=rvmhttp://webchat.freenode.net/?channels=rvm](

关闭重启终端

安装 RVM 之后，你必须关闭重启终端。或者使用这个命令：$ source ~/.rvm/scripts/rvm

安装 Ruby

$ rvm install ruby-2.5.0

检查最新安装的 Ruby 版本：

$ ruby -v
ruby 2.5.0...

检查 Gem 管理器

RubyGems 是 Ruby 的包管理器。我们用它来安装软件包为 Ruby 添加功能。检查 gem 管理器的版本。你可以看到：

$ gem -v
2.6.14

当然你的计算机上可能是其它版本。

更新 Ruby gem 管理器

$ gem update --system

RVM 的全局设置

查看哪些 gem 是全局安装的

$ rvm gemset use global
$ gem list

一个无故障的开发环境需要最新版本的默认 gem 几个与 Ruby 或 RVM 默认安装的 Gem:

获取还有一些其它的。

查看旧的 gem 列表：

$ gem outdated
### list not shown for brevity

更新旧的 gem:

$ gem update
### list not shown for brevity

更快的安装 Gem

默认情况下，在 gem 安装时，文档也会同时安装。开发者很少会用到这些文档（通常会在网页进行查找）。通过如下命令设置跳过文档安装步骤：

$ echo "gem: --no-document" >> ~/.gemrc

添加gem: --no-document 至.gemrc

安装 Bundler

Bundler 是一个必需的 gem 包，它用来管理 gems 在开发和运行 Rails 应用，RVM 原来会自动安装 Bundler。在 1.26.11 版本之后，RVM 不再自动安装 Bundler。所以你必须安装它：

$ gem install bundler

安装 Nokogiri

Nokogiri 也是一个很重要的 Gem 包，请安装它：

$ gem install nokogiri

安装 Rails

$ gem install rails

如果你想安装 Rails 3.2.18:

$ gem install rails --version=3.2.18

确认当前版本：

$ rails -v
Rails 5.2.0

创建一个工作文件夹

$ mkdir workspace
$ cd workspace

创建一个新的 Rails Application

$ mkdir myapp
$ cd myapp
$ rvm use ruby-2.5.0@myapp --ruby-version --create
$ gem install rails
$ rails new .

快速测试

$ rails -T

通过 Rails Server 命令运行 Rails Application:

$ rails server

为已有的 Application 指定一个 Gemset

$ echo "ruby-2.2.0" > .ruby-version
$ echo "myapp" > .ruby-gemset

Rails 数据库

Rails 默认使用 SQLite.

rails new myapp --database= 这个命令将会显示所有支持的数据库

Supported for preconfiguration are: mysql, oracle, postgresql, sqlite3, frontbase, ibm_db, 

sqlserver, jdbcmysql, jdbcsqlite3, jdbcpostgresql, jdbc.

PostgreSQL

MacOS 最简单的安装方法是通过 Postgres.all

创建一个使用PostgrSQL的新应用：

$ rails new myapp --database=postgresql

dawei (¶Lw)

请求帮助 Ruby [hash] 与 Python [dict]

[求解] 奇怪的异常: find_or_create_by!

屏幕出问题了，不知道怎么搞成这样的，求最优维修方案。

有什么好的建议 (SEO) 实现这种搜索结果？

看到一篇关于 ruby-china 的文章！

ActiveAdmin 数据图表

Gemfile

ActiveAdmin 引入图表 js 库

ActiveAdmin 添加图表页面

有帮助的链接

推荐开源的 Ruby 学习书籍

Rails 中使用 Nokogiri 和 Watir 实现 Spider

安装

一些需要注意的

在 MacOS High Sierra 安装 Ruby on Rails

在 MacOS High Sierra 安装 Ruby on Rails

摘要

更新 MacOS 至 10.13

终端程序

检查是否安装了 XCode

安装 XCode Command Line Tools

配置 Git

安装 Homebrew

安装 GPG

安装 RVM

如果你已经安装了 RVM

RVM 故障处理

关闭重启终端

安装 Ruby

检查 Gem 管理器

RVM 的全局设置

更快的安装 Gem

安装 Bundler

安装 Nokogiri

安装 Rails

创建一个工作文件夹

创建一个新的 Rails Application

快速测试

为已有的 Application 指定一个 Gemset

Rails 数据库

PostgreSQL

检查是否安装了 `XCode`

安装 `XCode Command Line Tools`