leekelby (真宽)

[已解决] ActiveJob + Sidekiq 报错，uninitialized constant 怎么解决？

leekelby — Wed, 24 Feb 2016 11:51:48 +0800

A NameError occurred in background at 2016-02-23 16:57:48 +0800 :

uninitialized constant DetectFamousAndMajorJob /home/deployer/apps/app_name/shared/bundle/ruby/2.1.0/gems/activesupport-4.2.5/lib/active_support/inflector/methods.rb:261:in `const_get'

Backtrace:

/home/deployer/apps/app_name/shared/bundle/ruby/2.1.0/gems/activesupport-4.2.5/lib/active_support/inflector/methods.rb:261:in `const_get'
/home/deployer/apps/app_name/shared/bundle/ruby/2.1.0/gems/activesupport-4.2.5/lib/active_support/inflector/methods.rb:261:in `block in constantize'
/home/deployer/apps/app_name/shared/bundle/ruby/2.1.0/gems/activesupport-4.2.5/lib/active_support/inflector/methods.rb:259:in `each'
/home/deployer/apps/app_name/shared/bundle/ruby/2.1.0/gems/activesupport-4.2.5/lib/active_support/inflector/methods.rb:259:in `inject'
/home/deployer/apps/app_name/shared/bundle/ruby/2.1.0/gems/activesupport-4.2.5/lib/active_support/inflector/methods.rb:259:in `constantize'
/home/deployer/apps/app_name/shared/bundle/ruby/2.1.0/gems/activesupport-4.2.5/lib/active_support/core_ext/string/inflections.rb:66:in `constantize'
/home/deployer/apps/app_name/shared/bundle/ruby/2.1.0/gems/activejob-4.2.5/lib/active_job/core.rb:28:in `deserialize'
/home/deployer/apps/app_name/shared/bundle/ruby/2.1.0/gems/activejob-4.2.5/lib/active_job/execution.rb:20:in `execute'
/home/deployer/apps/app_name/shared/bundle/ruby/2.1.0/gems/activejob-4.2.5/lib/active_job/queue_adapters/sidekiq_adapter.rb:42:in `perform'
/home/deployer/apps/app_name/shared/bundle/ruby/2.1.0/gems/sidekiq-4.0.2/lib/sidekiq/processor.rb:150:in `execute_job'
/home/deployer/apps/app_name/shared/bundle/ruby/2.1.0/gems/sidekiq-4.0.2/lib/sidekiq/processor.rb:132:in `block (2 levels) in process'
/home/deployer/apps/app_name/shared/bundle/ruby/2.1.0/gems/sidekiq-4.0.2/lib/sidekiq/middleware/chain.rb:127:in `block in invoke'
/home/deployer/apps/app_name/shared/bundle/ruby/2.1.0/gems/exception_notification-4.0.1/lib/exception_notification/sidekiq.rb:8:in `call'
/home/deployer/apps/app_name/shared/bundle/ruby/2.1.0/gems/sidekiq-4.0.2/lib/sidekiq/middleware/chain.rb:129:in `block in invoke'
/home/deployer/apps/app_name/shared/bundle/ruby/2.1.0/gems/newrelic_rpm-3.14.1.311/lib/new_relic/agent/instrumentation/sidekiq.rb:33:in `block in call'
/home/deployer/apps/app_name/shared/bundle/ruby/2.1.0/gems/newrelic_rpm-3.14.1.311/lib/new_relic/agent/instrumentation/controller_instrumentation.rb:362:in `perform_action_with_newrelic_trace'
/home/deployer/apps/app_name/shared/bundle/ruby/2.1.0/gems/newrelic_rpm-3.14.1.311/lib/new_relic/agent/instrumentation/sidekiq.rb:29:in `call'
/home/deployer/apps/app_name/shared/bundle/ruby/2.1.0/gems/sidekiq-4.0.2/lib/sidekiq/middleware/chain.rb:129:in `block in invoke'
/home/deployer/apps/app_name/shared/bundle/ruby/2.1.0/gems/sidekiq-4.0.2/lib/sidekiq/middleware/server/active_record.rb:6:in `call'
/home/deployer/apps/app_name/shared/bundle/ruby/2.1.0/gems/sidekiq-4.0.2/lib/sidekiq/middleware/chain.rb:129:in `block in invoke'
/home/deployer/apps/app_name/shared/bundle/ruby/2.1.0/gems/sidekiq-4.0.2/lib/sidekiq/middleware/server/retry_jobs.rb:74:in `call'
/home/deployer/apps/app_name/shared/bundle/ruby/2.1.0/gems/sidekiq-4.0.2/lib/sidekiq/middleware/chain.rb:129:in `block in invoke'
/home/deployer/apps/app_name/shared/bundle/ruby/2.1.0/gems/sidekiq-4.0.2/lib/sidekiq/middleware/server/logging.rb:11:in `block in call'
/home/deployer/apps/app_name/shared/bundle/ruby/2.1.0/gems/sidekiq-4.0.2/lib/sidekiq/logging.rb:30:in `with_context'
/home/deployer/apps/app_name/shared/bundle/ruby/2.1.0/gems/sidekiq-4.0.2/lib/sidekiq/middleware/server/logging.rb:7:in `call'
/home/deployer/apps/app_name/shared/bundle/ruby/2.1.0/gems/sidekiq-4.0.2/lib/sidekiq/middleware/chain.rb:129:in `block in invoke'
/home/deployer/apps/app_name/shared/bundle/ruby/2.1.0/gems/sidekiq-4.0.2/lib/sidekiq/middleware/chain.rb:132:in `call'
/home/deployer/apps/app_name/shared/bundle/ruby/2.1.0/gems/sidekiq-4.0.2/lib/sidekiq/middleware/chain.rb:132:in `invoke'
/home/deployer/apps/app_name/shared/bundle/ruby/2.1.0/gems/sidekiq-4.0.2/lib/sidekiq/processor.rb:127:in `block in process'
/home/deployer/apps/app_name/shared/bundle/ruby/2.1.0/gems/sidekiq-4.0.2/lib/sidekiq/processor.rb:166:in `stats'
/home/deployer/apps/app_name/shared/bundle/ruby/2.1.0/gems/sidekiq-4.0.2/lib/sidekiq/processor.rb:126:in `process'
/home/deployer/apps/app_name/shared/bundle/ruby/2.1.0/gems/sidekiq-4.0.2/lib/sidekiq/processor.rb:79:in `process_one'
/home/deployer/apps/app_name/shared/bundle/ruby/2.1.0/gems/sidekiq-4.0.2/lib/sidekiq/processor.rb:67:in `run'
/home/deployer/apps/app_name/shared/bundle/ruby/2.1.0/gems/sidekiq-4.0.2/lib/sidekiq/util.rb:16:in `watchdog'
/home/deployer/apps/app_name/shared/bundle/ruby/2.1.0/gems/sidekiq-4.0.2/lib/sidekiq/util.rb:24:in `block in safe_thread'

Data:

* data: {:sidekiq=>
  {"class"=>"ActiveJob::QueueAdapters::SidekiqAdapter::JobWrapper",
   "wrapped"=>"DetectFamousAndMajorJob",
   "queue"=>"default",
   "args"=>
    [{"job_class"=>"DetectFamousAndMajorJob",
      "job_id"=>"d4b06924-41a6-4b5a-bd78-9c1fb698769f",
      "queue_name"=>"default",
      "arguments"=>[6601],
      "locale"=>"zh-CN"}],
   "retry"=>true,
   "jid"=>"8043b8395a79fcb69739ed38",
   "created_at"=>1456217431.8794465,
   "enqueued_at"=>1456217868.0243142,
   "error_message"=>"uninitialized constant DetectFamousAndMajorJob",
   "error_class"=>"NameError",
   "failed_at"=>1456217439.976102,
   "retry_count"=>3,
   "retried_at"=>1456217663.7122743}}

其它：

任务是脚本生成的：

rails g DetectFamousAndMajorJob

配置

# config/environments/production.rb
  config.cache_classes = true

  config.eager_load = true

#   config/sidekiq.yml
---
:verbose: false
:pidfile: ./tmp/pids/sidekiq.pid
:concurrency: 5
:timeout: 30
:queues:
  - default

邮件里经常有类似报错，一般 retry 几次就过了，但看着太烦了。可能是什么原因引起的，怎么解决？

一些 redis/sidekiq 配置问题，已解决

Rails 4-2-stable 参考手册 (Beta)

leekelby — Mon, 17 Aug 2015 09:48:55 +0800

花了一年多时间，断断续续写了一本 Rails 方面的书，现在分享出来。书名暂定为“Rails 4-2-stable 参考手册 (Beta)”。因为写书过程中，基本上阅读的都是 Rails 4-2-stable 分支的源代码；并且有很多错漏需要更改，所以这次发布的是 Beta 版本，意思就是后续我还会改的。

为什么叫参考手册呢？本书主要包括两部分“Rails 源码剖析和 Rails 使用指南”，因为我想不出一个合适的名字来同时表现它们。Rails 是一个 Web 开发框架，也是一个工具。"工欲善其事必先利其器"，想要更好的使用 Rails 这个工具，清楚其背后的魔法，阅读源代码是必备功课。

本书尽量做到系统、全面，从源码出发，会讲解到原理。本书大部分内容为原创，少数内容为整理网上资料，鉴于参考资料太多，恕我不能一一列举来源。后续我尽量找出涉及版权问题的部分章节，然后进行重写或删除。

本书适合什么样的读者？

想要更好的使用 Rails 准备阅读 Rails 的源代码想知道 Rails 的整体架构想清楚 Rails 背后的魔法

本书包含了哪些内容？

一些文档里找不到的方法每个模块的关键所在源码阅读路线图

本书不讲哪些内容？

安装、部署奇技淫巧 Ruby 语法、Rails 入门和具体业务相关的问题或功能非常具体、底层的代码实现

联系我

邮箱：leekelby@gmail.com QQ 群：397935907

初衷：自己使用 Rails 已经有几年时间了，我一直想对它有个全面、系统的了解。所以写整理、编写了这本书，供自己学习和使用，尽量做到全面、系统，有讲概念，有讲原理。

如果您阅读后，发现错误或要改进的点，请联系我反馈；觉得对自己或他人有用的，可以分享或转发，希望能够对更多人有帮助。 谢谢。

链接：

Rails 4-2-stable 参考手册 (Beta)

涉及内容

为自己的创业项目打个广告 Power by shixian.com

Rails 4.2 新增后端任务框架 - Active Job

leekelby — Mon, 18 Aug 2014 19:03:39 +0800

不同的延迟任务，一样的 API.

在 Delayed Job、Resque、Sidekiq 等延迟任务之间切换，还要改代码？以后就不必了...

虽然这几个延迟任务 gem 使用上类似，但语法上多少有一点不同。新的 ActiveJob 组件统一了接口，使用和切换都会变得更容易。

Queue Adapter

默认使用的 queue_adapter 是 :inline，你可以根据需要自己设置 queue_adapter.

已经支持 Delayed Job、Resque、Sidekiq 等常用延迟任务 gem.

# 默认 queue adapter
ActiveJob::Base.queue_adapter = :inline
# 或
Rails.application.config.active_job.queue_adapter = :test

# 所有可用 adapter: :backburner, :delayed_job, :qu, :que, 
# :queue_classic, :resque, :sidekiq, :sneakers, :sucker_punch, :inline, :test

Queue Name

默认使用的 queue_name 是 "default"

可以定制：

class MyJob < ActiveJob::Base
  queue_as :my_jobs

  # ...
end

通过 config.active_job.queue_name_prefix= 可给所有队列名加前缀。

Core

# 实例方法
serialize

# 类方法
set # 常用
deserialize

使用举例：

# Enqueue a job to be performed as soon the queueing system is free.
MyJob.perform_later record

# Enqueue a job to be performed tomorrow at noon.
MyJob.set(wait_until: Date.tomorrow.noon).perform_later(record)

# Enqueue a job to be performed 1 week from now.
MyJob.set(wait: 1.week).perform_later(record)

Enqueuing 入队与重试

常用方法：

enqueue

使用举例：

my_job_instance.enqueue

# 目前，只接受以下 3 种参数
my_job_instance.enqueue wait: 5.minutes
my_job_instance.enqueue queue: :important
my_job_instance.enqueue wait_until: Date.tomorrow.midnight

执行任务失败，还可以：

retry_job

使用举例：

class SiteScrapperJob < ActiveJob::Base
  rescue_from(ErrorLoadingSite) do
    retry_job queue: :low_priority
  end

  def perform(*args)
    # raise ErrorLoadingSite if cannot scrape
  end
end

除上述两实例方法外，还有类方法：

perform_later

Execution 执行

# 实例方法
perform, perform_now

# 类方法
perform_now # 简单封装了实例方法 perform_now

使用举例：

MyJob.new(*args).perform_now

MyJob.perform_now("mike")

Callbacks 回调

比某些延迟 gem 多做了一点点，除了队列&执行本身外，还可以有回调：

before_enqueue
around_enqueue
after_enqueue

before_perform
around_perform
after_perform

使用举例：

class VideoProcessJob < ActiveJob::Base
  queue_as :default

  after_perform do |job|
    UserMailer.notify_video_processed(job.arguments.first)
  end

  def perform(video_id)
    Video.find(video_id).process
  end
end

其它几个方法类似。

实现上，都是直接封装 set_callback

提示

有利必有弊，可能面临以下问题：
原 gem 本身的特点没能充分利用，灵活性降低，和其它 gem 的集成会变复杂。

---------------------------------------------------------------- 分隔线 ----------------------------------------------------------------

其它多个类或模块，统一在此列举。

Arguments 参数处理

接受的参数类型很广泛，需要先处理一下。

进队列时参数需要 serialize，执行前参数需要 deserialize

当然，这都是自动完成的。

参数支持 Global ID

一般入队列 (enqueue_in、enqueue_at 和 enqueue) 只传能够标识对象的那部分参数 (如：class、id)，出队列/执行的时候再根据这些参数获取对象。

但因为 serialize_argument 支持的类型有多种，其中就包括 GlobalID::Identification. 所以我们可以传递一个"活的对象"进队列，而不只是它的一部分 (如：class、id).

使用 Global ID 前后对比：

class TrashableCleanupJob
  def perform(trashable_class, trashable_id, depth)
    # 出队列/执行的时候需要根据 trashable_class 和 trashable_id 查询相应 trashable
    trashable = trashable_class.constantize.find(trashable_id)
    trashable.cleanup(depth)
  end
end

class TrashableCleanupJob
  def perform(trashable, depth)
    # 出队列/执行的时候直接使用 trashable
    trashable.cleanup(depth)
  end
end

Note: 不规范的写法里，也可以直接传递对象。

Railtie

设置 logger 和配置 (如：默认 queue_adapter)

Queue Adapters

原来，不同的延迟任务 gem 有各自不同的 self.perform、perform、run、work，现在：

都有同名的 self.enqueue 和 self.enqueue_at

Logging

around_enqueue、around_perform 和 before_enqueue 有日志记录

enqueue、enqueue_at、perform_start、perform 等过程也有日志记录

Identifier

每个任务都有全局唯一的 job_id

Configured Job

配置实例，对应着 Core 的 set 类方法。

解析 queue_adapter 及其 API

queue_adapter 是 Delayed Job、Resque、Sidekiq 等不同的延迟任务抽象而来。

而 queue_adapter 所用的 API(enqueue_at、enqueue_in、enqueue 等)，也是从原延迟任务所提供的 API 抽象而来。

命令行快捷生成

rails generate job NAME [options]

异常捕获与处理

使用 ActiveSupport 的异常捕获方法 rescue_from

class GuestsCleanupJob < ActiveJob::Base
  queue_as :default

  # 异常捕获
  rescue_from(ActiveRecord::RecordNotFound) do |exception|
   # 异常处理
  end

  def perform
    # ...
  end
end

学习，使用 git 过程中做的思维导图

leekelby — Sat, 01 Mar 2014 14:26:13 +0800

这是学习，使用 git 过程中做的思维导图，分享出来给大家。

用的是 XMind 画的，如果你恰好装有此软件，或者能打开 .xmind 格式的软件，可以直接从网盘下载源文件。 http://yunpan.cn/Q4rwFTXLqhe42

你也可以直接查看生成的图片，直接或者浏览网盘链接源图片

主要包括：安装配置，基本概念，常用命令 (基础)，命令集 (中级)，一直开发流程，一些使用场景。内容部分来源于网络整理，参考较多的都给出来源，部分是自己的使用经验。

包含内容

基本概念

基本配置

命令的基本使用

命令集

场景

git 使用灵活，要达到一样的目的，通常都有好几种做法。所以…

最后说明一下，这份思维导图会一直更新的。分享出来也是为了做得更好，欢迎反馈，或者提交 merge request。 https://gitcafe.com/restkuan/git

感谢 gitcafe，方便了我在家里和办公室之间切换，以及省去上传网盘的来回复制粘贴。