Ruby China 社区 MongoDB 节点

可以在一个 document 内的数组排序吗？

lihaibo — Fri, 11 Sep 2020 10:15:56 +0800

一个 docment 内部有数组，然后对其按照某个字段排序，可以直接使用 mongodb 来实现吗，不想用外部的编程语言实现

设置 auth 之后，数据丢失

autumnwolf — Mon, 08 Apr 2019 11:40:46 +0800

之前 mongo 没有开启 auth，现在想打开。但是开启后数据都丢失了。

最开始的 docker-compose.yml

mongo:
    image: mongo
    volumes:
      - ./data:/data/db
    ports:
    - "27017:27017"

加上了数据户的账户和密码

mongo:
    image: mongo
    volumes:
      - ./data:/data/db
    ports:
    - "27017:27017"
    environment:
      MONGO_INITDB_ROOT_USERNAME: admin
      MONGO_INITDB_ROOT_PASSWORD: password

然后 docker-compose up, 发现并没用添加这个用户，因为我的数据库已经存在了，所以继续加上创建用户名和密码的部分

mongo:
    image: mongo
    volumes:
      - ./data:/data/db
    ports:
    - "27017:27017"
    environment:
      MONGO_INITDB_ROOT_USERNAME: admin
      MONGO_INITDB_ROOT_PASSWORD: password
    volumes:
      - ./mongo-init.js:/docker-entrypoint-initdb.d/mongo-init.js:ro

添加一个新的文件 mongo-init.js

use admin
db.createUser(
  {
    user: "admin",
    pwd: "passw0rd",
    roles: [ { role: "userAdminAnyDatabase", db: "admin" }, "readWriteAnyDatabase" ]
  }
)

就这样 auth 打开了，但是之前的数据库没有了。

有一个警告

WARNING: Service "mongo" is using volume "/data/db" from the previous container. Host mapping "/home/xxx/deploy/data" has no Recreating deploy_mongo_1 ...

PS:

在我的 mongo-init.js，应该是一直写的 `pwd: "passwr0rd", docker-compose.yml 里面是“password". 但是现在数据库用 docker-compose 里面的密码可以连上。
我的数据应该是 mount 到了工程目录下的 data 目录，也就是- ./data:/data/db. 这个目录从来没有动过，是不是 docker-compose up 会覆盖这个目录导致我数据丢失。还是其他的原因。

不知道是否能找回我的数据，望高人指点，谢谢了！

mongoid model update 时会查询 has_one 关联属性

leebo-github — Tue, 18 Dec 2018 12:34:06 +0800

模型

User name:string
Profile age:integer

User has_one :profile
Profile belongs_to :user

User.first.update(name: 'xxxx')

会触发

D, [2018-12-18T12:33:25.612410 #31808] DEBUG -- : MONGODB | localhost:27017 | m_development.find | STARTED | {"find"=>"users", "filter"=>{}, "sort"=>{"_id"=>1}, "limit"=>1, "singleBatch"=>true, "lsid"=>{"id"=><BSON::Binary:0x70240119236940 type=uuid data=0x72ff27da5b0142c9...>}}
D, [2018-12-18T12:33:25.614074 #31808] DEBUG -- : MONGODB | localhost:27017 | m_development.find | SUCCEEDED | 0.001s
D, [2018-12-18T12:33:25.624208 #31808] DEBUG -- : MONGODB | localhost:27017 | m_development.find | STARTED | {"find"=>"profiles", "filter"=>{"user_id"=>BSON::ObjectId('5c17c80178d1e2347dca77b2')}, "limit"=>1, "singleBatch"=>true, "lsid"=>{"id"=><BSON::Binary:0x70240119236940 type=uuid data=0x72ff27da5b0142c9...>}}
D, [2018-12-18T12:33:25.624993 #31808] DEBUG -- : MONGODB | localhost:27017 | m_development.find | SUCCEEDED | 0.001s
D, [2018-12-18T12:33:25.626517 #31808] DEBUG -- : MONGODB | localhost:27017 | m_development.update | STARTED | {"update"=>"users", "ordered"=>true, "lsid"=>{"id"=><BSON::Binary:0x70240119236940 type=uuid data=0x72ff27da5b0142c9...>}, "updates"=>[{"q"=>{"_id"=>BSON::ObjectId('5c17c80178d1e2347dca77b2')}, "u"=>{"$set"=>{"name"=>"xxxx"}}, "multi"=>false, "upsert"...
D, [2018-12-18T12:33:25.627230 #31808] DEBUG -- : MONGODB | localhost:27017 | m_development.update | SUCCEEDED | 0.001s

我试了用 ActiveRecord 不会有这样的问题这块有点搞不懂为什么要去查询 profiles 呢

MongoDB 修改数据库保存位置无法启动？

OrderSun — Tue, 20 Mar 2018 09:55:26 +0800

环境 ubuntu16.04，项目使用 mongodb，由于数据量较大，想把数据库保存到其他目录，修改如下：

默认的数据存储目录是/var/lib/mongodb，假设我们的目的路径是/home/mongodb。

关闭数据库：

sudo service mongod stop

在配置文件中将 storage.dbPath 项设置为目的路径，修改后如下：

storage：
  dbPath: /home/mongodb

sudo cp -r /var/lib/mongodb/* /home/mongodb/

将 mongod.lock 文件删除后启动数据库：

sudo rm /home/mongodb/mongod.lock
sudo service mongod start

看起来一切都是那么美好~~~~

查看启动状态：

sudo service mongod status

● mongod.service - High-performance, schema-free document-oriented database
   Loaded: loaded (/lib/systemd/system/mongod.service; disabled; vendor preset: enabled)
   Active: failed (Result: exit-code) since Tue 2018-03-20 09:35:41 CST; 4s ago
     Docs: https://docs.mongodb.org/manual
  Process: 17283 ExecStart=/usr/bin/mongod --config /etc/mongod.conf (code=exited, status=100)
 Main PID: 17283 (code=exited, status=100)

Mar 20 09:35:41 smart systemd[1]: Started High-performance, schema-free document-oriented database.
Mar 20 09:35:41 smart systemd[1]: mongod.service: Main process exited, code=exited, status=100/n/a
Mar 20 09:35:41 smart systemd[1]: mongod.service: Unit entered failed state.
Mar 20 09:35:41 smart systemd[1]: mongod.service: Failed with result 'exit-code'.

那么问题来了，为什么会启动失败呢？通过查询日志文件得知：

Attempted to create a lock file on a read-only directory: /home/mongodb, terminating

查看/home/mongodb的权限

drwxr-xr-x 4 root root 4.0K Mar 20 10:55 mongodb

这里的文件所属者不正确，mongodb这个目录的所有者必须是 mongodb，使用以下命令修改

# /home
sudo chown -R mongodb:mongodb *

修改后权限为

drwxr-xr-x 4 mongodb mongodb 4.0K Mar 20 10:55 mongodb

重启服务，大功告成。

Mongoid 里 order 和 sort 的区别是啥

birbird — Sun, 05 Nov 2017 11:07:38 +0800

Mongoid 既可以

Book..where(author: "Stephen King").order(created_at: :desc)

也可以

Book.where(author: "Stephen King").sort({"created_at": 1})

请问 order 和 sort 的区别是啥谢啦先

关于 MongoId 里使用 DBRef

milk — Tue, 12 Sep 2017 16:19:44 +0800

比如一个用户下有多篇文章，文章分开存，用户用 DBRef 来引用文章

在 Mongo 控制台直接操作可以

//user是一个已经找到的用户
user.articles[0].fetch()

在 MongoId 里，得到的就是一个 DBRef 对象，看了一下 methods，貌似没有可以直接取得对象的方法，难道还要这样做？

Article.find user.articles[0].id

carrierwave-mongoid 的数据，找不到了

lukefan — Tue, 18 Jul 2017 17:31:26 +0800

我在一个项目中使用 carrierwave-mongoid，作为附件管理的工具

在 mongodb 中，没有发现存储的相关信息在什么地方

dump 了 mongodb 的数据库，到新的数据库中进行 restore

原来的 picture_url，就不工作了，返回的都是 nil

请问应该如何处理？

请教大家 1.12.x 版本中，报 NameError: uninitialized constant MongoReplicaSetClient

ghn645568344 — Mon, 19 Dec 2016 14:23:38 +0800

之前项目中用的是 1.12.3 版本的 mongo gem，后来升级 mongo gem 后发现之前版本的链接方式都换了，想再退回到 1.12.3 版本的 GEM 但使用副本集的时候

client =MongoReplicaSetClient.new(['123.57.xxx.xxx:30000', '123.56.xxx.xxx:30000', '101.201.xxx.xxx:30000'])

链接时报

NameError: uninitialized constant MongoReplicaSetClient
    from (irb):3
    from /home/haonan/.rvm/gems/ruby-2.1.4/gems/railties-4.2.3/lib/rails/commands/console.rb:110:in `start'
    from /home/haonan/.rvm/gems/ruby-2.1.4/gems/railties-4.2.3/lib/rails/commands/console.rb:9:in `start'
    from /home/haonan/.rvm/gems/ruby-2.1.4/gems/railties-4.2.3/lib/rails/commands/commands_tasks.rb:68:in `console'
    from /home/haonan/.rvm/gems/ruby-2.1.4/gems/railties-4.2.3/lib/rails/commands/commands_tasks.rb:39:in `run_command!'
    from /home/haonan/.rvm/gems/ruby-2.1.4/gems/railties-4.2.3/lib/rails/commands.rb:17:in `<top (required)>'
    from bin/rails:4:in `require'
    from bin/rails:4:in `<main>'

网上各种查，没找到好的办法，请假大家了

如何跳过 after_save 等回调方法？

lehug — Sun, 10 Jul 2016 15:43:14 +0800

在我代码初始化数据的时候，我不希望他执行回调，因为这样执行效率比较慢，我希望初始化完毕后，统一执行以下回调。但是查阅了一些 rails 跳过回调的文档，提供的方法 mongodb 没法识别，mongodb 官方文档也没有跳过回调的说明，求助大神们，怎么操作可以跳过回调？

项目是 rails4.6+mongodb

我参考过的文章： https://docs.mongodb.com/ecosystem/tutorial/mongoid-callbacks/ http://guides.ruby-china.org/active_record_callbacks.html

MongoDB 集群的几点疑惑

frank — Fri, 15 Jan 2016 11:09:02 +0800

环境介绍： MongoDB version 2.6.6 Centos 三个分片集群。

问题 1：我通过 mongos 这台路由机器把数据 dump 出来，然后执行 db.collection.remove({})。执行完成之后，登陆 mongos，发现备份的数据库占用空间还是原来的大小（33G），但是里面的数据没有了。有人能帮忙解释下吗？
问题 2：有人说 MongoDB，只删除数据，不删除数据文件，以便后期使用。如果我执行数据导入操作，导入我之前备份的数据，磁盘空间占用会变成 66G 吗？如果我想把文件也删掉怎么操作，会有什么影响吗？

MongoDB 配置 iptables 限制 ip 访问造成访问不稳定

mingmingpao — Mon, 06 Jul 2015 18:58:14 +0800

我的服务器部署在阿里云上，系统是 Ubuntu Server 14.04，iptables 配置项如下（用的教程是http://blog.csdn.net/pang040328/article/details/19047573）：

sudo iptables -I INPUT -p tcp --dport 27017 -j DROP
sudo iptables -I INPUT -s 127.0.0.1 -p tcp --dport 27017 -j ACCEPT
sudo iptables -I INPUT -s <my-server-ip> -p tcp --dport 27017 -j ACCEPT

结果造成数据库访问不稳定，有时访问出错，有时会访问速度较慢。

why？

Mongoid 中的 callback 陷阱

cinic — Mon, 04 May 2015 15:45:29 +0800

在 save 一个实例时，返回了 false，但查看 errors 却是空的，也就是说 validate 都通过了，但却没有保存成功。于是调用了 save！方法，报错：

Mongoid::Errors::Callback: 
Problem:
  Calling save! on User resulted in a false return from a callback.
Summary:
  If a before callback returns false when using Document.create!, Document#save!, or Documnet#update_attributes! this error will get raised since the document did not actually get saved.
Resolution:
  Double check all before callbacks to make sure they are not unintentionally returning false.
    from /Users/cinic/.rvm/gems/ruby-2.1.4/gems/mongoid-4.0.0/lib/mongoid/persistable.rb:93:in `fail_due_to_callback!'
    from /Users/cinic/.rvm/gems/ruby-2.1.4/gems/mongoid-4.0.0/lib/mongoid/persistable/savable.rb:46:in `save!'
    from (irb):6
    from /Users/cinic/.rvm/gems/ruby-2.1.4/gems/railties-4.1.7/lib/rails/commands/console.rb:90:in `start'
    from /Users/cinic/.rvm/gems/ruby-2.1.4/gems/railties-4.1.7/lib/rails/commands/console.rb:9:in `start'
    from /Users/cinic/.rvm/gems/ruby-2.1.4/gems/railties-4.1.7/lib/rails/commands/commands_tasks.rb:69:in `console'
    from /Users/cinic/.rvm/gems/ruby-2.1.4/gems/railties-4.1.7/lib/rails/commands/commands_tasks.rb:40:in `run_command!'
    from /Users/cinic/.rvm/gems/ruby-2.1.4/gems/railties-4.1.7/lib/rails/commands.rb:17:in `<top (required)>'
    from bin/rails:4:in `require'
    from bin/rails:4:in `<main>'

根据报错信息，又去类里查看了所以的 callback 方法，其实只有一个 before_save：

self.is_member = self.point > 0 ? true : false

就是检查某个值大于 0 时，将另一个值设为 true，否则为 false。问题就在这里，因为有可能是返回的 false，所以导致这个 callback 最后的返回值也是 false，最后解决是在这个方法最后加上 return true。有没有碰到过这样问题的，这算是个 Bug 吗？

Mongoid 的文档中有这样说：

Using callbacks for domain logic is a bad design practice, and can lead to unexpected errors that are hard to debug when callbacks in the chain halt execution. It is our recommendation to only use them for cross-cutting concerns, like queueing up background jobs.

是不是不应该这么用 callback 呢？

Mongoid 如何与 elasticsearch 很好的集成?

mingmingpao — Mon, 13 Apr 2015 12:34:01 +0800

我想用 elasticsearch-model 与 elasticsearch 整合，结果与 mongoid 进行整合不大顺利。

我尝试了下与 ActiveRecord 的整合，很顺利。

http://www.elastic.co/guide/en/elasticsearch/client/ruby-api/current/_activemodel_activerecord.html

上面按个地址的入门教程直接就顺利通过了。

但是改成 mongoid 之后，不行。我进去 elasticsearch-model 的 github 主页，看到 gemfiles 这个文件夹的 commit 信息显示如下：

Bundler could not find compatible versions for gem "minitest": In Gemfile: mongoid (= 4.0.0) ruby depends on activemodel (~> 4.0) ruby depends on activesupport (= 4.0.0) ruby depends on minitest (~> 4.2) ruby

minitest (4.0.0)

我无法得知如何更改，而且我也无法得知是否是因为这个出错误了。

Mongoid 中只设置 belongs_to 忽略 has_many 会有严重问题吗?

mingmingpao — Thu, 09 Apr 2015 16:26:44 +0800

看文档中有这么一句

Definitions are required on both sides to the relation in order for it to work properly, unless one of the models is embedded.

如果我忽略 has_many 会怎样？因为不需要从 one 端获取 many 端

Mongoid 中 attr_protected 错误: NoMethodError: undefined method `attr_protected' for User:Class

mingmingpao — Thu, 09 Apr 2015 16:23:58 +0800

现在用 Mongoid4.0 了，配置

class User
    include Mongoid::Document
    field :first_name, type: String
    field :password, type: String
    attr_protected :password # focus this
end

出现了标题的错误。我想要在 model 层禁止更新密码，思路来源于 http://mongoid.org/en/mongoid/docs/documents.html#security

【已解决】mongoid 实现 group by 问题

liangbin661831 — Thu, 22 Jan 2015 11:26:48 +0800

我参考这篇文章：http://www.dixis.com/?p=531 clone 的 rubychina 的源码，打开 console,

Reply.collection.group(:key => 'user_id', :initial => { :count => 0 }, :reduce => "function(doc, prev){prev.count += 1;}")

没有反应啊，大神们这是怎么回事啊？ mongodb 时启动的，rubychina 可以在本地跑起来。或者大神门赐教 mongodb 怎么做 group by 比较好。

一个新项目，用 Mongo 还是 SQL DB?

gazeldx — Tue, 16 Dec 2014 15:14:15 +0800

一个新项目，数据量应该会比较大，不过目前是初创阶段。

团队目前没有 mongoDB 高手，不过我有信心带领团队把 mongoDB 搞通。

请问该用熟悉的 sql 数据库还是 mongoDB？

让 Mongoid 4.0.0 支持 belongs_to eager load

michael_roshen — Wed, 05 Nov 2014 19:04:13 +0800

mongoid4.0.0 去掉了 IdentityMap

原来在 mongoid3 上做的 belongs_to eager_load 不能再用了那我们看看 mongoid4.0.0 改如何修改

模型，假设一张脸有多个左眼和多个右眼吧，懒得改了^^

class Face
  include Mongoid::Document
  field :name, type: String
  has_many :left_eyes, class_name: "Eye", as: :eyeable
  has_many :right_eyes, class_name: "Eye", as: :eyeable
end

class Eye
  include Mongoid::Document
  field :name, type: String

  belongs_to :eyeable, polymorphic: true
end

no eager_load

faces = Face.all.to_a
faces.first.left_eyes

MOPED: 127.0.0.1:27017 QUERY runtime: 0.6560ms

[ #, # ]

has_many: eager_load , 使用 .includes 方法

faces = Face.includes(:left_eyes).to_a
faces.first.left_eyes

[ #, # ]

mongoid 4.0.0 支持 has_many 的 eager_load，但是不支持 belongs_to

eg:

eyes = Eye.includes(:eyeable).to_a

抛出异常 Mongoid::Errors::EagerLoad: Problem: Eager loading :eyeable is not supported since it is a polymorphic belongs_to relation.

查看原代码，发现当 belongs_to 后面接 polymorphic 参数的时候，会抛出异常

module Mongoid
  module Relations
    module Eager
      class BelongsTo < Base
        def preload
           raise Errors::EagerLoad.new(@metadata.name) if @metadata.polymorphic?
           @docs.each do |d|
             set_relation(d, nil)
           end

           each_loaded_document do |doc|
             id = doc.send(key)
             set_on_parent(id, doc)
           end
           ...
        end
      end
    end
  end
end

那我们注意掉这句，看一下会发生什么？ NameError: uninitialized constant Eyeable 问题出在这里 each_loaded_document, @metadata.klass ＝> Eyeable 这个 Eyeable 是从哪里来的呢？就是从我们的模型 Eye 中：belongs_to :eyeable each_loaded_document 这个方法就是 load 依赖的模型数据了

eyes = Eye.includes(:eyeable).to_a

module Mongoid
  module Relations
    module Eager
      class Base
        def each_loaded_document
          @metadata.klass.any_in(key => keys_from_docs).each do |doc|
            yield doc
          end
        end
      end
    end
  end
end

找到需要预加载的 Face，并通过 set_on_parent 与 eye 建立对应关系 @metadata.klass.any_in(key => keys_from_docs) => Face.any_in(_id => ['id1','id2'])

each_loaded_document do |doc|
   id = doc.send(key)
   set_on_parent(id, doc)
end

建立 eye 对象和 face 对象的对应关系 #Eye:0x007f837b55b670, #Face:0x007f837b4f2800 #Eye:0x007f837b55b5f8, #Face:0x007f837b4f2800

def set_on_parent(id, element)
  grouped_docs[id].each do |d|
    set_relation(d, element)
  end
end

生成实例变量 @_eyealbe,当调用 eyes.first.eyealbe 的时候，则直接返回 face 对象而不需要再查询数据库 @_eyeable, #Face:0x007f837b4f2800

def set_relation(name, relation)
  instance_variable_set("@_#{name}", relation)
end

综上，处理 belongs_to eager_load 的做法：

重写 preload 方法，去掉 raise lib/mongoid/eager_load.rb

module Mongoid
module Relations
module Eager
  class BelongsTo < Base
    def preload
       @docs.each do |d|
         set_relation(d, nil)
       end

       each_loaded_document do |doc|
         id = doc.send(key)
         set_on_parent(id, doc)
       end
       ...
    end
  end
end
end
end

加载 initializers/mongoid.rb
```
require "mongoid/eager_load"
```

在 belongs_to 一端，声明 class_name

class Eye
include Mongoid::Document
field :name, type: String
belongs_to :eyeable, class_name: "Face", polymorphic: true
end

测试：belongs_to

2.1.1 :004 > eyes = Eye.all.to_a 2.1.1 :005 > eyes.first.eyeable MOPED: 127.0.0.1:27017 QUERY runtime: 0.6910ms => #

2.1.1 :002 > eyes = Eye.includes(:eyeable).to_a 2.1.1 :003 > eyes.first.eyeable => #

测试：has_many

2.1.1 :006 > faces = Face.includes(:left_eyes).to_a 2.1.1 :009 > faces.first.left_eyes MOPED: 127.0.0.1:27017 QUERY runtime: 0.7480ms => [ #, # ]

2.1.1 :006 > faces = Face.includes(:left_eyes).to_a 2.1.1 :007 > faces.first.left_eyes => [ #, # ]

博客：http://michael-roshen.iteye.com/blog/2152764 微信：ruby 程序员

MongoDB 的备份策略

iamroody — Thu, 14 Aug 2014 10:54:27 +0800

用 dump 整个数据库的方式来备份，会完全占满磁盘 IO，基本上 server 就会处于不可用的状态，并且备份出来动辄好几个 G 的数据库文件也不好管理。

想要使用 MongoDB 的 MMS 服务，增量的 oplog 备份看起来很不错，但是不知道对国内 MongoDB 服务器备份起来，带宽或者其他方面是否有影响。

所以想要请教大家，你们的 MongoDB 的备份策略是咋做的？

mongoose 正则匹配

Tue, 15 Jul 2014 14:20:43 +0800

var regex = new RegExp(sSearch, 'i');
User.find({name: regex}).exec(function (err, items){
}

name 的 type 是 String，这样是可以的；如果换成 age，age 的 type 是 Number，就报类型转换错误 CastError: Cast to number failed for value "/(?:)/i" at path "age"，请问一下，该是怎么样的写法？