如何使用docker-compose为mongo数据库播种？

问题描述 投票：52回答：8

我正在尝试分发一组在几个链接容器中运行的连接应用程序，其中包含一个mongo数据库，该数据库需要：

  • 分发包含一些种子数据;
  • 允许用户添加其他数据。

理想情况下，数据也将保存在链接的数据卷容器中。

我可以使用不安装任何卷的mongo基本实例将数据导入mongo容器（dockerhub image：psychemedia/mongo_nomount - 这实际上是没有VOLUME /data/db语句的基本mongo Dockerfile）和Dockerfile配置沿着以下行：

ADD . /files
WORKDIR /files
RUN mkdir -p /data/db && mongod --fork --logpath=/tmp/mongodb.log && sleep 20 && \
mongoimport  --db testdb --collection testcoll  --type csv --headerline --file ./testdata.csv  #&& mongod --shutdown

其中./testdata.csv与Dockerfile位于同一目录（./mongo-with-data）中。

我的docker-compose配置文件包括以下内容：

mongo:
  #image: mongo
  build: ./mongo-with-data
  ports:
    - "27017:27017"
  #Ideally we should be able to mount this against a host directory
  #volumes:
  #  - ./db/mongo/:/data/db
  #volumes_from:
  #  - devmongodata

#devmongodata:
#    command: echo created
#    image: busybox
#    volumes: 
#       - /data/db

每当我尝试安装VOLUME时，似乎删除了存储在/data/db中的原始种子数据。我想当一个卷安装到/data/db时，它取代了当前的任何东西。

也就是说，docker userguide建议：在创建容器时初始化卷。如果容器的基本映像包含指定安装点的数据，那么在卷初始化时会将现有数据复制到新卷中吗？所以如果我在播种RUN命令之后放置VOLUME命令，我预计数据会持续存在？

那么我做错了什么？

长远来看，我希望自动构建多个链接容器，然后分发一个Vagrantfile / docker-compose YAML文件，该文件将启动一组链接的应用程序，其中包括一个带有预先种子的mongo数据库（部分预先 - 填充的）持久数据容器。

mongodb docker docker-compose
8个回答
79
投票

我使用另一个docker容器执行此操作，其唯一目的是为mongo提供种子，然后退出。我怀疑这和ebaxt的想法是一样的，但是当我在寻找答案的时候，我只想看到一个快速而又肮脏但又直截了当的例子。所以这是我的：

泊坞窗，compose.yml

mongodb:
  image: mongo
  ports:
    - "27017:27017"

mongo-seed:
  build: ./mongo-seed
  links:
    - mongodb

# my webserver which uses mongo (not shown in example)
webserver:
  build: ./webserver
  ports:
    - "80:80"
  links:
    - mongodb

蒙戈种子/ Dockerfile

FROM mongo

COPY init.json /init.json
CMD mongoimport --host mongodb --db reach-engine --collection MyDummyCollection --type json --file /init.json --jsonArray

蒙戈种子/ init.json

[
  {
    "name": "Joe Smith",
    "email": "[email protected]",
    "age": 40,
    "admin": false
  },
  {
    "name": "Jen Ford",
    "email": "[email protected]",
    "age": 45,
    "admin": true
  }
]
5
投票

我发现使用Docker自定义映像和使用卷是有用的，而不是为播种创建另一个容器。

文件结构

.
├── docker-compose.yml
├── mongo
│   ├── data
│   ├── Dockerfile
│   └── init-db.d
│       └── seed.js

Dockerfile / docker-compose.yml中提到的每个文件位置都与docker-compose.yml的位置有关

DOCKERFILE

FROM mongo:3.6

COPY ./init-db.d/seed.js /docker-entrypoint-initdb.d

泊坞窗，compose.yml

version: '3'

services:
  db:
    build: ./mongo
    restart: always
    volumes:
      - ./mongo/data:/data/db #Helps to store MongoDB data in `./mongo/data`
    environment:
      MONGO_INITDB_ROOT_USERNAME: {{USERNAME}}
      MONGO_INITDB_ROOT_PASSWORD: {{PWD}}
      MONGO_INITDB_DATABASE: {{DBNAME}}

seed.js

// Since Seeding in Mongo is done in alphabetical order... It's is important to keep
// file names alphabetically ordered, if multiple files are to be run.

db.test.drop();
db.test.insertMany([
  {
    _id: 1,
    name: 'Tensor',
    age: 6
  },
  {
    _id: 2,
    name: 'Flow',
    age: 10
  }
])

docker-entrypoint-initdb.d可用于创建不同的用户和mongodb管理相关的东西，只需创建一个字母顺序命名为js-script to createUser等...

有关如何自定义MongoDB Docker服务的更多详细信息，请阅读this

此外，最好保护您的密码和用户名不被公开，不要在公共git上推送凭据，而是使用Docker Secrets。另请阅读此Tutorial on Secrets

请注意，没有必要进入docker-swarm模式来使用秘密。 Compose Files也支持秘密。检查this

秘密也可用于MongoDB Docker Services

3
投票

这是我们如何使用一次性容器清洁和种子图像https://blog.ardoq.com/dynamic-database-seeding-with-docker的文章

2
投票

目前的答案基于@Jeff Fairley answer并根据新的Docker文档进行了更新

docker-compose.yml

version: "3.5"

services:
  mongo:
    container_name: mongo_dev
    image: mongo:latest
    ports:
      - 27017:27017
    networks:
      - dev

  mongo_seed:
    container_name: mongo_seed
    build: .
    networks:
      - dev
    depends_on:
      - mongo

networks:
  dev:
    name: dev
    driver: bridge

Dockerfile

FROM mongo:latest
COPY elements.json /elements.json
CMD mongoimport --host mongo --db mendeleev --collection elements --drop --file /elements.json --jsonArray

您可能需要重建当前图像。

1
投票

你可以使用Mongo Seeding Docker image。

为什么？

  • 你准备好了Docker镜像
  • 您不依赖于JSON文件 - 也支持JavaScript和TypeScript文件（包括使用TypeScript的可选模型验证）

Docker Compose的示例用法：

version: '3'
services:
  database:
    image: 'mongo:3.4.10'
    ports:
    - '27017:27017'
  api:
    build: ./api/
    command: npm run dev
    volumes: 
    - ./api/src/:/app/src/
    ports:
    - '3000:3000'
    - '9229:9229'
    links:
    - database
    depends_on:
    - database
    - data_import
    environment: 
    - &dbName DB_NAME=dbname
    - &dbPort DB_PORT=27017 
    - &dbHost DB_HOST=database
  data_import:
    image: 'pkosiec/mongo-seeding:3.0.0'
    environment:
    - DROP_DATABASE=true
    - REPLACE_ID=true
    - *dbName
    - *dbPort
    - *dbHost
    volumes:
    - ./data-import/dev/:/data-import/dev/
    working_dir: /data-import/dev/data/
    links:
    - database
    depends_on:
    - database

免责声明：我是这个图书馆的作者。

1
投票

值得看看这个答案：https://stackoverflow.com/a/42917632/5209935

基本的想法是stock mongo图像有一个特殊的入口点，你可以重载它以提供一个种子数据库的脚本。

0
投票

您可以使用此image为许多作业提供docker容器（导入，导出，转储）

使用docker-compose查看example

0
投票

回答我自己的问题：

  • 简单的YAML文件，用于创建链接到数据卷容器的简单mongo容器，由Vagrant docker compose启动。
  • 在Vagrantfile中，代码如下：

config.vm.provision :shell, :inline => <<-SH docker exec -it -d vagrant_mongo_1 mongoimport --db a5 --collection roads --type csv --headerline --file /files/AADF-data-minor-roads.csv SH

导入数据。

包装盒子。

分发盒子。

对于用户来说，一个简单的Vagrantfile可以加载该框并运行一个简单的docker-compose YAML脚本来启动容器并将mongo db安装到数据卷容器中。

最新问题
© www.soinside.com 2019 - 2024. All rights reserved.