misc: add a script for vm test env

Vagrant will not always be available everywhere, sometimes we want to
bootstrap a ceph on a virtual machine. This script will help you
bootstrapping a ceph cluster from a development branch only.

So you can run it like this: ./ceph-aio-no-vagrant.sh v10.1.0
To get the v10.1.0 version installed. If the first argument ($1) is
empty then master will be used in consequence.

Signed-off-by: Sébastien Han <seb@redhat.com>

Merge pull request #677 from ceph/fix-key-perms

ceph-mon: fix ceph keys permissions

ceph-mon: fix ceph keys permissions

Certain daemons will not start because of the wrong permissions.

Signed-off-by: Sébastien Han <seb@redhat.com>

ceph-osd: docker fix typo again...

Signed-off-by: Sébastien Han <seb@redhat.com>

Merge pull request #675 from ceph/fix-typo-docker-osd

ceph-osd: docker start typo...

ceph-osd: docker start typo...

Signed-off-by: Sébastien Han <seb@redhat.com>

Merge pull request #673 from ceph/docker-perm

ceph-docker: fix permissions on directories

ceph-docker: osd fix container prep and start

We now check if the device has already been prepared, if we detect a
ceph partition we do not prepare the device.
Also fixed some issues while running on Atomic or CoreOS.

Signed-off-by: Sébastien Han <seb@redhat.com>

ceph-docker: fix permissions on directories

fixing the can't open /var/lib/ceph/bootstrap-osd/ceph.keyring: can't
open /var/lib/ceph/bootstrap-osd/ceph.keyring: (13) Permission denied

Signed-off-by: Sébastien Han <seb@redhat.com>

Merge pull request #666 from PiotrProkop/ceph-mon-fix

Adding support for non atomic and non CoreOS machines for deploying containerized mons with kv backend

Merge pull request #665 from PiotrProkop/ceph-osd-kv

Adding support for non atomic and non CoreOS machines for deploying containerized osds with kv backend

Changed when statements due to review

Changes due to review

Merge pull request #671 from squizzi/fix-admin-key-wait

Added when: cephx to prevent waiting on keyring with cephx: false

Added when: cephx to prevent waiting on keyring with cephx: false

Signed-off-by: Kyle Squizzato <ksquizz@gmail.com>

Merge pull request #669 from ceph/fix-atomic

ceph-mon: docker fix run on atomic host

Merge pull request #668 from cloudnull/config_template_ansible2_compat

Update the config_template plugin for ansible2

ceph-mon: docker fix run on atomic host

fix template issues.

Signed-off-by: Sébastien Han <seb@redhat.com>

Update the config_template plugin for ansible2

This change updates the config_template plugin to load
the version of the config_template needed based on the
detected version of ansible running. Note, Once the
upstream change merges for ansible 2 [0] we should
drop the ansible 2  version of this plugin.

[0] - https://github.com/ansible/ansible/pull/12555

Change-Id: Ifbdde0f30ee2bd8025ede07c86234527ba9891db
Signed-off-by: Kevin Carter <kevin.carter@rackspace.com>

Merge pull request #662 from ceph/follow-up-cluster-name

ceph: implement cluster name support

ceph: implement cluster name support

we now have the ability to enable the `cluster` variable with a specific
value that will determine the name of the cluster.

Signed-off-by: Sébastien Han <seb@redhat.com>

Changing when statements

Changing when statements

Fixing creating configs when default one is chosen

Adding support for non atomic and non CoreOS machines for deploying containerized mons with kv backend

Adding missing space

Adding support for non atomic and non CoreOS machines for deploying containerized osds with kv backend

Merge pull request #663 from jimcurtis/os1

Specify full path to template

Specify full path to template

Merge pull request #661 from PiotrProkop/ceph-osd-kv

Adding ceph-osd continerized deployment with kv store.

Updating group_vars/osds.sample

Adding ceph-osd continerized deployment with kv store

Merge pull request #659 from ceph/purge-rgw

purge: clean install cache and purge rgw

purge: clean install cache and purge rgw

Signed-off-by: Sébastien Han <seb@redhat.com>

Merge pull request #658 from ceph/rgw-dir-perm

ceph-rgw: fix rgw enable with systemd

ceph-rgw: fix rgw enable with systemd

now rgw can be enabled.

closes: #642 #261

Signed-off-by: Sébastien Han <seb@redhat.com>

Merge pull request #657 from ksingh7/fix_mon_containerized_deployment_with_kv

ceph-common: Newline separation in ceph.conf.j2

ceph-common: Newline separation for mon_containerized_deployment_with_kv variable in ceph.conf.j2

ceph.conf.j2 template requires a new line between mon_containerized_deployment_with_kv and fsid variables
With this commit , i have added a new line for better readablity

Merge pull request #653 from ksingh7/fix_mon_containerized_deployment_with_kv

ceph-common: Fix for issue no. 652

Merge pull request #655 from runsisi/wip-fix-rgw-var

ceph-common: use variable rgw_group_name instead of hard coded group name 'rgws'

ceph-common: use variable rgw_group_name instead of hard coded group
name 'rgws' when checking rgw port.

Signed-off-by: runsisi <runsisi@hust.edu.cn>

ceph-common: Fix for issue no. 652

ceph.conf file generation task in ceph-common role was getting failed
because it ansible cant find defination of varriable mon_containerized_deployment_with_kv
This fix declare mon_containerized_deployment_with_kv under ceph-common/defaults/main.yml which fixes this issue

Signed-off-by: ksingh7 <karan.singh731987@gmail.com>

Merge pull request #649 from ceph/bluestore-ceph-disk

ceph-osd: add support for bluestore

Merge pull request #650 from stpierre/rbd-client-directory-owner

Make RBD client directory owner/group configurable

ceph-osd: add support for bluestore

With Jewel comes a new store to store Ceph object: BlueStore. Adding an
extra scenario might seem like a useless duplication however the
ultimate goal is remove the other roles later. Thus this is easier to
add new role instead of modifying existing one. Once we drop the support
for release older than Jewel we will just remove all the previous
  scenario files.

Signed-off-by: Sébastien Han <seb@redhat.com>

ceph-common: pass journal check if using bluestore

bluestore does not need any journal so we skip this test if
osd_objectstore = bluestore

Signed-off-by: Sébastien Han <seb@redhat.com>

Make RBD client directory owner/group configurable

Some versions (?) of libvirt provide a 'libvirt' group instead of
'libvirtd'. (Observed with libvirt-daemon-1.2.17-13.el7_2.2.x86_64.)
This makes the RBD client directory owner and group configurable to
allow for this.

Merge pull request #647 from dpkshetty/prompt_before_purge

purge-cluster: Add support for user prompt

purge-cluster: Add support for user prompt

Add support for user prompt before purging the cluster. This
ensure that accidental invocation of purge-cluster won't
purge the cluster. Defaults to no purging, unless user either
says 'yes' on the prompt or invokes the playbook with:
`-e ireallymeanit=yes`. This also aligns neatly with ceph cli's
--yes-i-really-mean-it option

Signed-off-by: Deepak C Shetty <deepakcs@redhat.com>

Merge pull request #1 from ceph/master

Pull from ceph/ceph-ansible

Merge pull request #648 from ceph/docker

Docker

Merge pull request #623 from Symantec/feature-br1

Ability to generate repos for localmirror

Ability to generate repos for localmirror

docker: fix tons of issues

Signed-off-by: Sébastien Han <seb@redhat.com>

Ability to generate repos for localmirror

Adding missing space

Adding var to choose between custom and default ceph.conf populated into etcd

Adding comments

Removing fsid with kv backend deployment

Adding missing fsid

Adding dockerized ceph-mon deployment with kv backend

Adding common-coreos.sample

Changed creator name

Removing extra spaces in get_pip

Removing extra spaces

Adding role for deploying python on CoreOS

docker: fix group_vars file

Signed-off-by: Sébastien Han <seb@redhat.com>

review feedback

review feedback

Review feedback fixes from PR #518

Changes to allow ceph-ansible and vagrant to work on Openstack VMs

add missing osd systemd unit template

Signed-off-by: Huamin Chen <hchen@redhat.com>

review feedback

Signed-off-by: Huamin Chen <hchen@redhat.com>

start osd daemon via systemd if supported

Signed-off-by: Huamin Chen <hchen@redhat.com>

split osd disk to prepare and activate

Signed-off-by: Huamin Chen <hchen@redhat.com>

allow multiple mon containers to reach quorum

Signed-off-by: Huamin Chen <hchen@redhat.com>

serialize containerized mon config

Signed-off-by: Huamin Chen <hchen@redhat.com>

remove --rm option from docker run, since the image is already removed during pre start

Signed-off-by: Huamin Chen <hchen@redhat.com>

use systemd to manage ceph daemons

Signed-off-by: Huamin Chen <hchen@redhat.com>

add variable to allow containerized mon to run privileged mode.
this is to allow ceph-authtool to read and write to /var/ and /etc on CentOS Atomic.
Add doc on how to run containerized deployment on RHEL/CentOS Atomic

Signed-off-by: Huamin Chen <hchen@redhat.com>

initial steps to provision CentOS Atomic host

Signed-off-by: Huamin Chen <hchen@redhat.com>

remove unused files

Signed-off-by: Huamin Chen <hchen@redhat.com>

containerize rgw and restapi

Signed-off-by: Huamin Chen <hchen@redhat.com>

containerized mon: create restapi keyring

add sample config for containerized deployment

copy bootstrap keyring and conf from mon to ansible server, so osd can get them to bootstrap

Signed-off-by: Huamin Chen <hchen@redhat.com>

containerized mon

Merge pull request #646 from ceph/fix-purge-ubuntu

Fix purge ubuntu

purge: remove monitor store and bootstrap keys

remove monitor store and bootstrap keys otherwise the play can not
complete

Signed-off-by: Sébastien Han <seb@redhat.com>

purge-cluster: add a check for a device list

People who use `osd_auto_discovery` feature will not have a devices
variable populated, so we first check for the existence of devices.

Signed-off-by: Sébastien Han <seb@redhat.com>

purge-cluster: make stop service work on ubuntu

reworked the stop sequence by using ids instead of calling the 'all'
function which does not seem to be working all the time.

Signed-off-by: Sébastien Han <seb@redhat.com>

Merge pull request #644 from bengland2/purge-cluster-cleanup

make purge-cluster.yml both more reliable and faster

oops dont need that

Merge pull request #643 from ceph/monitor-ip

Provide the ability to provide monitor_address instead of an interface

docs for usage of monitor_interface and monitor_address

Signed-off-by: Andrew Schoen <aschoen@redhat.com>

Provide the ability to provide monitor_address instead of an interface

This would allow users who don't know what interface to provide to
give an IP address to use for the monitor instead.

Note: the includes are needed in ceph.conf.j2 because without them
jinja2 can not properly evaluate the template and will complain about a
missing 'ansible_interface' variable. The includes allow the template to
be evaluated correctly and then the correct include will be used during
render time.

Signed-off-by: Andrew Schoen <aschoen@redhat.com>

Merge pull request #609 from ceph/fragment

fix fragment for osd directory scenario

many fixes to make purge-cluster.yml reliable

Merge pull request #639 from ceph/enhance-regex

ceph-osd: fix regex to check partitions

Merge pull request #637 from ceph/activate-partition

ceph-osd: fix activate for osd on partitions

ceph-osd: fix regex to check partitions

Thanks @dvusboy

closes: #636

Signed-off-by: Sébastien Han <seb@redhat.com>