ceph-common: convert ceph_stable_rh_storage to ceph_rhcs in prerequisites for iso install

Signed-off-by: Alfredo Deza <adeza@redhat.com>
Resolves: issue#811

ceph-common: convert ceph_stable_rh_storage to ceph_rhcs in prerequisites for cdn install

Signed-off-by: Alfredo Deza <adeza@redhat.com>
Resolves: issue#811

ceph-common: convert ceph_stable_rh_storage to ceph_rhcs when installing rhs on redhat

Signed-off-by: Alfredo Deza <adeza@redhat.com>
Resolves: issue#811

ceph-common: convert ceph_stable_rh_storage to ceph_rhcs when installing rhs on debian

Signed-off-by: Alfredo Deza <adeza@redhat.com>
Resolves: issue#811

ceph-common: convert ceph_stable_rh_storage to ceph_rhcs in mandatory vars

Signed-off-by: Alfredo Deza <adeza@redhat.com>
Resolves: issue#811

ceph-common: convert ceph_stable_rh_storage to ceph_rhcs in system checks

Signed-off-by: Alfredo Deza <adeza@redhat.com>
Resolves: issue#811

ceph-common: convert ceph_stable_rh_storage to ceph_rhcs in main task

Signed-off-by: Alfredo Deza <adeza@redhat.com>
Resolves: issue#811

ceph-common: convert ceph_stable_rh_storage to ceph_rhcs in repo template

Signed-off-by: Alfredo Deza <adeza@redhat.com>
Resolves: issue#811

ceph-common: convert ceph_stable_rh_storage to ceph_rhcs in defaults

Signed-off-by: Alfredo Deza <adeza@redhat.com>
Resolves: issue#811

ceph-common: convert ceph_stable_rh_storage to ceph_rhcs in README

Signed-off-by: Alfredo Deza <adeza@redhat.com>
Resolves: issue#811

group_vars: convert ceph_stable_rh_storage to ceph_rhcs

Signed-off-by: Alfredo Deza <adeza@redhat.com>
Resolves: issue#811

Merge pull request #928 from danielin917/ceph-ansible-from-src

Allow ceph-ansible to be run on a locally built/installed Ceph

Allow ceph-ansible to be run on a locally built/installed Ceph

-First install ceph into a directory with CMake
cmake -DCMAKE_INSTALL_LIBEXECDIR=/usr/lib -DWITH_SYSTEMD=ON -DCMAKE_INSTALL_PREFIX:PATH:=/usr <ceph_src_dir> && make DESTDIR=<install_dir> install/strip

-Ceph-ansible copies over the install_dir

-User can use rundep_installer.sh to install any runtime dependencies that ceph needs onto the machine from rundep

Merge pull request #815 from ceph/ceph-initial-mon

WIP ceph-common: test mon initial members

Merge pull request #930 from font/rbdmirror

Updates for containerized rbd-mirror role

Updates for containerized rbd-mirror role

- Remove /var/lib/ceph dependencies
- Add support for rbd-mirror image tag

Signed-off-by: Ivan Font <ivan.font@redhat.com>

Merge pull request #927 from ceph/fixes-dmcrypt

osd: fix collocation spelling and declare dmcrypt variables

Merge pull request #923 from danielin917/rsync_vagrant

Changes to allow for flexible rsync directory

Changes to allow for flexible rsync directory

-rsync directory was hardcoded previously and did not reflect the default /vagrant rsync directory

Merge pull request #900 from ceph/rhbz-1339576

purge-cluster: remove -q flag from grep to prevent broken pipes

osd: fix collocation spelling and declare dmcrypt variables

* changed s/colocation/collocation/
* declare dmcrypt variable in ceph-common so the variables check does
not fail

Signed-off-by: Sébastien Han <seb@redhat.com>

Merge pull request #926 from jsaintrocc/purge-local-sudo

Fix local_action Requiring Root and Various Small Fixes

Various small fixes: local_action required root, ansible2 warnings, using file module instead of rm

ceph-common: test mon initial members

Signed-off-by: Sébastien Han <seb@redhat.com>

Merge pull request #910 from font/ntp_enable

Add option to enable ntp

Update ntp atomic plays to use is_atomic variable

Signed-off-by: Ivan Font <ivan.font@redhat.com>

Add option to enable ntp

This fixes #845 for containerized deployments. We now also mount the
/etc/localtime volume in the containers in order to synchronize the host
timezone with the container timezone.

Signed-off-by: Ivan Font <ivan.font@redhat.com>

Merge pull request #891 from ceph/dmcrypt

ceph-osd: add dmcrypt scenario

ceph-osd: re-arrange osd scenario numbers

Signed-off-by: Sébastien Han <seb@redhat.com>

Merge pull request #920 from mbukatov/drop-disable-swap

remove ability to disable swap

remove ability to disable swap

Addressing issue #919.

Merge pull request #916 from ktdreyer/client-libvirt

ceph-common: client settings are for libvirt

Merge pull request #918 from jsaintrocc/yum-clean-fix

Fix purge yum cache

Fix purge yum cache

ceph-common: client settings are for libvirt

Prior to this change, each ceph cluster node would end up with several
"qemu-client-$pid.log" files owned by root. The [client] section would
capture *all* client activity (for example the "ceph health" command,
etc), not just librbd-in-qemu.

Restrict this section to libvirt clients only so that we don't generate
these spurious log files for other Ceph client traffic.

Signed-off-by: Ken Dreyer <kdreyer@redhat.com>

Merge pull request #914 from asheplyakov/secure-cluster-913

ceph-mon: fix the loop in `secure the cluster' task

ceph-mon: fix the loop in `secure the cluster' task

Deployment fails when the ``secure_cluster`` is false:

TASK [ceph-mon : secure the cluster]
*******************************************
fatal: [saceph-mon.vm.ceph.asheplyakov]: FAILED! => {"failed": true, "msg": "'dict object' has no attribute 'stdout_lines'"}
fatal: [saceph-mon2.vm.ceph.asheplyakov]: FAILED! => {"failed": true, "msg": "'dict object' has no attribute 'stdout_lines'"}
fatal: [saceph-mon3.vm.ceph.asheplyakov]: FAILED! => {"failed": true, "msg": "'dict object' has no attribute 'stdout_lines'"}

A conditional include evaluates all included tasks with the (additional)
conditional applied to every task [1]. Thus all tasks from `secure_cluster.yml'
are always evaluated (with an additional 'when: secure_cluster' condition).
The `secure the cluster' task iterates over ``ceph_pools.stdout_lines``
even if ``secure_cluster`` is false: in loops ansible applies conditional
to every item (by design) [2]. However the `collect all the pools' task
is skipped if the very same condition evaluates to false, which leaves
the ``ceph_pools`` undefined, so the `secure the cluster' task fails:

Provide the default (empty) list to avoid the problem.

[1] http://docs.ansible.com/ansible/playbooks_conditionals.html#applying-when-to-roles-and-includes
[2] http://docs.ansible.com/ansible/playbooks_conditionals.html#loops-and-conditionals

Closes: #913
Signed-off-by: Alexey Sheplyakov <asheplyakov@mirantis.com>

Merge pull request #912 from font/check_cluster

Fix to check if cluster is running

Fix to check if cluster is running

Update each role's task to use the respective role's username, image
name, and image tag to check if a container is already running. This was
causing false failures because we were not matching any running
containers and subsequently running checks.yml to check the status of
cluster files being left behind.

Signed-off-by: Ivan Font <ivan.font@redhat.com>

Merge pull request #911 from font/purge

Updates to containerized purge cluster playbook

Updates to containerized purge cluster playbook

- Reorder package removal steps
- Remove package dependencies after package is removed

Signed-off-by: Ivan Font <ivan.font@redhat.com>

Merge pull request #908 from jsaintrocc/purge-cluster-fix

Fix purge-cluster.yml fail by removing unnecessary ceph_stable_rh_storage_iso_install check.

Removed check for ceph_stable_rh_storage_iso_install when removing rh_storage.repo as it is can be undefined and cause the playbook to fail.  The check is redundant since the task will only remove the repo if it is present.

Merge pull request #906 from ktdreyer/rm-ice

remove references to Inktank Ceph Storage

remove references to Inktank Ceph Storage

ICE is beyond end-of-life, and this Inktank GPG key is considered
untrusted (https://access.redhat.com/blogs/766093/posts/2176181)

RIP ICE, we will not miss you.

Merge pull request #902 from ceph/journal-default

common: set journal size to 5GB

common: set journal size to 5GB

Journal size is not mandatory anymore, a default from 5GB is being
added. A simple warning message will show up if the size is set to
something below 5GB.

Signed-off-by: Sébastien Han <seb@redhat.com>

Merge pull request #905 from chengweiv5/remove-dup-option

sgdisk: remove duplicated option `-g`

common: refresh config template module

Signed-off-by: Sébastien Han <seb@redhat.com>

Merge pull request #904 from cloudnull/config_template-update

Added option to support case-insensitive keys

sgdisk: remove duplicated option `-g`

Option `-g` of sgdisk is duplicated with `--mbrtogpt`, so lets remove it.

This fix #896

Signed-off-by: Chengwei Yang <yangchengwei@qiyi.com>

Added option to support case-insensitive keys

This change allows keys in INI format to be any case.
The default ConfigParse module sets this to be lower
however in some cases keys are needed to be upper and/or
mixed.

Change-Id: I4e0dedb1b73ee596929bd425af6b0aaefd3a6c27
Signed-off-by: Kevin Carter <kevin.carter@rackspace.com>
(cherry picked from commit https://github.com/openstack/openstack-ansible-plugins/commit/f946160dd0f370efb792bf084c7c20b18cf27c98)

purge-cluster: remove -q flag from grep to prevent broken pipes

Signed-off-by: Alfredo Deza <adeza@redhat.com>
Resolves: rhbz#1339576

Merge pull request #892 from font/purge

Add ability to purge containerized Ceph cluster

Updates to containerized purge cluster playbook

- Update plays to use *_group_name variables that can be overridden by
  user on the command line to use whatever group names desired
- Only gather_facts when necessary to greatly increase speed of playbook
- Prompt user for removing packages on non-atomic hosts only if desired
- Removed unnecessary package-removal
- Zap OSD devices twice to avoid lingering partitions

Signed-off-by: Ivan Font <ivan.font@redhat.com>

Add ability to purge containerized Ceph cluster

This removes containers, container images, packages, configuration files
and all the data. Removal of container image tasks are tagged with
'remove_img' to skip removal if desired.

Signed-off-by: Ivan Font <ivan.font@redhat.com>

Merge pull request #894 from ceph/enhanced-aio

aio: more flexible script

aio: more flexible script

we can now chose the install source

Signed-off-by: Sébastien Han <seb@redhat.com>

ceph-osd: add dmcrypt scenario

add the ability to encrypt osd data store using dm-crypt

Signed-off-by: Sébastien Han <seb@redhat.com>

Merge pull request #890 from ceph/arm7

common: prepare arm support

common: prepare arm support

Signed-off-by: Sébastien Han <seb@redhat.com>

Merge pull request #888 from CSC-IT-Center-for-Science/support-check

Added support for --check flag in ceph-common

Added support for --check flag in ceph-common

The ceph-common role fails when you run ansible with --check. Adding
always_run to a few tasks makes the check go through easier (although
it's not foolproof).

Merge pull request #879 from ceph/rbd-mirror-docker

rbd-mirror: container deployment support

Merge pull request #848 from font/master

Add option to enable ntp

rbd-mirror: container deployment support

add the ability to deploy a containerized version of the rbd mirror
daemon.

Signed-off-by: Sébastien Han <seb@redhat.com>

Merge pull request #887 from ceph/RHBZ-1357292

Fetch keys from the mons when taking over a cluster

Fetch keys from the mons when taking over a cluster

This fixes a bug where mons added to a "taken over" cluster
will get a newly generated key and do not join the cluster.

Signed-off-by: Andrew Schoen <aschoen@redhat.com>
Resolves: rhbz#1357292

Merge pull request #882 from dang/nmap-fix

Only check ports if NMAP exists

Merge pull request #886 from ceph/rhbz-1357065

ceph-common: skip default installs on redhat if ISO needs to be used

ceph-common: skip default installs on redhat if ISO needs to be used

Because the ISO installs would happen later in the playbook.

Signed-off-by: Alfredo Deza <adeza@redhat.com>
Resolves: rhbz#1357065

Merge pull request #883 from dang/docker-fsid

Allow generating FSID for docker

Merge pull request #885 from racpatel/fix-quotes

Adding missing quotes

adding missing quotes

fixes: #884
Signed-off-by: Rachana Patel <rachana83.patel@gmail.com>

Allow generating FSID for docker

The docker case wasn't able to generate an FSID, it required it to be
set.  Allow generating it.

Signed-off-by: Daniel Gryniewicz <dang@redhat.com>

Only check ports if NMAP exists

Signed-off-by: Daniel Gryniewicz <dang@redhat.com>

Merge pull request #865 from PiotrProkop/containerized-osd-with-kv-fix

Fixing containerized deployment with kv

Fixing typos

Removing --rm flag from prepare osd

Adding missing tag

Fixing typos

Removing creating symbolic links and fixing systemctl enable not working on CoreOS and migrating form docker module to shell in prepare image

Adding an option to choose an etcd port and tag of docker images

Merge pull request #878 from font/imagetag

Support for docker image tags

Support for docker image tags

Signed-off-by: Ivan Font <ivan.font@redhat.com>

Merge pull request #881 from ceph/rhbz-1355762

ceph-common: explicitly create the directory portion of the iso path

ceph-common: explicitly create the directory portion of the iso path

This will help if the path to the iso exists in the originating server but not
in the remote paths. This issue is not seen if using /tmp/file.iso but does
show up when using nested paths.

Signed-off-by: Alfredo Deza <adeza@redhat.com>
Resolves: rhbz#1355762

Merge pull request #874 from KGoreczny/docker_module_for_ansible_2_1_support

Fix docker deployment for Ansible 2.1

remove trailing spaces

Signed-off-by: KGoreczny <krzysztof.goreczny@intel.com>

Merge pull request #880 from cdwertmann/patch-1

Use correct object names when zapping GPT header

Merge pull request #873 from erikh/fixups

Container fixups

Use correct object names when zapping GPT header

ceph-osd: fix an item propagation error while partitioning disks

Signed-off-by: Erik Hollensbe <github@hollensbe.org>

add python-py install to all other docker roles

Signed-off-by: KGoreczny <krzysztof.goreczny@intel.com>

Merge pull request #877 from aluminous/master

ceph-osd: Use the use_systemd fact when starting directory-scenario OSDs

ceph-osd: Use the use_systemd fact when start directory-scenario OSDs

Merge pull request #876 from ktdreyer/rhcs-no-rpm-md

ceph-common: rm "type=rpm-md" from RHCS repos

ceph-common: rm "type=rpm-md" from RHCS repos

As far as I can tell, this is a SUSE-ism, not needed for RHCS.

Merge pull request #875 from ktdreyer/rhcs-repo-names

ceph-common: update names for local RHCS repos

ceph-common: update names for local RHCS repos

Use more descriptive names for the local RHCS Yum repositories.