ceph-dev-trigger: enable notcmalloc flavor

Signed-off-by: Alfredo Deza <adeza@redhat.com>

Merge pull request #521 from tchaikov/wip-tarball-make-dist

release_tarball: use make-dist if available

Reviewed-by: Sage Weil <sage@redhat.com>

release_tarball: use make-dist if available

this enables us to prepare release tarball for versions without
autotools support, where we use make-dist to create the release tarball
instead.

- make-dist only produces .bz2 tarball, so we switch to .bz2 in this
  change.
- it's a waste to create both .gz and .bz2 tarballs using "make dist*",
  as we only use one of the to repackage the .gz and .bz2 tarballs.
  so let's drop "make dist" and use "make dist-bzip2" only.

Signed-off-by: Kefu Chai <kchai@redhat.com>

Merge pull request #520 from ceph/prod-chacra-shaman

ceph-build: update shaman on build status and post extra repo information

ceph-build: remove unused build/setup script

Signed-off-by: Andrew Schoen <aschoen@redhat.com>

ceph-build: post build status to shaman for rpm builds

Signed-off-by: Andrew Schoen <aschoen@redhat.com>

ceph-build: post completed status to shaman after deb builds

Signed-off-by: Andrew Schoen <aschoen@redhat.com>

ceph-build: send failure status to shaman on build failure

Signed-off-by: Andrew Schoen <aschoen@redhat.com>

ceph-build: report deb build started status to shaman

Signed-off-by: Andrew Schoen <aschoen@redhat.com>

ceph-setup: report to shaman on build failure

Signed-off-by: Andrew Schoen <aschoen@redhat.com>

ceph-build: post 'extra' repo information to chacra for rpm repos

Signed-off-by: Andrew Schoen <aschoen@redhat.com>

ceph-build: post 'extra' repo information to chacra for deb repos

Signed-off-by: Andrew Schoen <aschoen@redhat.com>

Merge pull request #519 from ceph/build-wip

ceph-dev-trigger: granularly define the branches to build for testing

ceph-dev-trigger: granularly define the branches to build for testing

Signed-off-by: Alfredo Deza <adeza@redhat.com>

Merge pull request #518 from ceph/jessie-pgp

ansible: use pgp.mit.edu to fetch the jessie release key

ansible: use pgp.mit.edu to fetch the jessie release key

Signed-off-by: Alfredo Deza <adeza@redhat.com>

Merge pull request #502 from ceph/fix-slave-hostname

ansible: update the cloud-init templates for /etc/hosts

ansible: ignore failures change /etc/hosts cloud templates

Not all our nodes have those templates so ignore failures to modify
those non-existant templates.

Signed-off-by: Andrew Schoen <aschoen@redhat.com>

ansible: update the cloud-init templates for /etc/hosts

If a node is rebooted the /etc/hosts file is rewritten with these
template files because ``manage_etc_hosts`` is set to ``true``. This
causes jobs to fail because the hostname is no longer resolveable after
reboot.

Signed-off-by: Andrew Schoen <aschoen@redhat.com>

Merge pull request #517 from ceph/pip-no-binary

no binary installs for pip

ceph-build: do not use binary ansible installs

Signed-off-by: Alfredo Deza <adeza@redhat.com>

ansible: modify configure.ac only when it exists for ceph releases

Signed-off-by: Alfredo Deza <adeza@redhat.com>

scripts: create a helper to avoid compiling python packages

Signed-off-by: Alfredo Deza <adeza@redhat.com>

Merge pull request #515 from ceph/dev-force-push

ceph-dev-trigger: use a list, not a continuated string

ceph-dev-trigger: use a pipe for continuated string

Signed-off-by: Alfredo Deza <adeza@redhat.com>

Merge pull request #514 from ceph/dev-force-push

ceph-dev-trigger: force push even when remote package exists

ceph-dev-trigger: force push even when remote package exists

Signed-off-by: Alfredo Deza <adeza@redhat.com>

Merge pull request #513 from ceph/docker-fixes3

docker-pull-requests: use the correct path for teardown

docker-pull-requests: use the correct path for teardown

Signed-off-by: Alfredo Deza <adeza@redhat.com>

Merge pull request #512 from ceph/docker-fixes2

ceph-docker-pull-requests: really try to remove containers

ceph-docker-pull-requests: remove 'ceph-demo' as well from getting checked since they aren't available in pull requests

Signed-off-by: Alfredo Deza <adeza@redhat.com>

ceph-docker-pull-requests: really try to remove containers

Signed-off-by: Alfredo Deza <adeza@redhat.com>

Merge pull request #511 from ceph/docker-fixes

Docker fixes

ceph-docker-pull-requests: remove 'exec ceph-mon' call since it isn't available

Signed-off-by: Alfredo Deza <adeza@redhat.com>

ceph-docker-pull-requests: add a header to indicate on failure script start

Signed-off-by: Alfredo Deza <adeza@redhat.com>

Merge pull request #510 from ceph/ceph-setup-copy

ceph-setup: mkdir and then copy recursively vs. using mv

ceph-setup: mkdir and then copy recursively vs. using mv

Signed-off-by: Alfredo Deza <adeza@redhat.com>

Merge pull request #509 from ceph/docker-sudo

ceph-docker-pull-requests: use sudo to remove deamon base and demo

ceph-docker-pull-requests: use sudo to remove deamon base and demo

Signed-off-by: Alfredo Deza <adeza@redhat.com>

Merge pull request #508 from ceph/docker-workspace

ceph-docker-pull-requests: remove daemon demo and base from top dir

ceph-docker-pull-requests: rename the configuration file

Signed-off-by: Alfredo Deza <adeza@redhat.com>

ceph-docker-pull-requests: remove daemon demo and base from top dir for pull requests

Signed-off-by: Alfredo Deza <adeza@redhat.com>

Merge pull request #507 from ceph/docker-workspace

Docker workspace

ceph-docker-pull-requests: define better the right path where to execute from

Signed-off-by: Alfredo Deza <adeza@redhat.com>

ceph-docker-pull-requests: request amd64 arch nodes to build on

Signed-off-by: Alfredo Deza <adeza@redhat.com>

Merge pull request #506 from ceph/docker-deps

install correct deps

ceph-docker-pull-requests: require a xenial host if possible

Signed-off-by: Alfredo Deza <adeza@redhat.com>

ceph-docker-pull-requests: install docker.io which is the actual dependency of docker

Signed-off-by: Alfredo Deza <adeza@redhat.com>

Merge pull request #505 from ceph/release-cmake

ceph-setup: when in cmake use different flags for compression

ceph-setup: when in cmake use different flags for compression

Signed-off-by: Alfredo Deza <adeza@redhat.com>

Merge pull request #504 from ceph/ceph-docker-prs

ceph-docker-pull-requests: intial pass at a pull request job

ceph-docker-pull-requests: intial pass at a pull request job

Signed-off-by: Alfredo Deza <adeza@redhat.com>

Merge pull request #503 from ceph/build-properties

scripts: create the build_info properties file when updating shaman

ceph-dev-build: no need to write the build_info file during setup

This is now done in scripts/build_utils whenever a status is posted to
shaman.

Signed-off-by: Andrew Schoen <aschoen@redhat.com>

scripts: write the build_info properties file when updating shaman

Centralize the creation of this file in one place so that other scripts
do not have to remember to write it when they want to post updates to
shaman.

Signed-off-by: Andrew Schoen <aschoen@redhat.com>

Merge pull request #501 from ceph/build-properties

ceph-dev-build: write the correct vars to build_info in setup_rpm

ceph-dev-build: write the correct vars to build_info in setup_rpm

I was using the incorrect values for the NORMAL_* values in setup_rpm
which was posting incorrect information to shaman.

Signed-off-by: Andrew Schoen <aschoen@redhat.com>

Merge pull request #500 from ceph/build-properties

ceph-dev-build: split setup into setup_deb and setup_rpm

scripts: always POST when sending build info to shaman

Signed-off-by: Andrew Schoen <aschoen@redhat.com>

ceph-dev-build: if shaman fails to return a node, fail the build

Signed-off-by: Andrew Schoen <aschoen@redhat.com>

ceph-dev-build: remove the unused setup file

We now have os type specific setup files

Signed-off-by: Andrew Schoen <aschoen@redhat.com>

ceph-dev-build: adds a setup_rpm script

We want to split up setup by os type so we can post
correct build info to shaman earlier

Signed-off-by: Andrew Schoen <aschoen@redhat.com>

ceph-dev-build: adds a setup_deb script

We want to split up setup by os type so we can post correct
information to shaman earlier in the build.

Signed-off-by: Andrew Schoen <aschoen@redhat.com>

ceph-dev-build: give the failure script access to the NORMALIZED_* vars

In the build scripts we can write the NORMALIZED_* vars to a property
file so that if the build fails the postbuildscript can use inject those
vars and use them to properly post build info to shaman.

Signed-off-by: Andrew Schoen <aschoen@redhat.com>

Merge pull request #499 from ceph/fail-branch

we need to set variables when reporting build failures

ceph-dev-setup: on failure make sure BRANCH and SHA1 are set correctly

When the job fails it gets fresh parameters from the ceph-dev job, so we
have to set these variables again to avoid things refs like 'origin/*'
in shaman.

Signed-off-by: Andrew Schoen <aschoen@redhat.com>

ceph-dev-build: filter BRANCH in build/failure

When the postscriptbuild fires it passes that script fresh parameters
from ceph-dev, so we need to filter the value of BRANCH again or we get
it info in shaman that look like 'origin/*'.

Signed-off-by: Andrew Schoen <aschoen@redhat.com>

Merge pull request #498 from ceph/build-info-fix

post build info status to shaman on failure

ceph-dev-setup: set script-only-if-failed: False

The default for this is True and if you want to only execute
the script on failure you need to set this to False.

Signed-off-by: Andrew Schoen <aschoen@redhat.com>

ceph-dev-build: set script-only-if-failed: False

This needs to be set because the default is True and if you want
to post on failure you have to change this value as well.

Signed-off-by: Andrew Schoen <aschoen@redhat.com>

Merge pull request #497 from ceph/wip-jnode-rename

Rename jenkins-node module for ansible v2 compatibility

Rename jenkins-node module for ansible v2 compatibility

Signed-off-by: David Galloway <dgallowa@redhat.com>

Merge pull request #496 from ceph/ref-not-branch

Ref not branch and "status" not "state"

scripts: use 'status', not 'state'

Signed-off-by: Alfredo Deza <adeza@redhat.com>

scripts: use 'ref', not 'branch'

Signed-off-by: Alfredo Deza <adeza@redhat.com>

Merge pull request #494 from ceph/posting-build

update shaman on build status

ceph-dev-setup: define SHA1 at the very beginning so it is available when posting status

Signed-off-by: Alfredo Deza <adeza@redhat.com>

scripts: create helpers to post build statuses to shaman

Signed-off-by: Alfredo Deza <adeza@redhat.com>

ceph-dev-build: post build status on rpm builds

Signed-off-by: Alfredo Deza <adeza@redhat.com>

ceph-dev-build: post build status on deb builds

Signed-off-by: Alfredo Deza <adeza@redhat.com>

ceph-dev-build: configure to post failed statuses on build failures

Signed-off-by: Alfredo Deza <adeza@redhat.com>

ceph-dev-build: create a failure script to post failed build status

Signed-off-by: Alfredo Deza <adeza@redhat.com>

ceph-dev-setup: configure when the job fails; run the failure script

Signed-off-by: Alfredo Deza <adeza@redhat.com>

ceph-dev-setup: add a script to post build information on failure

Signed-off-by: Alfredo Deza <adeza@redhat.com>

Merge pull request #493 from ceph/wip-diamond-deb

diamand: Fix dir name mismatch

diamand: Fix dir name mismatch

Signed-off-by: Boris Ranto <branto@redhat.com>

Merge pull request #492 from ceph/jnlp-false

ansible: set use_jnlp: false in slave.yml

ansible: set use_jnlp: false in slave.yml

We will never use prado to setup slaves using jnlp and
the way this was before was causing a recursion error when
ansible was trying to render the playbook.

Signed-off-by: Andrew Schoen <aschoen@redhat.com>

Merge pull request #491 from ceph/wip-diamond-deb

diamond: Add debian support

diamond: Add debian support

Signed-off-by: Boris Ranto <branto@redhat.com>

Merge pull request #490 from ceph/ovh-hostnames

ansible: always add 'ceph-builders' to /etc/hosts

ansible: always add 'ceph-builders' to /etc/hosts

The nodes we spin up in OVH are using an image that sets the hostname
to 'ceph-builders'. Also, the hostname we give it is too long to use and
ansible silenty fails to set it.

This change ensures that nodes can use sudo correctly and avoids errors
like: 'sudo: unable to resolve host ceph-builders'.

Signed-off-by: Andrew Schoen <aschoen@redhat.com>

Merge pull request #489 from ceph/build-libcephfs

actually be able to build libcephfs-java

ceph-build: remove the --binary-arch flag when calling pbuilder

This caused for non-binary arch to be skipped. Specifically:
"Build-Depends-Indep" which in this case is in charge of building
libcephfs-java.

The man page explains that the flag is used to: "Specify  to  build
architecture specific targets instead of all targets" which we need to.

This was introduced in commit: d80f78adcb28a2c60fd79895f4f5c63d999b457d

Signed-off-by: Alfredo Deza <adeza@redhat.com>

ceph-dev-build: remove the --binary-arch flag when calling pbuilder

This caused for non-binary arch to be skipped. Specifically:
"Build-Depends-Indep" which in this case is in charge of building
libcephfs-java.

The man page explains that the flag is used to: "Specify  to  build
architecture specific targets instead of all targets" which we need to.

This was introduced in commit: d80f78adcb28a2c60fd79895f4f5c63d999b457d

Signed-off-by: Alfredo Deza <adeza@redhat.com>

Merge pull request #488 from ceph/unexpected-fi

Unexpected fi token

Reviewed-by: Kefu Chai <kchai@redhat.com>

ceph-setup: fix bash syntax error on conditional check

Signed-off-by: Alfredo Deza <adeza@redhat.com>

ceph-dev-setup: fix bash syntax error on conditional check

Signed-off-by: Alfredo Deza <adeza@redhat.com>

Merge pull request #485 from ceph/wip-cmake

cmake: modified several scripts for cmake support

cmake: modified several scripts for cmake support

Modified build scripts to support configuration
for both cmake and automake builds.

Removed traces of blkin library from builds.

Added cmake as a rpm requirement for ansible
slaves

Signed-off-by: Ali Maredia <amaredia@redhat.com>