Merge pull request #493 from ceph/wip-diamond-deb

diamand: Fix dir name mismatch

diamand: Fix dir name mismatch

Signed-off-by: Boris Ranto <branto@redhat.com>

Merge pull request #492 from ceph/jnlp-false

ansible: set use_jnlp: false in slave.yml

ansible: set use_jnlp: false in slave.yml

We will never use prado to setup slaves using jnlp and
the way this was before was causing a recursion error when
ansible was trying to render the playbook.

Signed-off-by: Andrew Schoen <aschoen@redhat.com>

Merge pull request #491 from ceph/wip-diamond-deb

diamond: Add debian support

diamond: Add debian support

Signed-off-by: Boris Ranto <branto@redhat.com>

Merge pull request #490 from ceph/ovh-hostnames

ansible: always add 'ceph-builders' to /etc/hosts

ansible: always add 'ceph-builders' to /etc/hosts

The nodes we spin up in OVH are using an image that sets the hostname
to 'ceph-builders'. Also, the hostname we give it is too long to use and
ansible silenty fails to set it.

This change ensures that nodes can use sudo correctly and avoids errors
like: 'sudo: unable to resolve host ceph-builders'.

Signed-off-by: Andrew Schoen <aschoen@redhat.com>

Merge pull request #489 from ceph/build-libcephfs

actually be able to build libcephfs-java

ceph-build: remove the --binary-arch flag when calling pbuilder

This caused for non-binary arch to be skipped. Specifically:
"Build-Depends-Indep" which in this case is in charge of building
libcephfs-java.

The man page explains that the flag is used to: "Specify  to  build
architecture specific targets instead of all targets" which we need to.

This was introduced in commit: d80f78adcb28a2c60fd79895f4f5c63d999b457d

Signed-off-by: Alfredo Deza <adeza@redhat.com>

ceph-dev-build: remove the --binary-arch flag when calling pbuilder

This caused for non-binary arch to be skipped. Specifically:
"Build-Depends-Indep" which in this case is in charge of building
libcephfs-java.

The man page explains that the flag is used to: "Specify  to  build
architecture specific targets instead of all targets" which we need to.

This was introduced in commit: d80f78adcb28a2c60fd79895f4f5c63d999b457d

Signed-off-by: Alfredo Deza <adeza@redhat.com>

Merge pull request #488 from ceph/unexpected-fi

Unexpected fi token

Reviewed-by: Kefu Chai <kchai@redhat.com>

ceph-setup: fix bash syntax error on conditional check

Signed-off-by: Alfredo Deza <adeza@redhat.com>

ceph-dev-setup: fix bash syntax error on conditional check

Signed-off-by: Alfredo Deza <adeza@redhat.com>

Merge pull request #485 from ceph/wip-cmake

cmake: modified several scripts for cmake support

cmake: modified several scripts for cmake support

Modified build scripts to support configuration
for both cmake and automake builds.

Removed traces of blkin library from builds.

Added cmake as a rpm requirement for ansible
slaves

Signed-off-by: Ali Maredia <amaredia@redhat.com>

Merge pull request #487 from ceph/slave-hostname

ansible: set hostname on slaves

ansible: set the hostname in slave_static.yml

Signed-off-by: Andrew Schoen <aschoen@redhat.com>

ansible: set hostname in slave.yml

This avoids an issue on OVH nodes where sudo does not work.
When trying to use sudo on these nodes we see:

sudo: unable to resolve host (none)

Signed-off-by: Andrew Schoen <aschoen@redhat.com>

Merge pull request #486 from ceph/pbuilder-network

allow network access in pbuilder builds

ceph-dev-build: allow network usage for pbuilder

Signed-off-by: Alfredo Deza <adeza@redhat.com>

ceph-build: allow network usage for pbuilder

Signed-off-by: Alfredo Deza <adeza@redhat.com>

Merge pull request #484 from ceph/pbuilder-home-fix

set BUILD_HOME to the right path

ceph-build: set BUILD_HOME to the correct HOME value

Signed-off-by: Alfredo Deza <adeza@redhat.com>

ceph-dev-build: set BUILD_HOME to the correct HOME value

Signed-off-by: Alfredo Deza <adeza@redhat.com>

Merge pull request #483 from ceph/trusty-builds

ceph-dev: also build trusty by default

ceph-dev: also build trusty by default

The sepia lab is mostly testing on trusty, so we want to build trusty by
default as well.

Signed-off-by: Andrew Schoen <aschoen@redhat.com>

Merge pull request #482 from ceph/init-playbook

ansible: install python2.7 on xenial nodes

ansible: install python2.7 on xenial nodes

Signed-off-by: Andrew Schoen <aschoen@redhat.com>

Merge pull request #478 from ceph/static-slave-playbook

A playbook to configure static jenkins slaves

ansible: set utf-8 locale for the build user

Signed-off-by: Andrew Schoen <aschoen@redhat.com>

ansible: xenial nodes need to install curl

Signed-off-by: Andrew Schoen <aschoen@redhat.com>

ceph-build-pull-requests: move the templates folder for playbook testing

Signed-off-by: Andrew Schoen <aschoen@redhat.com>

ansible: adds a template for an epel yum repo

The smithi nodes did not have epel enabled.

Signed-off-by: Andrew Schoen <aschoen@redhat.com>

ansible: adds a systemd template for jenkins

This is used for static slaves that run the java command to connect to
the jenkins master using jnlp.

Signed-off-by: Andrew Schoen <aschoen@redhat.com>

ansible: default nodename to ansible_hostname in slave_static.yml

Signed-off-by: Andrew Schoen <aschoen@redhat.com>

ansible: adds a hosts-static inventory file with smithi nodes included

Signed-off-by: Andrew Schoen <aschoen@redhat.com>

ansible: adds an example playbook for configuring static slaves

Signed-off-by: Andrew Schoen <aschoen@redhat.com>

Merge pull request #479 from ceph/pbuilder-home

set BUILD_HOME in pbuilderrc

ceph-dev-build: set BUILD_HOME in .pbuilderrc

Signed-off-by: Alfredo Deza <adeza@redhat.com>

ceph-build: set BUILD_HOME in .pbuilderrc

Signed-off-by: Alfredo Deza <adeza@redhat.com>

Merge pull request #480 from ceph/wip-calamari

calamari: Various fixes

calamari-clients-setup: Do install in setup phase

We already do it like this downstream, we only re-package the pre-built
tarball there. This makes the upstream workflow more similar to the one
downstream (and actually possible).

Signed-off-by: Boris Ranto <branto@redhat.com>

calamari-clients-build: Various fixes and improvements

- make sure the old src.rpms are removed before creating a new one
- automatically show mock logs if the build fails
- do not upload src.rpm twice, mock creates a srpm with proper dist,
  keep that one

Signed-off-by: Boris Ranto <branto@redhat.com>

calamari: Use small machines

We do not need the huge machines for the calamari setup tasks, use small
machines instead.

Also use centos7 node instead of trusty one, nodejs bits seems to be
somewhat broken in trusty.

Signed-off-by: Boris Ranto <branto@redhat.com>

Merge pull request #477 from ceph/slave-locale

ansible: set utf-8 locale for the build user

ansible: create the .profile if it doesn't exist

Signed-off-by: Alfredo Deza <adeza@redhat.com>

ansible: set utf-8 locale for the build user

Signed-off-by: Alfredo Deza <adeza@redhat.com>

Merge pull request #476 from ceph/dch-command

ceph-dev-setup: add back the dch -v command

ceph-dev-setup: add back the dch -v command

Without this command the dsc artifacts are not created correctly and
ceph-dev-build fails to find them, resulting in errors like:

"dpkg-source: error: cannot read ceph_10.2.2-508-g9bfc0cf-1.dsc: No such
file or directory"

From:
https://jenkins.ceph.com/job/ceph-dev-build/ARCH=x86_64,AVAILABLE_ARCH=x86_64,AVAILABLE_DIST=xenial,DIST=xenial,MACHINE_SIZE=huge/492/console

Signed-off-by: Andrew Schoen <aschoen@redhat.com>

Merge pull request #475 from ceph/wip-calamari-clients

calamari-clients: Add calamari-clients jenkins build jobs

calamari-clients: Add calamari-clients jenkins build jobs

Signed-off-by: Boris Ranto <branto@redhat.com>

Merge pull request #474 from ceph/fix-deb-binary-names

ceph-dev: fix debian binary names

ceph-dev-setup: do not call dch -v during the build

This is unneeded and setting an incorrect version number

Signed-off-by: Andrew Schoen <aschoen@redhat.com>

ceph-dev-build: ensure the binaries have the distro version in them

Signed-off-by: Andrew Schoen <aschoen@redhat.com>

Merge pull request #473 from ceph/ceph-spec-vers-sed

ceph-dev-build: further massage ceph.spec to insist on using sha1 in version name

ceph-dev-build: further massage ceph.spec to insist on using sha1 in version name

Signed-off-by: Alfredo Deza <adeza@redhat.com>

Merge pull request #472 from ceph/dev-setup-utils

ceph-dev-setup: include the build utils when building

ceph-dev-setup: include the build utils when building

Signed-off-by: Alfredo Deza <adeza@redhat.com>

Merge pull request #469 from ceph/jjb-node

jenkins-job-builder: should not use the master node

jenkins-job-builder: should not use the master node

master is not setup for building anything and does not have virtualenv
installed which this job needs. In general, we don't want jobs that do
any "building' to use master.

Signed-off-by: Andrew Schoen <aschoen@redhat.com>

Merge pull request #471 from ceph/jnlp-slave-ansible

ansible: support registering slaves with jnlp

ansible: support registering slaves with jnlp

This adds a use_jnlp flag to slave.yml which provides support to
register the slave with jnlp instead of ssh if use_jnlp: true

Signed-off-by: Andrew Schoen <aschoen@redhat.com>

Merge pull request #470 from ceph/if-else-autogen

ceph-dev-setup: call autogen only when not using cmake

ceph-dev-setup: call autogen only when not using cmake

Signed-off-by: Alfredo Deza <adeza@redhat.com>

Merge pull request #466 from ceph/filter-branches

Filter slashes out of branches

ceph-dev-setup: use the new utility for slashes in branches

Signed-off-by: Alfredo Deza <adeza@redhat.com>

scripts: create a branch filtering for slashes

Signed-off-by: Alfredo Deza <adeza@redhat.com>

ceph-dev-build: filter branches with slashes when building RPMs

Signed-off-by: Alfredo Deza <adeza@redhat.com>

ceph-dev-build: filter branches with slashes when building DEBs

Signed-off-by: Alfredo Deza <adeza@redhat.com>

Merge pull request #468 from ceph/ceph-dev-trigger-master

pin jobs to master that used to use huge_xenial_builder`

ceph-dev: pin to master

We want this to run on master until we can get another huge executor
setup by mita.

Signed-off-by: Andrew Schoen <aschoen@redhat.com>

ceph-dev-build: pin to master

We want this to run on master until we can get another huge executor
setup by mita.

Signed-off-by: Andrew Schoen <aschoen@redhat.com>

ceph-dev-trigger: pin to the master node

We want to pin to master until we can get another huge executor online
by mita.

Signed-off-by: Andrew Schoen <aschoen@redhat.com>

Merge pull request #467 from ceph/ansible-executors

ansible: allow for setting the number of executors on a slave

ansible: allow for setting the number of executors on a slave

Signed-off-by: Andrew Schoen <aschoen@redhat.com>

Merge pull request #462 from ceph/sed-autosetup

ceph-dev-build: modify autosetup when setup is not defined in spec file

ceph-dev-build: copy whatever tar.bz2 file was built so rpmbuild can find it

Signed-off-by: Alfredo Deza <adeza@redhat.com>

ceph-dev-build: modify autosetup when setup is not defined in spec file

Signed-off-by: Alfredo Deza <adeza@redhat.com>

Merge pull request #461 from ceph/jenkins-node-exc

ansible/library fix wrong exc object references

ansible/library fix wrong exc object references

Signed-off-by: Alfredo Deza <adeza@redhat.com>

Merge pull request #456 from ceph/ceph-gitconfig

define a .gitconfig for slaves

ansible: slave playbook should define a global gitconfig that makes sense for user and email

Signed-off-by: Alfredo Deza <adeza@redhat.com>

ansible: add the debian Jessie keys

Signed-off-by: Alfredo Deza <adeza@redhat.com>

ansible: slave should ensure the home dir exists before creating .ssh

Signed-off-by: Alfredo Deza <adeza@redhat.com>

Merge pull request #465 from ceph/wip-calamari

calamari: Add initial files for jenkins build

calamari: Add initial files for jenkins build

Signed-off-by: Boris Ranto <branto@redhat.com>

Merge pull request #464 from ceph/wip-diamond

diamond-setup: Handle VERSION properly

diamond-setup: Handle VERSION properly

Signed-off-by: Boris Ranto <branto@redhat.com>

Merge pull request #463 from ceph/wip-diamond

diamond: Redesign + fixes

diamond: Redesign + fixes

Signed-off-by: Boris Ranto <branto@redhat.com>

Merge pull request #460 from ceph/rpm-yum-versions

parse and set a correct representation of 'version' for RPMs using the spec file

ceph-dev-build: parse and set a correct representation of 'version' for RPMs using the spec file

Signed-off-by: Alfredo Deza <adeza@redhat.com>

Merge pull request #458 from ceph/split-slashes

further fixing for spliting branches on forward slashes

ceph-dev-setup: prevent building branches that have slashes in their name

Signed-off-by: Alfredo Deza <adeza@redhat.com>

ceph-dev-setup: get the last part of the branch

Signed-off-by: Alfredo Deza <adeza@redhat.com>

Merge pull request #459 from ceph/wip-diamond

Add initial diamond jenkins job

Add initial diamond jenkins job

Signed-off-by: Boris Ranto <branto@redhat.com>

Merge pull request #457 from ceph/ceph-dev-trigger

adds a ceph-dev-trigger job

ceph-dev-setup: fix parsing of GIT_BRANCH

A branch name can also contain a '/' so make sure not
to exclude that.

Signed-off-by: Andrew Schoen <aschoen@redhat.com>