cephfs: remove unused variables

Signed-off-by: Sage Weil <sage@newdream.net>

config: fix signal handler recursion

Avoid having old handler pointer match the new handler.

Avoid calling an old handler if it pointer is null.

Signed-off-by: Sage Weil <sage@newdream.net>

objecter: refactor interface with object_locator_t

This paves the way for a locator that lets the user specify an arbitrary
string to hash for placement (instead of the object name).  It also
captures everything that would affect placement (pool, preferred, etc.)
in a single type.

Just the client side; no server side or protocol changes yet.

Signed-off-by: Sage Weil <sage@newdream.net>

mds: pin NEEDSNAPFLUSH only when adding item

This is mainly paranoia.

Signed-off-by: Sage Weil <sage@newdream.net>

mds: store dir inode in separate object; fetch from both.  incompat flag.

This avoids setting large xattrs.  There's no reason the inode needs to be
on the same object as the dir(frag) data.

Signed-off-by: Sage Weil <sage@newdream.net>

filestore: can force use of stale snaps

also, overwrite the commit_seq with the current version in case we
forced stale snaps.

filestore: don't revert to old snapshots on startup

This should fix bug #55

filestore: read commit_seq before mounting (btrfs ioctls)

ceph.cc: delete deadcode

Signed-off-by: Colin McCabe <colinm@hq.newdream.net>

Move ceph.cc to tools/

Signed-off-by: Colin McCabe <colinm@hq.newdream.net>

configure.ac: add ./configure option for gtk2

Signed-off-by: Colin McCabe <colinm@hq.newdream.net>

messenger: always unlock existing pipes, even if they're lossy

Merge remote branch 'origin/testing' into unstable

Conflicts:
configure.ac
src/rados.cc

filestore: some cleanup

filestore: escape the xattr chunk names

osd::Missing: const cleanup

Signed-off-by: Colin McCabe <colinm@hq.newdream.net>

osd: move PG::Missing implementation to PG.cc

Signed-off-by: Colin McCabe <colinm@hq.newdream.net>

filestore: some cleanup

Merge branch 'btrfs_snap_ioctls' into unstable

filestore: warn if btrfs_snaps enabled but no async snap create ioctl

Signed-off-by: Sage Weil <sage@newdream.net>

mon: remove pg from deleted pools from pg_map

Signed-off-by: Sage Weil <sage@newdream.net>

mds: fix up mds_bal_frag options

Use the mds_bal_frag option to enable/disable.  Make checks consistent.

Signed-off-by: Sage Weil <sage@newdream.net>

add cephfs to deb, rpm

Merge branch 'objectcacher' into unstable

client: fix to handle new ObjectCacher pool requirements.

osdc: Add pool awareness to the ObjectCacher, to prevent unfortunate collisions.

osdc: Fix release_all so it loops properly

filestore: escape the xattr chunk names

PG::Log::Entry: remove unused snap_t field

The snap_t information is stored in the sobject_t field now.

Signed-off-by: Colin McCabe <colinm@hq.newdream.net>

makefile: add cephfs

./ceph osd setcrushmap: validate crushmap

Signed-off-by: Colin McCabe <colinm@hq.newdream.net>

crush: improve error handling in map decoding

Signed-off-by: Colin McCabe <colinm@hq.newdream.net>

cap_reconnect_t: ignore embedded NULLs in the path

Signed-off-by: Colin McCabe <colinm@hq.newdream.net>

v0.22.1

Makefile: add errno.h

mds: be quiet about snaprealm push/pop

Signed-off-by: Sage Weil <sage@newdream.net>

filestore: ignore ENOSPC on setxattr pending a better workaround

This effectively reverts to old behavior (we weren't checking for ENOSPC
errors at all before).  Log which object it happened on.

Signed-off-by: Sage Weil <sage@newdream.net>

filestore: change xattr chunk size to 2048

filestore: split xattrs to multiple chunks

rados: add getxattr, setxattr

filestore: change xattr chunk size to 2048

librados: add rmxattr

Revert "messenger: Make sure to unlock existing->pipe_lock. There are a few cases in the "open" section where we can go to fail_unlocked while still holding existing->pipe_lock. So unlock it."

This reverts commit 96692d24c8cdf0fe88260949b67f8580e0c70696.
This patch accidentally got merged into the tree twice, so
merging issues came up.

test_lost.sh: put common functions in test_common

Signed-off-by: Colin McCabe <colinm@hq.newdream.net>

Merge branch 'msgr' into unstable

messenger: If we error out of accept() but have messages in our queue, save Pipe.
This can occur if we're replacing another Pipe and hit an error
in the process.

messenger: If we're replacing an existing Pipe, steal queue when we kill it!
Previously we could fail out after killing existing but before
splicing its queue into our own, which lost messages.

PG::peer: introduce prior_set_build flag

Just because we have prior_set.empty() doesn't mean that the prior set
wasn't built. Create a flag to represent this concept.

Signed-off-by: Colin McCabe <colinm@hq.newdream.net>

filestore: update btrfs_ioctl.h

filestore: use different encoding for snap async_create

filestore: use SNAP_DESTROY_ASYNC ioctl if available

filestore: remove stray async_snap_test if present

This cleans up if a prior instance failed to delete its
async_snap_test subvol.

filestore: use new async btrfs ioctls

osd: fix deadlock in map handler

To avoid deadlock,
- we need to drop osd_lock while we flush.
- we need to take map_lock _after_ we flush.

Signed-off-by: Sage Weil <sage@newdream.net>

filestore: split xattrs to multiple chunks

rados: add getxattr, setxattr

mds: implement 'fragment_dir path frag by' command

For testing dir fragmentation.

Signed-off-by: Sage Weil <sage@newdream.net>

Merge branch 'testing' into unstable

PG::recover_master_log: replace count with find

Signed-off-by: Colin McCabe <colinm@hq.newdream.net>

prior_set_affected: log msg when we see a lost osd

Signed-off-by: Colin McCabe <colinm@hq.newdream.net>

osd: build_prior: clean up started_since_joining

Signed-off-by: Colin McCabe <colinm@hq.newdream.net>

osd: PG::prior_set_affected: fix lost OSD detection

When looking for newly-lost OSDs, we should check prior_set_lost rather
than prior_set. Down OSDs often are in PG::prior_set_down and NOT in
PG::prior_set.

Also update comment for prior_set_down. Sometimes OSDs are in both
PG::prior_set and PG::prior_set_down.

Signed-off-by: Colin McCabe <colinm@hq.newdream.net>

test_lost.sh: ensure that recovery doesn't start.

Signed-off-by: Colin McCabe <colinm@hq.newdream.net>

include/utime.h: should include include/types.h

Signed-off-by: Colin McCabe <colinm@hq.newdream.net>

errno: add missing common/errno.h

Create cpp_strerror to make error reporting easier

Signed-off-by: Colin McCabe <colinm@hq.newdream.net>

FileJournal: fix journal size calculation

If the journal is a raw block device, the user shouldn't need to give a
journal size argument most of the time-- it should default to using the
entire block device. This was the old default but it got changed
erroneously by commit ad12d5d5be41ce.

Along the way, I split the FileJournal::_open code into multiple
functions, and added some additional checks. We no longer try block
device ioctls on regular files. We now check for block devices that are
too small.

Signed-off-by: Colin McCabe <colinm@hq.newdream.net>

makefile: simplify cdebugpack install rule

debian: 0.22-4

TestTimers: test SafeTimer as well as Timer

Test SafeTimer as well as Timer. Test timer shutdown.

Signed-off-by: Colin McCabe <colinm@hq.newdream.net>

Timer.cc: add testtimers

Add testtimers to test the timer code.

Signed-off-by: Colin McCabe <colinm@hq.newdream.net>

test_lost.sh: update timeout, fix payload

Signed-off-by: Colin McCabe <colinm@hq.newdream.net>

OSDMap: const cleanup

Signed-off-by: Colin McCabe <colinm@hq.newdream.net>

PG::build_prior: update comment

Signed-off-by: Colin McCabe <colinm@hq.newdream.net>

osd: track prior_set_lost

In the placement group code, track prior_set_lost. This fixes a bug
where a new OSDMap updates an OSD's lost_at time, but the PG code does
not update the PG data structures.

When clearing the peering state, call clear_prior() rather than manually
clearing every prior set.

Signed-off-by: Colin McCabe <colinm@hq.newdream.net>

osd: fix spacing in OSDMap::print

Signed-off-by: Colin McCabe <colinm@hq.newdream.net>

OSDMap::print: print osd_info_t using ostream op

Signed-off-by: Colin McCabe <colinm@hq.newdream.net>

osd mon: validate arguments before marking lost

Signed-off-by: Colin McCabe <colinm@hq.newdream.net>

osd: test: Add script to test LOST state

Signed-off-by: Colin McCabe <colinm@hq.newdream.net>

messenger: Make sure to unlock existing->pipe_lock. There are a few cases in the "open" section where we can go to fail_unlocked while still holding existing->pipe_lock. So unlock it.

mds: show readdir frag

Signed-off-by: Sage Weil <sage@newdream.net>

client: reset fg after _readdir_get_frag

The _readdir_get_frag may remap our frag; update the local variable
accordingly.

Signed-off-by: Sage Weil <sage@newdream.net>

client: fix skipped dentry on readdir chunk boundaries

The at_cache_name is the last name successfully passed to the caller.

Signed-off-by: Sage Weil <sage@newdream.net>

client: fix dcache removal during multiple frags

We remove unexpected dentries from our cache while processing mds results.
Results are ordered within a frag, but not between them.  Since we can
have multiple frags, only remove results for the current frag, to avoid
removing items from earlier frags.

Signed-off-by: Sage Weil <sage@newdream.net>

client: show file offsets in hex

This makes it easy to pick out frags and offsets.

Signed-off-by: Sage Weil <sage@newdream.net>

messenger: a 0 timeout on ::poll really means don't wait
(as opposed to -1, which waits until an event occurs).

So, set the default timeout to -1, and convert ms_tcp_read_timeout
to -1 if it's set at 0.

mds: fix inodestat encoding when frags are present

Also simplify the max_size check calculation.

Signed-off-by: Sage Weil <sage@newdream.net>

mds: do not finish_scatter_gather_update_accounted on dirfraglock

This needs to match finish_scatter_gather_update, and we don't
update/project the dirfrag there.

Signed-off-by: Sage Weil <sage@newdream.net>

objecter: reconnect on osd disconnect

If the connection closes to an OSD, we need to reconnect and resubmit our
ops.  Otherwise we just hang.  This is problematic if it is a transient
error, since we'll only retry if the OSDMap reflects a change, and that
won't happen for transient network/socket errors and such.

Signed-off-by: Sage Weil <sage@newdream.net>

rgw: return 204 on successful removal of bucket/object

init-ceph: Make sure daemon_is_running() checks the correct instance

When starting multiple instances of a daemon on a single host,
for unknown reasons /var/run/ceph/$type.$id.pid can hold a pid
for which /proc/$pid/cmdline identifies the right type of daemon,
but the wrong instance.  When this happens, all the configured
instances of a daemon are not running, but repeated invocations
of "init-ceph start" do not start the missing instances.

So, check for the correct daemon instance id as well as type when
testing if the daemon is up.

Signed-off-by: Jim Schutt <jaschut@sandia.gov>
Signed-off-by: Sage Weil <sage@newdream.net>

objecter: pause writes when FULL flag is set

Also, subscribe to all osdmap updates while FULL flag is set, so that we
discover when it is unset.

Signed-off-by: Sage Weil <sage@newdream.net>

objecter: always set READ or WRITE flag

We should set either (or both).  Assert if we don't.

Signed-off-by: Sage Weil <sage@newdream.net>

include/utime.h: should include include/types.h

Signed-off-by: Colin McCabe <colinm@hq.newdream.net>

rgw: return 204 on successful removal of bucket/object

errno: add missing common/errno.h

Create cpp_strerror to make error reporting easier

Signed-off-by: Colin McCabe <colinm@hq.newdream.net>

FileJournal: fix journal size calculation

If the journal is a raw block device, the user shouldn't need to give a
journal size argument most of the time-- it should default to using the
entire block device. This was the old default but it got changed
erroneously by commit ad12d5d5be41ce.

Along the way, I split the FileJournal::_open code into multiple
functions, and added some additional checks. We no longer try block
device ioctls on regular files. We now check for block devices that are
too small.

Signed-off-by: Colin McCabe <colinm@hq.newdream.net>

makefile: simplify cdebugpack install rule

debian: 0.22-4