kclient: preserve peer_name across connection replacement

osd: factor out add_log_entry into a helper that adjusts pg info accordingly

We want to keep log.top, info.last_update etc. in sync.

osd: use old acting set when noting past intervals

dstart: only clean up old output on mkfs

client: ignore dropped messages

pg: fix build_prior debug output

client: fix ms_handle_failure

osd: only trim past intervals that _fully_ preceed last epoch started

osd: ignore pushes if stray

We need to verify a push is coming from the current primary if we are
any non-primary, including a stray.  Fixes bad assertion

osd/ReplicatedPG.cc:2322: FAILED assert in 'void ReplicatedPG::sub_op_push(MOSDSubOp*)': log.complete_to != log.log.end()

mon: send osdmap updates if pg_stats indicates an old map for a long time

osd: fix read_superblock

mds: mark dn clean before removing

This ensures we clean up the xlist_dirty xlist::item.

kclient: debug info for connections and crc errors

osd: fix read_superblock

dstart: fix crush map typo

osd: fix default crush map rules

crush: introduce crush magic

This is a disk format change.

crush: make recurse_to_leaf slightly less fragile

osd: don't fail assertion on out empty ops list (i.e. no-op)

osd: include magic in osd volumes

osd: get rid of snaptrimming/snaptrimqueue pg states

These aren't helpful, since we only report pg states from the
primary osd, and snaptrimming occurs on replicas as well.

mon: include magic in mondata

osdmap: use chooseleaf in default crush map

osd: fix transaction argument order

The order of evaluation is ambiguous, apparently!

OSD: pg ref count debugging

osd: use map_lock to avoid osdmap update race in _finish_recovery

osd: convert recovery to a work queue

wq: use a single lock

osd: clean up mkfs vs peek_super

osd: fix peek_whoami

osd: make peek_whoami verify fsid

osd: decode superblock properly

vstart: 3 osds

cstring: pre-terminate even if content unspecified

osd: feed type name into workqueue

osd: convert snap trimming to snap_trim_wq

osd: basic scrub works

osd: update stats when op is applied

osd: add scrub wq

os: use nstring instead of string for attrsets

ebofs: fix occasional bdev shutdown hang

osd: adjust merge_log

Object should only be marked missing if new entry is newer.  If
they are the same, it may or may not be missing (depending on
whether it was before merge_log).

msgr: ref count message while they are owned by the messenger

Users still assume they hold the only reference, at least until
they call send_message.

One caveat is that ms_handle_failure is passed a message with an
unknown number of refs.  The method should not try to free or
re-use the message.

msgr: reference count messenger

We want an explicit destroy() method, because the SimpleMessenger
needs to join the dispatch thread, and that can't happen just on
the last reference drop because that may happen in the dispatch
thread itself.

vstart: launch valgrind with --valgrind

just for cosd atm

msgr todo

Makefile: adjust link order (libcommon first _and_ last)

ebofs: add new objects to main collection

mds: remove session from xlist before deleting

client: remove xlist items before deleting

mds: remove Capability from session list before deleting

mds: pull scatterlock of xlist in destructor

Really, this should happen sooner, but for now this is equivalent to the
old xlist::item destructor.

os: clean up ObjectStore::Transaction interface

Also, fix attrset * thing.. that doesn't look safe!

msg: initialize footer

lockdep: turn lockdep off during shutdown

We can't function after the static items in lockdep.cc destruct.  Disable
lockdep before that happens.

osd: fix osd_reqid_t hash

blobhash is only safe on packed types.

filestore: pad with zeroed buffer

Shut up valgrind

xlist: enforce removal from xlist

We want to ensure that removal takes place in the correct locking context,
not whatever context the ::item is destroyed in.

mds: fix uninit value

osd: adjust missing in merge_old_entry

Our "old" entry may have been newer, and missing.. remove from missing, and re-add
"new" entry to ensure missing reflects the correct object version.

osd: type cleanup

osd: more merge_log updates

monclient: dont free messenger until races there are fixed

cmonctl: fix busy loop

mon: ignore 0-byte latest

osd: merge_log fix when logs abut but do not overlap

kclient: different handling of EIO, bad crc

dstart: smaller cluster

osd: track bytes/kb usage over clones too

osd: track per-pg bytes, kb utilization

For non-clones only.

osd: fix update_stats

osd: verify monmap.fsid matches superblock on startup

osd: include fsid in OSDPing, and verify

osd: maintain some per-pg stats (object counts, for now)

We'll add disk usage soon.

dstart: larger cluster

msgr: fix reconnect after error

Items in sent queue weren't being moved back to out queue, and
in_seq/out_seq weren't being set properly after an incoming
connection replaced an existing connection.

mount: typo

mds: add new directory to new_dirfrags list

This ensures the directory gets committed before the mkdir event
is trimmed from the journal.  Fixes the failed assertion in
CDir::_fetched seen on mds recovery (due to a missing directory object).

mds: unqueue recovery on purging inodes

If an inode is queued for file size recovery when it is purged,
unqueue it.  This catches the log replay case where client
reconnect queues up the inode.

Also, in eval_stray, skip inodes that are queued.  This should
avoid a recovery running concurrently with the purge (which could
be problematic, as it would carry a pointer to *in).

kclient: fix unmount (broken by 01a33259dbbeb380104d185073f8802eee743f98)

kclient: limit incoming messages size

mount: remove extra log

Merge branch 'unstable' of ssh://ceph.newdream.net/git/ceph into unstable

created mount helper, can resolve mount addresses

osd: rewrite merge_log

cmonctl: include original command in command reply to avoid weirdness

osd: fix build_prior any_up logic again

last_epoch_started may be anywhere in the interval.

filestore: fix btrfs detection based on latest btrfs-unstable

Look for working CLONE_RANGE ioctl.

todos

cmonctl: pick new mon on timeout

mon: fix get_latest

msg: non-destructively copy data buffers in set_data()

mds: use last_sent (not last_open) to untangle cap release races

If we use last_open, the client has to be smart about ignoring
MDS revocations after it sends a release request.  (Or, the MDS has
to somehow know the ack is for an old cap.)  Instead, just
serialize release over all cap messages sent to the client.  It may
make for a slightly chattier cap release in some cases, but those
cases should be very rare, and this is simpler.

mds: be more forgiving on EPurgeFinish

Inode may not be in cache because of purge_stray() avoiding
journaling it's intent to purge.  If that changes down the line,
add the assertion back.

osd: adjust build_prior any_up logic

We mark the pg 'down' unless there is at least one osd alive specifically
from the last epoch started.

kclient: silence down some warning

mds: fix an erroneous assertion (sage)

osd todos

osd: fix deadlock on map_lock vs peer_stat_lock

osd: remember past intervals instead of recalculating each time

This _vastly_ improves the speed of build_prior (and thus activate_map).
There is no need to recalculate this information each time as it is fully
dependent on _old_ OSDMaps, not current cluster state.