paxos: fix store_state fix

msgr: print bind errors to stderr

paxos: cleanup

paxos: only store committed values in store_state

The uncommitted value is handled specially by handle_last()

initscript: fix typo with $lockfile stuff

paxos: set last_committed in share_state()

It wasn't getting set for LAST message, which broke recovery somewhat.

Broken by 8e76c5a1d827e01f77149245679bd00ba27120e0.

mds: fix null dn deref during anchor_prepare

config: parse in $host from conf file

So you can do stuff like
log dir = /data/$host

osdmaptool: include raw, up, acting mappings

osdmap: assert maxrep >= minrep

mkcephfs: pass -c to cmon --mkfs

osd: warn, don't crash, on purged_snaps shrinkage

initscript: incorporate Josef's fedora fixes

Add 'status' command.
Add chkconfig line.
Do lockfile stuff only if /var/run/subsys exists.

Still specifying the runlevels, though.  The init script bails out (with
success code) if the ceph.conf is missing.

ceph.spec: build-required libatomic_ops-devel, not libatomic_ops

And no perl-devel.

sample.ceph.conf: include debug options, commented out

rados: you can now set the crush rule to use when creating a pool

librados: add crush_rule parameter to create_pool functions

objecter: add optional crush_rule parameter; set in pool_op_submit as needed

mon: add crush_rule data member to MPoolOp; use it in new pool creation on mon

mds: LAYZIO is not liked, but it is allowed

client: update ioctl.h (lazyio, invalidate_range)

mds: include LAYZIO cap in sync->mix and mix->sync transitions

mds: include LAZYIO in CEPH_CAP_ANY set

mon: warn to log, not just dout, on clock drift

mon: detect and warn on clock synchronization problems;
change MMonPaxos::lease_expire to lease_timestamp

ceph: add conversion to qemu coding style

Hi Yehuda,

I've added a small hack to make push_to_qemu.pl convert tabs to spaces.

Christian

paxos: use helper to store committed state; fix master mon catch up using stash

The catch up logic in handle_last didn't handle the stashed state, so we
crashed and burned if it was the master that was behind and caught up.
Use a helper that does the work for handle_commit AND handle_last.

cfuse: bail out on mount() errors

Merge branch 'lazyio' into unstable

Conflicts:
src/mds/locks.c

interval_set: fix union_of, intersection_of size accounting

init-ceph: use = not == for comparison operator

Merge branch 'mds_dentries' into unstable

mds: better debugging on rmdir

mds: fix scatterlock gather, writebehind

We stopped overloading the virutal is_updated() when we renamed to
is_dirty.

broken by 7f19ee1ac36095cd4d4c169858d93149f083318e

mds: make export targets stay in mdsmap for a while

This limits the mdsmap churn some.  Keep old targets around for at least
min-max iterations before removing them.

mds: balancer cleanup

mds: warn on dn release that dne

rbd: modify rbd on-disk header

rbd: fix push_to_qemu.pl

mon: roll mkmonfs functionality into cmon --mkfs

filestore: make mkfs() zap any file or dirs it finds

rbd: modify header, add utility to ease sync with qemu tree

osd: keep recovery ops in sync with pull

Call start_recovery_op from pull() instead of fixing every caller (some
were wrong).  This keeps the recovery state in sync with pulling state,
even when pull() has to pull something different (head, snapdir) first.

Fixes this crash:
osd/PG.cc: In function 'void PG::finish_recovery_op(const sobject_t&, bool)':
osd/PG.cc:1842: FAILED assert(recovering_oids.count(soid))
 1: (PG::finish_recovery_op(sobject_t const&, bool)+0x14e) [0x74caf6]
 2: (ReplicatedPG::sub_op_push(MOSDSubOp*)+0x1da8) [0x669292]
 3: (ReplicatedPG::do_sub_op(MOSDSubOp*)+0x109) [0x671a73]
 4: (OSD::dequeue_op(PG*)+0x23c) [0x6bda00]
 5: (OSD::OpWQ::_process(PG*)+0x21) [0x7387c9]
 6: (ThreadPool::WorkQueue<PG>::_void_process(void*)+0x28) [0x6f5e12]
 7: (ThreadPool::worker()+0x23a) [0x7f2404]
 8: (ThreadPool::WorkThread::entry()+0x19) [0x73b783]
 9: (Thread::_entry_func(void*)+0x20) [0x64f92a]
 10: /lib/libpthread.so.0 [0x7f7a12cf473a]
 11: (clone()+0x6d) [0x7f7a11f1e69d]

mon: no need for 'whoami' file in store

The monitor rank is provided during startup.  No need to verify it against
the monitor store, especially since the stores are otherwise identical.

This makes it simpler to restore/duplicate/wahtever a monitor.. just copy
the files.

reword blacklisted output so it's clearly discussing MDSes and not OSDs

uclient: don't unlink null dentry when getting null linkage in mds reply

This broke semi-recently when the mds started returning null linkages (and
associated leases).

mon: trim pgmap states even when we don't have a full quorum

paxos: recover using stashed latest when state histories don't overlap

If we don't have incremental states to catch up, jump to the latest.

mds: anchor multiversion inode before unlinking it

If we are going to create a remote dentry linking to a multiversion inode
we're unlinking, make sure it's anchored!

This is a bit fugly because it mirrors the logic in journal_cow_dentry. No
obvious way to use a generic helper for that though.

librados.h: add other TMAP definitions

also add a comment in rados.h about the defines in librados.h

mds: fix readdir pingpong on snapped dir with multiple mds

Our traverse helper will follow the auth if we're looking at snapped
metadata, but we _don't_ want that for readdir because we check auth
ourselves, and want the dir's auth, not the inode's.

Signed-off-by: Sage Weil <sage@newdream.net>

monc: pick a different mon when repicking

monc: hunting by default

Otherwise if we fail to connect to the first mon we try, we never retry.

librados: update librados to define CEPH_OSD_TMAP_SET

mon: fix mon injectargs, and simplify

osd: simplify --mkjournal, add --flush-journal

Merge branch 'osd_snapdir' into unstable

osd: nicer debug output

interval_set: fix union_of _size accounting; optimize ==

mds: fix interval_set copy of projected_free

mds: fix interval_set copy of projected_free

osd: use blank reqid for snapdir events, too

Make reqid_is_indexed() less weird.

osd: do not index by reqid if reqid not defined

osd: update purged_snaps in PG::Info on trim completion; and replicate

rbd: fix snap_seq type in rbd_header

initscripts: remove 'flushoncommit' from default btrfs mount options

osd: trim snaps via replicated osd ops

osd: make build_removed_snaps, is_removed_snap consistent

rados: update documentation to mention mkpool and rmpool

osd: fix peer_info updates on active primary

automake: some clean up

poolop: fix MPoolOpReply decoding

throttle: allow large items if we're under our max

Normally we stay under max, but for large items, take it as long as we're
currently below max.  This avoids deadlock.

osd: purged_snaps in PG::Info, queue snap trim on primary

osd: include snapdir objects in pg log for proper replication, recovery

strings: clean up pool op names

mds: allow readdir result limit in bytes

This will allow the client to bound the size of the reply it gets

debian: put proper distribution in debian changelog

version: use next version ~rc for unstable branch

This makes unstable always sort after stable, testing releases:
  0.21~rc-unstable... > 0.20.1-testing...

radosgw_admin: die after first bad argument

objecter: separately track pgmap, osdmap state machine version

Mixing these up can make our request hang on the monitor indefinitely.

mon: return correct state machine epoch in replies

testrados: fix aio api usage

librados: implement rados_stat_pool()

Merge branch 'unstable' of ceph.newdream.net:git/ceph into unstable

rados: fix typo

osd: add CEPH_PG_MAX_SIZE to header

filestore: update btrfs ioctl.h

client: un-"fix" u64 types in client/ioctl.h

msgr: fix possible overflow when sending seq

msgr: print message encoding version to aid debugging

ceph_strings: checkpatch fix

ceph_fs.h: checkpatch fixes

cmpxattr: null termination fixes

rados: add 'tmap dump'

osd: set obs.exists in projected object state during recovery

mds: warn, don't crash, on trailing garbage in dir objects

msgr: put msgvec on heap

It can get too big for the stack.

msgr: tolerate incoming seq #'s that skip ahead

This is necessary because the kclient may pull messages out of the out/sent
queues, and we can't renumber previously sent (and possibly received)
messages without breaking things entirely.

ceph: return error code returned by server