kclient: kill dput/d_drop debug cruft

kclient: remove bookkeeper

kclient: fix kbuild.patch for 2.6.30

changelog

todo'd

initscript: fix instance check

mon: send mount error to client on EPERM or protocol version mismatch

kclient: fix mount err reporting

No more delay

filer: make probe recover size and/or mtime; fix some bugs

This fixes up MDS recovery to find the file size.  And makes
probe actually work.. it was pretty broken before.

osd: cleanly implement OSD_OP_STAT

Put stat result (size AND mtime) in read result bufferlist.

uclient: fix missing cap behavior

Ignore cap messages if we don't have the inode or cap.

kclient: style fixes

kclient: strip trailing whitespace

initscript: make sure cmdline instance exists

kclient: make bookkeeper compile when not in .config

osd: clean up output

mds: drop mut locks after file_recover_cow

mds: fix caps issued on snapped inodes

Do not adjust Capability on snapped inodes (otherwise cap state
gets out of sync with client).

kclient: keep page locked after page_mkwrite call

kclient: disable bookkeeper when including some kernel headers

mds: kill fugly arg to rdlock_path_pin_ref

The caller (readdir, in this case) can do it now, since it now does the
acquire_locks() call.

mds: rdlock filelock during readdir

This ensures any uncommitted creates/whatevers in the directory flush
(and we see them!).

mds: no rdlock in filelock LOCK state

Otherwise we get wrlocks AND rdlocks at the same time, which is clearly
problematic.  Der.

Also fix _rdlock_kick to not simple_lock, since that won't help us.

mds: drain wrlocks before going from LOCK->SYNC in file_eval

This avoids excessive waits for the journal to flush on lock->sync
when a client request holds a wrlock.  There's no reason to hurry.. if
someone needs it sync we can to the transition then; otherwise, it'll
happen when the wrlock is dropped.

.gitignore update

mds: break CAP_RDCACHE into CAP_SHARED, CAP_CACHE

FILE_CAP_RDCACHE was being used to mean both read access to the
file attributes (size, mtime) and permission to retain cached
data.  That lead to an incorrect definition of the filelock in the
mds, and in turn bugs with multiple client access.  These are now
CAP_*_SHARED (all locks) and CAP_FILE_CACHE (filelock only).

The main observed symptom was a client creating files in a
directory and a second client not seeing them, due to RDCACHE not
being revoked and rdcache_gen thus not incrementing, allowing a
dcache readdir to proceed.

kclient: don't skip EXPIREABLE caps

EXPIREABLE is obsolete.  We need to reconnect _all_ caps!

kclient: fix crush decoding for recent changes

rev osd protocol, disk format to reflect crush changes

crush: fix crush_perm_choose; optimize r=0 case.

This was misbehaving for x=0, among other things.

Avoid filling in perm array for the initial (p)r=0 call.  We only
need to do a full permutation for subsequent r.

psim: count result set sizes

crush: fall back to exhaustive bucket search for any bucket type

If we don't get a bucket-specific choice in 5 tries, do an
exhaustive search (based on a random permutation).  Only then give
up on the bucket and retry descent.

Note that the search-based fallback does not honor weighting at
all.

crush: ditch prime number theorem; generate random permutation on the fly

crush: improve uniform selection a bit

Shift to a new prime (and thus permutation) every few r.

mds todo

kclient: fail connection when s_addr==0 and port/nonce don't match

Even if s_addr is 0, the port and nonce should match.  We were
previously going ahead with the connection when we shouldn't have
been.

mds: maintain capid across mds restart and client reconnect

mon: don't replace standby mds

mds: handle MMonMap

journaler: fix replay

Broken by commit 497ade3b90.

Use objecter to write header (not just to read it).

Also reset the prefetch values each time the layout is set.

mds: fix loner drops

This was broken way back by commit 0c3becdf.

Only drop loner in eval().

rev protocols

Just for good measure, since I missed a few changes earlier.

debian: new rules file.  don't strip.

osd: fix accounting .snap thing

conf: improved sample

mon: check for osd exists before up/down

osd: maintain up_epoch AND boot_epoch; revise OSDSuperblock accordingly

In order to make the superblock clean interval meaningful after we
are marked down and then up again (over the life of a single
cosd process insance), we track both boot_epoch and up_epoch,
and keep [boot_epoch,clean_thru] in the superblock.

This avoids seeing crashed pgs when and osd is wrongly marked down
and the osd marks itself up again.

osd: adjust heartbeat peer lock

Need it to protect heartbeat_from_stamp.

osd: reset heartbeat peer set on osd down

This clears out the timers.

osd: adjust snap collection memberships during pg split

osd: adjust pg_stats during pg split

osd: generate correct child pg when doing pg split

ceph: don't choke on unexpected MMonMap

kclient: recalculate pgid each time request is sent

The pg calculation depends on osdmap parameters that are transient.  In
contrast, the rest of calc_layout is concerned with file striping, which
is fixed (at least over the lifetime of the request).

mds: include CAP_PIN in caps_liked()

Among other things, this prevents confusion in the uclient.

osd: fix bug in recovery ops accounting

Adjust osd global counter too!

kclient: a few sparse fixes

mds: only issue sensible caps on directories

mds: make eval take a mask; kill try_*_eval

This will eventually help us deal with all locks as a group.

Also, simplify the eval_subtree_root bits.

start v0.8

msgr: kill static instance 'rank' of SimpleMessenger

msgr: clean up refs to static 'rank'

uclient: clean up mount wrt osdmap, mdsmap

journaler: store layout in journal header

This means we won't fall over if the 'default' layout changes.  Specify
the layout during journal creation, as you'd expect.

mds: clean up layouts

osd: more pg_pool, pg changes

Remove 'type' from pg_t.  It's implied based on the pool.

Clean out file_layout.  The pool implies a type and namespace.

kclient: fix page_mkwrite for 2.6.30

This will change again soon when Nick's other fix gets merged.  Also, we
probably need to stop doing write_begin/end due to some differences in
behavior (e.g., no extending file size? see btrfs as a reference).

osd: typo

config: fix pg pools in default file layouts

osd: fix up recovery op accounting

Fix varous rop accounting bugs.  Add assertions.  Log recovery
ops.

todo

kclient: retry 2x on ESTALE; fix up mds reply error paths

Also fix error paths, which weren't handling the snap_rwsem
properly.

kclient: fix symbol names without 'ceph_' prefix

kclient: add missing parameter

conf: added missing allocations

mon: track per-pg_pool usage

config: make uninit var warning go away

osd: push pg_num etc into pg_pool

osd: clean up assemble_backlog

kclient: don't allow to pass max file size

todo

osd: make osd mark itself back up if it is marked down

We may still want a way to tell an osd to exit.

mon: optionally dump specific osdmap epoch

uclient: update dir inode, cap from reply

vstart: --nodaemon to run via crun and -f (so that gprof works)

uclient: take inode ref when dirtying inode

initscript: default btrfs mount options notreelog,flushoncommit

cosd: use \ in dev list in .conf

osd: fix merge_log split point

Look at full eversion, not just .version (part 2).

mon: order log entries as they're committed

This doesn't fully order them (across commits), but it helps.

mon: adjust log levels

todo

assert: turn off tls in assert macro

About 3% cpu time

kclient: mark caps sync in check_caps writeback path too

We are already doing so in try_flush_caps().

kclient: added missing include

todo

osd: make pg pools resizeable

Move the pg size from the pgid to the pg_pool descriptor, so that
entire pools of pgs can be resized.

todo

config: -v or --version to print version info

mon: make down->out osd occur despite mon restarts

Also add a bit more sanity checking to make sure we don't do the
wrong thing.