kclient: adding unmaskable debug flag

makefile update

v0.4, todos

Merge branch 'master' into unstable

config: comment

mds: fix file recovery

Make state bits distinct.  Duh.

Also, if an inode is queued for recovery, and doesn't need it later, unqueue it
(clear the bit, drop auth pin).

kclient: fix pending cap_snap checks, queuing

Add new cap_snaps to the _tail_ of the list.

Also, use a helper to check for pending (write in progress) check, and be
sure to check the list tail in that case.

client: fix queued cap_snap write-in-progress checks

kclient: be more paranoid in prepare_pages

It's theoretically possible to get racing incoming osd_op_replies.  Make sure we only give the pages away once.

kclient: fix bad pointer arithmetic in messenger

This was causing intermittent slab corruption when TCP fragmented the stream in unusual ways.

kclient: don't include pages in read requests; some osdc cleanup

kclient: switch to sync writes when NEARFULL osdmap flag set; ENOSPC on FULL flag

todos

kclient: default to safe writeback

Now that async writepages is working, we can wait for data to be fully committed without the higher latency affecting writeback throughput.

mds: choose new mon only if beacons are delayed, and switch to mon that sends up beacons

This streamlines the mds <-> mon beacon interaction a bit.

kclient: some async writeback cleanup

kclient: async writepages

kclient: using special protocol mask for mds requests

kclient: added missing file

kclient: mask to enable/disable debug messages

journal: fix off-by-one bug in committed_thru callbacks

journal: avoid queueing null context

kclient: writepage noop should be kswapd

osdmaptool: print osdmap

osdmap: set ctime+mtime on creation

kclient: writeback cleanups (use filemap_write_and_wait)

kclient: time out mds session close on umount.  messily.

This at least won't hang, but it will leave inodes pinned after umount, so it still needs some real work.

kclient: fix up safe/unsafe writeback flags

kclient: unify mount timeouts

Make both mon map and mount messages and mds session, root inode open time out.  Previously the mon interaction would time out but we could hang on a non-responsive (e.g., not active) mds.

todos

psim: test localized placement groups

crush: fix forcefeeding for forceleaf

osdmaptool: lpg_bits specifiable

set bl length in buffer::read_file

osdmaptool: fix crush import

crushtool: fix chooseleaf compilation/decompilation

Merge commit 'c43adbe5d679e4920791f4cf4baa294eab36ccfa'

Conflicts:

src/kernel/osd_client.c

todo

crush: chooseleaf

kclient: remove extraneous dput in fill_trace

osd: push/pull data_subset, clone_subsets

objectstore: clonerange, list->vector encoding

kclient: lowered debug level on some message

kclient: fix mds reconnect message encoding; include snaprealms

filejournal: typo, fixes callbacks

journal: remove some dead code

kclient: fill in kstatfs f_fsid

paxosservice: reset propose timer when election is called

filestore: constrain ObjectStore interface, simplify journaling, update commit_op_seq on each transaction

filejournal: noop is committed_thru is same seq

kclient: fix bug in mdsc check_new_map

filestore: serialize journal entries

kclient: dirfrag access using mutex and not inode's spinlock

kclient: fix random mds selection bug

ebofs: maintain an op seq count, and use that for the journal

journal: journal rewrite

use vector or deque in place of list<Context*> in finisher, ebofs

kclient: removing of virutal xattr is not allowed

kclient: setxattr for virtual xattr is not allowed

kclient: mount default without DIRSTAT

kclient: no need to check for mount with dir stat (xattr)

kclient: remove whitespace

kclient: xattr show dir extended data

startnew.sh: sudo if btrfs

filestore: no rmdir in mkfs

osd: some snap_trimmer fixes

mds: purge stray files immediately; only keep snapped directories around

mds: optimize open_snaprealm() for stray and/or non-dirs

kclient: some todos

kclient: rename __ceph_get_frag -> __get_or_create_frag

mds: recover file size for all affected snapshots, not just the head

mds: adjust TABLE_OP namespaces; fix prepare journal event

filer: snapid should be nonzero on all reads

kclient: allocate xattr buffer outside of i_lock

msgr: relax seq checking on lossy channels (incomplete fix)

mds: write objects directory, avoid filer

osd: typo

mds: read mds objects with CEPH_NOSNAP

synclient: loff_t in write_file

objectcacher: off_t -> loff_t

osdmaptool: require num_osd > 0 when creating new osdmap

mon: verify osdmap fsid in 'setmap'

osd: fix _finish_recovery locking, refcounting

osd: prevent _finish_recovery from going off after primary changes

fix coll_t != comparator

ebofs: use correct remove in alloc_dec (so that btree remains balanced)

todos

kclient: use truncate_inode_pages instead of vmtruncate

kclient: fix revocation races

mds: fix lock ordering

another fix for kernel 2.6.26

some changes for work collaboration

kclient: send time_warp_seq with flushsnaps

client: update cap_snap code to mirror kclient

kclient: restart writeback index each time snapc advances

add truncate_seq to inode, mds<->client protocol

kclient: adjust kernel version conditionals

mds: fix client_follows in live cap

kclient: misc addr fixes (fsx + snap testing)

kclient: force sync writes hack