fix for cmon startup

kclient: fix readpages when not all pages are found

Adjust the request len, page count when fewer than the desired
number of pages are found.

mds: create snaprealm for stray dentries resulting from rename

This was done in the unlink path, but overlooked by rename(), resulting in
problems down the line when the stray nlink=0 item was purged.

cmon will run as a daemon in any case

combined vstartnew.sh and startnew.sh into vstartnew.sh

startnew.sh uses crun in order to execute modules

crun will not run infintely if -d specified on the command line

Merge branch 'unstable' of ssh://ceph.newdream.net/git/ceph into unstable

msgr: clean up crc handling

mds: don't issue leases on dentries in stray dir

Also, assert in remove_dentry() that the dentry has no more leases.

msgr: don't host msg bufferlists in write_message

payload and data need to be preserved in case the connection drops and the messages
need to be resent.

also kill crun when stopping the system

added crun wrapper

add -f flag for foreground execution of modules (with logs in the log files)

msgr: include crc in msg header.  verify crc for received messages.

clean up crc32c

add crc to messages.  protocol change.

todos

kclient: can use names of modules in order to set debug mask

kclient: set asynchronous error cleanup

kclient: writepages async error handling and some cleanup

kclient: set page error bit on readpages error

kclient: fix incremental osdmap decoding bug

kclient: some osdmap cleanups

mostly cosmetic

mon: reweight osds via cmonctl

Allow reweight (offload adjustment) via cmonctl using float value.

kclient: make standby an allowable connection race state

msgr: make standby an allowable connection race state

kclient: no .snap in root dir

osd: fix reversed logic on push

mds: remove stale proc_message()

mon: allow new arguments to be sent to running mon, mds, osd via cmonctl

todos

kclient: mds reset stub

Get rid of compile warning.  Add todo.

msgr: fixed bug in accept

banner[] isn't null terminated

messenger protocol changes

There is now a plaintext banner that is exchanged so that both ends can
verify they are talking to the right software.  This string should be
changed each time the wire protocol changes.

There are also mon, osd, and mds specific protocol versions defined, but
these are not yet used.

kclient: whitespaces

kclient: can supply multiple monitor ips on mount

kclient: adding unmaskable debug flag

makefile update

v0.4, todos

Merge branch 'master' into unstable

config: comment

mds: fix file recovery

Make state bits distinct.  Duh.

Also, if an inode is queued for recovery, and doesn't need it later, unqueue it
(clear the bit, drop auth pin).

kclient: fix pending cap_snap checks, queuing

Add new cap_snaps to the _tail_ of the list.

Also, use a helper to check for pending (write in progress) check, and be
sure to check the list tail in that case.

client: fix queued cap_snap write-in-progress checks

kclient: be more paranoid in prepare_pages

It's theoretically possible to get racing incoming osd_op_replies.  Make sure we only give the pages away once.

kclient: fix bad pointer arithmetic in messenger

This was causing intermittent slab corruption when TCP fragmented the stream in unusual ways.

kclient: don't include pages in read requests; some osdc cleanup

kclient: switch to sync writes when NEARFULL osdmap flag set; ENOSPC on FULL flag

todos

kclient: default to safe writeback

Now that async writepages is working, we can wait for data to be fully committed without the higher latency affecting writeback throughput.

mds: choose new mon only if beacons are delayed, and switch to mon that sends up beacons

This streamlines the mds <-> mon beacon interaction a bit.

kclient: some async writeback cleanup

kclient: async writepages

kclient: using special protocol mask for mds requests

kclient: added missing file

kclient: mask to enable/disable debug messages

journal: fix off-by-one bug in committed_thru callbacks

journal: avoid queueing null context

kclient: writepage noop should be kswapd

osdmaptool: print osdmap

osdmap: set ctime+mtime on creation

kclient: writeback cleanups (use filemap_write_and_wait)

kclient: time out mds session close on umount.  messily.

This at least won't hang, but it will leave inodes pinned after umount, so it still needs some real work.

kclient: fix up safe/unsafe writeback flags

kclient: unify mount timeouts

Make both mon map and mount messages and mds session, root inode open time out.  Previously the mon interaction would time out but we could hang on a non-responsive (e.g., not active) mds.

todos

psim: test localized placement groups

crush: fix forcefeeding for forceleaf

osdmaptool: lpg_bits specifiable

set bl length in buffer::read_file

osdmaptool: fix crush import

crushtool: fix chooseleaf compilation/decompilation

Merge commit 'c43adbe5d679e4920791f4cf4baa294eab36ccfa'

Conflicts:

src/kernel/osd_client.c

todo

crush: chooseleaf

kclient: remove extraneous dput in fill_trace

osd: push/pull data_subset, clone_subsets

objectstore: clonerange, list->vector encoding

kclient: lowered debug level on some message

kclient: fix mds reconnect message encoding; include snaprealms

filejournal: typo, fixes callbacks

journal: remove some dead code

kclient: fill in kstatfs f_fsid

paxosservice: reset propose timer when election is called

filestore: constrain ObjectStore interface, simplify journaling, update commit_op_seq on each transaction

filejournal: noop is committed_thru is same seq

kclient: fix bug in mdsc check_new_map

filestore: serialize journal entries

kclient: dirfrag access using mutex and not inode's spinlock

kclient: fix random mds selection bug

ebofs: maintain an op seq count, and use that for the journal

journal: journal rewrite

use vector or deque in place of list<Context*> in finisher, ebofs

kclient: removing of virutal xattr is not allowed

kclient: setxattr for virtual xattr is not allowed

kclient: mount default without DIRSTAT

kclient: no need to check for mount with dir stat (xattr)

kclient: remove whitespace

kclient: xattr show dir extended data