kclient: script to build patch set for upstream

kclient: some mon client cleanup

kclient: kbuild patch update

kclient: more messenger cleanups, comments

kclient: messenger.c cleanup, reorganization, comments

kclient: fix cap_snap flush to reference correct snap

The client was passing the snapid the data was to fall into
instead of the snap it _follows_ (which is now the mds tends
to look at things).  Use snapid-1 instead.  This fixes the
problem of files being written while the snapshot was taken
appearing as 0 bytes in the snapshot.

osd todos

mds: only check osdmap against snap table while active

osd: track snap collections per pg, and clean them up

Explicitly track which snap collections exist for each pg.  Clean them
up when the PG is destroyed.

osd: fast path if snap collection doesn't exist in snap_trimmer

filestore: return error code (instead of asserting) if collection doesn't exist on collection_list

The OSD doesn't pre-create the snap collections.

vstartnew.sh: turn up debugging on osd

mds: cleanly update snapserver table after snap purge

Any modifications to the table need to be journaled.  Create MDSTableServer infrastructure
for a simple update done by the server (no prepare/commit), and use it to
remove the snapid(s).  Replay no works.

kclient: more snap.c comments, cleanup

kclient: a few more snap.c comments

kclient: adjust ceph_finish_cap behavior

Look at capsnap->dirty instead of used cap refs, as this directly indicates
whether _this_ capsnap can be flushed (used bit indicates whether _all_
capsnaps can be flushed.. no need to wait that long!).  Avoid an extra
call to ceph_flush_snaps by waiting until after to call it.

kclient: some snap.c comments, cleanup

kclient: osd messages timeout retriggering

kclient: refine osd messages timeout handling

kclient: debug message

debian: include debian dir in usr/src/modules/ceph

kclient: some export.c comments

kclient: addr.c comments, cleanup

I'm leaving the ability to redirty a page within a given
snapc in ceph_set_page_dirty (even though it isn't used)
because I'm not sure about the failure paths.. I suspect
we will need it later.

debian: make ceph-source include module source

There's a bunch of weirdness in the rules file, though, that I don't understand.
What's rules.modules.in?  Why was it being populated (along with a debian dir)
in /usr/src/modules/ceph?

kclient: mdsmap cleanups

kclient: osdmap.c cleanups

kclient: osd_client comments, cleanup

debian: fix kernel module in source package

ceph_fs.h: whitespace

kclient: more mds_client comments, cleanup

kclient: more endianity fixes

kclient: endianity handling fixes

kclient: endianity fixes

kclient: some mds_client.c comments, cleanup

kclient: send osd, ping messages in lossless mode

This is what they should have been doing all along.  Oops.

kclient: super.c comments, cleanup

kclient: move inode alloc/destroy into inode.c

kclient: caps.c comments, cleanup

kclient: remove compilation warning

kclient: sparse code cleanup

kclient: file.c comments, cleanup

kclient: dir.c comments, cleanup

vstartnew.sh: -n (norestart) to avoid crun restart loop

kclient: fix inode refcount problems in ceph_fill_trace

If we fail to take i_mutex, we get the inode via ceph_get_inode, which bumps
i_count.  Make sure we iput() it before jumping to update_inode label.  Note
that d_instantiate consumes the ref, but the other paths (d_alloc_anon,
d_find_alias) do not.

kclient: some more code cleanup

fix crc issue (when len < 4)

kclient: some sparse cleaning

use flags for mds chown requests

This avoids colliding with uids of -1 (with the old, lame method).
Clean up client's utimes() code while we're at it to explicitly specify
a mask.

kclient: inode.c comments, cleanup

kclient: fix umount_begin for 2.6.26+

fix wrong byte ordering handling (thanks brent!)

remove debug helper code for crc32

kclient: preallocate cap if we expect it

Preallocate memory for a capability when doing an open request.  If we don't
use it, free it with the mds_request.  This avoids the possibility of an ENOMEM
in the reply handler, which is a little difficult to deal with intelligently.

kclient: remove static caps from inode

Since most inodes will never have a capability, there is no point in embedding them
in the ceph_inode_info and paying the memory overhead in the general case.

kclient: super.h comments, cleanup, some minor cruft removed

ceph_fs: some cleanup, including mon statfs messages

checking buffer before calculating the crc (for debug)

kclient: some more error handling

kclient: remove ping_ack entirely

dstart.sh: use unstable btrfs

filestore: fix btrfs version detection

kclient: lower debug level on debug message

kclient: fix race condition

kclient: remove ping ack

kclient: preliminary forced umount

kclient: ping osds whose requests are timing out

This ensures the client detects when the osd tcp session has closed and
a reply may have been lost.  If that does happen, the handle_reset handler
will be called and the request(s) will be resent.

msgr: ping needs no payload.  lose ping_ack.

They were unused/ignored.

kclient: convert spinlock to mutex in osdc

kclient: resend osd requests if osd resets the connection

kclient: some error handling

assert: include rudimentary stack dump

custom assertion handler

Print assertion error to log file, if it is open.

objecter: ping laggy osds

This ensures we detect any session resets.  This necessary because the
osd message policy on replies is lossy.

osd: lossy send policy on acks

objecter: kick requests when we detect a remote session reset

msgr: handle incoming lossy connection when outgoing policy is lossless

Basically, try to wake up our lossless connection.  The lossy attempt never
survives.  This avoids worrying about keeping session state alive (connect_seq,
etc.).

msgr: track lossy mode independently for self, peer

The policy will be asymmetrical for the OSDs, so we need to
track it independently.

The various assertions aren't all worked out yet.  Notably,
connection races aren't quite right.  But the basic bits
are there.

client: fix && || parens

filestore: use BTRFS_IOC_SYNC instead of fsync

fsync() won't do the right thing on newer versions of btrfs, due do the
new tree log stuff.  Use the SYNC ioctl.

filestore: detect new btrfs ioctls

Don't use them yet, though.

fix of crc32c calculation

replace the crc32c code

debian: changelog update

debian: fix debian-doc; include debian dir in dist tarball

mon: populate last_beacon properly for mds liveness check

It was only populating on paxos updates, but that missed the case where the
leader moves from one monitor to another (live) peon, who has an empty last_beacon.
Move it where it makes the most sense.

debian: tweak ceph-doc paths

dstart.sh: replace dstartnew.sh

-n will create new fs, otherwise it will start up using existing data.

filestore: fix collection attrs

Need to prepend user.ceph. to attr names...

todos

mon: include pg usage stats, header in pg dump

debian: move map tools and crun to ceph-common

osd: account for used kb separately

Account for used separately from available, as the underlying fs may do tricks
reserving space for root and such.

osd: use kb instead of blocks for pg, osd utilization

osd: prioritize heartbeat messages

msgr: include priority in msg header, make dispatch a priority queue

Generalizes previous hack that put messages from the monitor at the front of the
dispatch queue.  Monitor now just sets a (non-default) default_send_priority
of CEPH_MSG_PRIO_HIGH.  That value is used only if the message priority isn't
set explicitly by set_priority() before being queued for send.

journal: protect journal access (namely, completions) with mutex

The commit_waiters map was getting corrupted occasionally.

debian: include crun in osd, mds, mon packages

osdmaptool: fix silly num_dom bug

ceph.spec.in: include crun

kclient: initializing kaddr (merge fix)