add ceph_fsid_set helper

filejournal: use single shared zeroed buffer for alignment padding

Avoids lots of mallocs and memsets (one for every journal event).

buffer: add create_static constructor

vstart.sh: fix -k

Merge commit 'd00b917143e2afd72851bfd0400b2c2a1f3fc018' into auth

vstart: fix errors on auth none

msgr: rev protocol

auth: fix monclient startup issue

auth: fix client and server side negotiation

uclient: replace C_Cond with C_SafeCond

todo

todo

osd: allow reinitialization of osd journal

(without hosing osd data)

rados: Move array to heap. Prevent segfault when you use too-large a write size

rados: remove unused paramater, add very primitive read bench in verify step

rados: Cosmetic changes for Sage

auth: change server side negotiation a bit

client is not fixed up yet

Merge branch 'unstable' of ceph.newdream.net:git/ceph into unstable

osd: eval access mode before try_*

The problem is the try_* functions may change the mode, but a start_write
may not follow if the op doesn't execute (for any number of reasons).  So
the next time we come around, we may need to reset back to IDLE if
num_wr == 0.  Be careful about the wake flag.

This fixes osd op hangs (particularly after mds restart, and lots of
failed stats on objects during file size/mtime recovery).

osd: debug pg mode

sepia: valgrind for a while

objecter: be more verbose about laggy requests

msgr: use discard_queue, kill drop_msgs

msgr: don't initiate connect if we keepalive on unconnected peer

msgr: fix possible use-after-free by taking pipe lock during reap

This ensures that whoever called stop() (mark_down, in particular) finished
with the pipe (unlocked it) before we go and free it.  Otherwise we might
call p->lock.Unlock() after the reaper deleted the Pipe, mucking up some
other memory.

I don't think this was actually triggerd, tho, since we would have seen
the assert(nlock == 0) in ~Mutex???

msgr: use common helper for reader/writer thread stop and reap queueing; fix locking

We weren't holding lock during ::close(sd)

msgr: rename report_failures -> drop_msgs

Name was from legacy behavior

msgr: small cleanups

monc: small sanity check

uclient: set mode on snapdir properly

uclient: assert we have CAP_PIN

Not sure why that was conditional before??? Hmm!

uclient: always retain CAP_PIN

monc: small cleanup

avoid unnec finish_hunting call on get_monmap_privately

rados: Update stat calculation and display; change to wait_for_safe

qa: We want to stop on errors. Add new scripts.

auth: reuse global_id when requesting tickets

vstart: fix overwrite conf

mon: fix decode authmon stash on restart

mds: don't crap on !check_from, this doesn't happen with nolaggy

mon: move misplaced parens

todo

msgr: get rid of harmless valgrind error

==7781== Source and destination overlap in memcpy(0x5B97EA8, 0x5B97EA8, 136)

mon: fail on write error

Don't rename badly written file.  Also assert success, for now.

monc: fix race/deadlock for get_monmap_privately

uclient: use Inode::auth_cap to find mds to write back snap cap metadata to

uclient: keep MClientRequest local to send_request

mds: journal open_files based on is_any_caps_wanted(), not is_any_caps()

Actually we're a bit conservative in a few places since the wanted check
is a bit more expensive.  We always do a full check in try_to_expire, so
much of the time we can do the quick check only.

mds: don't rejournal files with caps that are unwanted

If they're unwanted, it's no biggie to fail to reconnect the cap.  And
Locker::adjust_cap_wanted() already adjusts the open_file logseg lists in
this way, so let's just totally consistent.

mds: don't croak on open_files without caps

We can get a capless inode here if we replay an open file, the client
fails to reconnect it, but does REPLAY an open request (that adds it
to the logseg).  AFAICS it's ok for the client to replay an open on a
file it doesn't have in it's cache anymore.

rados: status printouts are now threaded

mkmonfs: cleanup monmap fn arg

Makefile: include all the headers we need to build

config: accept list of possible conf file locations; include ./ceph.conf

This makes './ceph -w' work with './vstart.sh -x'.

vstart: -x to start up with cephx

monc: fix race/deadlock for get_monmap_privately

mds: don't try to send mdsmap to clients that need to reconnect

It won't work, clients must connect to us.

Also stop sending the map on recovery finish; they'll also (currently, at
least) get that from the monitor.

mds: ignore/warn on late client reconnect attempts

In the future maybe we can do better (i.e. best effort attempt to reconnect
after the normal interval has passed)

auth: don't try to read keys if cephx not supported

auth: use user admin as the default user

Merge branch 'unstable' of ceph.newdream.net:/git/ceph into unstable

qa: prepare for a hierarchical test script system

vstart: some cleanup

conf: default to auth type 'none'

auth: fix compile errors, warnings

auth: kill residual kernel/ files

Merge branch 'unstable' into auth

uclient: fewer msgs

todo

Merge branch 'unstable' of ssh://ceph.newdream.net/git/ceph into unstable

put testing ceph.conf's in git

osd: print useful mode wait message

filestore: skip sync_file_range if the full commit has started

Presumably btrfs commit_transaction is more effective than our per-file
flushing.  And we don't want to fight each other.

mds: recommit after commit if waiting for newer version

If there are waiters for a later version of the dir to hit
disk, then we need to recommit as soon as the prior commit
completes.  We auth_pin on adding the first waiter, and do
not unpin until removing the last waiter, so this doesn't
break auth_pin rules.

Previously we could stall because we didn't finish the
waiter (on the later version) but also never started the
commit.  Sometimes we would get lucky and someone else would
ask for a commit, but sometimes not.  We would then see old
LogSegments that would never get fully expired.

auth: fix mds messages filtering

rados: fix usage() and -p option checking

mds: warn, don't crash, on rfiles/rsubdirs underflow

This doesn't fix the bug, but lets the mds at least start up.

msg: don't die unconditionally when got unknown message type

uclient: increase cache size

filestore: flusher thread; commit snaps (disabled)

osd: avoid truncate, remove ops we know will fail

Now that we check return codes, these cause problems.

osd: don't requeue pg removal if already removing

todo

mds: force rdlock on any snapped inodes

When the client has an excl lock on an inode, and it's
stating a snapped version of it, we can't expect it to
put 2 and 2 together and look at it's head metadata.  If
the cap does not follow the snapid we're trying to stat, do
the full rdlock to force the snapped values back to the
mds so we can do the cow.

If there is nothing cow, the cap will get reissued with an
accurate follows value, and we won't have to do this again.

sessionmap is an object, not a pointer

mds: fix typo; also only suicide if we have clients

If we are the last MDS and have no clients we should be
able to stop cleanly....

mds: underwater is function of _loaded_ version, not in core version

We may load a dir version off disk that is older than the
in-core version (because we got newer data from the
journal, say).  When marking underwater items clean, do
so based on the _loaded_ version, not out in-core version.

todo

mds: If last MDS, suicide on stop rather than entering infinite requeue loop

osd: do not apply_transaction in finish_recovery

finish_recovery needs to set up a callback for when the current set of
changes commit to disk (to kickstart cleanup of strya replicas etc).  We
can't call apply_transaction this deep inside the call chain without
causing problems.  So, pass a list of completion contexts all the way down
so that we can set up the completion callback.

filestore: don't croak on 0 op usertrans error

filestore: check return values

test_trans

filestore: fix usertrans setxattr, print it out nicely

filestore: clean up btrfs ioctls; use actual btrfs ioctl.h

sample.ceph.conf: include usertrans flag

filestore: make FileStore btrfs ioctl tests more readable

mon: ignore MAuth message when connection has no session

This happens if hte message is delayed, and the session meanwhile
is closed.  We need similar checks any time we take a Session
from the message->get_connection()....

ceph: default to admin user

auth: make ~ in keyring search path subst in $HOME

Merge branch 'unstable' into auth

Conflicts:
src/Makefile.am
src/mkmonfs.cc
src/msg/SimpleMessenger.cc