osd: fix PG print log bound check

todo (bugs)

Make a more flexible 'tell' command to replace injectargs
osd/mds: make a handle_command function; don't parse all MMonCommands as config

mon: Send injectargs to osd/mds in new format;
accept tells for mds and osd

todo (bugs, filestore notes)

osd: include last_epoch_split in PG::Info::History

Also drop backward compat encoding for same_up_since;
overall osd format as reved since then.

msgr: don't keep sent messages on lossy connections

mds: log client timeouts

mds: don't croak on stray ACK

This can happen after replay:

- AGREE and update op in journal
- table resends AGREE
- client resends COMMIT
- client gets AGREE, resends COMMIT
- table gets 2 COMMITS, replies with 2 ACKs
- second ACK can be ignored.

qa: Copy the output of each test to a log file

qa: Whoops, never added the runonkclient script

auth: rename mutex so that it doesn't confuse lockdep

msgr: maintain per-pipe in_qlen; avoid list.size(); some cleanup

librados: fix locking slightly

Lock was missing on aio_read.

qa: fix runallonce target dir verification

filestore: disable USERTRANS for now

todo

librados: less noisy

vstart: fix small bash thing

osd: drop backlog on recovery completion (when we mark PG_STATE_CLEAN)

osd: split pg log too

osd: make osd thread pool sizes adjustable

Rename osd_maxthreads to osd_op_threads to be consistent.

init-ceph: use pkill, not killall, so that c$type.$date is also killed

mon: fix mon injectargs

If !connection, we know it's local delivery.

mon: fix null pointer ref on connection

crush: fix grammer to parse hash

msgr: lockdep found some not-actually-possible bad dependencies; they've
been removed to make it happy

msgr: Add at least a little documentation

msgr: Remove noisy debug output.

msgr: discard_queue now removes empty pipe queues from endpoint's map
This prevents bad pointer dereferences

msgr: Cover qlen with a Spinlock for faster access and to limit blocking

msgr: That unlock's not in the right spot

msgr: Fix a number of locking and deletion bugs. Appears to work.

msgr: Fix blocking locks and another potential block.

msgr: rename locks for clarity; move some around to prevent blocking.

msgr: implement round-robin pipe message delivery.

msgr: Remove Endpoint::dispatch_queue and queue_message;
set up local pipe and necessary routing code.

Also, fix potential locking issue by pushing message onto
queue before pushing queue to round-robin

msgr: Add queues, etc needed for message delivery by round-robin pipe

msgr: rename pipe's outbound message queue

config: parse 'lockdep' option in .conf

ceph.conf.sepia: more osds, lockdep

mon: log error, don't abort, on stray pg_stat notify

osd: set pg_stat.created

osd: respond to query on uncreated pg with empty info; do not create

We should never create a PG* for an uncreated pg except through the mkpg
path.

mon: stop trying to create localized pgs >= max osd|device

If lpg_num == lpgp_num, and the preferred osd no longer exists, there is
no guarantee that the parent and child pgs will land on the same osd.  This
happens when we are creating pgs for a new osd, they don't finish getting
created, and then we destroy that OSD again.

Care should be taken to avoid expanding the OSD count _and_ lpg_num
simultaneously...

todo

osd: fix mark_down on heartbeat_messenger addrs

This fixes residual outgoing connect attempts and
subsequent 'wrong node' messages from old outgoing
osd_ping messages that never leave our queues.

filestore: avoid string copy after collection_list sort

osd: don't forcefeed bad (large) device ids to crush

filestore: test xattrs on basedir/fsid, not basedir

The basedir might have differing permissions.

ceph.conf.cosd changes

osd: drop old osdmap compatibility cruft

This is old enough to have been superceded by a full disk format rev.

osd: fix decoding for old osdmaps (pre osd hb change)

Including ugly hack to work around badly encoded v3 maps

mds: mark down stray connections on reset

vstart: add --smallmds option

logger: avoid dup lines when we get behind

If we get behind (say, after SIGSTOP ... SIGCONT),
instead of printing dup lines for every interval we missed,
print just the first and last.  That will make any graph
have a nice, hopefully obvious perfectly horizontal line.

qa: add bonnie++ to the workunits

filestore: limit size of flusher queue

Limit the size of the flusher queue to avoid hitting max open files
limit.  If we hit the max, just don't queue async flush, so we close the
fd immediately.

osd: rev cluster protocol to match osd hearbeat change

msgr: Only allow one local endpoint; now has simpler, less iterative code!

osd: Now uses separate messenger for heartbeats.

Includes changes to OSDMonitor and OSDMap so things keep working

rados: benching sequential reads can now have a time limit

rados: change benchmark interface and record objects written/size to osds

mds: debug reconnect timeouts

debian: only upload tarball whem building amd64

For some reason lenny32-packager includes binaries in
the 'make dist' tarball.  Lame.

logger: use proper format for s64

qa: put qa used files on ceph.newdream.net

avoid hitting external servers if we can :)

v0.18

rados: move librados.h, rados_bencher.h

Also include rados_bencher.h in Makefile.am.

mds: avoid scatter writebehind from predirty_*

predirty_journal_parents does wrlock_start with
nowait=true.  Make sure we don't then simple_lock if
lock->is_updated(), as that will call scatter_writebehind,
which will barf if a log event is currently open (which
it is in this case).

crush: fix whitespace

logger: s64, not long

So we can log larger numbers.

buffer: optional buffer debug output

This interferes with the dout crap because we can't #include it, so you
need to turn all that output off to avoid getting jumbled output.  Or
better yet make sure you don't daemon() but still log dout to a file.

Fixed up the output parser to find leaks.

ceph: fix message leaks

init-ceph: optionally copy executable to remote host before running it

This both preserves the version of the binary that we ran (for interpreting
core files) and avoids any possibility of SIGBUS due to nfs lameness when
rarely used text pages get faulted back in.

mds: typos *sigh*

mds: Cleanup/doc updates

mds: Add export killpoints

mds: Add killpoints for mds export

mds: Add mds_kill_export_at asserts.
Create and begin documenting doc/killpoints.txt

config: add kill arguments for mds import/export

mds: bracket mds journal events with {start,submit}_entry

This lets us catch nested journal events when they happen,
instead of down the line when dir/inode version numbers
look weird.

todo

snaprealm errors on kclient when ls -al .ceph/mds0/stray

dropped old aleung mds branch code

See aleung_mds_security branch.

mon: fix allocation of low global_ids after mon restart

We need to set last_allocated in init().  Also avoid the
-1 casting and just use 0 instead.

test_ioctls: print preferred_osd value from GET_LAYOUT ioctl

hash: fix whitespace

mds: set mdr->in[n] in rdlock_path_xlock_dentry

This keeps things consistent with what we'd get with
path_traverse.  Namely, it means that if done_locking gets
set to true, then a future call to rdlock_path_pin_ref can
bail out and return mdr->in[n] and get a correct value.

This fixes

 touch mnt/a
 ls mnt
 touch mnt/.ceph

mds hang on the create request.

mds: do not include /.ceph in readdir results

librados: set id in messenger

rados: read benchmark is asynchronous.

Change hump-backed variable names.
Initialize data->in_flight!

rados: pull sequential benchmark into its own function

rados: remove iTime from object names for complete determinism

rados: Handle errors slightly better

rados: split up function into more subfunctions

rados: Deterministically fill data, reverse count:time order

librados: minor comments

rados: Move variables into data structure; rename to be generic

rados: Move benchmark functions into separate file

qa: Rename a file for future clarity.