osd: make pgids sort on (pool, preferred, ps)

This makes pg dump output easier to read, mainly.

crushtool: small fix

Revert "crush: use spirit classic headers"

This reverts commit 28ac4441b87907713ddaf1fe1dee62350f947cf3.

hash: small cleanup

crush: hrm fix up builder too

fix

crush: use spirit classic headers

This makes the 'deprecated' warnings go away.

crush: make hash function selectable

osd: make object hash a pg_pool parameter

osdmaptool: test-map-object

osd: use stronger hash function for mapping objects -> pgs

The old hash (from linux dcache) was very weak, such that
least sig bits may not change and you could get lots of
consecutive objects on the same osds (because lsbits of the
pg weren't changing).

This is Robert Jenkin's hash and is quite strong.  Public
domain.

Rev osd disk format, protocol, since we're totally changing
object placement here.

crush: no more static inline

osd: This logic is slightly less confusing without the always-true 'full' param

mon: don't delete stats when sending osdmap incremental

send_latest will delete m, and/or wait.  Instead call send_incremental
directly only when we know paxos is_readable.

qa: test subdir mounts

init-ceph: tell user we're mounting btrfs

osd: send single osd_boot on startup

mon: don't log dup osd boot msgs

msgr: leave off ss_family when printing

todo

ppc: do not copy_in unencoded __u32

Fixes big endian bugs.

buffer: only define _XOPEN_SOURCE ifndef

todo

mon: make initial monmap epoch match paxos version

mkmonfs: use common_init and parse regular args

don't forget -standalone.git in release checklist

uclient: set NAME_MAX = PAGE_SIZE

Hadoop: Update JavaDoc and put in new patch file

Hadoop: Numerous fixes.
Set bufUsed=0 on a flush to avoid bad rewrites of data
Downgrade a warning in IOStream since Hadoop apparently checks for EOF by reading until a read returns -1.
Remove some leftover if checks that don't do anything.
TODO: Remove something Sage did already.

mount: fix hint initialization for getaddrinfo

filestore: oops less noisy

osdmap: fix pps calc for preferred pgs

osd: nicer debug output on misdirected requests

mds: mark scatterlocks with dirty rstat/fragstat during replay

This ensures we propagate this info back toward the root
after we've replayed and gone active.

mds: use fnode when replaying journal

We weren't actually pulling the fnode from the journal. I'm
surprised anything worked.

This fixes a crash when untaring, restarting mds, and then
rm -r'ing the dir.  Previously the rstat would roll
negative and assert.

debian: gracefully replace lib packages prior to '1' suffix

osd: kill int <-> pg_t conversions

These are messy and asking for trouble.  And a cleaner
coll_t paves the way for real named coll_t's down the
line.

osd: convert ceph_pg union to struct

This simplifies/fixes endian conversions.

msgr: encode sockaddr.ss_family big endian in ceph_entity_addr

The ss_family field is normally host endianness, but we
want to exchange ceph_entity_addr across the wire and store
it on disk.  So, encode ss_family in big endian (to match
the other sockaddr field endianness).

Rev disk and wire protocols to match.

filestore: close btrfs transactions cleanly

Don't just close the fd.  We may add a mount option that makes a messy
transaction close wedge the fs instead of committing partial results.

default pid file /var/run/ceph/$type.$id.pid

Hadoop: Don't use the local pg by default.

Now passes all unit tests!
Changes made to rename and between error codes/exception throwing.

Hadoop: Don't throw IOExceptions on extra calls to close

Hadoop: f5 e3

Hadoop: Behavioral fixes to CephFileSystem

Hadoop: Various changes to CephFaker; not completed.

HadooP: CephFaker now properly sanitizes input filenames.

Hadoop: Update constructor/initialize usage a bit

Simplify CephInputStream so that it actually works

Hadoop: Simplify CephOutputStream so that it actually works.

Hadoop: Reorder a few things for better safety and fix compile bugs

crush: always return a value from crush_bucket_choose

todo

todo

Makefile: fix lib dependencies

libceph and librados should link libcrush.  Users of
libceph|librados need not link libcrush.

makefile: don't link libm and libpthread with crush

debian: fix copyright to avoid lintian check

possible-gpl-code-linked-with-openssl

debian: fix -dbg packages

debian: warn on no args to build script

radosgw: fix man page names, include in package

debian: strip, put debug binaries in usr/lib/debug

rgw: man page for rgw_admin

rgw: radosgw man page continued

radosgw: rename binaries rgw -> radosgw

debian: remove rgw_aclparser from package

It's a unit test

rgw: initial man page

debian: override openssl warning on radosgw

debian: update package descriptions, sections

debian: make lib package versions match SONAMES

Makefile: make all lib versions 1:0:0, fix libcrush

debian: some lintian fixes

Note that I'm moving some library SONAME version backwards!
Otherwise we'd have to rename libceph to libceph1, etc.  And
that's lame.

mount.ceph: only return INET addr when doing lookup

mon: Move full OSD test logic around

Objecter: subscribe to OSDMap updates when paused or full

mon: Fix bug that would make OSDMon over-excited about pushing new maps

mon: Fix an if so that PGMon doesn't send some reads on to leader

mon: Move fullness checks into OSDMonitor where they belong

mon: On every incoming MPGStats, check for a full/near-full OSD and mark map if needed.

uclient: Return ENOSPC if osdmap is marked full

Hadoop: Add buffering to CephIOStreams

Hadoop: Add preliminary TestCeph code. It fails a lot.

Hadoop: Add the CephFaker source.

hadoop: minor cleanup edits

todo

mount: include all A/AAAA records when resolving host name

qa: add dbench

osd: assert apply_transaction success

For now, let's just assert success.

todos

v0.17

debian: don't try to sign packages; it fails anyway

mon: log each client mount

Revert "msgr: be a bit more verbose during shutdown"

This reverts commit 4fe2e6acb9d3613ca041774c1243940d1c8c9c9c.

Conflicts:

src/msg/SimpleMessenger.cc

osd: mix preferred osd into placement seed

This avoids getting the same peer for all 0.0p* pgs, for
example.

Rev osdc protocol.

objecter: call renew_subs when appropriate

Otherwise our sub_want call doesn't nothing until the
next subscription renewal goes out

osd: call renew_subs when appropriate

Otherwise our sub_want calls do nothing useful until the
next subscription renewal goes out.

vstart: build osdmap of correct size

osd: fix pgid parsing

The preferred osd is in decimal, not hex.

monc: cleanup stray sub_want()

mon: semireliable message push from mon to mon clients

Used for OSD scrub, inject args.

qa: add pjd test; change default monhost to cosd0