mds: avoid including caps in readdir items if snaprealm differs

Since the reply snaprealm starts at the _dir_ inode, we want to
exclude caps for any nested items if the realm differs.  Otherwise
the client is screwed...

mds: no snaprealm for stray dir is needed

initscript: don't fail if $btrfs_path already mounted

osd: separate CEPH_OSD_OP_* and FLAGS_* namespaces

Ops and op flags are separate namespaces; fix the naming.

todo

kclient: print reassert_version in /debug/ceph/.../osdc

If it's there, it means a sync write was acked but not yet
committed.

buffer: check posix_memalign result code

kclient: clean osd read requests after receiving reply

initscripts: make do_cmd properly bail when command fails

And print what command it was that failed.

conf: exit if -c specified and conf file not found

initscript: fix .conf push to other nodes

todo

mds: creation, subtree map tweaks

Don't include mydir if it doesn't exist just yet, etc.

kclient: fix default timeout values

kclient: add configurable caps_delay option

kclient: less verbose

mkcephfs: fix monmap/osdmap copying

mds: fix fs creation, replay

Include mydir in subtree map, and journal it on mkfs.  Invent
root inode during replay as needed (it will get rejoined).

kclient: locally open file based on what MDS thinks we want, not what we still want

As long as we have our interest in the caps still registered with
the MDS, we can do a local open.  Checking what we currently still
want is only helpful if the same file still is open by another
process or something.  Now, we can do a local open on a close +
wait + reopen, as long as we haven't done a cap release yet.

kclient: properly maintain mds_wanted value

Keep track of what wanted caps we have registered with the mds.

mds: put pending (not added) caps in reply caps

Otherwise the client thinks it had fewer caps than it has.

kclient: do not retain unEXPIREABLE caps if !wanted

kclient: schedule check_caps if unwanted, unEXPIREABLE caps are issued by the mds

todos

kclient: debugfs cleanups

common: reorder config option parsing vs defaults for daemonization

mds: fix xlock authpinning

Remove extra auth_pin call.. we pin when going from LOCK
to LOCK_XLOCK.

kclient: adjust makefile, patch series for sysfs->debugfs

monclient: fix error message to suggest correct arg (-c not -C)

makefile: add new files

kclient: remove sysfs stuff

kclient: put all info stuff in debugfs

todo

crun: remove bashisms

initscript: make crun/valgrind init arguments override conf

osd: only set mtime if non-zero

This lets you do things like lock or post-truncate without
changing the mtime.

objecter: provide mtime for writes

kclient: set mtime on writes

Since we don't track per-page dirty timestamps or anything like
that, we just use the inode mtime for writeback, and the current
time for sync writes.

debian: which gcc/g++, not fixed at 4.1

osd: set mtime based on client-provided timestamp

Ideally, this should be the time the data was dirtied (i.e. when
the write logically occured, as opposed to when it was written
back).

mds: rejoin dirfragtreelock too

We need to rejoin _all_ scatterlocks.

fakefuse: fix common_init call

mds: fix xlock behavior

We need to insert a gather from lock->xlock and xlockdone->xlock.
So, we add a PREXLOCK state, so that we go lock->prexlock->xlock.
Adjust auth_pin rules accordingly (it is unfortunately a bit wonky,
since the PREXLOCK gathered-to state is still deemed 'unstable').

mds: properly check xlocker caps

mds: set xlocks done _before_ setting trace dist

This allows caps on xlocked data to be exposed to the client.

mds: allow caps to be selectively issued to xlockers

This mirrors the exposure of projected updates to the clients that
make them: we also give them an RDCACHE cap on that metadata.

kclient: ceph_open caps check cleanup

Make debug output more helpful.  Clean up var names.

mds: restructure mds root directory

Create .ceph/mds%d/{stray/,journal}.  Restructure mds creation,
startup, and shutdown procedures to create, import (and populate),
and export the per-mds directory.

mds: make scatterlock flush on mix <-> lock transitions, not just mix <-> sync

Among other things, this fixes up mds (>0) shutdown.

auth: fix uninitialized variable

mds: add MClientMountAck

config: clean up common_init a bit

initscripts: add default mount options

auth: advanced auth config options

kclient: remove renew_from from lease renew message

Keep it in the ceph_dentry_info instead (as is done with the cap
renewals).  Much cleaner.

protocol: add mount_ack to client mount protocol

cstring: don't fall over on null initialization

(like std::string does)

debian: description updates

Revert "mds: make CAP_FILE_RD expireable"

This reverts commit 05752278d46fe5776d54d3b58f8c8a88e67a2179.

Caused dbench performance regression.. everything got all slow!

ceph: ceph_client_ticket

debian: improve description a bit

mds: be sure to issue new caps _without revocation_ from encode_indoestat

Only explicit GRANT caps messages (via issue_caps) can revoke caps.
Thus, be sure to only _add_ bits to _pending.  Otherwise our
revocation logic (in issue_caps) gets confused, expecting to see
a revocation ack when a lock state changes.

mds: fix get_caps_liked()

We just want to exclude FILE_RD on directories.  ANY_RD includes
RDCACHE.. der.

mkcephfs: create osd_data if it dne

todo

auth: fix case when mount sections are not defined

conf: remove some junk

auth: added basic client ip authorization

mds: do not issue non-EXPIREABLE|wanted caps

The kclient doesn't currently reliably release unwanted caps, so
make sure we restrict it to EXPIREABLE rdcaps, or wanted bits.

Avoid special-casing extra caps issued to client.

kclient: always hit r_safe_callback, even if no callback

ceph_osdc_sync might be waiting on the request.

debian: fix changelog/version

osd: fix osdmap timestamp updates; rename

mds: add mdsmap modified stamp

mds: make scatter_nudge a bit more robust

We may have a dirty lock that is already LOCK.  That may not be
what we want in the first place :/, but to ensure we make progress,
we should SYNC the lock.  If it doesn't re-LOCK on it's own, the
next nudge should do it.

mds: add lookup mds op name

todo

mds: remember scatter requests

We want to make sure a REQSCATTER is remembered the next time we
reconsider the lock state, even if it arrives when the lock is
unstable (say, during EXCL->LOCK or some other transition that
won't affect the replica state and elicit a new REQSCATTER).

mds: don't automatically bump dir locks to loner if it's a subtree root

If it's a subtree root, we don't want to automatically bump the
filelock to loner.  That way the subtree auth can modify subtree
root dir without bouncing excl caps back and forth with the client.

mds: fix ->mix lock transition

Bcast to replicas if we have nothing to gather in file_mixed().

kclient: drop unused r_expected_cap

We should embed the first cap in the inode.  And preallocate
more aggressively for all ops?

mds: show laggy status in map summary

initscripts: remove bash-isms so they work with dash

(Ubuntu uses dash for /bin/sh.)

config: fix warnings

config.cc: In function 'int conf_read_key(const char*, const char*, opt_type_t, void*, void*)':
config.cc:893: warning: passing NULL to non-pointer argument 4 of 'int ConfFile::read(const char*, const char*, bool*, bool)'
config.cc:896: warning: passing NULL to non-pointer argument 4 of 'int ConfFile::read(const char*, const char*, int*, int)'
config.cc:899: warning: passing NULL to non-pointer argument 4 of 'int ConfFile::read(const char*, const char*, float*, float)'
config.cc:902: warning: passing NULL to non-pointer argument 4 of 'int ConfFile::read(const char*, const char*, double*, double)'

todo

mds: make CAP_FILE_RD expireable

kclient: handle cap renew message

kclient: renew old rdcaps when we use them

kclient: choose cap op in check_caps, no __send_cap

config: allow arithmetic in default conf values in config.cc

kclient: adjust rdcaps status in cap grant

kclient: shift some work out of __send_cap back to ceph_check_caps

mds: clean up rdcap list handling a bit, show rdcap status in debug

mds: process cap RENEW

kclient: factor out directory content lease/cap check

kclient: fix trim_session_rdcaps

It wasn't breaking out of the loop.

kclient: less noisy

mds: reverse rename arg order when migrating or reintegrating strays

Rename order was reverse back in
440a84fd876e1edfb71ee7d778248e1807f8c9c2.

kclient: use LOOKUP op for lookup

mds: create explicit LOOKUP operation

Functionally equivalent to LSTAT.

kclient: merge and simplify ceph_lookup, ceph_do_lookup

Ceph_lookup was the only remaining caller.