osd: make new cluster_messenger, client_messenger pointers.

Don't remove old messenger, just alias it to client_messenger.

osdmap: make room in incremental for separate cluster/client OSD addrs.

Merge branch 'testing' into unstable

assert: only include acconfig.h ifdef __CEPH__

Signed-off-by: Sage Weil <sage@newdream.net>

librados.hpp fix

[ The following text is in the "UTF-8" character set. ]
    [ Your display is set for the "iso-8859-1" character set.  ]
    [ Some characters may be displayed incorrectly. ]

Hi,

I just realized librados.hpp could compile only if "using namespace
std;" is declared before "#include <rados/librados.hpp>", because
"vector" used without std namespace, and I think it's wrong.
It can fix following patch.

syuu

Signed-off-by: Sage Weil <sage@newdream.net>

mon: fix signed/unsigned compile warning

osd: fix map sharing with old heartbeat peers

The addr is in old_inst, since it's an old peer.  Fixes a crash like

osd/OSD.cc: In function 'void OSD::_share_map_outgoing(const entity_inst_t&)':
osd/OSD.cc:1791: FAILED assert(inst.name.is_osd())
 1: (OSD::update_heartbeat_peers()+0x1d3f) [0x4da66f]
 2: (OSD::activate_map(ObjectStore::Transaction&, std::list<Context*, std::allocator<Context*> >&)+0x8ee) [0x4db61e]
 3: (OSD::handle_osd_map(MOSDMap*)+0x233a) [0x4e506a]
 4: (OSD::_dispatch(Message*)+0x230) [0x4ef400]
 5: (OSD::ms_dispatch(Message*)+0x39) [0x4efe39]
 6: (SimpleMessenger::dispatch_entry()+0x749) [0x461fa9]
 7: (SimpleMessenger::DispatchThread::entry()+0x1c) [0x458f6c]
 8: (Thread::_entry_func(void*)+0xa) [0x46cf1a]
 9: (()+0x69ca) [0x7f978d6fb9ca]
 10: (clone()+0x6d) [0x7f978c91b6cd]

introduced by 9bfb8da9f925642bca46528a999124cd8b28ba2a.

Signed-off-by: Sage Weil <sage@newdream.net>

mds: fix cap encoding skipping when snaprealm differs

We were avoiding adding a new cap, but _any_ issue is problematic, not just
adds (which we can't really be sure about anyway due to races with client
cap release).

Signed-off-by: Sage Weil <sage@newdream.net>

osdmap: show flags

Signed-off-by: Sage Weil <sage@newdream.net>

Merge branch 'locks' into unstable

msgr: Add CEPH_FEATURE_FLOCK to default features set, remove extraneous data from protocol

ceph_fs: use __le64 instead of __u64 for over-the-wire data

mds: new low-level debug output, and turn down previous debugs

debian: add ceph-client-tools dep to ceph

Signed-off-by: Thomas Mueller <thomas@chaschperli.ch>
Signed-off-by: Sage Weil <sage@newdream.net>

debian: move utils rbd,rados,csyn to ceph-client-tools

Signed-off-by: Thomas Mueller <thomas@chaschperli.ch>
Signed-off-by: Sage Weil <sage@newdream.net>

debian: move mount.ceph to ceph-client-tools

Signed-off-by: Thomas Mueller <thomas@chaschperli.ch>
Signed-off-by: Sage Weil <sage@newdream.net>

Merge branch 'testing' into unstable

debian: move fuse-utils dep to ceph-fuse

Reported-by: Thomas Mueller <thomas@chaschperli.ch>
Signed-off-by: Sage Weil <sage@newdream.net>

cclass: fix .so loading file

The only thing I've found, is that the *.so files are included in the -devel
rpm. This leads to the fact that the 'find' in cclass doesn't return any
files. I'd suggest the attached change in the script.

Christian

Signed-off-by: Sage Weil <sage@newdream.net>

osd: send latest osdmap when we stop sending heartbeats to peer

Otherwise, they may still expect them, and may mark us down.

osd: avoid most of handle_osd_map if there are no new maps in message

We don't want to take the time to flush things to disk and shut down all
the worker threads if there is nothing new in the osdmap update (as is
usually the case).

Signed-off-by: Sage Weil <sage@newdream.net>

osd: send heartbeat request from update_heartbeat_peers

This keeps our from_stamps in a consistent state, and sends the hb request
sooner rather than later.

Signed-off-by: Sage Weil <sage@newdream.net>

mon: drop redundant pg_temp mappings

mon: make backward-compat mon id's start at '0', not 'a'

Signed-off-by: Sage Weil <sage@newdream.net>

osd: add asserts when indexing pg log by reqid

This should help catch callers that submit dup entries with the same
request id, causing other problems down the line.

mds: recover filelocks properly on client reconnect

mds: debug output and some comments.

mds: locking. Compare iterator to right list!

mds: locking. Fix waiting lock count map deletion

mds: drop distributed locks on waiting filelock messages, so they don't block

mds: better printing on lock messages

mds: replace accidnetal __u64 with uint64_t

mds: Determine if there are file locks based on flockbl size, not dirty cap bit

mds: need to size values read from a bufferlist

mds: handle file locking in MClientCaps on a reconnect.

mds: locking. remove ceph_filelock* lists and replace with iter lists
This allows for more efficient deletion of elements.

mds: Fix ceph_lock_state_t to use uint64_t

mds: locks. Fix possible naughty dereference, and fix existence checks

mds: locking. Keep trap of neighbors and coalesce them

mds: locking. remove zero-valued client held/waiting lock counts from the map.

In the unlikely event that you have a very large cluster doing a lot of
locking of different files amongst the whole cluster, this will keep
memory use down.

mds: Move lock print function; add debugging; fix fencepost errors.

ceph_fs: CEPH_LOCK_UNLOCK should have its own bit, for safety

mds: use the right size mask for file cap bits

ceph_fs: Add cap bits for advisory file locks

mds: Remove unnecessary if check.

We already know that head_in exists, or we would have entered the previous
if-block and returned from the function.

mds: Now actually requeues blocked locks whenever locks are removed.

mds: fcntl locks can efficiently remove all locks from one client.

mds: fcntl. Keep track of how many locks/waiting locks each client has.

mds: implement look_for_lock, for fcntl F_GETLK-style things

mds: ceph_filelock and filelock_change need to be explicitly sized

mds: cleanup

mds: Implement file lock message handling.

mds: add distributed lock support for fcntl/flock support

mds: fcntl. add proper encoding to ceph_filelock and ceph_lock_state_t

mds: fnctl. finish remove_locks so it'll activate whichever locks it can.

This is lazy but it should work.

mds: fnctl. add get_waiting_overlaps function; fix get_overlapped locks
so that it won't do bad things if there aren't any.

mds: fnctl. implement half of remove_lock.

Still need to handle all the waiting_locks and set them if proper.

mds: fnctl. implement adjust_locks method, with helpers

mds: fcntl. implement add_lock function
Still need to write some of the helpers

mds: fcntl. add skeleton [add, remove]_lock functions.
Implement helper functions to be used later.

mds: add messenging support for advisory file locking

msg: rename MClientReply::dir_bl to extra_bl. Fix uses

mds: conditionally include flock metadata in MClientReconnect

mds: move flockbl into each reconnect record

Simpler for the client side.

mds: keep old reconnect struct

mds: put flock blob len in ceph_mds_cap_reconnect struct

encode realms the old way

mds: conditionally include flock metadata in MClientCaps

mds: remove size, mtime, atime from cap reconnect

mds: make mislinked dentry during replay workaround tolerate directories, too

This should probably all go away when the original bug is fixed!

move logrotate conf out of debian/ to fix ceph.spec

auth: fix cast

rgw: Support a loglevel of 0

cauthtool: correct man page sample of minimal fs client caps

rgw: fix setting acls on the bucket

move mkcephfs to /sbin

debian: more cleanups

https://code.launchpad.net/~clint-fewbar/review-new-branches/ceph-new-pkg/+merge/31303

auth: define AES iv in common header

Signed-off-by: Sage Weil <sage@newdream.net>

add files to .gitignore

add generated files to gitignore.

Signed-off-by: Thomas Mueller <thomas@chaschperli.ch>
Signed-off-by: Sage Weil <sage@newdream.net>

redirect stdout to /dev/null when reloading

the reload command prints to stdout. example:

# service ceph reload
=== mon.0 ===
Reloading Ceph mon0 on hoe001...kill -1 22197...done
=== osd.0 ===
Reloading Ceph osd0 on hoe001...kill -1 22263...done

"properly" configured systems will send the output by mail to
the administrator - this is not desired in case of successfull
reloading.

Signed-off-by: Thomas Mueller <thomas@chaschperli.ch>
Signed-off-by: Sage Weil <sage@newdream.net>

monclient: use default port if not specified via -m

Reported-by: Thomas Mueller <thomas@chaschperli.ch>
Signed-off-by: Sage Weil <sage@newdream.net>

mon: we support MONNAMES feature

Merge branch 'unstable' into mon-remove

Conflicts:
src/cmon.cc
src/include/ceph_fs.h
src/mon/MonClient.cc
src/mon/Monitor.cc

mon: fix signed/unsigned compile warning

debian: add update_pbuilder.sh script; don't do it during build

bump unstable version to v0.22~rc

v0.21

cclass.in: fix libdir definition

debian/ceph.logrotate: enhance postrotate for "service" util

[ The following text is in the "UTF-8" character set. ]
    [ Your display is set for the "iso-8859-1" character set.  ]
    [ Some characters may be displayed incorrectly. ]

invoke-rc.d is debian specific.

run "service ceph reload" if invoke-rc.d fails.

Signed-off-by: Sage Weil <sage@newdream.net>

mon: trim old logm states

Signed-off-by: Sage Weil <sage@newdream.net>

debian: ceph-cfuse: move ceph from Recommends to Suggests

on a standalone fuse client ceph serverside is not needed. if it's
"Recommended" the default behaviour is to install it too. Move it to "Suggests"
that it's not installed by default if one installs just ceph-fuse.

from debian policy:
Suggests:
This is used to declare that one package may be more useful with one or more
others. Using this field tells the packaging system and the user that the listed
packages are related to this one and can perhaps enhance its usefulness, but
that installing this one without them is perfectly reasonable.

- Thomas

Signed-off-by: Sage Weil <sage@newdream.net>

ceph.spec.in: create /var/log/ceph/stat dir

the logrotate config expects a var/log/ceph/stat dir - create it.

Signed-off-by: Sage Weil <sage@newdream.net>

ceph.spec.in: rbdtool -> rbd

Reported-by: markn1

debian: drop gcc, g++ build deps

release: drop wildcard

debian: remove gcc/g++ build-depends

(as per Clint Byrum)

debian: add trailing newline

debian: fix debhelper depend version

dh_lintian was introduced in 6.0.7

debian: update to latest standards version

debian: fix weak-library-dev-dependency

E: ceph source: weak-library-dev-dependency librados1-dev on librados1
E: ceph source: weak-library-dev-dependency libceph1-dev on libceph1

check_version: don't globber .git_version if we're not in a git repo

namely, when you extract the release tarball!

filestore: add option to disable use of btrfs clone range ioctl

filestore: fix fallback clone_range implementation on short files

If we read less data from the source, don't loop forever... return -ERANGE
instead.

release: put .git_version in release tarball