config: Error out when you can't parse an addr from the config file.

Also, fix up a few other addr parsing cases to break properly!

osd: use the client_messenger for the logclient.

osdmap: remove unused versions of get_[cluster_]inst

OSD: use get_cluster_inst instead of get_inst when checking other OSD instances

osd: when checking OSD identities via require_same_or_newer_map, use cluster_addr

osd: add Mutex and flag to cover execution of handle_map_lock.
Fixes a crash when the cluster and client messenger both dispatch an
OSDMap and their handling gets intertwined.

osd: be more careful with cluster/client messenger use.

osd: register the OSD on cluster_messenger if needed

config: correctly notify when OPT_ADDR config options are found.

config: add OPT_ADDR type, move "public_addr"/"cluster_addr" processing there
Necessary side effect: move public_addr/cluster_addr into g_conf.

messages: add cluster_addr to MOSDBoot, use it in OSD and OSDMonitor

cosd: move messenger existence checks to where they're useful

cosd: create separate cluster/client messengers if separate addresses are provided.

msgr: set up bind and Accepter::bind to take in addresses and bind to them

config: rename g_my_addr to g_public_addr, add g_cluster_addr

osdmap: move osd_cluster_addr decoding, and make sure that size matches osd_addr

osdmap: Make sure osd_cluster_addr matches osd_addr size on decode

osd: remove messenger pointer, fix calls to it in PG and ReplicatedPG

osd: use cluster/client_messenger as appropriate.

Modify send_incremental_map to choose based on the type of the entity.

osdmap: add osd_cluster_addr to full map
Include it in lookups and add get_cluster_inst et al to match get_inst et al

osd: make new cluster_messenger, client_messenger pointers.

Don't remove old messenger, just alias it to client_messenger.

osdmap: make room in incremental for separate cluster/client OSD addrs.

Merge branch 'testing' into unstable

assert: only include acconfig.h ifdef __CEPH__

Signed-off-by: Sage Weil <sage@newdream.net>

librados.hpp fix

[ The following text is in the "UTF-8" character set. ]
    [ Your display is set for the "iso-8859-1" character set.  ]
    [ Some characters may be displayed incorrectly. ]

Hi,

I just realized librados.hpp could compile only if "using namespace
std;" is declared before "#include <rados/librados.hpp>", because
"vector" used without std namespace, and I think it's wrong.
It can fix following patch.

syuu

Signed-off-by: Sage Weil <sage@newdream.net>

mon: fix signed/unsigned compile warning

osd: fix map sharing with old heartbeat peers

The addr is in old_inst, since it's an old peer.  Fixes a crash like

osd/OSD.cc: In function 'void OSD::_share_map_outgoing(const entity_inst_t&)':
osd/OSD.cc:1791: FAILED assert(inst.name.is_osd())
 1: (OSD::update_heartbeat_peers()+0x1d3f) [0x4da66f]
 2: (OSD::activate_map(ObjectStore::Transaction&, std::list<Context*, std::allocator<Context*> >&)+0x8ee) [0x4db61e]
 3: (OSD::handle_osd_map(MOSDMap*)+0x233a) [0x4e506a]
 4: (OSD::_dispatch(Message*)+0x230) [0x4ef400]
 5: (OSD::ms_dispatch(Message*)+0x39) [0x4efe39]
 6: (SimpleMessenger::dispatch_entry()+0x749) [0x461fa9]
 7: (SimpleMessenger::DispatchThread::entry()+0x1c) [0x458f6c]
 8: (Thread::_entry_func(void*)+0xa) [0x46cf1a]
 9: (()+0x69ca) [0x7f978d6fb9ca]
 10: (clone()+0x6d) [0x7f978c91b6cd]

introduced by 9bfb8da9f925642bca46528a999124cd8b28ba2a.

Signed-off-by: Sage Weil <sage@newdream.net>

mds: fix cap encoding skipping when snaprealm differs

We were avoiding adding a new cap, but _any_ issue is problematic, not just
adds (which we can't really be sure about anyway due to races with client
cap release).

Signed-off-by: Sage Weil <sage@newdream.net>

osdmap: show flags

Signed-off-by: Sage Weil <sage@newdream.net>

Merge branch 'locks' into unstable

msgr: Add CEPH_FEATURE_FLOCK to default features set, remove extraneous data from protocol

ceph_fs: use __le64 instead of __u64 for over-the-wire data

mds: new low-level debug output, and turn down previous debugs

debian: add ceph-client-tools dep to ceph

Signed-off-by: Thomas Mueller <thomas@chaschperli.ch>
Signed-off-by: Sage Weil <sage@newdream.net>

debian: move utils rbd,rados,csyn to ceph-client-tools

Signed-off-by: Thomas Mueller <thomas@chaschperli.ch>
Signed-off-by: Sage Weil <sage@newdream.net>

debian: move mount.ceph to ceph-client-tools

Signed-off-by: Thomas Mueller <thomas@chaschperli.ch>
Signed-off-by: Sage Weil <sage@newdream.net>

Merge branch 'testing' into unstable

debian: move fuse-utils dep to ceph-fuse

Reported-by: Thomas Mueller <thomas@chaschperli.ch>
Signed-off-by: Sage Weil <sage@newdream.net>

cclass: fix .so loading file

The only thing I've found, is that the *.so files are included in the -devel
rpm. This leads to the fact that the 'find' in cclass doesn't return any
files. I'd suggest the attached change in the script.

Christian

Signed-off-by: Sage Weil <sage@newdream.net>

osd: send latest osdmap when we stop sending heartbeats to peer

Otherwise, they may still expect them, and may mark us down.

osd: avoid most of handle_osd_map if there are no new maps in message

We don't want to take the time to flush things to disk and shut down all
the worker threads if there is nothing new in the osdmap update (as is
usually the case).

Signed-off-by: Sage Weil <sage@newdream.net>

osd: send heartbeat request from update_heartbeat_peers

This keeps our from_stamps in a consistent state, and sends the hb request
sooner rather than later.

Signed-off-by: Sage Weil <sage@newdream.net>

mon: drop redundant pg_temp mappings

mon: make backward-compat mon id's start at '0', not 'a'

Signed-off-by: Sage Weil <sage@newdream.net>

osd: add asserts when indexing pg log by reqid

This should help catch callers that submit dup entries with the same
request id, causing other problems down the line.

mds: recover filelocks properly on client reconnect

mds: debug output and some comments.

mds: locking. Compare iterator to right list!

mds: locking. Fix waiting lock count map deletion

mds: drop distributed locks on waiting filelock messages, so they don't block

mds: better printing on lock messages

mds: replace accidnetal __u64 with uint64_t

mds: Determine if there are file locks based on flockbl size, not dirty cap bit

mds: need to size values read from a bufferlist

mds: handle file locking in MClientCaps on a reconnect.

mds: locking. remove ceph_filelock* lists and replace with iter lists
This allows for more efficient deletion of elements.

mds: Fix ceph_lock_state_t to use uint64_t

mds: locks. Fix possible naughty dereference, and fix existence checks

mds: locking. Keep trap of neighbors and coalesce them

mds: locking. remove zero-valued client held/waiting lock counts from the map.

In the unlikely event that you have a very large cluster doing a lot of
locking of different files amongst the whole cluster, this will keep
memory use down.

mds: Move lock print function; add debugging; fix fencepost errors.

ceph_fs: CEPH_LOCK_UNLOCK should have its own bit, for safety

mds: use the right size mask for file cap bits

ceph_fs: Add cap bits for advisory file locks

mds: Remove unnecessary if check.

We already know that head_in exists, or we would have entered the previous
if-block and returned from the function.

mds: Now actually requeues blocked locks whenever locks are removed.

mds: fcntl locks can efficiently remove all locks from one client.

mds: fcntl. Keep track of how many locks/waiting locks each client has.

mds: implement look_for_lock, for fcntl F_GETLK-style things

mds: ceph_filelock and filelock_change need to be explicitly sized

mds: cleanup

mds: Implement file lock message handling.

mds: add distributed lock support for fcntl/flock support

mds: fcntl. add proper encoding to ceph_filelock and ceph_lock_state_t

mds: fnctl. finish remove_locks so it'll activate whichever locks it can.

This is lazy but it should work.

mds: fnctl. add get_waiting_overlaps function; fix get_overlapped locks
so that it won't do bad things if there aren't any.

mds: fnctl. implement half of remove_lock.

Still need to handle all the waiting_locks and set them if proper.

mds: fnctl. implement adjust_locks method, with helpers

mds: fcntl. implement add_lock function
Still need to write some of the helpers

mds: fcntl. add skeleton [add, remove]_lock functions.
Implement helper functions to be used later.

mds: add messenging support for advisory file locking

msg: rename MClientReply::dir_bl to extra_bl. Fix uses

mds: conditionally include flock metadata in MClientReconnect

mds: move flockbl into each reconnect record

Simpler for the client side.

mds: keep old reconnect struct

mds: put flock blob len in ceph_mds_cap_reconnect struct

encode realms the old way

mds: conditionally include flock metadata in MClientCaps

mds: remove size, mtime, atime from cap reconnect

mds: make mislinked dentry during replay workaround tolerate directories, too

This should probably all go away when the original bug is fixed!

move logrotate conf out of debian/ to fix ceph.spec

auth: fix cast

rgw: Support a loglevel of 0

cauthtool: correct man page sample of minimal fs client caps

rgw: fix setting acls on the bucket

move mkcephfs to /sbin

debian: more cleanups

https://code.launchpad.net/~clint-fewbar/review-new-branches/ceph-new-pkg/+merge/31303

auth: define AES iv in common header

Signed-off-by: Sage Weil <sage@newdream.net>

add files to .gitignore

add generated files to gitignore.

Signed-off-by: Thomas Mueller <thomas@chaschperli.ch>
Signed-off-by: Sage Weil <sage@newdream.net>

redirect stdout to /dev/null when reloading

the reload command prints to stdout. example:

# service ceph reload
=== mon.0 ===
Reloading Ceph mon0 on hoe001...kill -1 22197...done
=== osd.0 ===
Reloading Ceph osd0 on hoe001...kill -1 22263...done

"properly" configured systems will send the output by mail to
the administrator - this is not desired in case of successfull
reloading.

Signed-off-by: Thomas Mueller <thomas@chaschperli.ch>
Signed-off-by: Sage Weil <sage@newdream.net>

monclient: use default port if not specified via -m

Reported-by: Thomas Mueller <thomas@chaschperli.ch>
Signed-off-by: Sage Weil <sage@newdream.net>

mon: we support MONNAMES feature

Merge branch 'unstable' into mon-remove

Conflicts:
src/cmon.cc
src/include/ceph_fs.h
src/mon/MonClient.cc
src/mon/Monitor.cc

mon: fix signed/unsigned compile warning