s3: Differentiate between posix files with colons and actual streams

It is possible for a posix file created locally or over nfs to have a
":" in the name.  Since ":" is a reserved character in windows,
filenames containing a colon must be mangled in a directory listing.
Right now files containing colons will not even be displayed in
directory listings if streams modules are in use.  During the
directory listing the file will be detected as a stream because of the
colon, but the streams module will fail to find the stream since it
doesn't exist.  This fix adds a step to is_ntfs_stream_name that stats
the filename to differentiate between actual streams and files
containing colons.

While this is an improvement, it isn't perfect. Consider the case
where there is a file on disk called "a.txt:s1" and also a file called
"a.txt" that has a stream called "s1".  This patch will always
preference "a.txt:s1" over a.txt's s1 stream.

The real issue is that at the vfs level, the vfs modules have no way
to tell between a demangled name with a colon and an actual stream.  A
more invasive, but better, long-term fix would be to add all paths
that come over the wire into a struct containing metadata about the
path.  This metadata could include a flag to indicate whether the path
came over the wire with a colon ":" (guaranteeing that the client is
requesting a stream). Passing this struct down to the lower levels,
including all path-based vfs calls, would allow the above case to be
handled correctly in all cases.

s3: Add OneFS alternate data streams implementation

s3: General cleanup of the open path in the OneFS vfs module

Move cli_api_pipe() to its only user cli_pipe.c

tevent: Fix build break

Fix tevent_common_context_destructor to remove all events instead of just the first one

Signed-off-by: Bo Yang <boyang@novell.com>
Signed-off-by: Stefan Metzmacher <metze@samba.org>

Don't set child->requests to NULL in parent after fork

Fix a type-punned error

Fix a C++ warning

Minor tidyup of unix account missing code.
Jeremy.

Remove the rpc_srv_register wrapper around rpc_pipe_register_commands

Call rpc_srv_register instead of rpc_pipe_register_commands in eventlog and svcctl

Fake up ndr_table_spoolss

Pass the full ndr_interface_table into the s3 rpcserver when registering

Add derpc_transport_string_by_transport(), apply some const

start rpcclient epmapper

Fix some nonempty blank lines

Simplify find_pipe_fns_by_context slightly

Fix some nonempty blank lines

s3: Remove rendundant op_tuple entry in xattr streams

s3: Fix open path to delete streams depending on the create disposition

The new create disposition test in smbtorture RAW-STREAMS verifies
this fix.

s3: Add delete_all_streams to proto.h

s4 torture: Add new create disposition test to RAW-STREAMS

s3-svcctl: remove last traces of hand-marshalled svcctl code.

Guenther

s3-svcctl: remove old marshalling of svcctl_EnumServicesStatusW.

Guenther

s3-svcctl: build svcctl marshalling helper.

Guenther

s3-svcctl: use pidl for _svcctl_EnumServicesStatusW.

Guenther

s3-net: use rpccli_svcctl_EnumServicesStatusW.

Guenther

s4-smbtorture: print hand-decoded service status array in svcctl torture test.

Guenther

s3/net: Display error message if user does not exist.

net rpc rights grant: Verify if the username can be resolved to a SID and
display a proper error message if it does not. Otherwise users might think
setting privileges worked fine, but in fact it does not.

Karolin

s3: re-run make samba3-idl.

Guenther

svcctl: include hand marshalling helper in idl.

Guenther

svcctl: add ndr_push/pull_ENUM_SERVICE_STATUSW_array helper.

Thanks metze for helping here.

Guenther

s3-svcctl: use pidl defined constants in services implementation.

Guenther

s3: re-run make samba3-idl.

Guenther

svcctl: add SERVICE_TYPE_INTERACTIVE_PROCESS define.

Guenther

s3/smbpasswd: Check if Unix account exists before asking for the password.

Admins shouldn't have to type in the password twice when the passdb account
cannot be created because the Unix account is missing.

Karolin

s4:debug: make setup_logging() a bit more compatible with samba3

In samba3 the 2nd argument is bool interactive.
E.g ndrdump uses true there which used to map to DEBUG_FILE
in samba4, it maps to DEBUG_STDOUT now, which is better.

In the end end samba3 should also use the samba4 version of
setup_logging()

metze

Revert "quote ' inside '...' and make sure shell isn't eating \ by using perl here."

This reverts commit 2a52b059ce44403ff6ced066e0bb23fa6cc66a73.

It breaks the build on ubuntu.

metze

quote ' inside '...' and make sure shell isn't eating \ by using perl here.

Signed-off-by: Stefan Metzmacher <metze@samba.org>

docs: Improve man mount.cifs.

Add hint about specifying the workgroup in the credentials file.
Whitespace cleanup.

This fixes bug #4541.
Patch based on proposed patch from Christian Perrier <bubulle@debian.org>.
Thanks for reporting and providing a patch!

Karolin

fix syntax error in case statement

Signed-off-by: Stefan Metzmacher <metze@samba.org>

s3:smbd: handle incoming smb requests via event handlers

We use a fd event and receive incoming smb requests
when the fd becomes readable. It's not completely
nonblocking yet, but it should behave like the old code.

We use timed events to trigger retries for deferred open calls.

metze

s3:events: debug sys_select() errors

metze

s3:events: install a tevent debug handler that calls DEBUG()

metze

Only do special DN tracking for normal DNs in OpenLDAP backend.

This means trying (again, harder), not to do this for DN+Binary and
DN+String attributes.

Andrew Bartlett

Fix bug #6021 - smbclient du command does not recuse properly
Jeremy.

Now that all policy_handle free_fn's are just TALLOC_FREE, dump free_fn

Use TALLOC for struct lsa_info

Make use of a talloc_destructor for free_printer_entry

Make use of a talloc_destructor for free_eventlog_info()

Make samr_info a talloc context of its own

Simplify init_pipe_handle_list a bit

s3-rpcclient: add eventlog test client.

Guenther

s3-eventlog: minor cosmetics.

Guenther

s3-eventlog: trying to make eventlog_io_q_read_eventlog readable.

Guenther

s3-eventlog: trying to avoid to pass around full ndr structures in rpc_server.

Jerry, please check.

Guenther

Fix race condition in alarm lock processing noticed by Richard Sharpe <realrichardsharpe@gmail.com>.
"It seems to me that if the lock is already held by another process when we
enter this code, there is a race between the timeout and the granting. If
the lock is subsequently granted, the process releasing the lock will signal
the wait variable (or whatever) and our process will be scheduled. However,
if the timeout occurs before we are scheduled, the timeout will be delivered
first.

We will have the lock but will forget we have the lock, and never release
it."
Jeremy.

s3-net: fix type in rpc_service_list_internal(). Sorry...

Guenther

s4-smbtorture: extend test_QueryServiceConfig2W a bit.

Guenther

s4-smbtorture: fix build of svcctl torture test.

Guenther

s3: re-run make samba3-idl.

Guenther

svcctl: use svcctl_ServiceState in some other places.

Guenther

svcctl: use hex range format in IDL.

Guenther

svcctl: add ENUM_SERVICE_STATUSW and ENUM_SERVICE_STATUSA.

Guenther

svcctl: remove redundant SERVICE_STATE_* defines.

Guenther

s3:smbd: fix the build with dmapi support

struct smbd_dmapi_context *dmapi_ctx;
is in globals.c

metze

s4:blackbox: don't remove newlines in the subunit failure output

metze

s4:events: don't trigger \n in debug messages two times

metze

Merge branch 'master' of ssh://git.samba.org/data/git/samba

Attempt to fix the build

Make sure smbtorture4 can find all gensec modules. (Fixes RPC-BINDSAMBA3)

s3-svcctl: use pidl based struct SERVICE_STATUS.

Guenther

s3: re-run make samba3-idl.

Guenther

s3-svcctl: add copyright to svcctl rpc_server.

Guenther

s3-svcctl: remove some more redundant headers.

Guenther

s3-svcctl: move SVC_HANDLE_IS* defines to implementation specific header file.

Guenther

s3-svcctl: remove (now duplicate) defines.

Guenther

svcctl: add svcctl_ServiceStatus and svcctl_ControlsAccepted.

Guenther

s3-svcctl: remove (now duplicate) SVCCTL_STAT* defines.

Guenther

Don't attempt to use GNUTLS >= 2.6, as it is known broken with the socket-tls backend.

Fix ldap.py test on systems that *can* find the record (the search fails here locally).

Print the failed value in the time tests.

Merge branch 'master' of ssh://git.samba.org/data/git/samba

s3:smbd: move all globals and static variables in globals.[ch]

The goal is to move all this variables into a big context structure.

metze

s3:smbd: variables in a main() don't need to be static

metze

s3:smbd: open_sockets_smbd() don't need a static variable arrount atexit()

open_sockets_smbd() is only called once.

metze

s3:smbd: keep dmapi globals in one context struct

metze

s3:smbd: remove stupid static variables for the nfs quota code

metze

s3:smbd: remove pointless static variable in uid.c

We always free the value at the end of the function,
so we don't need a static variable to hold just NULL
for the time the function isn't executed.

metze

s3:smbd: make static const in mangle_hash2.c really static const

const char *foo, means a non-const pointer to
a const char.

const char * const foo, means a const pointer to
a const char.

char * const foo, would mean a const pointer to
a non-const char.

metze

s3:smbd: make const globals in mangle_hash2.c really static const

const char *foo, means a non-const pointer to
a const char.

const char * const foo, means a const pointer to
a const char.

char * const foo, would mean a const pointer to
a non-const char.

metze

s3:smbd: make globals in utmp.c static const

const char *foo, means a non-const pointer to
a const char.

const char * const foo, means a const pointer to
a const char.

char * const foo, would mean a const pointer to
a non-const char.

metze

s3:smbd: it's pointless to have a global magic_char

We call magic_char = lp_magicchar(p) each time it's used.

metze

s3:smbd: remove pointless static variables in chgpasswd.c

metze

s3:smbd: make fake_files[] static const

metze

s3:smbd: make mangle_fns const

metze

Avoid using a utility header for Python replacements included in Samba,
since this will not be shipped with talloc/tdb/tevent/etc.

s3-svcctl: remove old hand marshalling of svcctl_QueryServiceConfig2W.

Guenther

s3-svcctl: use pidl for _svcctl_QueryServiceConfig2W.

Guenther