tsocket: optimize tdgram_bsd a lot

The desire is to do as less syscalls during the
tdgram_sendto_send/recv() and tdgram_recvfrom_send/recv()
operations.

1. we first try the sendto()/recvfrom() syscall and
   only use a fd event if we got EAGAIN.

2. we cache the fd event and only change it's flags
   if really needed.

For the highload case we do almost no epoll_ctl() and epoll_wait()/select()
syscalls anymore. This speeds up the LDAP-BENCH-CLDAP test
by more than 20%. (With a modified version of this test
which let the server skip any ldb calls and just return success
I'm getting about 8000 requests per second, while I'm getting
just about 6000 requests per second without optimization)

metze

tsocket: add tdgram_sendto_queue_send/recv()

metze

tsocket: split out a smaller tdgram_context abstraction

The idea is to have a tdgram and a tstream abstraction
which only provide tevent_req based io functions.

metze

s3-spoolss: implement _spoolss_GetPrinterDriver2 level 101 (Bug #5140).

Guenther

s4 torture: Addition to RAW-BENCH-LOCK to take a configurable number of locks before starting the test

This can be useful for benchmarking as well as stress testing.

s/NT_STATUS_WIN7_INVALID_RANGE/NT_STATUS_INVALID_LOCK_RANGE/g

Allow pdbedit to change a user rid/sid. Based on a fix from Alexander Zagrebin <alexz@visp.ru>.
Jeremy.

Merge branch 'master' of ssh://jra@git.samba.org/data/git/samba

s3 onefs: Quiet a log message about oplocks being requested on streams

s4 torture: Remove unused parameter

s4 torture: Add new streams oplock test

s3:net conf: don't store share names as lower case, but as given.

Michael

Merge branch 'master' of ssh://jra@git.samba.org/data/git/samba

s3-auth: rename static smb_create_user(). Sorry...

Guenther

s3-libnet-samsync: return appropriate error code in fetch_sam_entry().

Guenther

s3-libnet-samsync: use smb_create_user().

Guenther

s3-passdb: add smb_create_user().

Guenther

s3-libnet-samsync: some pure cosmetics.

Guenther

s3-libnet-samsync: use parent talloc context for libnet_samsync_passdb.

Guenther

Merge branch 'master' of ssh://jra@git.samba.org/data/git/samba

s4:torture/smb2: Add torture tests for lease breaks, durable opens.

s4:smb2: Add lease break support for SMB2.1

Add the structures and marshalling for the lease break variants of the
oplock break / oplock break ack messages.

s3-libnet: only call libnet_dssync_process() startup and shutdown callbacks when filled in.

Guenther

lib/util: fallback to any id in idr_get_new_random()

metze

libcli/cldap: fix memory/resource leak

We need to remove the message id, when a search request is finished

metze

Print an error if trying a merged build without a system kerberos lib

Signed-off-by: Stefan Metzmacher <metze@samba.org>

s3: fix the fix for bug #6195 - dont let smbd child processes panic

This patch makes sure the original and temporary TDBs are closed
_before_ the rename. Originally, the open TDB was renamed, and so
the name passdb.tdb.tmp stayed around in the db context. Hence
upon client connect, the smbd children died because reinit_after_fork()
calling tdb_reopen_all() would try to reopen passdb.tdb.tmp which
existed no longer...

Michael

s3:build: add targets to show how libraries will be built / linked

showlibtalloc, showlibtdb, ... and one overall showlibs target.

Michael

s3:build: don't build the static libs unconditionally

Michael

s3:build: add LIBSMBCLIENT_LIBS and LIBSMBSHAREMODES_LIBS to Makefile

for completeness

Michael

s3:build: no need to set LIBFOO_STATIC to the object collection any more

now that the @LIBFOO_STATIC@ entries have vanished from the object lists.
Just use the static library.

Michael

s3:build: rename WINBIND_LIBS -> LIBWBCLIENT_LIBS for unification

Michael

s3:build: unify linking of libwbclient with a @LIBWBCLIENT_TARGET@

just like for the libs configured with SMB_LIBRARY().
This makes @LIBWBCLIENT_STATIC@ vanish from the object collections.

Michael

s3:build: first cut at fixing linking of shared/static libs internally

This is based on a patch from the debian packages
by Steve Langasek <vorlon@debian.org>.

It removes the static libs from the object collections.
For those libs that are set up with SMB_LIBRARY().

Michael

Tidy up some convert_string_internal error cases, found by Andrew Bartlett.
Jeremy.

s3 onefs: Add missing newlines to debug statements in the onefs module

s3 onefs: Async failures are resulting in SMB_ASSERT->smb_panic while running many of the LOCK torture tests.

Return true from the onefs cancel function if we've errored, which can happen
when the CBRL domain is configured to only give out 1 lock. :)

tdb: Remove unused variable

Fix an uninitialized variable valgrind error

Signed-off-by: Stefan Metzmacher <metze@samba.org>

tsocket: try to fix the build on solaris FIONREAD was missing

metze

s3:build: fix build of pam_winbind.so with static linking

Static talloc libs were missing since conversion to talloc.

Michael

s3:build: add a SHOWCFLAGS target for debugging how CFLAGS are assebled

Michael

s3:build: line-wrap assignment of FLAGS for readability

Michael

change ldb version number (as ldb_module structure has changed)

use the prepare_commit op in the partition code

This makes multi-partition ldb's much safer

added support for a prepare_commit() op in ldb modules

This op will be used by the partition module to give us good
transaction semantics across the 4 partitions that sam.ldb uses.

up the version to 1.1.4 with the addition of
tdb_transaction_prepare_commit()

Merge branch 'master' of ssh://git.samba.org/data/git/samba

added basic testing of tdb_transaction_prepare_commit() in tdbtorture

Add tdb_transaction_prepare_commit()

Using tdb_transaction_prepare_commit() gives us 2-phase commits. This
allows us to safely commit across multiple tdb databases at once, with
reasonable transaction semantics

Signed-off-by: tridge@samba.org

Ensure files starting with multiple dots are hidden
if "hide dot files" is set. Thanks to Barry Kelly <bkelly.ie@gmail.com>
for pointing this one out.
Jeremy.

s3/cups: add documentation for new cups encrypt parameter

s3/cups: add encryption support

Fix a debug msg typo

tsocket: more s/sun/un to make the build on solaris happy

metze

s4:torture/smb2: Add torture tests for leases.

s4:smb2: Add rudimentary SMB2.1 lease support to libcli

Add the structures, constants, and marshalling for SMB2.1 leases.

Fix the problem of 3.0.x passdb databases being version
3 but using a different hash calculation than 3.2.x passwd
databases (also version 3). Introduces a minor version
number.
Jeremy.

s3: added per-client statistics to onefs perfcount module

* we now track, uid, remote ip, and local ip per CIFS operation
* removed perfcount_set_client() from perfcount interface as it's
  unecessary

Ensure parameter types match format string

[Bug 6228] SMBC_open_ctx failure due to path resolve failure doesn't set errno

Fixed.

It turns out there were a number of places where cli_resolve_path() was called
and the error path upon that function failing did not set errno. There were a
couple of places the failure handling code did set errno to ENOENT, so I made
them all consistent, although I think better errno choices for this condition
exist, e.g.  EHOSTUNREACH.

Derrell

Fix external np read after conversion to tevent_req

Fix bug #6195 - Migrating from 3.0.x to 3.3.x can fail to update passdb.tdb correctly. For the clustering case.
Clustered setups should have only ever used
the unsigned version of TDB_DATA in the
first place so they can't be in this mess :-).
Just do the normal upgrade in the clustered case.
Jeremy.

s3: ifdef sendfile code that's only used in other ifdef'ed sendfile code

This fixes a "defined but not used" compile warning.

s4:torture/smb2: fix compiler warnings and bugs

metze

s4:torture/smb2: fix the build

We move prototypes of _PUBLIC_ functions into /dev/null,
as we want public function to have handwritten prototypes.

see proto_header_template in build/make/templates.mk...

metze

s4:build: make it possible to pass down CTAGS_OPTIONS or ETAGS_OPTIONS

metze

s3:build: make it possible to pass down CTAGS_OPTIONS or ETAGS_OPTIONS

metze

tsocket: try to fix the build on solaris systems

It seems that 'sun' is somewhere defined and we can
use it as name for variables or struct/union members.

metze

Fix the build of nfsv4_acls.c

.. after adding smb_iconv_convenience to ndr_size_security_descriptor()

Add durable open / oplock interaction test. Rather than give it a chance to disconnect, Win7 will break a batch oplock immediately on contention.

Reorganize old persistent_handles test into durable_open.c, turn it into a suite instead of a solo test (in anticipation of more tests).

Merge branch 'master' of ssh://jra@git.samba.org/data/git/samba

Merge branch 'master' of ssh://git.samba.org/data/git/samba

added a --wspp option

Adding --wspp to possibleInferiors.py forces it to use the WSPP
documented algorithm, which doesn't match windows behaviour

Try and fix the build farm RAW-STREAMS errors. Ordering of
modules shouldn't matter, so as vfs_streams_depot doesn't
implement get/setxattrs then call into the full VFS stack
at the top.
Jeremy

Revert 757d403dfff023fdb122a155f6a05d33daa76410 - module
order shouldn't matter & I have a more correct fix for this.
Jeremy.

This should fix the build farm RAW-STREAMS failure. streams_depot.so
depends on xattrs, and xattr_tdb was pushed *first* in the stack...
Jeremy.

Fix bug #6224 - nmbd waits 5 minutes at startup before checking if it needs to run elections
Fix logic bug that causes nmbd to wait 5 minutes before
looking for a master browser. This one is *old* :-). Thanks
for Simo for bugging me on this.
Jeremy.

configure: Use m4 defines for minimum library versions rather than shell
variables, so the values rather than the variable names show up in
configure output.

Merge branch 'copyright' of /home/jelmer/samba4

Merge branch 'displaysec' of /home/jelmer/samba4

Merge branch 'master' of git://git.samba.org/samba

Merge branch 'master' of ssh://git.samba.org/data/git/samba into displaysec

s4:heimdal_build: provide heimdal_version and heimdal_long_version symbols

metze

s4:heimdal_build: define HAVE_STRLCPY, HAVE_STRLCAT, HAVE_STRCASECMP and HAVE_MKSTEMP

metze

s4:kdc: use krb5_data_free()

metze

s4:auth/credentials: use krb5_data_free()

metze

s4:auth/credentials: include gssapi/gssapi_krb5.h

metze

Fix a talloc/malloc screwup in file_lines_pload

Another bug due to careless merge to /lib :-(((

Volker

error-codes: add WERR_DS_DRA_SOURCE_DISABLED.

Guenther

Fix a scary "fill_share_mode_lock failed" message

To me "fill_share_mode_lock failed" is a "can't happen" alert. There is
however a perfectly valid case in get_file_infos() when the file is not open.

Change the corresponding debug message to level 10 and explain more.

Merge branch 'master' of ssh://git.samba.org/data/git/samba

fixed possibleinferiors.py so it matches windows behaviour

This test code builds the possibleInferiors for every class in the
schema on a target machine, and compares it to the servers
possibleInferiors attribute.

The MS-ADTS spec describes how to calculate possibleInferiors for a
object, but it seems to have some bugs. The spec says that we need to
use AUXCLASSES, and it does not mention the use of the SUBCLASS
tree. In trying to match windows behaviour, I found that I needed to
ignore the AUXCLASSES and build a SUBCLASSES tree.

s3-libnetapi: fix creds in libnetapi_open_ipc_connection().

Jeremy, this broke with 8dd1faaa2992851f6852ba7ea4498445af5faadd. Not sure if
other users broke as well with that change.

Guenther

s3:rpc_parse: remove unused init_unistr().

Guenther

s3-net: Fix Bug #6102. NetQueryDisplayInformation could return wrong information.

Guenther

Avahi disables a timer by tv=NULL in avahi_timeout_update(), do not crash

Ensure we never enter VFS_CREATE without having initialized
sbuf as invalid (if not already read via stat()). Still trying
to find the build farm RAW-STREAM errors and it's happening
in a openX call....
Jeremy.

Revert "s3/swat: don't link against zlib"

This reverts commit 8532faffd08bbbcfaac60fd866fa5ab255913d4a.

swat needs zlib through ../librpc/ndr/ndr_compression.c, function
ndr_pull_compression_mszip_chunk(). This fails to link at least
on our build farm bsd boxes.

Michael