NET-BECOME-DC: always try to build ejs and python code

We let getenv("PROVISION_PYTHON") decide what we want
at runtime.

metze

torture: the libnet torture test depend on python

metze

configure: define HAVE_WORKING_PYTHON

metze

Merge branch 'v4-0-test' of ssh://git.samba.org/data/git/samba into v4-0-test

python: Give precedence to Samba's syspath over the already set system one.

Merge branch 'v4-0-test' of ssh://git.samba.org/data/git/samba into v4-0-trivial

Conflicts:

source/scripting/python/samba/provision.py

python/provision: Reload secrets when necessary, fix unix names in mappings.

Pair programmed with Andrew.

pidl/Samba4::Header: fix typedefs of unions and structs without elements

metze

configure.ac: we should use AC_CONFIG_FILES() in order to use AC_OUTPUT only once

metze

configure.ac: we should only create ldb.pc when use the internal ldb

metze

repl_meta_data: add some TODOs to replmd_modify_originating()

metze

added latency reporting

this is in seconds

Tidy up the last regresesions on the python smbscript, from my work
with Jelmer today.

The only remaining issue is that for the build farm, we will need to
manually specify the users and groups from the NSS_WRAPPPER, as python
isn't compiled with this.

Andrew Bartlett

more useful output

added a offline file torture test BASE-OFFLINE

python: Fix representation of UUIDs as strings in zone files rather than binary blobs, fix escaping of LDAP URL's in PHP LDAP admin configuration.

Pair-programmed with Andrew, but git doesn't appear to support multiple --author arguments. :-(

ldb/python: Add bindings for schema functions.

python/provision: Create private dir if it didn't exist yet.

python: Add test for secretsdb_become_dc

python: fix tests for check_all_substituted.

Merge branch 'v4-0-test' of ssh://git.samba.org/data/git/samba into v4-0-trivial

python/provision: Reconcile code partitions-only provisioning and generic provisioning, some other minor refactoring of the provisioning.

Pair-programmed by Andrew and me using obby :-)

python: Make SamDB.set_ntds_invocation_id take a string.

Fix netlogon rpc-server build.

Guenther

Add IDL for netr_LogonGetTrustRid.

Guenther

Rename samr_*AccessMask bitfields to start with SAMR_.

Guenther

Revert "Add pidl --samba3-libnetapi option."

This reverts commit fe299e0336fcff780ef69a6b4f56cd1e0d0c50a8.

python: Add function to look for unsubsituted variables.

python: Add bindings for SamDB.set_invocation_id().

Merge branch 'v4-0-test' of ssh://git.samba.org/data/git/samba into v4-0-trivial

Add pidl --samba3-libnetapi option.

Guenther

pidl: get rid of stupid ';' char to terminate bitmap defines

metze

pidl/Samba4::Header: we don't need to check if (defined($enum->{ELEMENTS})) twice

metze

netlogon.idl: add some MSV1_0_ values from samba3 and use a bitmap32

metze

netlogon.idl: make use of bitmap samr_GroupAttrs

metze

netlogon.idl: remove unused netr_GroupsMembership structure

We have samr_RidWithAttribute and use that in all cases.

metze

Ensure we set subobj.BACKEND_MOD for the 'partitions only' case.

Andrew Bartlett

Make the repl_meta_data module the default for domain controllers.

Andrew Bartlett

Use the repl_meta_data module by default.

This means that, except when we back onto LDAP, when it will be
replaced with the mapping backend, we will keep this codepath tested.

Andrew Bartlett

Kill another sub that the modules will handle for us.

Remove useless subs from the ejs provision

The less things we manually place into the templates, the easier the
conversion to python will be.

Andrew Bartlett

Python: add some docstrings.

python: Support --no-pass.

python: Add bindings for cli_credentials_set_cmdline_callbacks().

Default to creating anonymous credentials.

python: Add convenience function for getting command line loadparm context
and default to using system smb.conf.

Add bindings for lp_load_default().

Get more information from ldb when reporting a failed replication.

Andrew Bartlett

Fix DRSUAPI replication test - NET-API-BECOME-DC.

The main change here is to work with the current module stack,
replacing only the objectGUID module, rather than a number of modules.

However, two changes were key:
 - Fixing a typo search_req->handle -> change_req->handle
 - Allowing an error of NO_SUCH_OBJECT - it is quite valid
   for the object not to exist when being replicated in.

Other small changes were required to the ejs provision to match
changes in that code.

Andrew Bartlett

Fix segfaults in codepaths only tested by the NET-API-BECOME-DC test.

(I presume this has resulted from the global variable elimination)

Perhaps the iconv handle argument to ndr_push_struct needs to be
marked as 'not NULL' or similar?

Andrew Bartlett

Merge branch 'v4-0-test' of git://git.samba.org/samba into 4-0-local

Added PFIF notice to Samba 4.0 tree

Make ranged results tests in ldap.js easier to debug.

This adds some extra information to the failure message, to chase down
which test is failing.

Andrew Bartlett

ranged_results: fix use of uninitialised variable (end)

This matches the range parsing in the search and callback - end was
uninitilaised, causing occasional failures in make test.

Andrew Bartlett

build: Remove support for DESCRIPTION setting that is now unused.

build: remove support for automatically building .pc files.

dcerpc_samr: Use manually written .pc file.

param: Use manually written .pc file.

gensec: Use manually written .pc file.

torture: Use manually written .pc file.

dcerpc: Use manually written .pc files for dcerpc and ndr.

registry: Use manually written .pc file.

ldb/talloc/tdb: Use manually written pc file.

build: Allow manually written pkg-config files.

tdb: Add URL in pc file.

ldb: Fix typo.

ldb: Increase version number to make it easier to create new Debian snapshots.

python: Avoid duplicate copies of some objects in different packages.

libreplace: getpwent_r/getgrent_r on IRIX are similar to solaris but use size_t

metze
(cherry picked from commit 2f460915111066d79f5dc9b4ae4d003918d06852)

Merge branch 'v4-0-test' of git://git.samba.org/samba into 4-0-local

Be sure to pass iconv handle down to compression subcontexts (fixes
segfaults in NET-API-BECOME-DC)

Andrew Bartlett

build: Don't build heimdal as library.

python: Fix init functions.

build: Demote a bunch of libraries to subsystems. This makes packaging easier and should also make it easier
to migrate to a new build system.

python: Reenable modules for libcli_nbt and libcli_smb.

ldb: Fix building python modules against system-provided ldb.

build: Allow overriding CFLAGS for python packages.

Add an exception for S3

Doing this correctly would involve a create_file call for qpathinfo

build: Fix handling of external pkg-config dependencies when generating pkg-config files.

howto: Update instructions for git, and use ReST formatting.

pidl: Add --version argument.

Remove default 'showInAdvancedViewOnly' values.

This means we only show and set the values when they are not the
values the schema and objectclass module would impose.

Andrew Bartlett

Only set showOnlyInAdvancedView: TRUE when adding default values.

False is the default, so only set this when the schema requires the
hiding behaviour.

Andrew Bartlett

Don't set 'name' in the LDIF, this is handled by the rdn_name module.

Andrew Bartlett

Merge commit 'origin/v4-0-test' into 4-0-local

Add showInAdvancedViewOnly to every new object

Unless already set, the default value for this comes from the
defaultHidingValue in the schema.

Andrew Bartlett

merged changes from v3-2-test

merged tdb changes from ctdb

registry: Use correct return values.

registry: Avoid mapping registry return codes: return the right value in the first place.

When Windows attempts to create a new key, it looks for an available key name
starting with "New Key #1" and iterating up to "New Key #99" before giving up.
ldb_open_key() calls reg_path_to_ldb() to build the appropriate dn from the key
name.  reg_path_to_ldb() was not catching the error returned by
ldb_dn_add_base_fmt() due to the unescaped '#' character, causing the returned
dn to be that of the parent key, not the potential new key.  Additionally,
Windows expects a return value of WERR_BADFILE when a key does not exist, but
WERR_NOT_FOUND was being returned instead.  Correcting the building of the dn
and the providing the expected return value allows new key creation to succeed.

When attempting to delete a key, Windows passes the complete path to the key,
not just the name of the child key to be deleted.  Using reg_path_to_ldb() to
build the correct dn allows key deletion to succeed.

registry: Improve error codes and update tests.

Rather than map the error returned by the registry to the correct error,
return the correct error in the first place.

Also deal with the fact that the right error code is now returned in a
couple of places.

When Windows initially creates a new value, the value name is "New Value #1".
The '#' character was causing problems, as it was not being escaped for the dn,
but the failure returned by ldb_dn_add_child_fmt() was not being caught.  This
was causing the new value to be added on the parent key, not the current key.
When attempting to delete the new value (now on the parent key) the same
escaping error was returned by ldb_dn_add_child_fmt(), causing the delete to
delete the key and not the value.

When attempting to rename a value, Windows first tries to ensure the new name
does not already exist.  When a value does not exist, Windows expects a return
value of WERR_BADFILE, but WERR_NOT_FOUND was being returned instead.
Providing the WERR_BADFILE that Windows expects allows values to be renamed.

registry: Properly check return values from ldb_*() functions.

There were a few cases left that attempted to detect errors from ldb_*()
function calls using "(ret < 0)".  As all LDB_* error codes are greater than
zero, there was no chance any errors would be detected.  Changed all such tests
to use "(ret != LDB_SUCCESS)".

registry: Check for more specific LDB return codes, handle changing existing values better.

Don't manually specify instanceID in the template files.

The instanceid module creates this automaticlly, so we don't need this
any more.

Andrew Bartlett

Use syncrepl on all OpenLDAP databases (creates contextCSN attribute)

This module needs to be loaded on each database, not just the main
partition.  We use it to create the usn for the entries.

Andrew Bartlett

Search for memberOf when clients ask for a wildcard against OpenLDAP

The memberOf module in OpenLDAP make this attribute operational, so we
need to add it here or clients won't get it when using *.

Andrew Bartlett

Remove --ldap-base from the python provision script

(This is a merge from the ejs script)

Andrew Bartlett