s4:WAF buildsystem - support out of "source4" directory builds

Bug: https://bugzilla.samba.org/show_bug.cgi?id=4081

With this patch we are able to invoke s4 builds from the outside of the
"source4" directory (but the target remains the "source4/bin" path).

One constraint: all commands: "autogen-waf.sh", "configure", "make" have to be
run from the same directory!
Regarding "make": you have to run it using "make -C <source4 path> [targets]" if
the invoke directory is not "source4" itself.

build: we need this isinstance() check for distcheck

Jelmer, this works around a bug in waf distcheck that will be fixed
soon. We really need the isinstance() check for now.

build: the exceptions here are not useful

they just make the failure hard to spot

build: make the handling of relative paths a bit saner

This should fix a problem that Anatoliy has struck with the PIDL
rules. It also brings us much closer to a working build for a true out
of tree build (ie. with waf configure -b /tmp/build)

s3:winbindd: make "smbcontrol winbindd validate-cache" reliable again

commit 73577205cf81644e7fe853eaf3e6459f7f443096
(s3:winbindd: fix problems with SIGCHLD handling (bug #7317))
broke this.

metze

s4:registry - "patchfile_preg.c" - fix the read operation of the data length on big-endian platforms

s4:registry - "patchfile_preg.c" - use "sizeof(uint32_t)" for some size specifications

Looks nicer.

s4-net: Simplify SamDB connect code.

s4-python: Move set_global_schema to pydsdb.

s4-waf: Add dist target.

s3: Fix a typo

tsocket_bsd: Always use a real length for the sa_socklen, and keep it around

The previous code assumed the OS would happily accept sizeof(struct
sockaddr_storage).  It seems some versions of Solaris do not like
this.

Andrew Bartlett

Revert "socket-wrapper: not all systems have FIONREAD defined"

This reverts commit 710aa773d54509de34404f9992c5058ddfa45f3b.

We rely on FIONREAD in a lot of other parts in the code,
so there's no need to have an ifdef for it in the socket_wrapper code.

On tru64 FIONREAD is defined in <sys/ioctl.h>
and we include <sys/ioctl.h> via "system/network.h".

Tridge: maybe a HAVE_SYS_IOCTL_H was missing at the time you tried
it on tru64?

If we find a platform that doesn't support it,
we need to bail out at configure time or
provide a replacement in libreplace.

metze

Start to plumb smb2 into the oplock system. Calls dummy functions for now.

Jeremy.

s4-smbtorture: minor typo in SetJob test in RPC-SPOOLSS.

Guenther

s3-spoolss: Fix an issue in _spoolss_DeleteForm.

Found by torture test.

Guenther

s3-spoolss: Fix some issues in _spoolss_AddForm.

Found by torture test.

Guenther

s3-spoolss: Fix potential memleak in _spoolss_AddForm and _spoolss_SetForm.

Guenther

build: allow the waf build to work with python 3.0 and 3.1

Python 3.x is a bit fussier about print statements and indentation.

Signed-off-by: Andrew Tridgell <tridge@samba.org>

LDB:sample_module - reintroduce accidentally removed "ldb_msg_add_fmt" statement

Obviously this is really needed by the "samba4.ldb" test.

s4-waf: Fix 'waf dist' app name.

Move configure_check_unused script to root scriptdir, as it is useful
for both s3 and s4.

s4: Remove unused pkg-config replacement in perl.

update-external: Support updating dnspython.

s3: Fix bug 7327 -- Build fails while building without kerberos

libsmb/clikrb5.c has a dummy implementation for the non-kerberos case

selftest: Display minutes and hours for duration.

LDB:python bindings - also empty LDB message elements should have a python representation

Bug found by ekacnet (see technical mailing list).

s4:registry - "regf backend" - fix it up regarding REG_DWORD/REG_DWORD_BIG_ENDIAN_VALUES

This is needed to make it platform independently work (also on big endian
platforms as little endian).

Also add a size check before storing a DWORD.

s4:winbind/wb_server.c - fix indentation

Test using (-1) for tid and sessionid in compound related requests.

Jeremy.

On compound requests, MS-SMB2 says clients MAY use 0xFFFFFFFF for compound tid and 0xFFFFFFFFFFFFFFFF for compound sessionid values. Cope with this.

Jeremy.

Don't forget to initialize *p_creds_requested.

Jeremy.

s4-samdb: Allow skipping global schema.

s4-provision: Proper handling of exceptions, use SamDB class but skip global schema.

s4-python: Move samdb_ntds_objectGUID to pydsdb.

urgent_replication: Use standard comments rather than docstrings.

s3-spoolss: Added a winreg_getform1 function.

Signed-off-by: Günther Deschner <gd@samba.org>

s3-spoolss: Added a winreg_setform1 function.

Signed-off-by: Günther Deschner <gd@samba.org>

s3-spoolss: Added a winreg_deleteform1 function.

Signed-off-by: Günther Deschner <gd@samba.org>

s3-spoolss: Added a winreg_addform1 function.

Signed-off-by: Günther Deschner <gd@samba.org>

s3-spoolss: Added a winreg_enumforms1 function.

Signed-off-by: Günther Deschner <gd@samba.org>

s3-spoolss: Fixed winreg_printer_openkey to be used in a more generic way.

Signed-off-by: Günther Deschner <gd@samba.org>

s3-spoolss: Added a delete_printer_key function using the winreg pipe.

Signed-off-by: Günther Deschner <gd@samba.org>

s3-spoolss: Added a enum_printer_key function using the winreg pipe.

Signed-off-by: Günther Deschner <gd@samba.org>

s3-spoolss: Added a delete_printer_dataex function using the winreg pipe.

Signed-off-by: Günther Deschner <gd@samba.org>

s3-spoolss: Added a enum_printer_dataex function using the winreg pipe.

Signed-off-by: Günther Deschner <gd@samba.org>

s3-spoolss: Added a get_printer_dataex function using the winreg pipe.

Signed-off-by: Günther Deschner <gd@samba.org>

s3-spoolss: Added a set_printer_dataex function using the winreg pipe.

Signed-off-by: Günther Deschner <gd@samba.org>

s3-spoolss: Added a function to open a regkey using the winreg pipe.

Signed-off-by: Günther Deschner <gd@samba.org>

s4:WHATSNEW4.txt - further updates and corrections

Some are inspired by ekacnet.

s4:pyregistry.c - fix indentation

s4:provision - add a comment which explains why "paths.dns_keytab" is stored without path reference

s4-smbtorture: test for invalid form flags in RPC-SPOOLSS.

Guenther

s3-rpcclient: allow to define server_unc in cmd_srvsvc_srv_query_info().

Guenther

s4-smbtorture: test all types and also use a wellknown builtin form name in RPC-SPOOLSS.

Guenther

s3: add comment about what the FSCTL_QUERY_ALLOCATED_RANGES currently does

s4-smbtorture: merge badname spoolss openprinter tests.

Guenther

s4-smbtorture: avoid passing down a full test_spoolss_context to directory
spoolss tests when not used.

Guenther

Ensure we total up the correct number of creds requested in a compound request.

Parameterize "smb2 max read", "smb2 max write", "smb2 max trans".

Set to 64k by default.

Jeremy.

Support 'make test TESTS=foo' again.

s4-python: Use standard infrastructure for finding included testtools, subunit and iso8601.

s4-smbtorture: more work on forms tests in RPC-SPOOLSS.

Guenther

s4:param/secrets.c - add some "char *" casts

Also this quiets some warnings.

s4:net tool - add a "discard_const_p" to suppress the "PySys_SetArgv" warning

s4:torture - remove unused variables

s4:auth/ntlm/auth_developer.c - "fixed_challenge_get_challenge" - fix the assignment of the challenge

This is a string buffer and not a DATA_BLOB.

LDB:sample_module.c - remove code parts which generate warnings

Btw: The use of the "ldb_msg_add_fmt" operation directly on the request message
object is strongly discouraged. Better is to make a shallow copy of this message
and attach it to a new child request which is handled by the following modules.

s4-python: Fix compilation of samba._ldb.

fix a segfault in the notify subsystem

When the notify_array cannot be loaded correctly,
do not keep the half-baked parsing results in the global variable.

This can lead to segfaults next time notify_load is entered and
the seqnum has not changed. This has been seen in a case
where mixed smbd versions were running in a CTDB cluster
(versions with and w/o commit c216d1e6 that changed the
notify_entry structure).
There will be missed notifications until all smbds are at the
same software level, but this should be acceptable and is better
than crashing and interrupting client operations.

This fix cleans up the notify_array, removes the unparseable data
from the TDB and returns a fresh notify_array that can be worked
with.

The NDR_PRINT_DEBUG had to be moved to only be called when the
parsing succeeded, it was seen to cause additional segfaults.

The status variable is intentionally left to NT_STATUS_OK to not
make callers abort and report errors to the clients and make them
disconnect.

Signed-off-by: Christian Ambach <christian.ambach@de.ibm.com>

s4-python: Move set_session_info to PySambaLdb.

s4-python: Move register_samba_handlers to PySambaLdb.

s4-python: Move ldb_set_utf8_casefold to pyldb-samba.

s4-python: Move set_opaque_integer to pyldb.

Move glue.set_credentials hack to samba.Ldb.

Add C-based Samba-specific subclass of Ldb.

s4-build: remove any 'makefile' that may have been left by the waf build

this allows ./autogen.sh to be used to switch back to the old build
system after trying the waf build

build: use a target_in_list() function for more flexible builtin control

build: cope with binaries with subdir prefixes (for s3 waf build)

s4-waf: don't need TOUCH_FILE() any more

build: run distcheck in testwaf.sh

s4-waf: add subdir argument to distcheck for source4

build: update version of waf to add subdir argument to distcheck

s4-waf: replace TOUCH_FILE() with normal install rules

this allows it to work with 'waf uninstall'

build: simpler symlink_bin and symlink_lib methods

s4-waf: fixed waf distcheck for our standalone libs and s4

s4-waf: added simple 'waf test' support for tdb, talloc and ldb

s4-waf: added python_dsdb from merge with master

build: fixed LOAD_ENVIRONMENT for out of tree builds

s4-waf: autogen-waf.sh for the standalone library builds

s4-waf: new autogen-waf.sh

this one will work with the tdb, talloc, etc directories

s4-waf: use a common pattern for finding buildtools and libs

s4-waf: move to a universal method of recursing into subdirs

This works with both standalone lib builds and bundled builds

s4-waf: fixed finding of buildtools and srcdir

ldb-waf: fixed buildtools path

s4-waf: avoid having to run waf configure before waf dist

This should be useful for building tarballs from a clean checkout

build: nicer error msg when git ls-files fails

s4-waf: allow standalone tarball build of libraries

s4-waf: added 'waf dist' to our standalone libs as well

s4-waf: added 'waf dist' to build the tarball