raise the debug level for a common message

when a client disconnects we expect this to happen, so don't print an
error each time

Allow selection of the samba4 process model for 'make test'

To choose the process model, set the environment variable
SAMBA_PROCESS_MODEL to the desired model. This will allow us to enable
the standard process model for some machines in the build farm without
enabling it for all of them. I don't want to just enable it
universally as I am concerned with total memory using during some of
the tests.

print server log on stderr as well as to log file

I think we are missing some important messages from the server during
'make test' because we don't show the log file contents during
runs. This patch uses tee to put the log messages to stderr so we can
see any server messages associated with the test that caused them.

s4:provision Allow provision-backend to not run slapd for 'make test'

As the version of OpenLDAP required for Samba4 is fairly new, we don't
want to make it a requirement before this python code is run in 'make
test'.

As such, skip over the actual starting of slapd, but check the rest
runs alright (which still validates syntax and other modules).

Andrew Bartlett

s4:selftest Don't start the slapd for the provision, only for the run

The provision-backend script now starts slapd for us

Andrew Bartlett

s4:selftest Make OpenLDAP guess it's own modules from now on

In the releases of OpenLDAP we require (2.4.17) it can guess this much
itself, so no need for us to do it.

Andrew Bartlett

s4:provision Make the --ol-slapd paramter take the full path to slapd

s4:provision Assume the OpenLDAP backend can find it's own modules

s4:provision Rework and further automate setup of OpenLDAP backend

heres the summary of all changes/extensions:

- Andrew Bartlett's patch to generate indext
- Howard Chu's idea to use nosync on the DB included, but made optional

- slaptest-path is not needed any more (slapd -Ttest is used instead)
and is therefore removed. slapd-path is now recommended when
openldap-backend is chosen.
its also used for olc-conversion

- slapd-detection is now always done by ldapsearch (ldb module),
looking anonymous for objectClass: OpenLDAProotDSE via our ldapi_uri.

- if ldapsearch was not successfull, (no slapd listening on our socket)
slapd is
started via special generated slapdcommand_prov  (ldapi_uri only)

- slapd-"provision-process" startup is done via pythons subprocess.

- the slapd-provision-pid is stored under paths.ldapdir/slapd_provision_pid.

- after provision-backend is finished:
--- slapd.pid is compared with our stored slapd_provision_pid.
if the are unique, slapd.pid will be read out, and the
slapd "provison"-process will be shut down.
--- proper slapd-shutdown is verified again with ldb-search -> ldapi_uri
-> rootDSE.
--- if the pids are different or one of the pid-files is missing, slapd
will not be shut down,
instead an error message is displayed to locate slapd manually
--- extended help-messages (relevant to slapd) are always displayed,
e.g. the commandline with which slapd has to be started when everythings
finished
(slapd-commandline is stored under paths.ldapdir/slapd_command_file.txt))

- upgraded the content of the mini-howto (howto-ol-backend-s4.txt)

s3:smbcacls: forbid change of debug level from config file

Michael

s3: refomat definitions of some generic access rights for better readability

Michael

selftest: configure "ncalrpc dir" for the client

Some torture tests will need this soon.

metze

selftest: fix typo lock => lockdir

metze

s3:winbindd: raise the timeout for lsa_Lookup*() calls from 10 to 35 seconds.

metze

s4:torture Add test for the NTP signd server

This is used by at patch to the NTP project to supply authenticated
time as required by MS-SNTP. (ie, to keep windows clients in time sync
in the domain)

Andrew Bartlett

i18n: Update s3 net German translation.

s3 net: i18n support for net utility functions

s3 net: i18n support for net usershare

s3 net: i18n support for net user

s3 net: i18n support for net time

s3 net: i18n support for net status

s3 net: i18n support for net share

s3 net: i18n support for net sam

s3 net: i18n support for net rpc shell

s3 net: i18n support for net rpc service

s3 net: i18n support for net rpc samsync

Ensure the fsp->fsp_name stat_ex struct is always
up to date after the open.
Jeremy.

Refactor the use of create_time and change time to go
through functions. Will aid in making us pass RAW-SETFILEINFO.
Jeremy.

s3 net: i18n support for net rpc rights

s3 net: i18n support net rpc registry

s3 net: i18n support for net rpc printer

s3 net: i18n support for net rpc join

s3-spoolss: remove device mode defines from nt_printing.h.

Guenther

s3: re-run make samba3-idl.

Guenther

spoolss: fill in more details of the spoolss_DeviceMode.

Guenther

Implement db_rbt_traverse

Make wbinfo also print the members when querying a group

libreplace: set SONAMEFLAG to "-Wl,-soname=" on QNX

s3:smbd: convert '\\' into '/' in SMB2 Create

metze

s3:smbd: rename conn => sconn for smbd_server_connection structs

This should avoid confusion between smbd_server_connection
and connection_struct variables.

metze

Merge branch 'master' of ssh://git.samba.org/data/git/samba

Pass absolute file paths to Inkscape when transforming .svg files

Some recent versions of Inkscape (0.47 or around) have bug when export file name
is treated as relative against the directory of original .svg if it wasn't specified
as an absolute path. Fix it by always using absolute paths during conversion.

Move the checks for null timestamps down below the VFS_NTIMES
layer (as it's done in onefs). This simplifies greatly the
code in smb_set_file_time() w.r.t. changenotify messages.
Jeremy.

Correctly send out notify messages for timestamp changes.
"change time" has no notify message, so don't send anything
out when we change it. Use FILE_NOTIFY_CHANGE_CREATION correctly
when changing the create time.
Jeremy.

s4: Add a new script for setting password properties for a domain in a easier way

s4:libcli/smb2: move SMB2_GETINFO_* flags into smb2_constants.h

metze

s4:libcli/smb2: remove unused and redundant SMB2 security flags

metze

s4:libcli: move SMB2 Find constants to smb2_constants.h

metze

s4:libcli/raw: we don't need to include "smb.h" explicit

metze

s4:libcli/raw: also include smb2_constants.h into interfaces.h

metze

s3:smbd: split the dir entry marshalling into smbd_marshall_dir_entry()

So that we can reuse it for SMB2 Find.

metze

s3:smbd: move dptr globals into struct smbd_server_connection

metze

s3:smbd: remove dirptr and dirpath from connection_struct

They're both only used in the context of a function,
so we can make them stack variables.

metze

s3:smbd: implement get_lanman2_dir_entry() on top of smbd_dirptr_get_entry()

metze

s3:smbd: let get_dir_entry() use smbd_dirptr_get_entry()

metze

s3:smbd: add generic smbd_dirptr_get_entry()

metze

s3:smbd: conn_free_internal() can be static now

metze

s3:smbd: add a smbd_server_connection pointer to connection_struct

This can be NULL for faked connection structs used in the rpc server
or printing code.

metze

Fix some nonempty blank lines

pidl: parse idl 'pipe' typedefs, but print out a not supported message for now

metze

pidl: fix formatting in expr.yp

metze

pidl: fix formatting in idl.yp

metze

librpc: fix callers after epmapper.idl changes

metze

librpc: rerun 'make idl' after epmapper.idl changes

metze

epmapper.idl: avoid usage of 'pipe', this is a reserved word in IDL

We now use 'named_pipe' instead.

metze

s3:smbd: don't ignore check_descend in get_dir_entry()

metze

s3-wkssvcs: fix check for BUILTIN\Administrators membership in wkssvc_Netr{Join,Unjoin}Domain2.

Guenther

s3 net: i18n support for net rpc audit

s3 net: net i18n in it's own module

Revert "s3: Update i18n files"

This reverts commit 57b5269038624b70e117025af9b977e0addcdc8e,
6e044a22cf232798efbd40a2b55fd9556483d403 and
c9803ee26ad1b2f92f2ce7653ce16ac84d0b3eb6.

The correct location for net .po files is in locale/net/

s3 net: i18n support for net rpc

s3 net: i18n support for net registry

s3 net: i18n support for net rap

fixed another ambiguous talloc call

During the creation of the 3 RPC pipes in winbind we try to steal the
RPC binding structure to be a child of the pipe once the pipe is
established. This fails with a talloc warning as the rpc connection
code already holds a reference to the binding.

The fix is to use talloc_reparent() instead.

ensure that child tasks die when the parent dies

Previously we relied on process groups and SIGTERM to ensure that
child tasks died in the standard process model when the parent task
died. This doesn't work when the server is run in interactive mode, as
in that case we don't call become_daemon() and don't get a separate
process group.

The fix is to have a pipe held open by the parent server process, and
inherited by child tasks. If the parent exits then the write side of
the pipe is implicitly closed, which causes an event in the child
tasks that causes them to exit

prime the sam ldb schema in the parent samba process

While testing the use of the standard process model with 'make test' I
found that testing was much slower (by several times) with the
standard model than with the single model. The primary problem was
that each SMB connection would open a new sam ldb context, and all of
those would reload the full AD schema.

The fix is to pre-open the SAM during server startup, before any child
processes are forked. This sets up the global schema context which is
inherited by all connections.

The standard model is still slower at make test than the single model,
but not by nearly as much. I am working on further reducing the gap.

use talloc with the global schema consistently

Before this change, the first opener of the sam ldb context would
become the owner of the global schema, then the autofree context got a
reference to the schema. Any subsequent opens of the sam ldb also got
a reference. This meant that the talloc hierarchy was inconsistent
between the first sam ldb open and subsequent opens. With this change
the autofree context becomes the owner of the global schema, and all
ldb contexts get a reference.

fixed several places that unnecessarily take a reference to the event context

These references were triggering the ambiguous talloc_free errors from
the recent talloc changes when the server is run using the 'standard'
process model instead of the 'single' process model. I am aiming to
move the build farm to use the 'standard' process model soon, as part
of an effort to make our test environment better match the real
deployment of Samba4.

The references are not needed as the way that the event context is
used is as the 'top parent', so when the event context is freed then
all of the structures that were taking a reference to the event
context were actually freed as well, thus making the references
redundent.

s3: add a test to test libsmbclient

Signed-off-by: Bo Yang <boyang@samba.org>

s3: Fix nss info substitution

Signed-off-by: Bo Yang <boyang@samba.org>

make sure we never look past the end of either string in ldb_comparison_fold()

This fixes a bug in the samba3sam test with the python libraries as
noticed by abartlet

s4:ldb Make error message in rnd_name more useful

Merge branch 'master' of ssh://git.samba.org/data/git/samba into master-devel

s4:setup Remove extra newlines that break OpenLDAP backend

s3: Fix a bug in renames of directories

Recently code was added to match windows semantics of denying the
rename of a directory if there are open files underneath it.  This
does partly match windows semantics, but it turns out the rename
should be allowed if the open file handle is for the directory being
renamed, or for a stream on the directory being renamed.  This patch
refines the check to better follow these rename semantics.

s4 torture: Extend the RAW-RENAME test to more fully test directory renames.

The existing test was only covering files opened underneath the
directory that was being renamed.  It is not uncommon for windows
clients to actually hold a read-only handle to a directory open across
the rename, which it turns out doesn't return NT_STATUS_ACCESS_DENIED.
Additionally, holding a handle open to a stream on the directory is
also allowed.

Remove a const warning.
Jeremy.

Fix bug #5714 - NetBSD, ENODATA undefined, at least some releases.
Jeremy.

Put SMB_INFO_STANDARD back into setfileinfo, but do it right
this time :-).
Jeremy.

Add define guards around otherwise unused variable.
Jeremy.

s3-ldap: Fix Bug #5879. Update LDAP schema for Netscape DS 5.

Patch from TAKEDA Yasuma <yasuma@osstech.co.jp>.

Guenther

Unable to browse DFS when using kerberos

Signed-off-by: Bo Yang <boyang@samba.org>

s4: Simplify two lines in the "samdb.py" file (cosmetic)

s4:enableaccount script: Remove a redundant line

s3/smbldap: Fix typo in debug message.

Karolin

There is one signedness issue in tdb which prevents traverses of TDB records
over the 2G offset on systems which support 64 bit file offsets.  This fixes
that case.

On systems with 32 bit offsets, expansion and fcntl locking on these records
will fail anyway.  SAMBA already does '#define _FILE_OFFSET_BITS 64' in
config.h (on my 32-bit x86 Linux system at least) to get 64 bit file offsets.

Signed-off-by: Rusty Russell <rusty@rustcorp.com.au>

Revert "deliberately break the build"

This reverts commit 57da47c1bd76157a6a403154551645c16ad64a75.

The build emails do work :-)

deliberately break the build

I want to make sure that the build breakage emails are now working
correctly

s4:heimdal: import lorikeet-heimdal-200908052208 (commit 370a73a74199a5a55188340906e15fd795f67a74)

This removes some of the portability changes made to code under
heimdal/

If these are still required, then we will re-add them with code under
heimdal_build/ (so that we can simply 'drop in' future heimdal
releases).

Andrew Bartlett

set uidwrappersrcdir

this is needed for the combined build