s3 OneFS: Change ACLs to do a stat-only open before get/set_security_descriptor

This ensures that getting/stting a security descriptor does not
contend an oplock.  The correct access checks will be still be done in
the kernel on the get/set rather than the open.

s3 OneFS: Add kernel oplocks implementation

A few functions in oplocks_onefs.c need to be accessed from the onefs
vfs module.  It would be ideal if oplocks were implemented at the vfs
layer, but since they aren't yet, a new header is added to
source3/include to make these functions available to the onefs vfs
module.  oplocks_onefs.o doesn't need to be linked into the onefs vfs
module explicitly, since it is already linked into smbd by default.

s3 oplocks: Remove oplocks before handling delete on close semantics

Unlinking a file while still holding an oplock can cause problems with
kernel oplocks.  This simply releases the oplock before actually
unlinking the file.

s3 oplocks: Add capabilites flags field to the kernel_oplocks struct

Here is a short description for each of the new capability flags:

KOPLOCKS_LEVEL2_SUPPORTED: Level 2 oplocks are supported natively in
the kernel.

KOPLOCKS_DEFERRED_OPEN_NOTIFICATION: The kernel notifies deferred
openers when they can retry the open.

KOPLOCKS_TIMEOUT_NOTIFICATION: The kernel notifies smbds when an
oplock break times out.

KOPLOCKS_OPLOCK_BROKEN_NOTIFICATION: The kernel notifies smbds when an
oplock is broken.

s3 oplocks: Make the level2 oplock contention API more granular

This replaces release_level2_oplocks_on_change with
contend_level2_oplock_begin/end in order to contend level2 oplocks
throughout an operation rather than just at the begining.  This is
necessary for some kernel oplock implementations, and also lays the
groundwork for better correctness in Samba's standard level2 oplock
handling.  The next step for non-kernel oplocks is to add additional
state to the share mode lock struct that prevents any new opens from
granting oplocks while a contending operation is in progress.

All operations that contend level 2 oplocks are now correctly spanned
except for aio and synchronous writes.  The two write paths both have
non-trivial error paths that need extra care to get right.

RAW-OPLOCK and the rest of 'make test' are still passing with this
change.

s3 oplocks: Differentiate between releasing an oplock vs. downgrading to Level 2 for kernel oplocks

Pass in an extra argument when releasing an oplock so kernel oplock
implementations can support downgrading from Level 1 to Level 2.

s3 vfs: Add a destructor to the fsp extension data API

I'm not certain if the dummy pointer is needed in struct vfs_fsp_data,
but I added it to be consistent with the comment below.

added a workaround to the handling of unicodePwd for Win7-beta

The Win7-beta domain process has changed. It no longer uses SAMR for
setting the password, and instead uses a ldap modify on a SASL
encrypted ldap connection. We didn't handle that as the unicodePwd
attribute has a dual use, holding the nt style MD4 hases for DRS
replication, but holding a UTF-16 plaintext password for a LDAP
modify.

This patch copes with the ldap unicodePwd modify by recognising the
format and creating the correct attributes on the fly. Note that this
assumes we will never get a unicodePwd attribute set in NT MD4 format
with the first 2 and last 2 bytes set to 0x22 0x00.

Andrew Bartlett is looking at a more robust solution, possibly using a
flag to say that this modify came via ldap, and not internal ldb
calls.

fixed two problems with the DsRGetDCNameEx2 call, as used by
Win7-beta.

The first problem is that we removed the dnsDomain attribute a while
back, so we were returning NULL for two fields. We now return the
realm.

The second problem is that Win7-beta sends the domain in the form the
user typed it, so it may be in either the short or long form. We check
for the short form and convert if needed.

S3: Various fixes for log2pcaphex utility

s3 spoolss: arch needs to be set before it's passed to get_version_id.

7717ad688099860fa0989ed3582435404fd6d4fa left arch unitialized.

Guenther, please check.

Revert "s3:winbindd_user: create domain connection in winbindd_fill_pwent if necessary."

This reverts commit 487f5e7b4768cfe9e511b0ba56f16c411e21f702.

I was confused about the real meaning of find_domain_from_name_noinit()
vs. find_domain_from_name(). We don't need the connection established
here, just the domain struct which gets initialized by rescan_trusted_domains().

Sorry for the noise.

Michael

Revert "Fix errornos assumption that all compilers are gcc"

This breaks (some?) files with gcc.

This reverts commit 98a4327b19e83ffad4e0be7e8895fdbd9e48d49f.

s3-spoolss: remove old spoolss_ScheduleJob.

Guenther

s3-spoolss: use pidl for _spoolss_ScheduleJob.

Guenther

s3-spoolss: remove old spoolss_AddJob.

Guenther

s3-spoolss: use pidl for _spoolss_AddJob.

Guenther

s3: re-run make samba3-idl.

Guenther

spoolss: fill in spoolss_ScheduleJob.

Guenther

spoolss: fill in spoolss_AddJob.

Guenther

s3 async: Fix the build on systems that have ETIMEDOUT but not ETIME

Fallback on EAGAIN

S3 OneFS: Add in Isilon specific performance counter module

S3: New module interface for SMB message statistics gathering

This changelist allows for the addition of custom performance
monitoring modules through smb.conf. Entrypoints in the main message
processing code have been added to capture the command, subop, ioctl,
identity and message size statistics.

Fix errornos assumption that all compilers are gcc

When compiling Samba 4's IDL files buildsystem assumes that compiler
knows about -xc, which is a gcc spesefic switch as this switch isn't
needed on gcc either the flag was uneeded and can be removed. Thus no
warnings on non gcc systems.

Signed-off-by: Torgeir Lerkerod <Torgeir.Lerkerod@gmail.com>
Signed-off-by: Jelmer Vernooij <jelmer@samba.org>

docs: Add man sharesec.

Karolin

Attempt to fix the build

Merge branch 'master' of ssh://git.samba.org/data/git/samba

Fix warning in spoolss IDL file output.

Rerun pidl.

s3-spoolss: remove old rpccli_spoolss_routerreplyprinter.

Guenther

s3-spoolss: remove old spoolss_ReplyClosePrinter.

Guenther

s3-spoolss: use rpccli_spoolss_ReplyClosePrinter.

Guenther

s3-spoolss: remove old spoolss_AddPrintProcessor.

Guenther

s3-spoolss: use pidl for _spoolss_AddPrintProcessor.

Guenther

s3-rpcclient: remove a pointless fstring.

Guenther

s3-rpcclient: use srv_name_slash instead of formating servername again and again.

Guenther

s4/wrepl_server: Fix typo in comment.

Karolin

Remove an invalid discard_const_p() - it masks an actual
bug in pidl where pidl uses "const" in a struct where there should not be
const.

There is only a single place in the Samba codebase where this triggers a
warning.

Use discard_const_p rather than CONST_DISCARD.

Revert "s3/s4: Move CONST_DISCARD into lib/util so it's available from s3 and s4"

lib/util already has discard_const_p.

This reverts commit 0cb430c22e9c0af2248fbc15ce97a4d760df189d.

Merge branch 'master' of ssh://git.samba.org/data/git/samba

s3: re-run make samba3-idl.

Guenther

s3-spoolss: move PRINTER_ENUM_ICONMASK to IDL.

Guenther

s3-spoolss: use PRINTER_ENUM_NAME and remove double enum define.

Guenther

s3-spoolss: remove PRINTER_CHANGE* flags now defined in IDL.

Guenther

spoolss: fill in spoolss_AddPrintProcessor.

Guenther

spoolss: fill in spoolss_RouterReplyPrinter.

Guenther

spoolss: add spoolss_PrinterChangeFlags.

Guenther

eliminate compiler warnings

s3:winbindd_user: create domain connection in winbindd_fill_pwent if necessary.

Calling find_domain_from_name_noinit() might not be enough here.
This makes winbindd_getpwent() behave the same as winbindd_getgrent().

Michael

s3:winbindd_user: fix a debug message.

find_domain_from_name_noinit() is no longer called only for
name alias support.

Michael

testprogs/win32: add an option to trigger small reads in npecho_client2.c

metze

s3-spoolss: remove old _spoolss_FindClosePrinterNotify.

Guenther

s3-spoolss: use pidl for _spoolss_FindClosePrinterNotify.

Guenther

s3-spoolss: remove whitespace in printing code.

Guenther

Fix count in _srvsvc_NetDiskEnum()

Without this, remotely adding a share via MMC fails

s3-spoolss: remove old _spoolss_DeletePrinterDriverEx.

Guenther

s3-rpcclient: use rpccli_spoolss_DeletePrinterDriverEx.

Guenther

s3-spoolss: use pidl for _spoolss_DeletePrinterDriverEx.

Guenther

s3-spoolss: remove old spoolss_DeletePrinterDriver.

Guenther

s3-rpcclient: use rpccli_spoolss_DeletePrinterDriver.

Guenther

s3-spools: use pidl for _spoolss_DeletePrinterDriver.

Guenther

s3-spoolss: remove old _spoolss_DeletePrinterKey.

Guenther

s3-spoolss: use pidl for _spoolss_DeletePrinterKey.

Guenther

s3-spoolss: remove old _spoolss_DeletePrinterData.

Guenther

s3-spoolss: use pidl for _spoolss_DeletePrinterData.

Guenther

s3-spoolss: remove old _spoolss_DeletePrinterDataEx.

Guenther

s3-spoolss: use pidl for _spoolss_DeletePrinterDataEx.

Guenther

s3-spoolss: remove SPOOLSS_DELETEPRINTERDRIVEREX flags now defined in IDL.

Guenther

s3: re-run make samba3-idl.

Guenther

spoolss: fill in spoolss_DeletePrinterDriverEx IDL.

Guenther

async_sock: Map ASYNC_REQ_TIMEOUT to ETIMEDOUT instead of ETIME

Also, fall back to EIO if ETIMEDOUT is not present

testprogs/win32: make it possible to run in byte or message mode in npecho_server2

metze

s4:Makefile: fix PUBLIC_HEADERS typo

metze

testprogs/win32: add npecho_*2.c

This exlores some details of message type named pipes.

metze

s3: re-run make samba3-idl.

Guenther

spoolss: fix spoolss_DeletePrinterDriver IDL.

Guenther

spoolss: fill in spoolss_DeletePrinterKey IDL.

Guenther

s3-spoolss: remove old _spoolss_GetForm.

Guenther

s3-spoolss: use pidl for _spoolss_GetForm.

Guenther

s3-spoolss: add fill_form_info_1.

Guenther

s3-rpcclient: use rpccli_spoolss_GetForm.

Guenther

s3-spoolss: restore delete_a_form().

Guenther

s3-spoolss: remove old _spoolss_SetForm.

Guenther

s3-spoolss: use pidl for _spoolss_SetForm.

Guenther

s3-rpcclient: use rpccli_spoolss_SetForm.

Guenther

s3-spoolss: remove old spoolss_AddForm.

Guenther

s3-spoolss: use pidl for spoolss_AddForm.

Guenther

s3-spoolss: use rpccli_spoolss_AddForm in net and rpcclient.

Guenther

s3-rpcclient: fix getform command asprintf return code.

Guenther

s3 OneFS: Fake Timestamps

This checkin enables setting arbitrary timestamps on files matching
the pattern stored in smb.conf. This was a customer request for a
specific workflow.

Changes include:
1) configuration state machine to avoid tons of string comparisons on
   each and every stat.

2) Code to adjust post-stat() times to match time now, or sloptime +
   time now.

look for nanosleep in librt, some Unix flavours have it there

async_sock: Use unix errnos instead of NTSTATUS

This also switches wb_reqtrans to use wbcErr instead of NTSTATUS as it would
be pointless to convert to errno first and to wbcErr later.

Make prs_struct->out_data.current_pdu dynamically allocated

Another 4k per open pipe

Most RPC requests do not need a full fragment, start smaller

Fix some nonempty blank lines

Fix memleaks in chain_reply for async requests

Fix a couple of memleaks in mapping_ldb.c

Make current_in_pdu in pipes_struct allocated

This makes an open pipe about 4K cheaper

Convert api_RNetGroupEnum to use samr instead of pdb