d7fc05cabd00fd45be6e45cda3b5481c274bbc2d
[abartlet/samba.git/.git] / source4 / scripting / python / samba / __init__.py
1 #!/usr/bin/python
2
3 # Unix SMB/CIFS implementation.
4 # Copyright (C) Jelmer Vernooij <jelmer@samba.org> 2007-2008
5 #
6 # Based on the original in EJS:
7 # Copyright (C) Andrew Tridgell <tridge@samba.org> 2005
8 #
9 # This program is free software; you can redistribute it and/or modify
10 # it under the terms of the GNU General Public License as published by
11 # the Free Software Foundation; either version 3 of the License, or
12 # (at your option) any later version.
13 #
14 # This program is distributed in the hope that it will be useful,
15 # but WITHOUT ANY WARRANTY; without even the implied warranty of
16 # MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the
17 # GNU General Public License for more details.
18 #
19 # You should have received a copy of the GNU General Public License
20 # along with this program.  If not, see <http://www.gnu.org/licenses/>.
21 #
22
23 """Samba 4."""
24
25 __docformat__ = "restructuredText"
26
27 import os
28 import sys
29
30 def _in_source_tree():
31     """Check whether the script is being run from the source dir. """
32     return os.path.exists("%s/../../../selftest/skip" % os.path.dirname(__file__))
33
34
35 # When running, in-tree, make sure bin/python is in the PYTHONPATH
36 if _in_source_tree():
37     srcdir = "%s/../../.." % os.path.dirname(__file__)
38     sys.path.append("%s/bin/python" % srcdir)
39     default_ldb_modules_dir = "%s/bin/modules/ldb" % srcdir
40 else:
41     default_ldb_modules_dir = None
42
43
44 import ldb
45 import dsdb
46 import _glue
47 from samba._ldb import Ldb as _Ldb
48
49 class Ldb(_Ldb):
50     """Simple Samba-specific LDB subclass that takes care
51     of setting up the modules dir, credentials pointers, etc.
52
53     Please note that this is intended to be for all Samba LDB files,
54     not necessarily the Sam database. For Sam-specific helper
55     functions see samdb.py.
56     """
57     def __init__(self, url=None, lp=None, modules_dir=None, session_info=None,
58                  credentials=None, flags=0, options=None):
59         """Opens a Samba Ldb file.
60
61         :param url: Optional LDB URL to open
62         :param lp: Optional loadparm object
63         :param modules_dir: Optional modules directory
64         :param session_info: Optional session information
65         :param credentials: Optional credentials, defaults to anonymous.
66         :param flags: Optional LDB flags
67         :param options: Additional options (optional)
68
69         This is different from a regular Ldb file in that the Samba-specific
70         modules-dir is used by default and that credentials and session_info
71         can be passed through (required by some modules).
72         """
73
74         if modules_dir is not None:
75             self.set_modules_dir(modules_dir)
76         elif default_ldb_modules_dir is not None:
77             self.set_modules_dir(default_ldb_modules_dir)
78         elif lp is not None:
79             self.set_modules_dir(os.path.join(lp.get("modules dir"), "ldb"))
80
81         if session_info is not None:
82             self.set_session_info(session_info)
83
84         if credentials is not None:
85             self.set_credentials(credentials)
86
87         if lp is not None:
88             self.set_loadparm(lp)
89
90         # This must be done before we load the schema, as these handlers for
91         # objectSid and objectGUID etc must take precedence over the 'binary
92         # attribute' declaration in the schema
93         self.register_samba_handlers()
94
95         # TODO set debug
96         def msg(l,text):
97             print text
98         #self.set_debug(msg)
99
100         self.set_utf8_casefold()
101
102         # Allow admins to force non-sync ldb for all databases
103         if lp is not None:
104             nosync_p = lp.get("nosync", "ldb")
105             if nosync_p is not None and nosync_p == True:
106                 flags |= ldb.FLG_NOSYNC
107
108         self.set_create_perms()
109
110         if url is not None:
111             self.connect(url, flags, options)
112
113     def set_create_perms(self, perms=0600):
114         # we usually want Samba databases to be private. If we later find we
115         # need one public, we will have to change this here
116         super(Ldb, self).set_create_perms(perms)
117
118     def searchone(self, attribute, basedn=None, expression=None,
119                   scope=ldb.SCOPE_BASE):
120         """Search for one attribute as a string.
121
122         :param basedn: BaseDN for the search.
123         :param attribute: Name of the attribute
124         :param expression: Optional search expression.
125         :param scope: Search scope (defaults to base).
126         :return: Value of attribute as a string or None if it wasn't found.
127         """
128         res = self.search(basedn, scope, expression, [attribute])
129         if len(res) != 1 or res[0][attribute] is None:
130             return None
131         values = set(res[0][attribute])
132         assert len(values) == 1
133         return self.schema_format_value(attribute, values.pop())
134
135     def erase_users_computers(self, dn):
136         """Erases user and computer objects from our AD. This is needed since the 'samldb' module denies the deletion of primary groups. Therefore all groups shouldn't be primary somewhere anymore."""
137
138         try:
139             res = self.search(base=dn, scope=ldb.SCOPE_SUBTREE, attrs=[],
140                       expression="(|(objectclass=user)(objectclass=computer))")
141         except ldb.LdbError, (errno, _):
142             if errno == ldb.ERR_NO_SUCH_OBJECT:
143                 # Ignore no such object errors
144                 return
145             else:
146                 raise
147
148         try:
149             for msg in res:
150                 self.delete(msg.dn)
151         except ldb.LdbError, (errno, _):
152             if errno != ldb.ERR_NO_SUCH_OBJECT:
153                 # Ignore no such object errors
154                 raise
155
156     def erase_except_schema_controlled(self):
157         """Erase this ldb, removing all records, except those that are controlled by Samba4's schema."""
158
159         basedn = ""
160
161         # Try to delete user/computer accounts to allow deletion of groups
162         self.erase_users_computers(basedn)
163
164         # Delete the 'visible' records, and the invisble 'deleted' records (if this DB supports it)
165         for msg in self.search(basedn, ldb.SCOPE_SUBTREE,
166                                "(&(|(objectclass=*)(distinguishedName=*))(!(distinguishedName=@BASEINFO)))",
167                                [], controls=["show_deleted:0"]):
168             try:
169                 self.delete(msg.dn)
170             except ldb.LdbError, (errno, _):
171                 if errno != ldb.ERR_NO_SUCH_OBJECT:
172                     # Ignore no such object errors
173                     raise
174
175         res = self.search(basedn, ldb.SCOPE_SUBTREE,
176                           "(&(|(objectclass=*)(distinguishedName=*))(!(distinguishedName=@BASEINFO)))",
177                           [], controls=["show_deleted:0"])
178         assert len(res) == 0
179
180         # delete the specials
181         for attr in ["@SUBCLASSES", "@MODULES",
182                      "@OPTIONS", "@PARTITION", "@KLUDGEACL"]:
183             try:
184                 self.delete(attr)
185             except ldb.LdbError, (errno, _):
186                 if errno != ldb.ERR_NO_SUCH_OBJECT:
187                     # Ignore missing dn errors
188                     raise
189
190     def erase(self):
191         """Erase this ldb, removing all records."""
192
193         self.erase_except_schema_controlled()
194
195         # delete the specials
196         for attr in ["@INDEXLIST", "@ATTRIBUTES"]:
197             try:
198                 self.delete(attr)
199             except ldb.LdbError, (errno, _):
200                 if errno != ldb.ERR_NO_SUCH_OBJECT:
201                     # Ignore missing dn errors
202                     raise
203
204     def erase_partitions(self):
205         """Erase an ldb, removing all records."""
206
207         def erase_recursive(self, dn):
208             try:
209                 res = self.search(base=dn, scope=ldb.SCOPE_ONELEVEL, attrs=[],
210                                   controls=["show_deleted:0"])
211             except ldb.LdbError, (errno, _):
212                 if errno == ldb.ERR_NO_SUCH_OBJECT:
213                     # Ignore no such object errors
214                     return
215
216             for msg in res:
217                 erase_recursive(self, msg.dn)
218
219             try:
220                 self.delete(dn)
221             except ldb.LdbError, (errno, _):
222                 if errno != ldb.ERR_NO_SUCH_OBJECT:
223                     # Ignore no such object errors
224                     raise
225
226         res = self.search("", ldb.SCOPE_BASE, "(objectClass=*)",
227                          ["namingContexts"])
228         assert len(res) == 1
229         if not "namingContexts" in res[0]:
230             return
231         for basedn in res[0]["namingContexts"]:
232             # Try to delete user/computer accounts to allow deletion of groups
233             self.erase_users_computers(basedn)
234             # Try and erase from the bottom-up in the tree
235             erase_recursive(self, basedn)
236
237     def load_ldif_file_add(self, ldif_path):
238         """Load a LDIF file.
239
240         :param ldif_path: Path to LDIF file.
241         """
242         self.add_ldif(open(ldif_path, 'r').read())
243
244     def add_ldif(self, ldif, controls=None):
245         """Add data based on a LDIF string.
246
247         :param ldif: LDIF text.
248         """
249         for changetype, msg in self.parse_ldif(ldif):
250             assert changetype == ldb.CHANGETYPE_NONE
251             self.add(msg,controls)
252
253     def modify_ldif(self, ldif, controls=None):
254         """Modify database based on a LDIF string.
255
256         :param ldif: LDIF text.
257         """
258         for changetype, msg in self.parse_ldif(ldif):
259             if (changetype == ldb.CHANGETYPE_ADD):
260                 self.add(msg, controls)
261             else:
262                 self.modify(msg, controls)
263
264     def set_domain_sid(self, sid):
265         """Change the domain SID used by this LDB.
266
267         :param sid: The new domain sid to use.
268         """
269         dsdb.samdb_set_domain_sid(self, sid)
270
271     def domain_sid(self):
272         """Read the domain SID used by this LDB.
273
274         """
275         dsdb.samdb_get_domain_sid(self)
276
277     def set_schema_from_ldif(self, pf, df):
278         _glue.dsdb_set_schema_from_ldif(self, pf, df)
279
280     def set_schema_from_ldb(self, ldb):
281         _glue.dsdb_set_schema_from_ldb(self, ldb)
282
283     def write_prefixes_from_schema(self):
284         _glue.dsdb_write_prefixes_from_schema_to_ldb(self)
285
286     def convert_schema_to_openldap(self, target, mapping):
287         return dsdb.dsdb_convert_schema_to_openldap(self, target, mapping)
288
289     def set_invocation_id(self, invocation_id):
290         """Set the invocation id for this SamDB handle.
291
292         :param invocation_id: GUID of the invocation id.
293         """
294         dsdb.dsdb_set_ntds_invocation_id(self, invocation_id)
295
296     def get_invocation_id(self):
297         "Get the invocation_id id"
298         return dsdb.samdb_ntds_invocation_id(self)
299
300     def get_ntds_GUID(self):
301         "Get the NTDS objectGUID"
302         return dsdb.samdb_ntds_objectGUID(self)
303
304     def server_site_name(self):
305         "Get the server site name"
306         return dsdb.samdb_server_site_name(self)
307
308
309 def substitute_var(text, values):
310     """substitute strings of the form ${NAME} in str, replacing
311     with substitutions from subobj.
312
313     :param text: Text in which to subsitute.
314     :param values: Dictionary with keys and values.
315     """
316
317     for (name, value) in values.items():
318         assert isinstance(name, str), "%r is not a string" % name
319         assert isinstance(value, str), "Value %r for %s is not a string" % (value, name)
320         text = text.replace("${%s}" % name, value)
321
322     return text
323
324
325 def check_all_substituted(text):
326     """Make sure that all substitution variables in a string have been replaced.
327     If not, raise an exception.
328
329     :param text: The text to search for substitution variables
330     """
331     if not "${" in text:
332         return
333
334     var_start = text.find("${")
335     var_end = text.find("}", var_start)
336
337     raise Exception("Not all variables substituted: %s" % text[var_start:var_end+1])
338
339
340 def read_and_sub_file(file, subst_vars):
341     """Read a file and sub in variables found in it
342
343     :param file: File to be read (typically from setup directory)
344      param subst_vars: Optional variables to subsitute in the file.
345     """
346     data = open(file, 'r').read()
347     if subst_vars is not None:
348         data = substitute_var(data, subst_vars)
349         check_all_substituted(data)
350     return data
351
352
353 def setup_file(template, fname, subst_vars=None):
354     """Setup a file in the private dir.
355
356     :param template: Path of the template file.
357     :param fname: Path of the file to create.
358     :param subst_vars: Substitution variables.
359     """
360     f = fname
361
362     if os.path.exists(f):
363         os.unlink(f)
364
365     data = read_and_sub_file(template, subst_vars)
366     open(f, 'w').write(data)
367
368
369 def valid_netbios_name(name):
370     """Check whether a name is valid as a NetBIOS name. """
371     # See crh's book (1.4.1.1)
372     if len(name) > 15:
373         return False
374     for x in name:
375         if not x.isalnum() and not x in " !#$%&'()-.@^_{}~":
376             return False
377     return True
378
379
380 def ensure_external_module(modulename, location):
381     """Add a location to sys.path if an external dependency can't be found.
382
383     :param modulename: Module name to import
384     :param location: Location to add to sys.path (can be relative to 
385         ${srcdir}/lib
386     """
387     try:
388         __import__(modulename)
389     except ImportError:
390         import sys
391         if _in_source_tree():
392             sys.path.insert(0, 
393                 os.path.join(os.path.dirname(__file__),
394                              "../../../../lib", location))
395             __import__(modulename)
396         else:
397             sys.modules[modulename] = __import__(
398                 "samba.external.%s" % modulename, fromlist=["samba.external"])
399
400 version = _glue.version
401 interface_ips = _glue.interface_ips
402 set_debug_level = _glue.set_debug_level
403 unix2nttime = _glue.unix2nttime
404 generate_random_password = _glue.generate_random_password