tests/src/ctdb_randrec.c

   1 /*
   2    create a lot of random records, both current records and deleted records
   3
   4    Copyright (C) Andrew Tridgell  2008
   5         Ronnie sahlberg 2007
   6
   7    This program is free software; you can redistribute it and/or modify
   8    it under the terms of the GNU General Public License as published by
   9    the Free Software Foundation; either version 3 of the License, or
  10    (at your option) any later version.
  11
  12    This program is distributed in the hope that it will be useful,
  13    but WITHOUT ANY WARRANTY; without even the implied warranty of
  14    MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the
  15    GNU General Public License for more details.
  16
  17    You should have received a copy of the GNU General Public License
  18    along with this program; if not, see <http://www.gnu.org/licenses/>.
  19 */
  20
  21 #include "includes.h"
  22 #include "lib/events/events.h"
  23 #include "system/filesys.h"
  24 #include "popt.h"
  25 #include "cmdline.h"
  26
  27 #include <sys/time.h>
  28 #include <time.h>
  29
  30 static struct timeval tp1,tp2;
  31
  32 static void start_timer(void)
  33 {
  34         gettimeofday(&tp1,NULL);
  35 }
  36
  37 static double end_timer(void)
  38 {
  39         gettimeofday(&tp2,NULL);
  40         return (tp2.tv_sec + (tp2.tv_usec*1.0e-6)) -
  41                 (tp1.tv_sec + (tp1.tv_usec*1.0e-6));
  42 }
  43
  44 static int num_records = 10;
  45 static int delete_pct = 75;
  46 static int base_rec;
  47
  48 static void store_records(struct ctdb_context *ctdb, struct event_context *ev)
  49 {
  50         TDB_DATA key, data;
  51         struct ctdb_db_context *ctdb_db;
  52         TALLOC_CTX *tmp_ctx = talloc_new(ctdb);
  53         int ret;
  54         struct ctdb_record_handle *h;
  55         uint32_t i=0;
  56
  57         ctdb_db = ctdb_db_handle(ctdb, "test.tdb");
  58
  59         srandom(time(NULL) ^ getpid());
  60
  61         start_timer();
  62
  63         printf("working with %d records\n", num_records);
  64         while (1) {
  65                 unsigned r = random() % num_records;
  66                 key.dptr = (uint8_t *)&r;
  67                 key.dsize = sizeof(r);
  68
  69                 h = ctdb_fetch_lock(ctdb_db, tmp_ctx, key, &data);
  70                 if (h == NULL) {
  71                         printf("Failed to fetch record '%s' on node %d\n",
  72                                (const char *)key.dptr, ctdb_get_pnn(ctdb));
  73                         talloc_free(tmp_ctx);
  74                         return;
  75                 }
  76
  77                 if (random() % 100 < delete_pct) {
  78                         data.dptr = NULL;
  79                         data.dsize = 0;
  80                 } else {
  81                         data.dptr = talloc_zero_size(h, data.dsize + sizeof(r));
  82                         data.dsize += sizeof(r);
  83                 }
  84
  85                 ret = ctdb_record_store(h, data);
  86                 talloc_free(h);
  87                 if (ret != 0) {
  88                         printf("Failed to store record\n");
  89                 }
  90                 if (i % 1000 == 0) {
  91                         printf("%7.0f recs/second   %u total\r", 1000.0 / end_timer(), i);
  92                         fflush(stdout);
  93                         start_timer();
  94                 }
  95                 i++;
  96         }
  97
  98         talloc_free(tmp_ctx);
  99 }
 100
 101 /*
 102   main program
 103 */
 104 int main(int argc, const char *argv[])
 105 {
 106         struct ctdb_context *ctdb;
 107         struct ctdb_db_context *ctdb_db;
 108
 109         struct poptOption popt_options[] = {
 110                 POPT_AUTOHELP
 111                 POPT_CTDB_CMDLINE
 112                 { "num-records", 'r', POPT_ARG_INT, &num_records, 0, "num_records", "integer" },
 113                 { "base-rec", 'b', POPT_ARG_INT, &base_rec, 0, "base_rec", "integer" },
 114                 { "delete-pct", 'p', POPT_ARG_INT, &delete_pct, 0, "delete_pct", "integer" },
 115                 POPT_TABLEEND
 116         };
 117         int opt;
 118         const char **extra_argv;
 119         int extra_argc = 0;
 120         poptContext pc;
 121         struct event_context *ev;
 122
 123         pc = poptGetContext(argv[0], argc, argv, popt_options, POPT_CONTEXT_KEEP_FIRST);
 124
 125         while ((opt = poptGetNextOpt(pc)) != -1) {
 126                 switch (opt) {
 127                 default:
 128                         fprintf(stderr, "Invalid option %s: %s\n",
 129                                 poptBadOption(pc, 0), poptStrerror(opt));
 130                         exit(1);
 131                 }
 132         }
 133
 134         /* setup the remaining options for the main program to use */
 135         extra_argv = poptGetArgs(pc);
 136         if (extra_argv) {
 137                 extra_argv++;
 138                 while (extra_argv[extra_argc]) extra_argc++;
 139         }
 140
 141         ev = event_context_init(NULL);
 142
 143         ctdb = ctdb_cmdline_client(ev);
 144
 145         /* attach to a specific database */
 146         ctdb_db = ctdb_attach(ctdb, "test.tdb", false, 0);
 147         if (!ctdb_db) {
 148                 printf("ctdb_attach failed - %s\n", ctdb_errstr(ctdb));
 149                 exit(1);
 150         }
 151
 152         store_records(ctdb, ev);
 153
 154         return 0;
 155 }