Diff for /servers/slapd/overlays/syncprov.c between versions 1.147.2.36 and 1.165

version 1.147.2.36, 2008/11/10 17:39:16 version 1.165, 2007/01/02 19:01:14
Line 1 Line 1
 /* $OpenLDAP: pkg/ldap/servers/slapd/overlays/syncprov.c,v 1.147.2.35 2008/10/31 23:23:59 quanah Exp $ */  /* $OpenLDAP: pkg/ldap/servers/slapd/overlays/syncprov.c,v 1.164 2006/12/02 09:42:42 ando Exp $ */
 /* syncprov.c - syncrepl provider */  /* syncprov.c - syncrepl provider */
 /* This work is part of OpenLDAP Software <http://www.openldap.org/>.  /* This work is part of OpenLDAP Software <http://www.openldap.org/>.
  *   *
  * Copyright 2004-2008 The OpenLDAP Foundation.   * Copyright 2004-2007 The OpenLDAP Foundation.
  * All rights reserved.   * All rights reserved.
  *   *
  * Redistribution and use in source and binary forms, with or without   * Redistribution and use in source and binary forms, with or without
Line 59  typedef struct syncops { Line 59  typedef struct syncops {
         ID              s_eid;          /* entryID of search base */          ID              s_eid;          /* entryID of search base */
         Operation       *s_op;          /* search op */          Operation       *s_op;          /* search op */
         int             s_rid;          int             s_rid;
         int             s_sid;  
         struct berval s_filterstr;          struct berval s_filterstr;
         int             s_flags;        /* search status */          int             s_flags;        /* search status */
 #define PS_IS_REFRESHING        0x01  #define PS_IS_REFRESHING        0x01
Line 104  typedef struct slog_entry { Line 103  typedef struct slog_entry {
         struct slog_entry *se_next;          struct slog_entry *se_next;
         struct berval se_uuid;          struct berval se_uuid;
         struct berval se_csn;          struct berval se_csn;
         int     se_sid;  
         ber_tag_t       se_tag;          ber_tag_t       se_tag;
 } slog_entry;  } slog_entry;
   
Line 120  typedef struct sessionlog { Line 118  typedef struct sessionlog {
 /* The main state for this overlay */  /* The main state for this overlay */
 typedef struct syncprov_info_t {  typedef struct syncprov_info_t {
         syncops         *si_ops;          syncops         *si_ops;
         BerVarray       si_ctxcsn;      /* ldapsync context */          struct berval   si_ctxcsn;      /* ldapsync context */
         int             *si_sids;  
         int             si_numcsns;  
         int             si_chkops;      /* checkpointing info */          int             si_chkops;      /* checkpointing info */
         int             si_chktime;          int             si_chktime;
         int             si_numops;      /* number of ops since last checkpoint */          int             si_numops;      /* number of ops since last checkpoint */
Line 131  typedef struct syncprov_info_t { Line 127  typedef struct syncprov_info_t {
         time_t  si_chklast;     /* time of last checkpoint */          time_t  si_chklast;     /* time of last checkpoint */
         Avlnode *si_mods;       /* entries being modified */          Avlnode *si_mods;       /* entries being modified */
         sessionlog      *si_logs;          sessionlog      *si_logs;
         ldap_pvt_thread_rdwr_t  si_csn_rwlock;          ldap_pvt_thread_mutex_t si_csn_mutex;
         ldap_pvt_thread_mutex_t si_ops_mutex;          ldap_pvt_thread_mutex_t si_ops_mutex;
         ldap_pvt_thread_mutex_t si_mods_mutex;          ldap_pvt_thread_mutex_t si_mods_mutex;
           char            si_ctxcsnbuf[LDAP_LUTIL_CSNSTR_BUFSIZE];
 } syncprov_info_t;  } syncprov_info_t;
   
 typedef struct opcookie {  typedef struct opcookie {
Line 393  static struct berval generic_filterstr = Line 390  static struct berval generic_filterstr =
 static int  static int
 syncprov_findbase( Operation *op, fbase_cookie *fc )  syncprov_findbase( Operation *op, fbase_cookie *fc )
 {  {
           opcookie *opc = op->o_callback->sc_private;
           slap_overinst *on = opc->son;
   
         /* Use basic parameters from syncrepl search, but use          /* Use basic parameters from syncrepl search, but use
          * current op's threadctx / tmpmemctx           * current op's threadctx / tmpmemctx
          */           */
Line 408  syncprov_findbase( Operation *op, fbase_ Line 408  syncprov_findbase( Operation *op, fbase_
   
                 fop = *fc->fss->s_op;                  fop = *fc->fss->s_op;
   
                 fop.o_bd = fop.o_bd->bd_self;  
                 fop.o_hdr = op->o_hdr;                  fop.o_hdr = op->o_hdr;
                   fop.o_bd = op->o_bd;
                 fop.o_time = op->o_time;                  fop.o_time = op->o_time;
                 fop.o_tincr = op->o_tincr;                  fop.o_tincr = op->o_tincr;
   
Line 429  syncprov_findbase( Operation *op, fbase_ Line 429  syncprov_findbase( Operation *op, fbase_
                 fop.ors_filter = &generic_filter;                  fop.ors_filter = &generic_filter;
                 fop.ors_filterstr = generic_filterstr;                  fop.ors_filterstr = generic_filterstr;
   
                   fop.o_bd->bd_info = on->on_info->oi_orig;
                 rc = fop.o_bd->be_search( &fop, &frs );                  rc = fop.o_bd->be_search( &fop, &frs );
                   fop.o_bd->bd_info = (BackendInfo *)on;
         } else {          } else {
                 ldap_pvt_thread_mutex_unlock( &fc->fss->s_mutex );                  ldap_pvt_thread_mutex_unlock( &fc->fss->s_mutex );
                 fc->fbase = 1;                  fc->fbase = 1;
Line 494  findmax_cb( Operation *op, SlapReply *rs Line 496  findmax_cb( Operation *op, SlapReply *rs
                 Attribute *a = attr_find( rs->sr_entry->e_attrs,                  Attribute *a = attr_find( rs->sr_entry->e_attrs,
                         slap_schema.si_ad_entryCSN );                          slap_schema.si_ad_entryCSN );
   
                 if ( a && ber_bvcmp( &a->a_vals[0], maxcsn ) > 0 &&                  if ( a && ber_bvcmp( &a->a_vals[0], maxcsn ) > 0 ) {
                         slap_parse_csn_sid( &a->a_vals[0] ) == slap_serverID ) {  
                         maxcsn->bv_len = a->a_vals[0].bv_len;                          maxcsn->bv_len = a->a_vals[0].bv_len;
                         strcpy( maxcsn->bv_val, a->a_vals[0].bv_val );                          strcpy( maxcsn->bv_val, a->a_vals[0].bv_val );
                 }                  }
Line 579  syncprov_findcsn( Operation *op, find_cs Line 580  syncprov_findcsn( Operation *op, find_cs
         char buf[LDAP_LUTIL_CSNSTR_BUFSIZE + STRLENOF("(entryCSN<=)")];          char buf[LDAP_LUTIL_CSNSTR_BUFSIZE + STRLENOF("(entryCSN<=)")];
         char cbuf[LDAP_LUTIL_CSNSTR_BUFSIZE];          char cbuf[LDAP_LUTIL_CSNSTR_BUFSIZE];
         struct berval maxcsn;          struct berval maxcsn;
         Filter cf;          Filter cf, af;
         AttributeAssertion eq = ATTRIBUTEASSERTION_INIT;  #ifdef LDAP_COMP_MATCH
           AttributeAssertion eq = { NULL, BER_BVNULL, NULL };
   #else
           AttributeAssertion eq = { NULL, BER_BVNULL };
   #endif
         fpres_cookie pcookie;          fpres_cookie pcookie;
         sync_control *srs = NULL;          sync_control *srs = NULL;
         struct slap_limits_set fc_limits;          struct slap_limits_set fc_limits;
         int i, rc = LDAP_SUCCESS, findcsn_retry = 1;          int i, rc = LDAP_SUCCESS, findcsn_retry = 1;
         int maxid;  
   
         if ( mode != FIND_MAXCSN ) {          if ( mode != FIND_MAXCSN ) {
                 srs = op->o_controls[slap_cids.sc_LDAPsync];                  srs = op->o_controls[slap_cids.sc_LDAPsync];
   
                   if ( srs->sr_state.ctxcsn.bv_len >= LDAP_LUTIL_CSNSTR_BUFSIZE ) {
                           return LDAP_OTHER;
                   }
         }          }
   
         fop = *op;          fop = *op;
Line 598  syncprov_findcsn( Operation *op, find_cs Line 606  syncprov_findcsn( Operation *op, find_cs
   
         cf.f_ava = &eq;          cf.f_ava = &eq;
         cf.f_av_desc = slap_schema.si_ad_entryCSN;          cf.f_av_desc = slap_schema.si_ad_entryCSN;
         BER_BVZERO( &cf.f_av_value );  
         cf.f_next = NULL;          cf.f_next = NULL;
   
         fop.o_callback = &cb;          fop.o_callback = &cb;
Line 611  again: Line 618  again:
         switch( mode ) {          switch( mode ) {
         case FIND_MAXCSN:          case FIND_MAXCSN:
                 cf.f_choice = LDAP_FILTER_GE;                  cf.f_choice = LDAP_FILTER_GE;
                 /* If there are multiple CSNs, use the one with our serverID */                  cf.f_av_value = si->si_ctxcsn;
                 for ( i=0; i<si->si_numcsns; i++) {                  fop.ors_filterstr.bv_len = sprintf( buf, "(entryCSN>=%s)",
                         if ( slap_serverID == si->si_sids[i] ) {                          cf.f_av_value.bv_val );
                                 maxid = i;  
                                 break;  
                         }  
                 }  
                 if ( i == si->si_numcsns ) {  
                         /* No match: this is multimaster, and none of the content in the DB  
                          * originated locally. Treat like no CSN.  
                          */  
                         return LDAP_NO_SUCH_OBJECT;  
                 }  
                 cf.f_av_value = si->si_ctxcsn[maxid];  
                 fop.ors_filterstr.bv_len = snprintf( buf, sizeof( buf ),  
                         "(entryCSN>=%s)", cf.f_av_value.bv_val );  
                 if ( fop.ors_filterstr.bv_len >= sizeof( buf ) ) {  
                         return LDAP_OTHER;  
                 }  
                 fop.ors_attrsonly = 0;                  fop.ors_attrsonly = 0;
                 fop.ors_attrs = csn_anlist;                  fop.ors_attrs = csn_anlist;
                 fop.ors_slimit = SLAP_NO_LIMIT;                  fop.ors_slimit = SLAP_NO_LIMIT;
                 cb.sc_private = &maxcsn;                  cb.sc_private = &maxcsn;
                 cb.sc_response = findmax_cb;                  cb.sc_response = findmax_cb;
                 strcpy( cbuf, cf.f_av_value.bv_val );                  strcpy( cbuf, si->si_ctxcsn.bv_val );
                 maxcsn.bv_val = cbuf;                  maxcsn.bv_val = cbuf;
                 maxcsn.bv_len = cf.f_av_value.bv_len;                  maxcsn.bv_len = si->si_ctxcsn.bv_len;
                 break;                  break;
         case FIND_CSN:          case FIND_CSN:
                 if ( BER_BVISEMPTY( &cf.f_av_value )) {                  cf.f_av_value = srs->sr_state.ctxcsn;
                         cf.f_av_value = srs->sr_state.ctxcsn[0];  
                         /* If there are multiple CSNs, use the smallest */  
                         for ( i=1; i<srs->sr_state.numcsns; i++ ) {  
                                 if ( ber_bvcmp( &cf.f_av_value, &srs->sr_state.ctxcsn[i] )  
                                         > 0 ) {  
                                         cf.f_av_value = srs->sr_state.ctxcsn[i];  
                                 }  
                         }  
                 }  
                 /* Look for exact match the first time */                  /* Look for exact match the first time */
                 if ( findcsn_retry ) {                  if ( findcsn_retry ) {
                         cf.f_choice = LDAP_FILTER_EQUALITY;                          cf.f_choice = LDAP_FILTER_EQUALITY;
                         fop.ors_filterstr.bv_len = snprintf( buf, sizeof( buf ),                          fop.ors_filterstr.bv_len = sprintf( buf, "(entryCSN=%s)",
                                 "(entryCSN=%s)", cf.f_av_value.bv_val );                                  cf.f_av_value.bv_val );
                 /* On retry, look for <= */                  /* On retry, look for <= */
                 } else {                  } else {
                         cf.f_choice = LDAP_FILTER_LE;                          cf.f_choice = LDAP_FILTER_LE;
                         fop.ors_limit = &fc_limits;                          fop.ors_limit = &fc_limits;
                         memset( &fc_limits, 0, sizeof( fc_limits ));  
                         fc_limits.lms_s_unchecked = 1;                          fc_limits.lms_s_unchecked = 1;
                         fop.ors_filterstr.bv_len = snprintf( buf, sizeof( buf ),                          fop.ors_filterstr.bv_len = sprintf( buf, "(entryCSN<=%s)",
                                 "(entryCSN<=%s)", cf.f_av_value.bv_val );                                  cf.f_av_value.bv_val );
                 }  
                 if ( fop.ors_filterstr.bv_len >= sizeof( buf ) ) {  
                         return LDAP_OTHER;  
                 }                  }
                 fop.ors_attrsonly = 1;                  fop.ors_attrsonly = 1;
                 fop.ors_attrs = slap_anlist_no_attrs;                  fop.ors_attrs = slap_anlist_no_attrs;
Line 674  again: Line 652  again:
                 cb.sc_response = findcsn_cb;                  cb.sc_response = findcsn_cb;
                 break;                  break;
         case FIND_PRESENT:          case FIND_PRESENT:
                 fop.ors_filter = op->ors_filter;                  af.f_choice = LDAP_FILTER_AND;
                 fop.ors_filterstr = op->ors_filterstr;                  af.f_next = NULL;
                   af.f_and = &cf;
                   cf.f_choice = LDAP_FILTER_LE;
                   cf.f_av_value = srs->sr_state.ctxcsn;
                   cf.f_next = op->ors_filter;
                   fop.ors_filter = &af;
                   filter2bv_x( &fop, fop.ors_filter, &fop.ors_filterstr );
                 fop.ors_attrsonly = 0;                  fop.ors_attrsonly = 0;
                 fop.ors_attrs = uuid_anlist;                  fop.ors_attrs = uuid_anlist;
                 fop.ors_slimit = SLAP_NO_LIMIT;                  fop.ors_slimit = SLAP_NO_LIMIT;
Line 697  again: Line 681  again:
                 break;                  break;
         }          }
   
         fop.o_bd->bd_info = (BackendInfo *)on->on_info;          fop.o_bd->bd_info = on->on_info->oi_orig;
         fop.o_bd->be_search( &fop, &frs );          fop.o_bd->be_search( &fop, &frs );
         fop.o_bd->bd_info = (BackendInfo *)on;          fop.o_bd->bd_info = (BackendInfo *)on;
   
         switch( mode ) {          switch( mode ) {
         case FIND_MAXCSN:          case FIND_MAXCSN:
                 if ( ber_bvcmp( &si->si_ctxcsn[maxid], &maxcsn )) {                  strcpy( si->si_ctxcsnbuf, maxcsn.bv_val );
                         ber_bvreplace( &si->si_ctxcsn[maxid], &maxcsn );                  si->si_ctxcsn.bv_len = maxcsn.bv_len;
                         si->si_numops++;        /* ensure a checkpoint */  
                 }  
                 break;                  break;
         case FIND_CSN:          case FIND_CSN:
                 /* If matching CSN was not found, invalidate the context. */                  /* If matching CSN was not found, invalidate the context. */
Line 721  again: Line 703  again:
                 break;                  break;
         case FIND_PRESENT:          case FIND_PRESENT:
                 op->o_tmpfree( pcookie.uuids, op->o_tmpmemctx );                  op->o_tmpfree( pcookie.uuids, op->o_tmpmemctx );
                   op->o_tmpfree( fop.ors_filterstr.bv_val, op->o_tmpmemctx );
                 break;                  break;
         }          }
   
Line 738  syncprov_free_syncop( syncops *so ) Line 721  syncprov_free_syncop( syncops *so )
                 ldap_pvt_thread_mutex_unlock( &so->s_mutex );                  ldap_pvt_thread_mutex_unlock( &so->s_mutex );
                 return;                  return;
         }          }
         if ( so->s_qtask ) {  
                 ldap_pvt_thread_mutex_lock( &slapd_rq.rq_mutex );  
                 if ( ldap_pvt_runqueue_isrunning( &slapd_rq, so->s_qtask ) )  
                         ldap_pvt_runqueue_stoptask( &slapd_rq, so->s_qtask );  
                 ldap_pvt_runqueue_remove( &slapd_rq, so->s_qtask );  
                 ldap_pvt_thread_mutex_unlock( &slapd_rq.rq_mutex );  
         }  
         ldap_pvt_thread_mutex_unlock( &so->s_mutex );          ldap_pvt_thread_mutex_unlock( &so->s_mutex );
         if ( so->s_flags & PS_IS_DETACHED ) {          if ( so->s_flags & PS_IS_DETACHED ) {
                 filter_free( so->s_op->ors_filter );                  filter_free( so->s_op->ors_filter );
Line 772  syncprov_sendresp( Operation *op, opcook Line 748  syncprov_sendresp( Operation *op, opcook
   
         SlapReply rs = { REP_SEARCH };          SlapReply rs = { REP_SEARCH };
         LDAPControl *ctrls[2];          LDAPControl *ctrls[2];
         struct berval cookie, csns[2];          struct berval cookie;
         Entry e_uuid = {0};          Entry e_uuid = {0};
         Attribute a_uuid = {0};          Attribute a_uuid = {0};
   
Line 780  syncprov_sendresp( Operation *op, opcook Line 756  syncprov_sendresp( Operation *op, opcook
                 return SLAPD_ABANDON;                  return SLAPD_ABANDON;
   
         ctrls[1] = NULL;          ctrls[1] = NULL;
         csns[0] = opc->sctxcsn;          slap_compose_sync_cookie( op, &cookie, &opc->sctxcsn, so->s_rid );
         BER_BVZERO( &csns[1] );  
         slap_compose_sync_cookie( op, &cookie, csns, so->s_rid, so->s_sid );  
   
         Debug( LDAP_DEBUG_SYNC, "syncprov_sendresp: cookie=%s\n", cookie.bv_val, 0, 0 );  
   
         e_uuid.e_attrs = &a_uuid;          e_uuid.e_attrs = &a_uuid;
         a_uuid.a_desc = slap_schema.si_ad_entryUUID;          a_uuid.a_desc = slap_schema.si_ad_entryUUID;
Line 845  syncprov_sendresp( Operation *op, opcook Line 817  syncprov_sendresp( Operation *op, opcook
   
 /* Play back queued responses */  /* Play back queued responses */
 static int  static int
 syncprov_qplay( Operation *op, struct re_s *rtask )  syncprov_qplay( Operation *op, slap_overinst *on, syncops *so )
 {  {
         syncops *so = rtask->arg;  
         slap_overinst *on = LDAP_SLIST_FIRST(&so->s_op->o_extra)->oe_key;  
         syncres *sr;          syncres *sr;
         Entry *e;          Entry *e;
         opcookie opc;          opcookie opc;
         int rc = 0;          int rc = 0;
   
         opc.son = on;          opc.son = on;
           op->o_bd->bd_info = (BackendInfo *)on->on_info;
   
         for (;;) {          for (;;) {
                 ldap_pvt_thread_mutex_lock( &so->s_mutex );                  ldap_pvt_thread_mutex_lock( &so->s_mutex );
Line 863  syncprov_qplay( Operation *op, struct re Line 834  syncprov_qplay( Operation *op, struct re
                         so->s_res = sr->s_next;                          so->s_res = sr->s_next;
                 if ( !so->s_res )                  if ( !so->s_res )
                         so->s_restail = NULL;                          so->s_restail = NULL;
                 /* Exit loop with mutex held */                  ldap_pvt_thread_mutex_unlock( &so->s_mutex );
   
                 if ( !sr || so->s_op->o_abandon )                  if ( !sr || so->s_op->o_abandon )
                         break;                          break;
                 ldap_pvt_thread_mutex_unlock( &so->s_mutex );  
   
                 opc.sdn = sr->s_dn;                  opc.sdn = sr->s_dn;
                 opc.sndn = sr->s_ndn;                  opc.sndn = sr->s_ndn;
Line 876  syncprov_qplay( Operation *op, struct re Line 847  syncprov_qplay( Operation *op, struct re
                 e = NULL;                  e = NULL;
   
                 if ( sr->s_mode != LDAP_SYNC_DELETE ) {                  if ( sr->s_mode != LDAP_SYNC_DELETE ) {
                         rc = overlay_entry_get_ov( op, &opc.sndn, NULL, NULL, 0, &e, on );                          rc = be_entry_get_rw( op, &opc.sndn, NULL, NULL, 0, &e );
                         if ( rc ) {                          if ( rc ) {
                                 Debug( LDAP_DEBUG_SYNC, "syncprov_qplay: failed to get %s, "  
                                         "error (%d), ignoring...\n", opc.sndn.bv_val, rc, 0 );  
                                 ch_free( sr );                                  ch_free( sr );
                                 rc = 0;  
                                 continue;                                  continue;
                         }                          }
                 }                  }
                 rc = syncprov_sendresp( op, &opc, so, &e, sr->s_mode );                  rc = syncprov_sendresp( op, &opc, so, &e, sr->s_mode );
   
                 if ( e ) {                  if ( e ) {
                         overlay_entry_release_ov( op, e, 0, on );                          be_entry_release_rw( op, e, 0 );
                 }                  }
   
                 ch_free( sr );                  ch_free( sr );
   
                 if ( rc ) {                  if ( rc )
                         /* Exit loop with mutex held */  
                         ldap_pvt_thread_mutex_lock( &so->s_mutex );  
                         break;                          break;
                 }  
         }          }
           op->o_bd->bd_info = (BackendInfo *)on;
         /* wait until we get explicitly scheduled again */  
         ldap_pvt_thread_mutex_lock( &slapd_rq.rq_mutex );  
         ldap_pvt_runqueue_stoptask( &slapd_rq, rtask );  
         if ( rc == 0 ) {  
                 ldap_pvt_runqueue_resched( &slapd_rq, rtask, 1 );  
         } else {  
                 /* bail out on any error */  
                 ldap_pvt_runqueue_remove( &slapd_rq, rtask );  
         }  
         ldap_pvt_thread_mutex_unlock( &slapd_rq.rq_mutex );  
         ldap_pvt_thread_mutex_unlock( &so->s_mutex );  
         return rc;          return rc;
 }  }
   
Line 920  syncprov_qtask( void *ctx, void *arg ) Line 874  syncprov_qtask( void *ctx, void *arg )
 {  {
         struct re_s *rtask = arg;          struct re_s *rtask = arg;
         syncops *so = rtask->arg;          syncops *so = rtask->arg;
           slap_overinst *on = so->s_op->o_private;
         OperationBuffer opbuf;          OperationBuffer opbuf;
         Operation *op;          Operation *op;
         BackendDB be;          BackendDB be;
         int rc;          int rc;
   
         op = &opbuf.ob_op;          op = (Operation *) &opbuf;
         *op = *so->s_op;          *op = *so->s_op;
         op->o_hdr = &opbuf.ob_hdr;          op->o_hdr = (Opheader *)(op+1);
         op->o_controls = opbuf.ob_controls;          op->o_controls = (void **)(op->o_hdr+1);
         memset( op->o_controls, 0, sizeof(opbuf.ob_controls) );          memset( op->o_controls, 0, SLAP_MAX_CIDS * sizeof(void *));
   
         *op->o_hdr = *so->s_op->o_hdr;          *op->o_hdr = *so->s_op->o_hdr;
   
         op->o_tmpmemctx = slap_sl_mem_create(SLAP_SLAB_SIZE, SLAP_SLAB_STACK, ctx, 1);          op->o_tmpmemctx = slap_sl_mem_create(SLAP_SLAB_SIZE, SLAP_SLAB_STACK, ctx);
         op->o_tmpmfuncs = &slap_sl_mfuncs;          op->o_tmpmfuncs = &slap_sl_mfuncs;
         op->o_threadctx = ctx;          op->o_threadctx = ctx;
   
Line 941  syncprov_qtask( void *ctx, void *arg ) Line 896  syncprov_qtask( void *ctx, void *arg )
         be = *so->s_op->o_bd;          be = *so->s_op->o_bd;
         be.be_flags |= SLAP_DBFLAG_OVERLAY;          be.be_flags |= SLAP_DBFLAG_OVERLAY;
         op->o_bd = &be;          op->o_bd = &be;
         LDAP_SLIST_FIRST(&op->o_extra) = NULL;          op->o_private = NULL;
         op->o_callback = NULL;          op->o_callback = NULL;
   
         rc = syncprov_qplay( op, rtask );          rc = syncprov_qplay( op, on, so );
   
         /* decrement use count... */          /* decrement use count... */
         syncprov_free_syncop( so );          syncprov_free_syncop( so );
   
           /* wait until we get explicitly scheduled again */
           ldap_pvt_thread_mutex_lock( &slapd_rq.rq_mutex );
           ldap_pvt_runqueue_stoptask( &slapd_rq, rtask );
           if ( rc == 0 ) {
                   ldap_pvt_runqueue_resched( &slapd_rq, rtask, 1 );
           } else {
                   /* bail out on any error */
                   ldap_pvt_runqueue_remove( &slapd_rq, rtask );
           }
           ldap_pvt_thread_mutex_unlock( &slapd_rq.rq_mutex );
   
 #if 0   /* FIXME: connection_close isn't exported from slapd.  #if 0   /* FIXME: connection_close isn't exported from slapd.
                  * should it be?                   * should it be?
                  */                   */
Line 995  static int Line 961  static int
 syncprov_qresp( opcookie *opc, syncops *so, int mode )  syncprov_qresp( opcookie *opc, syncops *so, int mode )
 {  {
         syncres *sr;          syncres *sr;
         int sid, srsize;  
   
         /* Don't send changes back to their originator */  
         sid = slap_parse_csn_sid( &opc->sctxcsn );  
         if ( sid >= 0 && sid == so->s_sid )  
                 return LDAP_SUCCESS;  
   
         srsize = sizeof(syncres) + opc->suuid.bv_len + 1 +          sr = ch_malloc(sizeof(syncres) + opc->suuid.bv_len + 1 +
                 opc->sdn.bv_len + 1 + opc->sndn.bv_len + 1;                  opc->sdn.bv_len + 1 + opc->sndn.bv_len + 1 + opc->sctxcsn.bv_len + 1 );
         if ( opc->sctxcsn.bv_len )  
                 srsize += opc->sctxcsn.bv_len + 1;  
         sr = ch_malloc( srsize );  
         sr->s_next = NULL;          sr->s_next = NULL;
         sr->s_dn.bv_val = (char *)(sr + 1);          sr->s_dn.bv_val = (char *)(sr + 1);
         sr->s_dn.bv_len = opc->sdn.bv_len;          sr->s_dn.bv_len = opc->sdn.bv_len;
Line 1019  syncprov_qresp( opcookie *opc, syncops * Line 976  syncprov_qresp( opcookie *opc, syncops *
                  opc->sndn.bv_val ) + 1;                   opc->sndn.bv_val ) + 1;
         sr->s_uuid.bv_len = opc->suuid.bv_len;          sr->s_uuid.bv_len = opc->suuid.bv_len;
         AC_MEMCPY( sr->s_uuid.bv_val, opc->suuid.bv_val, opc->suuid.bv_len );          AC_MEMCPY( sr->s_uuid.bv_val, opc->suuid.bv_val, opc->suuid.bv_len );
         if ( opc->sctxcsn.bv_len ) {          sr->s_csn.bv_val = sr->s_uuid.bv_val + sr->s_uuid.bv_len + 1;
                 sr->s_csn.bv_val = sr->s_uuid.bv_val + sr->s_uuid.bv_len + 1;  
                 strcpy( sr->s_csn.bv_val, opc->sctxcsn.bv_val );  
         } else {  
                 sr->s_csn.bv_val = NULL;  
         }  
         sr->s_csn.bv_len = opc->sctxcsn.bv_len;          sr->s_csn.bv_len = opc->sctxcsn.bv_len;
           strcpy( sr->s_csn.bv_val, opc->sctxcsn.bv_val );
   
         ldap_pvt_thread_mutex_lock( &so->s_mutex );          ldap_pvt_thread_mutex_lock( &so->s_mutex );
         if ( !so->s_res ) {          if ( !so->s_res ) {
Line 1055  syncprov_drop_psearch( syncops *so, int Line 1008  syncprov_drop_psearch( syncops *so, int
                         ldap_pvt_thread_mutex_lock( &so->s_op->o_conn->c_mutex );                          ldap_pvt_thread_mutex_lock( &so->s_op->o_conn->c_mutex );
                 so->s_op->o_conn->c_n_ops_executing--;                  so->s_op->o_conn->c_n_ops_executing--;
                 so->s_op->o_conn->c_n_ops_completed++;                  so->s_op->o_conn->c_n_ops_completed++;
                 LDAP_STAILQ_REMOVE( &so->s_op->o_conn->c_ops, so->s_op, Operation,                  LDAP_STAILQ_REMOVE( &so->s_op->o_conn->c_ops, so->s_op, slap_op,
                         o_next );                          o_next );
                 if ( lock )                  if ( lock )
                         ldap_pvt_thread_mutex_unlock( &so->s_op->o_conn->c_mutex );                          ldap_pvt_thread_mutex_unlock( &so->s_op->o_conn->c_mutex );
Line 1122  syncprov_matchops( Operation *op, opcook Line 1075  syncprov_matchops( Operation *op, opcook
   
         fbase_cookie fc;          fbase_cookie fc;
         syncops *ss, *sprev, *snext;          syncops *ss, *sprev, *snext;
         Entry *e = NULL;          Entry *e;
         Attribute *a;          Attribute *a;
         int rc;          int rc;
         struct berval newdn;          struct berval newdn;
Line 1144  syncprov_matchops( Operation *op, opcook Line 1097  syncprov_matchops( Operation *op, opcook
                         db = *op->o_bd;                          db = *op->o_bd;
                         op->o_bd = &db;                          op->o_bd = &db;
                 }                  }
                 rc = overlay_entry_get_ov( op, fc.fdn, NULL, NULL, 0, &e, on );                  op->o_bd->bd_info = (BackendInfo *)on->on_info;
                   rc = be_entry_get_rw( op, fc.fdn, NULL, NULL, 0, &e );
                 /* If we're sending responses now, make a copy and unlock the DB */                  /* If we're sending responses now, make a copy and unlock the DB */
                 if ( e && !saveit ) {                  if ( e && !saveit ) {
                         Entry *e2 = entry_dup( e );                          Entry *e2 = entry_dup( e );
                         overlay_entry_release_ov( op, e, 0, on );                          be_entry_release_rw( op, e, 0 );
                         e = e2;                          e = e2;
                 }                  }
                   op->o_bd->bd_info = (BackendInfo *)on;
                 if ( rc ) {                  if ( rc ) {
                         op->o_bd = b0;                          op->o_bd = b0;
                         return;                          return;
Line 1177  syncprov_matchops( Operation *op, opcook Line 1132  syncprov_matchops( Operation *op, opcook
         for (ss = si->si_ops, sprev = (syncops *)&si->si_ops; ss;          for (ss = si->si_ops, sprev = (syncops *)&si->si_ops; ss;
                 sprev = ss, ss=snext)                  sprev = ss, ss=snext)
         {          {
                 Operation op2;  
                 Opheader oh;  
                 syncmatches *sm;                  syncmatches *sm;
                 int found = 0;                  int found = 0;
   
                 snext = ss->s_next;                  snext = ss->s_next;
                 if ( ss->s_op->o_abandon )  
                         continue;  
   
                 /* validate base */                  /* validate base */
                 fc.fss = ss;                  fc.fss = ss;
                 fc.fbase = 0;                  fc.fbase = 0;
Line 1226  syncprov_matchops( Operation *op, opcook Line 1176  syncprov_matchops( Operation *op, opcook
                         }                          }
                 }                  }
   
                 if ( fc.fscope ) {  
                         op2 = *ss->s_op;  
                         oh = *op->o_hdr;  
                         oh.oh_conn = ss->s_op->o_conn;  
                         oh.oh_connid = ss->s_op->o_connid;  
                         op2.o_hdr = &oh;  
                         op2.o_extra = op->o_extra;  
                 }  
   
                 /* check if current o_req_dn is in scope and matches filter */                  /* check if current o_req_dn is in scope and matches filter */
                 if ( fc.fscope && test_filter( &op2, e, ss->s_op->ors_filter ) ==                  if ( fc.fscope && test_filter( op, e, ss->s_op->ors_filter ) ==
                         LDAP_COMPARE_TRUE ) {                          LDAP_COMPARE_TRUE ) {
                         if ( saveit ) {                          if ( saveit ) {
                                 sm = op->o_tmpalloc( sizeof(syncmatches), op->o_tmpmemctx );                                  sm = op->o_tmpalloc( sizeof(syncmatches), op->o_tmpmemctx );
Line 1259  syncprov_matchops( Operation *op, opcook Line 1200  syncprov_matchops( Operation *op, opcook
         ldap_pvt_thread_mutex_unlock( &si->si_ops_mutex );          ldap_pvt_thread_mutex_unlock( &si->si_ops_mutex );
   
         if ( op->o_tag != LDAP_REQ_ADD && e ) {          if ( op->o_tag != LDAP_REQ_ADD && e ) {
                 if ( !SLAP_ISOVERLAY( op->o_bd )) {                  op->o_bd->bd_info = (BackendInfo *)on->on_info;
                         op->o_bd = &db;                  be_entry_release_rw( op, e, 0 );
                 }                  op->o_bd->bd_info = (BackendInfo *)on;
                 overlay_entry_release_ov( op, e, 0, on );  
                 op->o_bd = b0;  
         }          }
         if ( freefdn ) {          if ( freefdn ) {
                 op->o_tmpfree( fc.fdn->bv_val, op->o_tmpmemctx );                  op->o_tmpfree( fc.fdn->bv_val, op->o_tmpmemctx );
Line 1321  syncprov_op_cleanup( Operation *op, Slap Line 1260  syncprov_op_cleanup( Operation *op, Slap
 }  }
   
 static void  static void
 syncprov_checkpoint( Operation *op, SlapReply *rs, slap_overinst *on )  syncprov_checkpoint( Operation *op, SlapReply *rs, slap_overinst *on,
           struct berval *csn )
 {  {
         syncprov_info_t *si = (syncprov_info_t *)on->on_bi.bi_private;  
         Modifications mod;          Modifications mod;
         Operation opm;          Operation opm;
         SlapReply rsm = { 0 };          SlapReply rsm = { 0 };
           struct berval bv[2];
         slap_callback cb = {0};          slap_callback cb = {0};
         BackendDB be;  
   
         mod.sml_numvals = si->si_numcsns;          /* If ctxcsn is empty, delete it */
         mod.sml_values = si->si_ctxcsn;          if ( BER_BVISEMPTY( csn )) {
                   mod.sml_values = NULL;
           } else {
                   mod.sml_values = bv;
                   bv[1].bv_val = NULL;
                   bv[0] = *csn;
           }
         mod.sml_nvalues = NULL;          mod.sml_nvalues = NULL;
         mod.sml_desc = slap_schema.si_ad_contextCSN;          mod.sml_desc = slap_schema.si_ad_contextCSN;
         mod.sml_op = LDAP_MOD_REPLACE;          mod.sml_op = LDAP_MOD_REPLACE;
         mod.sml_flags = SLAP_MOD_INTERNAL;          mod.sml_flags = 0;
         mod.sml_next = NULL;          mod.sml_next = NULL;
   
         cb.sc_response = slap_null_cb;          cb.sc_response = slap_null_cb;
Line 1343  syncprov_checkpoint( Operation *op, Slap Line 1288  syncprov_checkpoint( Operation *op, Slap
         opm.o_tag = LDAP_REQ_MODIFY;          opm.o_tag = LDAP_REQ_MODIFY;
         opm.o_callback = &cb;          opm.o_callback = &cb;
         opm.orm_modlist = &mod;          opm.orm_modlist = &mod;
         opm.orm_no_opattrs = 1;          opm.o_req_dn = op->o_bd->be_suffix[0];
         if ( SLAP_GLUE_SUBORDINATE( op->o_bd )) {          opm.o_req_ndn = op->o_bd->be_nsuffix[0];
                 be = *on->on_info->oi_origdb;  
                 opm.o_bd = &be;  
         }  
         opm.o_req_dn = opm.o_bd->be_suffix[0];  
         opm.o_req_ndn = opm.o_bd->be_nsuffix[0];  
         opm.o_bd->bd_info = on->on_info->oi_orig;          opm.o_bd->bd_info = on->on_info->oi_orig;
         opm.o_managedsait = SLAP_CONTROL_NONCRITICAL;          opm.o_managedsait = SLAP_CONTROL_NONCRITICAL;
         opm.o_no_schema_check = 1;          SLAP_DBFLAGS( opm.o_bd ) |= SLAP_DBFLAG_NOLASTMOD;
         opm.o_bd->be_modify( &opm, &rsm );          opm.o_bd->be_modify( &opm, &rsm );
           SLAP_DBFLAGS( opm.o_bd ) ^= SLAP_DBFLAG_NOLASTMOD;
         if ( mod.sml_next != NULL ) {          if ( mod.sml_next != NULL ) {
                 slap_mods_free( mod.sml_next, 1 );                  slap_mods_free( mod.sml_next, 1 );
         }          }
Line 1384  syncprov_add_slog( Operation *op ) Line 1325  syncprov_add_slog( Operation *op )
                 AC_MEMCPY( se->se_csn.bv_val, op->o_csn.bv_val, op->o_csn.bv_len );                  AC_MEMCPY( se->se_csn.bv_val, op->o_csn.bv_val, op->o_csn.bv_len );
                 se->se_csn.bv_val[op->o_csn.bv_len] = '\0';                  se->se_csn.bv_val[op->o_csn.bv_len] = '\0';
                 se->se_csn.bv_len = op->o_csn.bv_len;                  se->se_csn.bv_len = op->o_csn.bv_len;
                 se->se_sid = slap_parse_csn_sid( &se->se_csn );  
   
                 ldap_pvt_thread_mutex_lock( &sl->sl_mutex );                  ldap_pvt_thread_mutex_lock( &sl->sl_mutex );
                 if ( sl->sl_head ) {                  if ( sl->sl_head ) {
Line 1419  playlog_cb( Operation *op, SlapReply *rs Line 1359  playlog_cb( Operation *op, SlapReply *rs
 /* enter with sl->sl_mutex locked, release before returning */  /* enter with sl->sl_mutex locked, release before returning */
 static void  static void
 syncprov_playlog( Operation *op, SlapReply *rs, sessionlog *sl,  syncprov_playlog( Operation *op, SlapReply *rs, sessionlog *sl,
         sync_control *srs, BerVarray ctxcsn, int numcsns, int *sids )          sync_control *srs, struct berval *ctxcsn )
 {  {
         slap_overinst           *on = (slap_overinst *)op->o_bd->bd_info;          slap_overinst           *on = (slap_overinst *)op->o_bd->bd_info;
         slog_entry *se;          slog_entry *se;
         int i, j, ndel, num, nmods, mmods;          int i, j, ndel, num, nmods, mmods;
         char cbuf[LDAP_LUTIL_CSNSTR_BUFSIZE];          char cbuf[LDAP_LUTIL_CSNSTR_BUFSIZE];
         BerVarray uuids;          BerVarray uuids;
         struct berval delcsn[2];          struct berval delcsn;
   
         if ( !sl->sl_num ) {          if ( !sl->sl_num ) {
                 ldap_pvt_thread_mutex_unlock( &sl->sl_mutex );                  ldap_pvt_thread_mutex_unlock( &sl->sl_mutex );
Line 1441  syncprov_playlog( Operation *op, SlapRep Line 1381  syncprov_playlog( Operation *op, SlapRep
                 num * UUID_LEN, op->o_tmpmemctx );                  num * UUID_LEN, op->o_tmpmemctx );
         uuids[0].bv_val = (char *)(uuids + num + 1);          uuids[0].bv_val = (char *)(uuids + num + 1);
   
         delcsn[0].bv_len = 0;          delcsn.bv_len = 0;
         delcsn[0].bv_val = cbuf;          delcsn.bv_val = cbuf;
         BER_BVZERO(&delcsn[1]);  
   
         /* Make a copy of the relevant UUIDs. Put the Deletes up front          /* Make a copy of the relevant UUIDs. Put the Deletes up front
          * and everything else at the end. Do this first so we can           * and everything else at the end. Do this first so we can
          * unlock the list mutex.           * unlock the list mutex.
          */           */
         Debug( LDAP_DEBUG_SYNC, "srs csn %s\n",  
                 srs->sr_state.ctxcsn[0].bv_val, 0, 0 );  
         for ( se=sl->sl_head; se; se=se->se_next ) {          for ( se=sl->sl_head; se; se=se->se_next ) {
                 int k;                  if ( ber_bvcmp( &se->se_csn, &srs->sr_state.ctxcsn ) <= 0 ) continue;
                 Debug( LDAP_DEBUG_SYNC, "log csn %s\n", se->se_csn.bv_val, 0, 0 );                  if ( ber_bvcmp( &se->se_csn, ctxcsn ) > 0 ) break;
                 ndel = 1;  
                 for ( k=0; k<srs->sr_state.numcsns; k++ ) {  
                         if ( se->se_sid == srs->sr_state.sids[k] ) {  
                                 ndel = ber_bvcmp( &se->se_csn, &srs->sr_state.ctxcsn[k] );  
                                 break;  
                         }  
                 }  
                 if ( ndel <= 0 ) {  
                         Debug( LDAP_DEBUG_SYNC, "cmp %d, too old\n", ndel, 0, 0 );  
                         continue;  
                 }  
                 ndel = 0;  
                 for ( k=0; k<numcsns; k++ ) {  
                         if ( se->se_sid == sids[k] ) {  
                                 ndel = ber_bvcmp( &se->se_csn, &ctxcsn[k] );  
                                 break;  
                         }  
                 }  
                 if ( ndel > 0 ) {  
                         Debug( LDAP_DEBUG_SYNC, "cmp %d, too new\n", ndel, 0, 0 );  
                         break;  
                 }  
                 if ( se->se_tag == LDAP_REQ_DELETE ) {                  if ( se->se_tag == LDAP_REQ_DELETE ) {
                         j = i;                          j = i;
                         i++;                          i++;
                         AC_MEMCPY( cbuf, se->se_csn.bv_val, se->se_csn.bv_len );                          AC_MEMCPY( cbuf, se->se_csn.bv_val, se->se_csn.bv_len );
                         delcsn[0].bv_len = se->se_csn.bv_len;                          delcsn.bv_len = se->se_csn.bv_len;
                         delcsn[0].bv_val[delcsn[0].bv_len] = '\0';                          delcsn.bv_val[delcsn.bv_len] = '\0';
                 } else {                  } else {
                         nmods++;                          nmods++;
                         j = num - nmods;                          j = num - nmods;
Line 1526  syncprov_playlog( Operation *op, SlapRep Line 1441  syncprov_playlog( Operation *op, SlapRep
                 SlapReply frs = { REP_RESULT };                  SlapReply frs = { REP_RESULT };
                 int rc;                  int rc;
                 Filter mf, af;                  Filter mf, af;
                 AttributeAssertion eq = ATTRIBUTEASSERTION_INIT;  #ifdef LDAP_COMP_MATCH
                   AttributeAssertion eq = { NULL, BER_BVNULL, NULL };
   #else
                   AttributeAssertion eq;
   #endif
                 slap_callback cb = {0};                  slap_callback cb = {0};
   
                 fop = *op;                  fop = *op;
Line 1550  syncprov_playlog( Operation *op, SlapRep Line 1469  syncprov_playlog( Operation *op, SlapRep
                 fop.ors_filter = &af;                  fop.ors_filter = &af;
   
                 cb.sc_response = playlog_cb;                  cb.sc_response = playlog_cb;
                 fop.o_bd->bd_info = (BackendInfo *)on->on_info;                  fop.o_bd->bd_info = on->on_info->oi_orig;
   
                 for ( i=ndel; i<num; i++ ) {                  for ( i=ndel; i<num; i++ ) {
                         if ( uuids[i].bv_len == 0 ) continue;                          if ( uuids[i].bv_len == 0 ) continue;
Line 1571  syncprov_playlog( Operation *op, SlapRep Line 1490  syncprov_playlog( Operation *op, SlapRep
         if ( ndel ) {          if ( ndel ) {
                 struct berval cookie;                  struct berval cookie;
   
                 if ( delcsn[0].bv_len ) {                  slap_compose_sync_cookie( op, &cookie, &delcsn, srs->sr_state.rid );
                         slap_compose_sync_cookie( op, &cookie, delcsn, srs->sr_state.rid,  
                                 srs->sr_state.sid );  
   
                         Debug( LDAP_DEBUG_SYNC, "syncprov_playlog: cookie=%s\n", cookie.bv_val, 0, 0 );  
                 }  
   
                 uuids[ndel].bv_val = NULL;                  uuids[ndel].bv_val = NULL;
                 syncprov_sendinfo( op, rs, LDAP_TAG_SYNC_ID_SET,                  syncprov_sendinfo( op, rs, LDAP_TAG_SYNC_ID_SET, &cookie, 0, uuids, 1 );
                         delcsn[0].bv_len ? &cookie : NULL, 0, uuids, 1 );                  op->o_tmpfree( cookie.bv_val, op->o_tmpmemctx );
                 if ( delcsn[0].bv_len ) {  
                         op->o_tmpfree( cookie.bv_val, op->o_tmpmemctx );  
                 }  
         }          }
         op->o_tmpfree( uuids, op->o_tmpmemctx );          op->o_tmpfree( uuids, op->o_tmpmemctx );
 }  }
Line 1600  syncprov_op_response( Operation *op, Sla Line 1510  syncprov_op_response( Operation *op, Sla
         {          {
                 struct berval maxcsn = BER_BVNULL;                  struct berval maxcsn = BER_BVNULL;
                 char cbuf[LDAP_LUTIL_CSNSTR_BUFSIZE];                  char cbuf[LDAP_LUTIL_CSNSTR_BUFSIZE];
                 int do_check = 0, have_psearches;                  int do_check = 0;
   
                 /* Update our context CSN */                  /* Update our context CSN */
                 cbuf[0] = '\0';                  cbuf[0] = '\0';
                 ldap_pvt_thread_rdwr_wlock( &si->si_csn_rwlock );                  ldap_pvt_thread_mutex_lock( &si->si_csn_mutex );
                 slap_get_commit_csn( op, &maxcsn );                  slap_get_commit_csn( op, &maxcsn );
                 if ( BER_BVISNULL( &maxcsn ) && SLAP_GLUE_SUBORDINATE( op->o_bd )) {  
                         /* syncrepl queues the CSN values in the db where  
                          * it is configured , not where the changes are made.  
                          * So look for a value in the glue db if we didn't  
                          * find any in this db.  
                          */  
                         BackendDB *be = op->o_bd;  
                         op->o_bd = select_backend( &be->be_nsuffix[0], 1);  
                         slap_get_commit_csn( op, &maxcsn );  
                         op->o_bd = be;  
                 }  
                 if ( !BER_BVISNULL( &maxcsn ) ) {                  if ( !BER_BVISNULL( &maxcsn ) ) {
                         int i, sid;  
                         strcpy( cbuf, maxcsn.bv_val );                          strcpy( cbuf, maxcsn.bv_val );
                         sid = slap_parse_csn_sid( &maxcsn );                          if ( ber_bvcmp( &maxcsn, &si->si_ctxcsn ) > 0 ) {
                         for ( i=0; i<si->si_numcsns; i++ ) {                                  strcpy( si->si_ctxcsnbuf, cbuf );
                                 if ( sid == si->si_sids[i] ) {                                  si->si_ctxcsn.bv_len = maxcsn.bv_len;
                                         if ( ber_bvcmp( &maxcsn, &si->si_ctxcsn[i] ) > 0 ) {  
                                                 ber_bvreplace( &si->si_ctxcsn[i], &maxcsn );  
                                         }  
                                         break;  
                                 }  
                         }  
                         /* It's a new SID for us */  
                         if ( i == si->si_numcsns ) {  
                                 value_add_one( &si->si_ctxcsn, &maxcsn );  
                                 si->si_numcsns++;  
                                 si->si_sids = ch_realloc( si->si_sids, si->si_numcsns *  
                                         sizeof(int));  
                                 si->si_sids[i] = sid;  
                         }                          }
                 } else {  
                         /* internal ops that aren't meant to be replicated */  
                         ldap_pvt_thread_rdwr_wunlock( &si->si_csn_rwlock );  
                         return SLAP_CB_CONTINUE;  
                 }                  }
   
                 /* Don't do any processing for consumer contextCSN updates */                  /* Don't do any processing for consumer contextCSN updates */
                 if ( SLAP_SYNC_SHADOW( op->o_bd ) &&                   if ( SLAP_SYNC_SHADOW( op->o_bd ) && 
                         op->o_msgid == SLAP_SYNC_UPDATE_MSGID ) {                          op->o_msgid == SLAP_SYNC_UPDATE_MSGID ) {
                         ldap_pvt_thread_rdwr_wunlock( &si->si_csn_rwlock );                          ldap_pvt_thread_mutex_unlock( &si->si_csn_mutex );
                         return SLAP_CB_CONTINUE;                          return SLAP_CB_CONTINUE;
                 }                  }
   
Line 1658  syncprov_op_response( Operation *op, Sla Line 1539  syncprov_op_response( Operation *op, Sla
                         }                          }
                         if ( si->si_chktime &&                          if ( si->si_chktime &&
                                 (op->o_time - si->si_chklast >= si->si_chktime )) {                                  (op->o_time - si->si_chklast >= si->si_chktime )) {
                                 if ( si->si_chklast ) {                                  do_check = 1;
                                         do_check = 1;                                  si->si_chklast = op->o_time;
                                         si->si_chklast = op->o_time;  
                                 } else {  
                                         si->si_chklast = 1;  
                                 }  
                         }                          }
                 }                  }
                 ldap_pvt_thread_rdwr_wunlock( &si->si_csn_rwlock );                  ldap_pvt_thread_mutex_unlock( &si->si_csn_mutex );
   
                 if ( do_check ) {  
                         ldap_pvt_thread_rdwr_rlock( &si->si_csn_rwlock );  
                         syncprov_checkpoint( op, rs, on );  
                         ldap_pvt_thread_rdwr_runlock( &si->si_csn_rwlock );  
                 }  
   
                 opc->sctxcsn.bv_len = maxcsn.bv_len;                  opc->sctxcsn.bv_len = maxcsn.bv_len;
                 opc->sctxcsn.bv_val = cbuf;                  opc->sctxcsn.bv_val = cbuf;
   
                   if ( do_check ) {
                           syncprov_checkpoint( op, rs, on, &opc->sctxcsn );
                   }
   
                 /* Handle any persistent searches */                  /* Handle any persistent searches */
                 ldap_pvt_thread_mutex_lock( &si->si_ops_mutex );                  if ( si->si_ops ) {
                 have_psearches = ( si->si_ops != NULL );  
                 ldap_pvt_thread_mutex_unlock( &si->si_ops_mutex );  
                 if ( have_psearches ) {  
                         switch(op->o_tag) {                          switch(op->o_tag) {
                         case LDAP_REQ_ADD:                          case LDAP_REQ_ADD:
                         case LDAP_REQ_MODIFY:                          case LDAP_REQ_MODIFY:
Line 1727  syncprov_op_compare( Operation *op, Slap Line 1599  syncprov_op_compare( Operation *op, Slap
         {          {
                 Entry e = {0};                  Entry e = {0};
                 Attribute a = {0};                  Attribute a = {0};
                   struct berval bv[2];
   
                 e.e_name = op->o_bd->be_suffix[0];                  e.e_name = op->o_bd->be_suffix[0];
                 e.e_nname = op->o_bd->be_nsuffix[0];                  e.e_nname = op->o_bd->be_nsuffix[0];
                 e.e_attrs = &a;  
   
                 a.a_desc = slap_schema.si_ad_contextCSN;                  BER_BVZERO( &bv[1] );
                   bv[0] = si->si_ctxcsn;
                 ldap_pvt_thread_rdwr_rlock( &si->si_csn_rwlock );  
   
                 a.a_vals = si->si_ctxcsn;                  a.a_desc = slap_schema.si_ad_contextCSN;
                   a.a_vals = bv;
                 a.a_nvals = a.a_vals;                  a.a_nvals = a.a_vals;
   
                   ldap_pvt_thread_mutex_lock( &si->si_csn_mutex );
   
                 rs->sr_err = access_allowed( op, &e, op->oq_compare.rs_ava->aa_desc,                  rs->sr_err = access_allowed( op, &e, op->oq_compare.rs_ava->aa_desc,
                         &op->oq_compare.rs_ava->aa_value, ACL_COMPARE, NULL );                          &op->oq_compare.rs_ava->aa_value, ACL_COMPARE, NULL );
                 if ( ! rs->sr_err ) {                  if ( ! rs->sr_err ) {
Line 1756  syncprov_op_compare( Operation *op, Slap Line 1630  syncprov_op_compare( Operation *op, Slap
   
                 rs->sr_err = LDAP_COMPARE_FALSE;                  rs->sr_err = LDAP_COMPARE_FALSE;
   
                 if ( attr_valfind( &a,                  if ( value_find_ex( op->oq_compare.rs_ava->aa_desc,
                         SLAP_MR_ATTRIBUTE_VALUE_NORMALIZED_MATCH |                          SLAP_MR_ATTRIBUTE_VALUE_NORMALIZED_MATCH |
                                 SLAP_MR_ASSERTED_VALUE_NORMALIZED_MATCH,                                  SLAP_MR_ASSERTED_VALUE_NORMALIZED_MATCH,
                                 &op->oq_compare.rs_ava->aa_value, NULL, op->o_tmpmemctx ) == 0 )                                  a.a_nvals, &op->oq_compare.rs_ava->aa_value, op->o_tmpmemctx ) == 0 )
                 {                  {
                         rs->sr_err = LDAP_COMPARE_TRUE;                          rs->sr_err = LDAP_COMPARE_TRUE;
                 }                  }
   
 return_results:;  return_results:;
   
                 ldap_pvt_thread_rdwr_runlock( &si->si_csn_rwlock );                  ldap_pvt_thread_mutex_unlock( &si->si_csn_mutex );
   
                 send_ldap_result( op, rs );                  send_ldap_result( op, rs );
   
Line 1784  syncprov_op_mod( Operation *op, SlapRepl Line 1658  syncprov_op_mod( Operation *op, SlapRepl
 {  {
         slap_overinst           *on = (slap_overinst *)op->o_bd->bd_info;          slap_overinst           *on = (slap_overinst *)op->o_bd->bd_info;
         syncprov_info_t         *si = on->on_bi.bi_private;          syncprov_info_t         *si = on->on_bi.bi_private;
         slap_callback *cb;  
         opcookie *opc;  
         int have_psearches, cbsize;  
   
         ldap_pvt_thread_mutex_lock( &si->si_ops_mutex );  
         have_psearches = ( si->si_ops != NULL );  
         ldap_pvt_thread_mutex_unlock( &si->si_ops_mutex );  
   
         cbsize = sizeof(slap_callback) + sizeof(opcookie) +  
                 (have_psearches ? sizeof(modinst) : 0 );  
   
         cb = op->o_tmpcalloc(1, cbsize, op->o_tmpmemctx);          slap_callback *cb = op->o_tmpcalloc(1, sizeof(slap_callback)+
         opc = (opcookie *)(cb+1);                  sizeof(opcookie) +
                   (si->si_ops ? sizeof(modinst) : 0 ),
                   op->o_tmpmemctx);
           opcookie *opc = (opcookie *)(cb+1);
         opc->son = on;          opc->son = on;
         cb->sc_response = syncprov_op_response;          cb->sc_response = syncprov_op_response;
         cb->sc_cleanup = syncprov_op_cleanup;          cb->sc_cleanup = syncprov_op_cleanup;
Line 1807  syncprov_op_mod( Operation *op, SlapRepl Line 1674  syncprov_op_mod( Operation *op, SlapRepl
         /* If there are active persistent searches, lock this operation.          /* If there are active persistent searches, lock this operation.
          * See seqmod.c for the locking logic on its own.           * See seqmod.c for the locking logic on its own.
          */           */
         if ( have_psearches ) {          if ( si->si_ops ) {
                 modtarget *mt, mtdummy;                  modtarget *mt, mtdummy;
                 modinst *mi;                  modinst *mi;
   
Line 1826  syncprov_op_mod( Operation *op, SlapRepl Line 1693  syncprov_op_mod( Operation *op, SlapRepl
                         /* wait for this op to get to head of list */                          /* wait for this op to get to head of list */
                         while ( mt->mt_mods != mi ) {                          while ( mt->mt_mods != mi ) {
                                 ldap_pvt_thread_mutex_unlock( &mt->mt_mutex );                                  ldap_pvt_thread_mutex_unlock( &mt->mt_mutex );
                                 /* FIXME: if dynamic config can delete overlays or                                  ldap_pvt_thread_yield();
                                  * databases we'll have to check for cleanup here.  
                                  * Currently it's not an issue because there are  
                                  * no dynamic config deletes...  
                                  */  
                                 if ( !ldap_pvt_thread_pool_pausecheck( &connection_pool ))  
                                         ldap_pvt_thread_yield();  
                                 ldap_pvt_thread_mutex_lock( &mt->mt_mutex );                                  ldap_pvt_thread_mutex_lock( &mt->mt_mutex );
   
                                 /* clean up if the caller is giving up */                                  /* clean up if the caller is giving up */
Line 1860  syncprov_op_mod( Operation *op, SlapRepl Line 1721  syncprov_op_mod( Operation *op, SlapRepl
                 }                  }
         }          }
   
         if (( have_psearches || si->si_logs ) && op->o_tag != LDAP_REQ_ADD )          if (( si->si_ops || si->si_logs ) && op->o_tag != LDAP_REQ_ADD )
                 syncprov_matchops( op, opc, 1 );                  syncprov_matchops( op, opc, 1 );
   
         return SLAP_CB_CONTINUE;          return SLAP_CB_CONTINUE;
Line 1878  syncprov_op_extended( Operation *op, Sla Line 1739  syncprov_op_extended( Operation *op, Sla
 typedef struct searchstate {  typedef struct searchstate {
         slap_overinst *ss_on;          slap_overinst *ss_on;
         syncops *ss_so;          syncops *ss_so;
         BerVarray ss_ctxcsn;          int ss_present;
         int *ss_sids;          struct berval ss_ctxcsn;
         int ss_numcsns;          char ss_csnbuf[LDAP_LUTIL_CSNSTR_BUFSIZE];
 #define SS_PRESENT      0x01  
 #define SS_CHANGED      0x02  
         int ss_flags;  
 } searchstate;  } searchstate;
   
 static int  static int
Line 1897  syncprov_search_cleanup( Operation *op, Line 1755  syncprov_search_cleanup( Operation *op,
         return 0;          return 0;
 }  }
   
 typedef struct SyncOperationBuffer {  
         Operation               sob_op;  
         Opheader                sob_hdr;  
         OpExtra                 sob_oe;  
         AttributeName   sob_extra;      /* not always present */  
         /* Further data allocated here */  
 } SyncOperationBuffer;  
   
 static void  static void
 syncprov_detach_op( Operation *op, syncops *so, slap_overinst *on )  syncprov_detach_op( Operation *op, syncops *so, slap_overinst *on )
 {  {
         SyncOperationBuffer *sopbuf2;  
         Operation *op2;          Operation *op2;
         int i, alen = 0;          int i, alen = 0;
         size_t size;          size_t size;
Line 1920  syncprov_detach_op( Operation *op, synco Line 1769  syncprov_detach_op( Operation *op, synco
                 alen += op->ors_attrs[i].an_name.bv_len + 1;                  alen += op->ors_attrs[i].an_name.bv_len + 1;
         }          }
         /* Make a new copy of the operation */          /* Make a new copy of the operation */
         size = offsetof( SyncOperationBuffer, sob_extra ) +          size = sizeof(Operation) + sizeof(Opheader) +
                 (i ? ( (i+1) * sizeof(AttributeName) + alen) : 0) +                  (i ? ( (i+1) * sizeof(AttributeName) + alen) : 0) +
                 op->o_req_dn.bv_len + 1 +                  op->o_req_dn.bv_len + 1 +
                 op->o_req_ndn.bv_len + 1 +                  op->o_req_ndn.bv_len + 1 +
                 op->o_ndn.bv_len + 1 +                  op->o_ndn.bv_len + 1 +
                 so->s_filterstr.bv_len + 1;                  so->s_filterstr.bv_len + 1;
         sopbuf2 = ch_calloc( 1, size );          op2 = (Operation *)ch_calloc( 1, size );
         op2 = &sopbuf2->sob_op;          op2->o_hdr = (Opheader *)(op2+1);
         op2->o_hdr = &sopbuf2->sob_hdr;  
         LDAP_SLIST_FIRST(&op2->o_extra) = &sopbuf2->sob_oe;  
   
         /* Copy the fields we care about explicitly, leave the rest alone */          /* Copy the fields we care about explicitly, leave the rest alone */
         *op2->o_hdr = *op->o_hdr;          *op2->o_hdr = *op->o_hdr;
Line 1937  syncprov_detach_op( Operation *op, synco Line 1784  syncprov_detach_op( Operation *op, synco
         op2->o_time = op->o_time;          op2->o_time = op->o_time;
         op2->o_bd = on->on_info->oi_origdb;          op2->o_bd = on->on_info->oi_origdb;
         op2->o_request = op->o_request;          op2->o_request = op->o_request;
         LDAP_SLIST_FIRST(&op2->o_extra)->oe_key = on;          op2->o_private = on;
         LDAP_SLIST_NEXT(LDAP_SLIST_FIRST(&op2->o_extra), oe_next) = NULL;  
   
         ptr = (char *) sopbuf2 + offsetof( SyncOperationBuffer, sob_extra );  
         if ( i ) {          if ( i ) {
                 op2->ors_attrs = (AttributeName *) ptr;                  op2->ors_attrs = (AttributeName *)(op2->o_hdr + 1);
                 ptr = (char *) &op2->ors_attrs[i+1];                  ptr = (char *)(op2->ors_attrs+i+1);
                 for (i=0; !BER_BVISNULL( &op->ors_attrs[i].an_name ); i++) {                  for (i=0; !BER_BVISNULL( &op->ors_attrs[i].an_name ); i++) {
                         op2->ors_attrs[i] = op->ors_attrs[i];                          op2->ors_attrs[i] = op->ors_attrs[i];
                         op2->ors_attrs[i].an_name.bv_val = ptr;                          op2->ors_attrs[i].an_name.bv_val = ptr;
                         ptr = lutil_strcopy( ptr, op->ors_attrs[i].an_name.bv_val ) + 1;                          ptr = lutil_strcopy( ptr, op->ors_attrs[i].an_name.bv_val ) + 1;
                 }                  }
                 BER_BVZERO( &op2->ors_attrs[i].an_name );                  BER_BVZERO( &op2->ors_attrs[i].an_name );
           } else {
                   ptr = (char *)(op2->o_hdr + 1);
         }          }
   
         op2->o_authz = op->o_authz;          op2->o_authz = op->o_authz;
         op2->o_ndn.bv_val = ptr;          op2->o_ndn.bv_val = ptr;
         ptr = lutil_strcopy(ptr, op->o_ndn.bv_val) + 1;          ptr = lutil_strcopy(ptr, op->o_ndn.bv_val) + 1;
Line 1989  syncprov_detach_op( Operation *op, synco Line 1835  syncprov_detach_op( Operation *op, synco
         op2->o_do_not_cache = 1;          op2->o_do_not_cache = 1;
   
         /* Add op2 to conn so abandon will find us */          /* Add op2 to conn so abandon will find us */
           ldap_pvt_thread_mutex_lock( &op->o_conn->c_mutex );
         op->o_conn->c_n_ops_executing++;          op->o_conn->c_n_ops_executing++;
         op->o_conn->c_n_ops_completed--;          op->o_conn->c_n_ops_completed--;
         LDAP_STAILQ_INSERT_TAIL( &op->o_conn->c_ops, op2, o_next );          LDAP_STAILQ_INSERT_TAIL( &op->o_conn->c_ops, op2, o_next );
         so->s_flags |= PS_IS_DETACHED;          so->s_flags |= PS_IS_DETACHED;
           ldap_pvt_thread_mutex_unlock( &op->o_conn->c_mutex );
   
         /* Prevent anyone else from trying to send a result for this op */          /* Prevent anyone else from trying to send a result for this op */
         op->o_abandon = 1;          op->o_abandon = 1;
Line 2003  syncprov_search_response( Operation *op, Line 1851  syncprov_search_response( Operation *op,
 {  {
         searchstate *ss = op->o_callback->sc_private;          searchstate *ss = op->o_callback->sc_private;
         slap_overinst *on = ss->ss_on;          slap_overinst *on = ss->ss_on;
         syncprov_info_t *si = (syncprov_info_t *)on->on_bi.bi_private;  
         sync_control *srs = op->o_controls[slap_cids.sc_LDAPsync];          sync_control *srs = op->o_controls[slap_cids.sc_LDAPsync];
   
         if ( rs->sr_type == REP_SEARCH || rs->sr_type == REP_SEARCHREF ) {          if ( rs->sr_type == REP_SEARCH || rs->sr_type == REP_SEARCHREF ) {
Line 2023  syncprov_search_response( Operation *op, Line 1870  syncprov_search_response( Operation *op,
                         a = attr_find( rs->sr_operational_attrs, slap_schema.si_ad_entryCSN );                          a = attr_find( rs->sr_operational_attrs, slap_schema.si_ad_entryCSN );
                 }                  }
                 if ( a ) {                  if ( a ) {
                         int i, sid;                          /* Make sure entry is less than the snapshot'd contextCSN */
                         sid = slap_parse_csn_sid( &a->a_nvals[0] );                          if ( ber_bvcmp( &a->a_nvals[0], &ss->ss_ctxcsn ) > 0 ) {
                                   Debug( LDAP_DEBUG_SYNC, "Entry %s CSN %s greater than snapshot %s\n",
                         /* Don't send changed entries back to the originator */                                          rs->sr_entry->e_name.bv_val,
                         if ( sid == srs->sr_state.sid && srs->sr_state.numcsns ) {                                          a->a_nvals[0].bv_val,
                                 Debug( LDAP_DEBUG_SYNC,                                          ss->ss_ctxcsn.bv_val );
                                         "Entry %s changed by peer, ignored\n",  
                                         rs->sr_entry->e_name.bv_val, 0, 0 );  
                                 return LDAP_SUCCESS;                                  return LDAP_SUCCESS;
                         }                          }
   
                         /* If not a persistent search */                          /* Don't send the ctx entry twice */
                         if ( !ss->ss_so ) {                          if ( !BER_BVISNULL( &srs->sr_state.ctxcsn ) &&
                                 /* Make sure entry is less than the snapshot'd contextCSN */                                  bvmatch( &a->a_nvals[0], &srs->sr_state.ctxcsn ) ) {
                                 for ( i=0; i<ss->ss_numcsns; i++ ) {                                  Debug( LDAP_DEBUG_SYNC, "Entry %s CSN %s matches ctx %s\n",
                                         if ( sid == ss->ss_sids[i] && ber_bvcmp( &a->a_nvals[0],                                          rs->sr_entry->e_name.bv_val,
                                                 &ss->ss_ctxcsn[i] ) > 0 ) {                                          a->a_nvals[0].bv_val,
                                                 Debug( LDAP_DEBUG_SYNC,                                          srs->sr_state.ctxcsn.bv_val );
                                                         "Entry %s CSN %s greater than snapshot %s\n",                                  return LDAP_SUCCESS;
                                                         rs->sr_entry->e_name.bv_val,  
                                                         a->a_nvals[0].bv_val,  
                                                         ss->ss_ctxcsn[i].bv_val );  
                                                 return LDAP_SUCCESS;  
                                         }  
                                 }  
                         }  
   
                         /* Don't send old entries twice */  
                         if ( srs->sr_state.ctxcsn ) {  
                                 for ( i=0; i<srs->sr_state.numcsns; i++ ) {  
                                         if ( sid == srs->sr_state.sids[i] &&  
                                                 ber_bvcmp( &a->a_nvals[0],  
                                                         &srs->sr_state.ctxcsn[i] )<= 0 ) {  
                                                 Debug( LDAP_DEBUG_SYNC,  
                                                         "Entry %s CSN %s older or equal to ctx %s\n",  
                                                         rs->sr_entry->e_name.bv_val,  
                                                         a->a_nvals[0].bv_val,  
                                                         srs->sr_state.ctxcsn[i].bv_val );  
                                                 return LDAP_SUCCESS;  
                                         }  
                                 }  
                         }                          }
                 }                  }
                 rs->sr_ctrls = op->o_tmpalloc( sizeof(LDAPControl *)*2,                  rs->sr_ctrls = op->o_tmpalloc( sizeof(LDAPControl *)*2,
                         op->o_tmpmemctx );                          op->o_tmpmemctx );
                 rs->sr_ctrls[1] = NULL;                  rs->sr_ctrls[1] = NULL;
                 /* If we're in delta-sync mode, always send a cookie */                  rs->sr_err = syncprov_state_ctrl( op, rs, rs->sr_entry,
                 if ( si->si_nopres && si->si_usehint && a ) {                          LDAP_SYNC_ADD, rs->sr_ctrls, 0, 0, NULL );
                         struct berval cookie;  
                         slap_compose_sync_cookie( op, &cookie, a->a_nvals, srs->sr_state.rid, srs->sr_state.sid );  
                         rs->sr_err = syncprov_state_ctrl( op, rs, rs->sr_entry,  
                                 LDAP_SYNC_ADD, rs->sr_ctrls, 0, 1, &cookie );  
                 } else {  
                         rs->sr_err = syncprov_state_ctrl( op, rs, rs->sr_entry,  
                                 LDAP_SYNC_ADD, rs->sr_ctrls, 0, 0, NULL );  
                 }  
         } else if ( rs->sr_type == REP_RESULT && rs->sr_err == LDAP_SUCCESS ) {          } else if ( rs->sr_type == REP_RESULT && rs->sr_err == LDAP_SUCCESS ) {
                 struct berval cookie;                  struct berval cookie;
   
                 if ( ss->ss_flags & SS_CHANGED ) {                  slap_compose_sync_cookie( op, &cookie, &ss->ss_ctxcsn,
                         slap_compose_sync_cookie( op, &cookie, ss->ss_ctxcsn,                          srs->sr_state.rid );
                                 srs->sr_state.rid, srs->sr_state.sid );  
   
                         Debug( LDAP_DEBUG_SYNC, "syncprov_search_response: cookie=%s\n", cookie.bv_val, 0, 0 );                  /* Is this a regular refresh? */
                 }  
   
                 /* Is this a regular refresh?  
                  * Note: refresh never gets here if there were no changes  
                  */  
                 if ( !ss->ss_so ) {                  if ( !ss->ss_so ) {
                         rs->sr_ctrls = op->o_tmpalloc( sizeof(LDAPControl *)*2,                          rs->sr_ctrls = op->o_tmpalloc( sizeof(LDAPControl *)*2,
                                 op->o_tmpmemctx );                                  op->o_tmpmemctx );
                         rs->sr_ctrls[1] = NULL;                          rs->sr_ctrls[1] = NULL;
                         rs->sr_err = syncprov_done_ctrl( op, rs, rs->sr_ctrls,                          rs->sr_err = syncprov_done_ctrl( op, rs, rs->sr_ctrls,
                                 0, 1, &cookie, ( ss->ss_flags & SS_PRESENT ) ?  LDAP_SYNC_REFRESH_PRESENTS :                                  0, 1, &cookie, ss->ss_present ?  LDAP_SYNC_REFRESH_PRESENTS :
                                         LDAP_SYNC_REFRESH_DELETES );                                          LDAP_SYNC_REFRESH_DELETES );
                         op->o_tmpfree( cookie.bv_val, op->o_tmpmemctx );                          op->o_tmpfree( cookie.bv_val, op->o_tmpmemctx );
                 } else {                  } else {
                 /* It's RefreshAndPersist, transition to Persist phase */                  /* It's RefreshAndPersist, transition to Persist phase */
                         syncprov_sendinfo( op, rs, ( ss->ss_flags & SS_PRESENT ) ?                          syncprov_sendinfo( op, rs, ss->ss_present ?
                                 LDAP_TAG_SYNC_REFRESH_PRESENT : LDAP_TAG_SYNC_REFRESH_DELETE,                                  LDAP_TAG_SYNC_REFRESH_PRESENT : LDAP_TAG_SYNC_REFRESH_DELETE,
                                 ( ss->ss_flags & SS_CHANGED ) ? &cookie : NULL,                                  &cookie, 1, NULL, 0 );
                                 1, NULL, 0 );                          op->o_tmpfree( cookie.bv_val, op->o_tmpmemctx );
                         if ( ss->ss_flags & SS_CHANGED )  
                                 op->o_tmpfree( cookie.bv_val, op->o_tmpmemctx );  
   
                         /* Detach this Op from frontend control */                          /* Detach this Op from frontend control */
                         ldap_pvt_thread_mutex_lock( &ss->ss_so->s_mutex );                          ldap_pvt_thread_mutex_lock( &ss->ss_so->s_mutex );
                         ldap_pvt_thread_mutex_lock( &op->o_conn->c_mutex );  
   
                         /* But not if this connection was closed along the way */  
                         if ( op->o_abandon ) {  
                                 ldap_pvt_thread_mutex_unlock( &op->o_conn->c_mutex );  
                                 ldap_pvt_thread_mutex_unlock( &ss->ss_so->s_mutex );  
                                 /* syncprov_ab_cleanup will free this syncop */  
                                 return SLAPD_ABANDON;  
   
                         } else {                          /* Turn off the refreshing flag */
                                 /* Turn off the refreshing flag */                          ss->ss_so->s_flags ^= PS_IS_REFRESHING;
                                 ss->ss_so->s_flags ^= PS_IS_REFRESHING;  
   
                                 syncprov_detach_op( op, ss->ss_so, on );                          syncprov_detach_op( op, ss->ss_so, on );
   
                                 ldap_pvt_thread_mutex_unlock( &op->o_conn->c_mutex );                          /* If there are queued responses, fire them off */
                           if ( ss->ss_so->s_res )
                                 /* If there are queued responses, fire them off */                                  syncprov_qstart( ss->ss_so );
                                 if ( ss->ss_so->s_res )  
                                         syncprov_qstart( ss->ss_so );  
                         }  
                         ldap_pvt_thread_mutex_unlock( &ss->ss_so->s_mutex );                          ldap_pvt_thread_mutex_unlock( &ss->ss_so->s_mutex );
   
                         return LDAP_SUCCESS;                          return LDAP_SUCCESS;
Line 2147  syncprov_op_search( Operation *op, SlapR Line 1942  syncprov_op_search( Operation *op, SlapR
         slap_overinst           *on = (slap_overinst *)op->o_bd->bd_info;          slap_overinst           *on = (slap_overinst *)op->o_bd->bd_info;
         syncprov_info_t         *si = (syncprov_info_t *)on->on_bi.bi_private;          syncprov_info_t         *si = (syncprov_info_t *)on->on_bi.bi_private;
         slap_callback   *cb;          slap_callback   *cb;
         int gotstate = 0, changed = 0, do_present = 0;          int gotstate = 0, nochange = 0, do_present;
         syncops *sop = NULL;          syncops *sop = NULL;
         searchstate *ss;          searchstate *ss;
         sync_control *srs;          sync_control *srs;
         BerVarray ctxcsn;          struct berval ctxcsn;
         int i, *sids, numcsns;          char csnbuf[LDAP_LUTIL_CSNSTR_BUFSIZE];
         struct berval mincsn;  
   
         if ( !(op->o_sync_mode & SLAP_SYNC_REFRESH) ) return SLAP_CB_CONTINUE;          if ( !(op->o_sync_mode & SLAP_SYNC_REFRESH) ) return SLAP_CB_CONTINUE;
   
Line 2162  syncprov_op_search( Operation *op, SlapR Line 1956  syncprov_op_search( Operation *op, SlapR
                 return rs->sr_err;                  return rs->sr_err;
         }          }
   
           do_present = si->si_nopres ? 0 : 1;
   
         srs = op->o_controls[slap_cids.sc_LDAPsync];          srs = op->o_controls[slap_cids.sc_LDAPsync];
         op->o_managedsait = SLAP_CONTROL_NONCRITICAL;          op->o_managedsait = SLAP_CONTROL_NONCRITICAL;
   
Line 2195  syncprov_op_search( Operation *op, SlapR Line 1991  syncprov_op_search( Operation *op, SlapR
                 *sop = so;                  *sop = so;
                 ldap_pvt_thread_mutex_init( &sop->s_mutex );                  ldap_pvt_thread_mutex_init( &sop->s_mutex );
                 sop->s_rid = srs->sr_state.rid;                  sop->s_rid = srs->sr_state.rid;
                 sop->s_sid = srs->sr_state.sid;  
                 sop->s_inuse = 1;                  sop->s_inuse = 1;
   
                 ldap_pvt_thread_mutex_lock( &si->si_ops_mutex );                  ldap_pvt_thread_mutex_lock( &si->si_ops_mutex );
Line 2205  syncprov_op_search( Operation *op, SlapR Line 2000  syncprov_op_search( Operation *op, SlapR
         }          }
   
         /* snapshot the ctxcsn */          /* snapshot the ctxcsn */
         ldap_pvt_thread_rdwr_rlock( &si->si_csn_rwlock );          ldap_pvt_thread_mutex_lock( &si->si_csn_mutex );
         numcsns = si->si_numcsns;          strcpy( csnbuf, si->si_ctxcsnbuf );
         if ( numcsns ) {          ctxcsn.bv_len = si->si_ctxcsn.bv_len;
                 ber_bvarray_dup_x( &ctxcsn, si->si_ctxcsn, op->o_tmpmemctx );          ldap_pvt_thread_mutex_unlock( &si->si_csn_mutex );
                 sids = op->o_tmpalloc( numcsns * sizeof(int), op->o_tmpmemctx );          ctxcsn.bv_val = csnbuf;
                 for ( i=0; i<numcsns; i++ )  
                         sids[i] = si->si_sids[i];  
         } else {  
                 ctxcsn = NULL;  
                 sids = NULL;  
         }  
         ldap_pvt_thread_rdwr_runlock( &si->si_csn_rwlock );  
                   
         /* If we have a cookie, handle the PRESENT lookups */          /* If we have a cookie, handle the PRESENT lookups */
         if ( srs->sr_state.ctxcsn ) {          if ( !BER_BVISNULL( &srs->sr_state.ctxcsn )) {
                 sessionlog *sl;                  sessionlog *sl;
                 int i, j;  
   
                 /* If we don't have any CSN of our own yet, pretend nothing                  /* The cookie was validated when it was parsed, just use it */
                  * has changed.  
                  */  
                 if ( !numcsns )  
                         goto no_change;  
   
                 if ( !si->si_nopres )  
                         do_present = SS_PRESENT;  
   
                 /* If there are SIDs we don't recognize in the cookie, drop them */  
                 for (i=0; i<srs->sr_state.numcsns; ) {  
                         for (j=0; j<numcsns; j++) {  
                                 if ( srs->sr_state.sids[i] == sids[j] ) {  
                                         break;  
                                 }  
                         }  
                         /* not found */  
                         if ( j == numcsns ) {  
                                 struct berval tmp = srs->sr_state.ctxcsn[i];  
                                 j = srs->sr_state.numcsns - 1;  
                                 srs->sr_state.ctxcsn[i] = srs->sr_state.ctxcsn[j];  
                                 tmp.bv_len = 0;  
                                 srs->sr_state.ctxcsn[j] = tmp;  
                                 srs->sr_state.numcsns = j;  
                                 srs->sr_state.sids[i] = srs->sr_state.sids[j];  
                                 continue;  
                         }  
                         i++;  
                 }  
   
                 /* Find the smallest CSN */  
                 mincsn = srs->sr_state.ctxcsn[0];  
                 for ( i=1; i<srs->sr_state.numcsns; i++ ) {  
                         if ( ber_bvcmp( &mincsn, &srs->sr_state.ctxcsn[i] ) > 0 )  
                                 mincsn = srs->sr_state.ctxcsn[i];  
                 }  
   
                 /* If nothing has changed, shortcut it */                  /* If just Refreshing and nothing has changed, shortcut it */
                 if ( srs->sr_state.numcsns == numcsns ) {                  if ( bvmatch( &srs->sr_state.ctxcsn, &ctxcsn )) {
                         int i, j;                          nochange = 1;
                         for ( i=0; i<srs->sr_state.numcsns; i++ ) {                          if ( !(op->o_sync_mode & SLAP_SYNC_PERSIST) ) {
                                 for ( j=0; j<numcsns; j++ ) {                                  LDAPControl     *ctrls[2];
                                         if ( srs->sr_state.sids[i] != sids[j] )  
                                                 continue;                                  ctrls[0] = NULL;
                                         if ( !bvmatch( &srs->sr_state.ctxcsn[i], &ctxcsn[j] ))                                  ctrls[1] = NULL;
                                                 changed = SS_CHANGED;                                  syncprov_done_ctrl( op, rs, ctrls, 0, 0,
                                         break;                                          NULL, LDAP_SYNC_REFRESH_DELETES );
                                 }                                  rs->sr_ctrls = ctrls;
                                 if ( changed )                                  rs->sr_err = LDAP_SUCCESS;
                                         break;                                  send_ldap_result( op, rs );
                         }                                  rs->sr_ctrls = NULL;
                         if ( !changed ) {                                  return rs->sr_err;
                                 do_present = 0;  
 no_change:              if ( !(op->o_sync_mode & SLAP_SYNC_PERSIST) ) {  
                                         LDAPControl     *ctrls[2];  
   
                                         ctrls[0] = NULL;  
                                         ctrls[1] = NULL;  
                                         syncprov_done_ctrl( op, rs, ctrls, 0, 0,  
                                                 NULL, LDAP_SYNC_REFRESH_DELETES );  
                                         rs->sr_ctrls = ctrls;  
                                         rs->sr_err = LDAP_SUCCESS;  
                                         send_ldap_result( op, rs );  
                                         rs->sr_ctrls = NULL;  
                                         return rs->sr_err;  
                                 }  
                                 goto shortcut;  
                         }                          }
                 } else {                          goto shortcut;
                         /* consumer doesn't have the right number of CSNs */  
                         changed = SS_CHANGED;  
                 }                  }
                 /* Do we have a sessionlog for this search? */                  /* Do we have a sessionlog for this search? */
                 sl=si->si_logs;                  sl=si->si_logs;
Line 2302  no_change:  if ( !(op->o_sync_mode & SLA Line 2037  no_change:  if ( !(op->o_sync_mode & SLA
                         /* Are there any log entries, and is the consumer state                          /* Are there any log entries, and is the consumer state
                          * present in the session log?                           * present in the session log?
                          */                           */
                         if ( sl->sl_num > 0 && ber_bvcmp( &mincsn, &sl->sl_mincsn ) >= 0 ) {                          if ( sl->sl_num > 0 && ber_bvcmp( &srs->sr_state.ctxcsn, &sl->sl_mincsn ) >= 0 ) {
                                 do_present = 0;                                  do_present = 0;
                                 /* mutex is unlocked in playlog */                                  /* mutex is unlocked in playlog */
                                 syncprov_playlog( op, rs, sl, srs, ctxcsn, numcsns, sids );                                  syncprov_playlog( op, rs, sl, srs, &ctxcsn );
                         } else {                          } else {
                                 ldap_pvt_thread_mutex_unlock( &sl->sl_mutex );                                  ldap_pvt_thread_mutex_unlock( &sl->sl_mutex );
                         }                          }
Line 2315  no_change:  if ( !(op->o_sync_mode & SLA Line 2050  no_change:  if ( !(op->o_sync_mode & SLA
                         /* No, so a reload is required */                          /* No, so a reload is required */
                         /* the 2.2 consumer doesn't send this hint */                          /* the 2.2 consumer doesn't send this hint */
                         if ( si->si_usehint && srs->sr_rhint == 0 ) {                          if ( si->si_usehint && srs->sr_rhint == 0 ) {
                                 if ( ctxcsn )  
                                         ber_bvarray_free_x( ctxcsn, op->o_tmpmemctx );  
                                 if ( sids )  
                                         op->o_tmpfree( sids, op->o_tmpmemctx );  
                                 send_ldap_error( op, rs, LDAP_SYNC_REFRESH_REQUIRED, "sync cookie is stale" );                                  send_ldap_error( op, rs, LDAP_SYNC_REFRESH_REQUIRED, "sync cookie is stale" );
                                 return rs->sr_err;                                  return rs->sr_err;
                         }                          }
                         if ( srs->sr_state.ctxcsn ) {  
                                 ber_bvarray_free_x( srs->sr_state.ctxcsn, op->o_tmpmemctx );  
                                 srs->sr_state.ctxcsn = NULL;  
                         }  
                         if ( srs->sr_state.sids ) {  
                                 slap_sl_free( srs->sr_state.sids, op->o_tmpmemctx );  
                                 srs->sr_state.sids = NULL;  
                         }  
                         srs->sr_state.numcsns = 0;  
                 } else {                  } else {
                         gotstate = 1;                          gotstate = 1;
                         /* If changed and doing Present lookup, send Present UUIDs */                          /* If changed and doing Present lookup, send Present UUIDs */
                         if ( do_present && syncprov_findcsn( op, FIND_PRESENT ) !=                          if ( do_present && syncprov_findcsn( op, FIND_PRESENT ) !=
                                 LDAP_SUCCESS ) {                                  LDAP_SUCCESS ) {
                                 if ( ctxcsn )  
                                         ber_bvarray_free_x( ctxcsn, op->o_tmpmemctx );  
                                 if ( sids )  
                                         op->o_tmpfree( sids, op->o_tmpmemctx );  
                                 send_ldap_result( op, rs );                                  send_ldap_result( op, rs );
                                 return rs->sr_err;                                  return rs->sr_err;
                         }                          }
                 }                  }
         } else {  
                 /* No consumer state, assume something has changed */  
                 changed = SS_CHANGED;  
         }          }
   
 shortcut:  shortcut:
Line 2358  shortcut: Line 2073  shortcut:
         }          }
   
         /* If something changed, find the changes */          /* If something changed, find the changes */
         if ( gotstate && changed ) {          if ( gotstate && !nochange ) {
                 Filter *fand, *fava;                  Filter *fand, *fava;
   
                 fand = op->o_tmpalloc( sizeof(Filter), op->o_tmpmemctx );                  fand = op->o_tmpalloc( sizeof(Filter), op->o_tmpmemctx );
Line 2372  shortcut: Line 2087  shortcut:
 #ifdef LDAP_COMP_MATCH  #ifdef LDAP_COMP_MATCH
                 fava->f_ava->aa_cf = NULL;                  fava->f_ava->aa_cf = NULL;
 #endif  #endif
                 ber_dupbv_x( &fava->f_ava->aa_value, &mincsn, op->o_tmpmemctx );                  ber_dupbv_x( &fava->f_ava->aa_value, &srs->sr_state.ctxcsn, op->o_tmpmemctx );
                 fava->f_next = op->ors_filter;                  fava->f_next = op->ors_filter;
                 op->ors_filter = fand;                  op->ors_filter = fand;
                 filter2bv_x( op, op->ors_filter, &op->ors_filterstr );                  filter2bv_x( op, op->ors_filter, &op->ors_filterstr );
Line 2385  shortcut: Line 2100  shortcut:
         ss = (searchstate *)(cb+1);          ss = (searchstate *)(cb+1);
         ss->ss_on = on;          ss->ss_on = on;
         ss->ss_so = sop;          ss->ss_so = sop;
         ss->ss_flags = do_present | changed;          ss->ss_present = do_present;
         ss->ss_ctxcsn = ctxcsn;          ss->ss_ctxcsn.bv_len = ctxcsn.bv_len;
         ss->ss_numcsns = numcsns;          ss->ss_ctxcsn.bv_val = ss->ss_csnbuf;
         ss->ss_sids = sids;          strcpy( ss->ss_ctxcsn.bv_val, ctxcsn.bv_val );
         cb->sc_response = syncprov_search_response;          cb->sc_response = syncprov_search_response;
         cb->sc_cleanup = syncprov_search_cleanup;          cb->sc_cleanup = syncprov_search_cleanup;
         cb->sc_private = ss;          cb->sc_private = ss;
         cb->sc_next = op->o_callback;          cb->sc_next = op->o_callback;
         op->o_callback = cb;          op->o_callback = cb;
   
   #if 0   /* I don't think we need to shortcircuit back-bdb any more */
           op->o_sync_mode &= SLAP_CONTROL_MASK;
   #endif
   
         /* If this is a persistent search and no changes were reported during          /* If this is a persistent search and no changes were reported during
          * the refresh phase, just invoke the response callback to transition           * the refresh phase, just invoke the response callback to transition
          * us into persist phase           * us into persist phase
          */           */
         if ( !changed ) {          if ( nochange ) {
                 rs->sr_err = LDAP_SUCCESS;                  rs->sr_err = LDAP_SUCCESS;
                 rs->sr_nentries = 0;                  rs->sr_nentries = 0;
                 send_ldap_result( op, rs );                  send_ldap_result( op, rs );
Line 2416  syncprov_operational( Line 2135  syncprov_operational(
         slap_overinst           *on = (slap_overinst *)op->o_bd->bd_info;          slap_overinst           *on = (slap_overinst *)op->o_bd->bd_info;
         syncprov_info_t         *si = (syncprov_info_t *)on->on_bi.bi_private;          syncprov_info_t         *si = (syncprov_info_t *)on->on_bi.bi_private;
   
         /* This prevents generating unnecessarily; frontend will strip  
          * any statically stored copy.  
          */  
         if ( op->o_sync != SLAP_CONTROL_NONE )  
                 return SLAP_CB_CONTINUE;  
   
         if ( rs->sr_entry &&          if ( rs->sr_entry &&
                 dn_match( &rs->sr_entry->e_nname, op->o_bd->be_nsuffix )) {                  dn_match( &rs->sr_entry->e_nname, op->o_bd->be_nsuffix )) {
   
Line 2434  syncprov_operational( Line 2147  syncprov_operational(
                                         break;                                          break;
                         }                          }
   
                         ldap_pvt_thread_rdwr_rlock( &si->si_csn_rwlock );                          if ( !a ) {
                         if ( si->si_ctxcsn ) {                                  for ( ap = &rs->sr_operational_attrs; *ap; ap=&(*ap)->a_next );
                                 if ( !a ) {  
                                         for ( ap = &rs->sr_operational_attrs; *ap;  
                                                 ap=&(*ap)->a_next );  
   
                                         a = attr_alloc( slap_schema.si_ad_contextCSN );                                  a = attr_alloc( slap_schema.si_ad_contextCSN );
                                         *ap = a;                                  a->a_vals = ch_malloc( 2 * sizeof(struct berval));
                                 }                                  a->a_vals[1].bv_val = NULL;
                                   a->a_nvals = a->a_vals;
                                   *ap = a;
                           }
   
                                 if ( !ap ) {                          ldap_pvt_thread_mutex_lock( &si->si_csn_mutex );
                                         if ( !(rs->sr_flags & REP_ENTRY_MODIFIABLE) ) {                          if ( !ap ) {
                                                 Entry *e = entry_dup( rs->sr_entry );                                  strcpy( a->a_vals[0].bv_val, si->si_ctxcsnbuf );
                                                 if ( rs->sr_flags & REP_ENTRY_MUSTRELEASE ) {                          } else {
                                                         overlay_entry_release_ov( op, rs->sr_entry, 0, on );                                  ber_dupbv( &a->a_vals[0], &si->si_ctxcsn );
                                                         rs->sr_flags ^= REP_ENTRY_MUSTRELEASE;  
                                                 } else if ( rs->sr_flags & REP_ENTRY_MUSTBEFREED ) {  
                                                         entry_free( rs->sr_entry );  
                                                 }  
                                                 rs->sr_entry = e;  
                                                 rs->sr_flags |=  
                                                         REP_ENTRY_MODIFIABLE|REP_ENTRY_MUSTBEFREED;  
                                                 a = attr_find( rs->sr_entry->e_attrs,  
                                                         slap_schema.si_ad_contextCSN );  
                                         }  
                                         if ( a->a_nvals != a->a_vals ) {  
                                                 ber_bvarray_free( a->a_nvals );  
                                         }  
                                         a->a_nvals = NULL;  
                                         ber_bvarray_free( a->a_vals );  
                                         a->a_vals = NULL;  
                                         a->a_numvals = 0;  
                                 }  
                                 attr_valadd( a, si->si_ctxcsn, si->si_ctxcsn, si->si_numcsns );  
                         }                          }
                         ldap_pvt_thread_rdwr_runlock( &si->si_csn_rwlock );                          ldap_pvt_thread_mutex_unlock( &si->si_csn_mutex );
                 }                  }
         }          }
         return SLAP_CB_CONTINUE;          return SLAP_CB_CONTINUE;
Line 2509  static ConfigOCs spocs[] = { Line 2203  static ConfigOCs spocs[] = {
                 "NAME 'olcSyncProvConfig' "                  "NAME 'olcSyncProvConfig' "
                 "DESC 'SyncRepl Provider configuration' "                  "DESC 'SyncRepl Provider configuration' "
                 "SUP olcOverlayConfig "                  "SUP olcOverlayConfig "
                 "MAY ( olcSpCheckpoint "                  "MAY ( olcSpCheckpoint $ olcSpSessionlog $ olcSpNoPresent ) )",
                         "$ olcSpSessionlog "  
                         "$ olcSpNoPresent "  
                         "$ olcSpReloadHint "  
                 ") )",  
                         Cft_Overlay, spcfg },                          Cft_Overlay, spcfg },
         { NULL, 0, NULL }          { NULL, 0, NULL }
 };  };
Line 2530  sp_cf_gen(ConfigArgs *c) Line 2220  sp_cf_gen(ConfigArgs *c)
                 case SP_CHKPT:                  case SP_CHKPT:
                         if ( si->si_chkops || si->si_chktime ) {                          if ( si->si_chkops || si->si_chktime ) {
                                 struct berval bv;                                  struct berval bv;
                                 bv.bv_len = snprintf( c->cr_msg, sizeof( c->cr_msg ),                                  bv.bv_len = sprintf( c->msg, "%d %d",
                                         "%d %d", si->si_chkops, si->si_chktime );                                          si->si_chkops, si->si_chktime );
                                 if ( bv.bv_len >= sizeof( c->cr_msg ) ) {                                  bv.bv_val = c->msg;
                                         rc = 1;                                  value_add_one( &c->rvalue_vals, &bv );
                                 } else {  
                                         bv.bv_val = c->cr_msg;  
                                         value_add_one( &c->rvalue_vals, &bv );  
                                 }  
                         } else {                          } else {
                                 rc = 1;                                  rc = 1;
                         }                          }
Line 2595  sp_cf_gen(ConfigArgs *c) Line 2281  sp_cf_gen(ConfigArgs *c)
         switch ( c->type ) {          switch ( c->type ) {
         case SP_CHKPT:          case SP_CHKPT:
                 if ( lutil_atoi( &si->si_chkops, c->argv[1] ) != 0 ) {                  if ( lutil_atoi( &si->si_chkops, c->argv[1] ) != 0 ) {
                         snprintf( c->cr_msg, sizeof( c->cr_msg ), "%s unable to parse checkpoint ops # \"%s\"",                          snprintf( c->msg, sizeof( c->msg ), "%s unable to parse checkpoint ops # \"%s\"",
                                 c->argv[0], c->argv[1] );                                  c->argv[0], c->argv[1] );
                         Debug( LDAP_DEBUG_CONFIG|LDAP_DEBUG_NONE,                          Debug( LDAP_DEBUG_CONFIG|LDAP_DEBUG_NONE,
                                 "%s: %s\n", c->log, c->cr_msg, 0 );                                  "%s: %s\n", c->log, c->msg, 0 );
                         return ARG_BAD_CONF;                          return ARG_BAD_CONF;
                 }                  }
                 if ( si->si_chkops <= 0 ) {                  if ( si->si_chkops <= 0 ) {
                         snprintf( c->cr_msg, sizeof( c->cr_msg ), "%s invalid checkpoint ops # \"%d\"",                          snprintf( c->msg, sizeof( c->msg ), "%s invalid checkpoint ops # \"%d\"",
                                 c->argv[0], si->si_chkops );                                  c->argv[0], si->si_chkops );
                         Debug( LDAP_DEBUG_CONFIG|LDAP_DEBUG_NONE,                          Debug( LDAP_DEBUG_CONFIG|LDAP_DEBUG_NONE,
                                 "%s: %s\n", c->log, c->cr_msg, 0 );                                  "%s: %s\n", c->log, c->msg, 0 );
                         return ARG_BAD_CONF;                          return ARG_BAD_CONF;
                 }                  }
                 if ( lutil_atoi( &si->si_chktime, c->argv[2] ) != 0 ) {                  if ( lutil_atoi( &si->si_chktime, c->argv[2] ) != 0 ) {
                         snprintf( c->cr_msg, sizeof( c->cr_msg ), "%s unable to parse checkpoint time \"%s\"",                          snprintf( c->msg, sizeof( c->msg ), "%s unable to parse checkpoint time \"%s\"",
                                 c->argv[0], c->argv[1] );                                  c->argv[0], c->argv[1] );
                         Debug( LDAP_DEBUG_CONFIG|LDAP_DEBUG_NONE,                          Debug( LDAP_DEBUG_CONFIG|LDAP_DEBUG_NONE,
                                 "%s: %s\n", c->log, c->cr_msg, 0 );                                  "%s: %s\n", c->log, c->msg, 0 );
                         return ARG_BAD_CONF;                          return ARG_BAD_CONF;
                 }                  }
                 if ( si->si_chktime <= 0 ) {                  if ( si->si_chktime <= 0 ) {
                         snprintf( c->cr_msg, sizeof( c->cr_msg ), "%s invalid checkpoint time \"%d\"",                          snprintf( c->msg, sizeof( c->msg ), "%s invalid checkpoint time \"%d\"",
                                 c->argv[0], si->si_chkops );                                  c->argv[0], si->si_chkops );
                         Debug( LDAP_DEBUG_CONFIG|LDAP_DEBUG_NONE,                          Debug( LDAP_DEBUG_CONFIG|LDAP_DEBUG_NONE,
                                 "%s: %s\n", c->log, c->cr_msg, 0 );                                  "%s: %s\n", c->log, c->msg, 0 );
                         return ARG_BAD_CONF;                          return ARG_BAD_CONF;
                 }                  }
                 si->si_chktime *= 60;                  si->si_chktime *= 60;
Line 2629  sp_cf_gen(ConfigArgs *c) Line 2315  sp_cf_gen(ConfigArgs *c)
                 int size = c->value_int;                  int size = c->value_int;
   
                 if ( size < 0 ) {                  if ( size < 0 ) {
                         snprintf( c->cr_msg, sizeof( c->cr_msg ), "%s size %d is negative",                          snprintf( c->msg, sizeof( c->msg ), "%s size %d is negative",
                                 c->argv[0], size );                                  c->argv[0], size );
                         Debug( LDAP_DEBUG_CONFIG|LDAP_DEBUG_NONE,                          Debug( LDAP_DEBUG_CONFIG|LDAP_DEBUG_NONE,
                                 "%s: %s\n", c->log, c->cr_msg, 0 );                                  "%s: %s\n", c->log, c->msg, 0 );
                         return ARG_BAD_CONF;                          return ARG_BAD_CONF;
                 }                  }
                 sl = si->si_logs;                  sl = si->si_logs;
Line 2676  syncprov_db_otask( Line 2362  syncprov_db_otask(
  */   */
 static int  static int
 syncprov_db_open(  syncprov_db_open(
         BackendDB *be,      BackendDB *be
         ConfigReply *cr  
 )  )
 {  {
         slap_overinst   *on = (slap_overinst *) be->bd_info;          slap_overinst   *on = (slap_overinst *) be->bd_info;
         syncprov_info_t *si = (syncprov_info_t *)on->on_bi.bi_private;          syncprov_info_t *si = (syncprov_info_t *)on->on_bi.bi_private;
   
         Connection conn = { 0 };          Connection conn = { 0 };
         OperationBuffer opbuf;          OperationBuffer opbuf = { 0 };
         Operation *op;          char ctxcsnbuf[LDAP_LUTIL_CSNSTR_BUFSIZE];
         Entry *e = NULL;          Operation *op = (Operation *) &opbuf;
           Entry *e;
         Attribute *a;          Attribute *a;
         int rc;          int rc;
         void *thrctx = NULL;          void *thrctx = NULL;
Line 2707  syncprov_db_open( Line 2393  syncprov_db_open(
         }          }
   
         thrctx = ldap_pvt_thread_pool_context();          thrctx = ldap_pvt_thread_pool_context();
         connection_fake_init( &conn, &opbuf, thrctx );          connection_fake_init( &conn, op, thrctx );
         op = &opbuf.ob_op;  
         op->o_bd = be;          op->o_bd = be;
         op->o_dn = be->be_rootdn;          op->o_dn = be->be_rootdn;
         op->o_ndn = be->be_rootndn;          op->o_ndn = be->be_rootndn;
   
         rc = overlay_entry_get_ov( op, be->be_nsuffix, NULL,          ctxcsnbuf[0] = '\0';
                 slap_schema.si_ad_contextCSN, 0, &e, on );  
           op->o_bd->bd_info = on->on_info->oi_orig;
           rc = be_entry_get_rw( op, be->be_nsuffix, NULL,
                   slap_schema.si_ad_contextCSN, 0, &e );
   
         if ( e ) {          if ( e ) {
                 ldap_pvt_thread_t tid;                  ldap_pvt_thread_t tid;
   
                 a = attr_find( e->e_attrs, slap_schema.si_ad_contextCSN );                  a = attr_find( e->e_attrs, slap_schema.si_ad_contextCSN );
                 if ( a ) {                  if ( a ) {
                         ber_bvarray_dup_x( &si->si_ctxcsn, a->a_vals, NULL );                          si->si_ctxcsn.bv_len = a->a_nvals[0].bv_len;
                         si->si_numcsns = a->a_numvals;                          if ( si->si_ctxcsn.bv_len >= sizeof(si->si_ctxcsnbuf ))
                         si->si_sids = slap_parse_csn_sids( si->si_ctxcsn, a->a_numvals, NULL );                                  si->si_ctxcsn.bv_len = sizeof(si->si_ctxcsnbuf)-1;
                 }                          strncpy( si->si_ctxcsnbuf, a->a_nvals[0].bv_val,
                 overlay_entry_release_ov( op, e, 0, on );                                  si->si_ctxcsn.bv_len );
                 if ( si->si_ctxcsn ) {                          si->si_ctxcsnbuf[si->si_ctxcsn.bv_len] = '\0';
                           strcpy( ctxcsnbuf, si->si_ctxcsnbuf );
                   }
                   be_entry_release_rw( op, e, 0 );
                   if ( !BER_BVISEMPTY( &si->si_ctxcsn ) ) {
                           op->o_bd->bd_info = (BackendInfo *)on;
                         op->o_req_dn = be->be_suffix[0];                          op->o_req_dn = be->be_suffix[0];
                         op->o_req_ndn = be->be_nsuffix[0];                          op->o_req_ndn = be->be_nsuffix[0];
                         op->ors_scope = LDAP_SCOPE_SUBTREE;                          op->ors_scope = LDAP_SCOPE_SUBTREE;
Line 2735  syncprov_db_open( Line 2428  syncprov_db_open(
                 }                  }
         }          }
   
         /* Didn't find a contextCSN, should we generate one? */          if ( BER_BVISEMPTY( &si->si_ctxcsn ) ) {
         if ( !si->si_ctxcsn ) {  
                 char csnbuf[ LDAP_LUTIL_CSNSTR_BUFSIZE ];  
                 struct berval csn;  
   
                 if ( SLAP_SYNC_SHADOW( op->o_bd )) {                  if ( SLAP_SYNC_SHADOW( op->o_bd )) {
                 /* If we're also a consumer, then don't generate anything.                  /* If we're also a consumer, and we didn't get a contextCSN,
                  * Wait for our provider to send it to us, or for a local                   * then don't generate anything, wait for our provider to send it
                  * modify if we have multimaster.                   * to us.
                  */                   */
                         goto out;                          goto out;
                 }                  }
                 csn.bv_val = csnbuf;                  si->si_ctxcsn.bv_len = sizeof( si->si_ctxcsnbuf );
                 csn.bv_len = sizeof( csnbuf );                  slap_get_csn( op, &si->si_ctxcsn, 0 );
                 slap_get_csn( op, &csn, 0 );          }
                 value_add_one( &si->si_ctxcsn, &csn );  
                 si->si_numcsns = 1;  
                 si->si_sids = ch_malloc( sizeof(int) );  
                 si->si_sids[0] = slap_serverID;  
   
                 /* make sure we do a checkpoint on close */          /* If our ctxcsn is different from what was read from the root
            * entry, make sure we do a checkpoint on close
            */
           if ( strcmp( si->si_ctxcsnbuf, ctxcsnbuf )) {
                 si->si_numops++;                  si->si_numops++;
         }          }
   
 out:  out:
         op->o_bd->bd_info = (BackendInfo *)on;          op->o_bd->bd_info = (BackendInfo *)on;
           ldap_pvt_thread_pool_context_reset( thrctx );
         return 0;          return 0;
 }  }
   
Line 2768  out: Line 2457  out:
  */   */
 static int  static int
 syncprov_db_close(  syncprov_db_close(
         BackendDB *be,      BackendDB *be
         ConfigReply *cr  
 )  )
 {  {
     slap_overinst   *on = (slap_overinst *) be->bd_info;      slap_overinst   *on = (slap_overinst *) be->bd_info;
Line 2779  syncprov_db_close( Line 2467  syncprov_db_close(
                 return 0;                  return 0;
         }          }
         if ( si->si_numops ) {          if ( si->si_numops ) {
                 Connection conn = {0};                  Connection conn;
                 OperationBuffer opbuf;                  OperationBuffer opbuf;
                 Operation *op;                  Operation *op = (Operation *) &opbuf;
                 SlapReply rs = {REP_RESULT};                  SlapReply rs = {REP_RESULT};
                 void *thrctx;                  void *thrctx;
   
                 thrctx = ldap_pvt_thread_pool_context();                  thrctx = ldap_pvt_thread_pool_context();
                 connection_fake_init( &conn, &opbuf, thrctx );                  connection_fake_init( &conn, op, thrctx );
                 op = &opbuf.ob_op;  
                 op->o_bd = be;                  op->o_bd = be;
                 op->o_dn = be->be_rootdn;                  op->o_dn = be->be_rootdn;
                 op->o_ndn = be->be_rootndn;                  op->o_ndn = be->be_rootndn;
                 syncprov_checkpoint( op, &rs, on );                  syncprov_checkpoint( op, &rs, on, &si->si_ctxcsn );
                   ldap_pvt_thread_pool_context_reset( thrctx );
         }          }
   
     return 0;      return 0;
Line 2799  syncprov_db_close( Line 2487  syncprov_db_close(
   
 static int  static int
 syncprov_db_init(  syncprov_db_init(
         BackendDB *be,          BackendDB *be
         ConfigReply *cr  
 )  )
 {  {
         slap_overinst   *on = (slap_overinst *)be->bd_info;          slap_overinst   *on = (slap_overinst *)be->bd_info;
Line 2815  syncprov_db_init( Line 2502  syncprov_db_init(
   
         si = ch_calloc(1, sizeof(syncprov_info_t));          si = ch_calloc(1, sizeof(syncprov_info_t));
         on->on_bi.bi_private = si;          on->on_bi.bi_private = si;
         ldap_pvt_thread_rdwr_init( &si->si_csn_rwlock );          ldap_pvt_thread_mutex_init( &si->si_csn_mutex );
         ldap_pvt_thread_mutex_init( &si->si_ops_mutex );          ldap_pvt_thread_mutex_init( &si->si_ops_mutex );
         ldap_pvt_thread_mutex_init( &si->si_mods_mutex );          ldap_pvt_thread_mutex_init( &si->si_mods_mutex );
           si->si_ctxcsn.bv_val = si->si_ctxcsnbuf;
   
         csn_anlist[0].an_desc = slap_schema.si_ad_entryCSN;          csn_anlist[0].an_desc = slap_schema.si_ad_entryCSN;
         csn_anlist[0].an_name = slap_schema.si_ad_entryCSN->ad_cname;          csn_anlist[0].an_name = slap_schema.si_ad_entryCSN->ad_cname;
Line 2832  syncprov_db_init( Line 2520  syncprov_db_init(
   
 static int  static int
 syncprov_db_destroy(  syncprov_db_destroy(
         BackendDB *be,          BackendDB *be
         ConfigReply *cr  
 )  )
 {  {
         slap_overinst   *on = (slap_overinst *)be->bd_info;          slap_overinst   *on = (slap_overinst *)be->bd_info;
Line 2851  syncprov_db_destroy( Line 2538  syncprov_db_destroy(
                                                                   
                         ch_free( si->si_logs );                          ch_free( si->si_logs );
                 }                  }
                 if ( si->si_ctxcsn )  
                         ber_bvarray_free( si->si_ctxcsn );  
                 if ( si->si_sids )  
                         ch_free( si->si_sids );  
                 ldap_pvt_thread_mutex_destroy( &si->si_mods_mutex );                  ldap_pvt_thread_mutex_destroy( &si->si_mods_mutex );
                 ldap_pvt_thread_mutex_destroy( &si->si_ops_mutex );                  ldap_pvt_thread_mutex_destroy( &si->si_ops_mutex );
                 ldap_pvt_thread_rdwr_destroy( &si->si_csn_rwlock );                  ldap_pvt_thread_mutex_destroy( &si->si_csn_mutex );
                 ch_free( si );                  ch_free( si );
         }          }
   
Line 2888  static int syncprov_parseCtrl ( Line 2571  static int syncprov_parseCtrl (
                 return LDAP_PROTOCOL_ERROR;                  return LDAP_PROTOCOL_ERROR;
         }          }
   
         if ( BER_BVISNULL( &ctrl->ldctl_value ) ) {  
                 rs->sr_text = "Sync control value is absent";  
                 return LDAP_PROTOCOL_ERROR;  
         }  
   
         if ( BER_BVISEMPTY( &ctrl->ldctl_value ) ) {          if ( BER_BVISEMPTY( &ctrl->ldctl_value ) ) {
                 rs->sr_text = "Sync control value is empty";                  rs->sr_text = "Sync control value is empty (or absent)";
                 return LDAP_PROTOCOL_ERROR;                  return LDAP_PROTOCOL_ERROR;
         }          }
   
Line 2952  static int syncprov_parseCtrl ( Line 2630  static int syncprov_parseCtrl (
         sr->sr_rhint = rhint;          sr->sr_rhint = rhint;
         if (!BER_BVISNULL(&cookie)) {          if (!BER_BVISNULL(&cookie)) {
                 ber_dupbv_x( &sr->sr_state.octet_str, &cookie, op->o_tmpmemctx );                  ber_dupbv_x( &sr->sr_state.octet_str, &cookie, op->o_tmpmemctx );
                 /* If parse fails, pretend no cookie was sent */                  slap_parse_sync_cookie( &sr->sr_state, op->o_tmpmemctx );
                 if ( slap_parse_sync_cookie( &sr->sr_state, op->o_tmpmemctx ) ||                  if ( sr->sr_state.rid == -1 ) {
                         sr->sr_state.rid == -1 ) {                          rs->sr_text = "Sync control : cookie parsing error";
                         if ( sr->sr_state.ctxcsn ) {                          return LDAP_PROTOCOL_ERROR;
                                 ber_bvarray_free_x( sr->sr_state.ctxcsn, op->o_tmpmemctx );  
                                 sr->sr_state.ctxcsn = NULL;  
                         }  
                         sr->sr_state.numcsns = 0;  
                 }                  }
         }          }
   

Removed from v.1.147.2.36  
changed lines
  Added in v.1.165


______________
© Copyright 1998-2020, OpenLDAP Foundation, info@OpenLDAP.org