Diff for /servers/slapd/overlays/syncprov.c between versions 1.14 and 1.17

version 1.14, 2004/11/26 08:40:22 version 1.17, 2004/11/26 22:10:48
Line 25 Line 25
 #include "lutil.h"  #include "lutil.h"
 #include "slap.h"  #include "slap.h"
   
   /* A queued result of a persistent search */
   typedef struct syncres {
           struct syncres *s_next;
           struct berval s_dn;
           struct berval s_ndn;
           struct berval s_uuid;
           struct berval s_csn;
           char s_mode;
           char s_isreference;
   } syncres;
   
 /* Record of a persistent search */  /* Record of a persistent search */
 typedef struct syncops {  typedef struct syncops {
         struct syncops *s_next;          struct syncops *s_next;
         struct berval   s_base;         /* ndn of search base */          struct berval   s_base;         /* ndn of search base */
         ID              s_eid;          /* entryID of search base */          ID              s_eid;          /* entryID of search base */
         Operation       *s_op;          /* search op */          Operation       *s_op;          /* search op */
         Filter  *s_filter;          long    s_sid;
           long    s_rid;
           struct berval s_filterstr;
         int             s_flags;        /* search status */          int             s_flags;        /* search status */
           struct syncres *s_res;
           struct syncres *s_restail;
           ldap_pvt_thread_mutex_t s_mutex;
 } syncops;  } syncops;
   
 static int      sync_cid;  static int      sync_cid;
Line 365  syncprov_findcsn( Operation *op, int mod Line 381  syncprov_findcsn( Operation *op, int mod
   
         if ( mode == FIND_CSN ) {          if ( mode == FIND_CSN ) {
                 if ( !si->si_gotcsn ) {                  if ( !si->si_gotcsn ) {
                         ber_dupbv( &si->si_ctxcsn, &fcookie.maxcsn );                          strcpy(si->si_ctxcsnbuf, fcookie.maxcsn.bv_val);
                           si->si_ctxcsn.bv_len = fcookie.maxcsn.bv_len;
                         si->si_gotcsn = 1;                          si->si_gotcsn = 1;
                         ldap_pvt_thread_mutex_unlock( &si->si_csn_mutex );                          ldap_pvt_thread_mutex_unlock( &si->si_csn_mutex );
                         if ( fcookie.gotmatch ) return LDAP_SUCCESS;                          if ( fcookie.gotmatch ) return LDAP_SUCCESS;
Line 381  syncprov_findcsn( Operation *op, int mod Line 398  syncprov_findcsn( Operation *op, int mod
         return LDAP_NO_SUCH_OBJECT;          return LDAP_NO_SUCH_OBJECT;
 }  }
   
   /* Queue a persistent search response if still in Refresh stage */
   static int
   syncprov_qresp( opcookie *opc, syncops *so, int mode )
   {
           syncres *sr;
   
           sr = ch_malloc(sizeof(syncres) + opc->suuid.bv_len + 1 +
                   opc->sdn.bv_len + 1 + opc->sndn.bv_len + 1 + opc->sctxcsn.bv_len + 1 );
           sr->s_next = NULL;
           sr->s_dn.bv_val = (char *)(sr + 1);
           sr->s_mode = mode;
           sr->s_isreference = opc->sreference;
           sr->s_ndn.bv_val = lutil_strcopy( sr->s_dn.bv_val, opc->sdn.bv_val );
           *(sr->s_ndn.bv_val++) = '\0';
           sr->s_uuid.bv_val = lutil_strcopy( sr->s_ndn.bv_val, opc->sndn.bv_val );
           *(sr->s_uuid.bv_val++) = '\0';
           sr->s_csn.bv_val = lutil_strcopy( sr->s_uuid.bv_val, opc->suuid.bv_val );
   
           if ( !so->s_res ) {
                   so->s_res = sr;
           } else {
                   so->s_restail->s_next = sr;
           }
           so->s_restail = sr;
           ldap_pvt_thread_mutex_unlock( &so->s_mutex );
           return LDAP_SUCCESS;
   }
   
   /* Send a persistent search response */
 static int  static int
 syncprov_sendresp( Operation *op, opcookie *opc, syncops *so, Entry *e, int mode )  syncprov_sendresp( Operation *op, opcookie *opc, syncops *so, Entry *e, int mode, int queue )
 {  {
         slap_overinst *on = opc->son;          slap_overinst *on = opc->son;
         syncprov_info_t *si = on->on_bi.bi_private;          syncprov_info_t *si = on->on_bi.bi_private;
Line 394  syncprov_sendresp( Operation *op, opcook Line 440  syncprov_sendresp( Operation *op, opcook
         Attribute a_uuid = {0};          Attribute a_uuid = {0};
         Operation sop = *so->s_op;          Operation sop = *so->s_op;
         Opheader ohdr;          Opheader ohdr;
         syncrepl_state *srs = sop.o_controls[sync_cid];  
   
         ohdr = *sop.o_hdr;          ohdr = *sop.o_hdr;
         sop.o_hdr = &ohdr;          sop.o_hdr = &ohdr;
         sop.o_tmpmemctx = op->o_tmpmemctx;          sop.o_tmpmemctx = op->o_tmpmemctx;
           sop.o_bd = op->o_bd;
           sop.o_controls = op->o_controls;
   
           if ( queue && (so->s_flags & PS_IS_REFRESHING) ) {
                   ldap_pvt_thread_mutex_lock( &so->s_mutex );
                   if ( so->s_flags & PS_IS_REFRESHING )
                           return syncprov_qresp( opc, so, mode );
                   ldap_pvt_thread_mutex_unlock( &so->s_mutex );
           }
   
         ctrls[1] = NULL;          ctrls[1] = NULL;
         slap_compose_sync_cookie( op, &cookie, &opc->sctxcsn,          slap_compose_sync_cookie( op, &cookie, &opc->sctxcsn,
                 srs->sr_state.sid, srs->sr_state.rid );                  so->s_sid, so->s_rid );
   
         e_uuid.e_attrs = &a_uuid;          e_uuid.e_attrs = &a_uuid;
         a_uuid.a_desc = slap_schema.si_ad_entryUUID;          a_uuid.a_desc = slap_schema.si_ad_entryUUID;
Line 517  syncprov_matchops( Operation *op, opcook Line 571  syncprov_matchops( Operation *op, opcook
                 }                  }
   
                 /* check if current o_req_dn is in scope and matches filter */                  /* check if current o_req_dn is in scope and matches filter */
                 if ( fc.fscope && test_filter( op, e, ss->s_filter ) ==                  if ( fc.fscope && test_filter( op, e, ss->s_op->ors_filter ) ==
                         LDAP_COMPARE_TRUE ) {                          LDAP_COMPARE_TRUE ) {
                         if ( saveit ) {                          if ( saveit ) {
                                 sm = op->o_tmpalloc( sizeof(syncmatches), op->o_tmpmemctx );                                  sm = op->o_tmpalloc( sizeof(syncmatches), op->o_tmpmemctx );
Line 527  syncprov_matchops( Operation *op, opcook Line 581  syncprov_matchops( Operation *op, opcook
                         } else {                          } else {
                                 /* if found send UPDATE else send ADD */                                  /* if found send UPDATE else send ADD */
                                 syncprov_sendresp( op, opc, ss, e,                                  syncprov_sendresp( op, opc, ss, e,
                                         found ?  LDAP_SYNC_MODIFY : LDAP_SYNC_ADD );                                          found ? LDAP_SYNC_MODIFY : LDAP_SYNC_ADD, 1 );
                         }                          }
                 } else if ( !saveit && found ) {                  } else if ( !saveit && found ) {
                         /* send DELETE */                          /* send DELETE */
                         syncprov_sendresp( op, opc, ss, NULL, LDAP_SYNC_DELETE );                          syncprov_sendresp( op, opc, ss, NULL, LDAP_SYNC_DELETE, 1 );
                 }                  }
         }          }
         ldap_pvt_thread_mutex_unlock( &si->si_ops_mutex );          ldap_pvt_thread_mutex_unlock( &si->si_ops_mutex );
Line 600  syncprov_op_response( Operation *op, Sla Line 654  syncprov_op_response( Operation *op, Sla
                                  */                                   */
                                 for ( sm = opc->smatches; sm; sm=sm->sm_next ) {                                  for ( sm = opc->smatches; sm; sm=sm->sm_next ) {
                                         syncprov_sendresp( op, opc, sm->sm_op, NULL,                                          syncprov_sendresp( op, opc, sm->sm_op, NULL,
                                                 LDAP_SYNC_DELETE );                                                  LDAP_SYNC_DELETE, 1 );
                                 }                                  }
                                 break;                                  break;
                         }                          }
Line 705  syncprov_op_extended( Operation *op, Sla Line 759  syncprov_op_extended( Operation *op, Sla
 typedef struct searchstate {  typedef struct searchstate {
         slap_overinst *ss_on;          slap_overinst *ss_on;
         syncops *ss_so;          syncops *ss_so;
         int ss_done;  
 } searchstate;  } searchstate;
   
 static int  static int
Line 716  syncprov_search_cleanup( Operation *op, Line 769  syncprov_search_cleanup( Operation *op,
                 free( rs->sr_ctrls[0] );                  free( rs->sr_ctrls[0] );
                 op->o_tmpfree( rs->sr_ctrls, op->o_tmpmemctx );                  op->o_tmpfree( rs->sr_ctrls, op->o_tmpmemctx );
         }          }
         if ( ss->ss_done )  
                 op->o_sync_mode |= SLAP_SYNC_REFRESH_AND_PERSIST;  
         return 0;          return 0;
 }  }
   
   static void
   syncprov_detach_op( Operation *op, syncops *so )
   {
           Operation *op2;
           int i, alen = 0;
           size_t size;
           char *ptr;
   
           /* count the search attrs */
           for (i=0; op->ors_attrs && op->ors_attrs[i].an_name.bv_val; i++) {
                   alen += op->ors_attrs[i].an_name.bv_len + 1;
           }
           /* Make a new copy of the operation */
           size = sizeof(Operation) + sizeof(Opheader) +
                   (i ? ( (i+1) * sizeof(AttributeName) + alen) : 0) +
                   op->o_req_dn.bv_len + 1 +
                   op->o_req_ndn.bv_len + 1 +
                   op->o_ndn.bv_len + 1 +
                   so->s_filterstr.bv_len + 1;
           op2 = (Operation *)ch_malloc( size );
           *op2 = *op;
           op2->o_hdr = (Opheader *)(op2+1);
           *op2->o_hdr = *op->o_hdr;
           if ( i ) {
                   op2->ors_attrs = (AttributeName *)(op2->o_hdr + 1);
                   ptr = (char *)(op2->ors_attrs+i+1);
                   for (i=0; op->ors_attrs[i].an_name.bv_val; i++) {
                           op2->ors_attrs[i] = op->ors_attrs[i];
                           op2->ors_attrs[i].an_name.bv_val = ptr;
                           ptr = lutil_strcopy( ptr, op->ors_attrs[i].an_name.bv_val ) + 1;
                   }
           } else {
                   ptr = (char *)(op2->o_hdr + 1);
           }
           op2->o_ndn.bv_val = ptr;
           ptr = lutil_strcopy(ptr, op->o_ndn.bv_val) + 1;
           op2->o_dn = op2->o_ndn;
           op2->o_req_dn.bv_val = ptr;
           ptr = lutil_strcopy(ptr, op->o_req_dn.bv_val) + 1;
           op2->o_req_ndn.bv_val = ptr;
           ptr = lutil_strcopy(ptr, op->o_req_ndn.bv_val) + 1;
           op2->ors_filterstr.bv_val = ptr;
           strcpy( ptr, so->s_filterstr.bv_val );
           op2->ors_filterstr.bv_len = so->s_filterstr.bv_len;
           op2->ors_filter = str2filter( ptr );
           op2->o_controls = NULL;
           op2->o_callback = NULL;
           so->s_op = op2;
   
           /* Increment number of ops so that idletimeout ignores us */
           ldap_pvt_thread_mutex_lock( &op->o_conn->c_mutex );
           op->o_conn->c_n_ops_executing++;
           ldap_pvt_thread_mutex_unlock( &op->o_conn->c_mutex );
   }
   
 static int  static int
 syncprov_search_response( Operation *op, SlapReply *rs )  syncprov_search_response( Operation *op, SlapReply *rs )
 {  {
Line 731  syncprov_search_response( Operation *op, Line 837  syncprov_search_response( Operation *op,
   
         if ( rs->sr_type == REP_SEARCH || rs->sr_type == REP_SEARCHREF ) {          if ( rs->sr_type == REP_SEARCH || rs->sr_type == REP_SEARCHREF ) {
                 int i;                  int i;
                 struct berval cookie;  
   
                 Attribute *a = attr_find( rs->sr_entry->e_attrs,  
                         slap_schema.si_ad_entryCSN );  
   
                 if ( srs->sr_state.ctxcsn ) {                  if ( srs->sr_state.ctxcsn ) {
                           Attribute *a = attr_find( rs->sr_entry->e_attrs,
                                   slap_schema.si_ad_entryCSN );
                         /* Don't send the ctx entry twice */                          /* Don't send the ctx entry twice */
                         if ( bvmatch( &a->a_nvals[0], srs->sr_state.ctxcsn ))                          if ( bvmatch( &a->a_nvals[0], srs->sr_state.ctxcsn ))
                                 return LDAP_SUCCESS;                                  return LDAP_SUCCESS;
                 }                  }
                 slap_compose_sync_cookie( op, &cookie, a->a_nvals,  
                         srs->sr_state.sid, srs->sr_state.rid );  
   
                 rs->sr_ctrls = op->o_tmpalloc( sizeof(LDAPControl *)*2,                  rs->sr_ctrls = op->o_tmpalloc( sizeof(LDAPControl *)*2,
                         op->o_tmpmemctx );                          op->o_tmpmemctx );
                 rs->sr_ctrls[1] = NULL;                  rs->sr_ctrls[1] = NULL;
                 rs->sr_err = slap_build_sync_state_ctrl( op, rs, rs->sr_entry,                  rs->sr_err = slap_build_sync_state_ctrl( op, rs, rs->sr_entry,
                         LDAP_SYNC_ADD, rs->sr_ctrls, 0, 1, &cookie );                          LDAP_SYNC_ADD, rs->sr_ctrls, 0, 0, NULL );
         } else if ( rs->sr_type == REP_RESULT && rs->sr_err == LDAP_SUCCESS ) {          } else if ( rs->sr_type == REP_RESULT && rs->sr_err == LDAP_SUCCESS ) {
                 struct berval cookie;                  struct berval cookie;
   
Line 764  syncprov_search_response( Operation *op, Line 864  syncprov_search_response( Operation *op,
                         rs->sr_err = slap_build_sync_done_ctrl( op, rs, rs->sr_ctrls,                          rs->sr_err = slap_build_sync_done_ctrl( op, rs, rs->sr_ctrls,
                                 0, 1, &cookie, LDAP_SYNC_REFRESH_PRESENTS );                                  0, 1, &cookie, LDAP_SYNC_REFRESH_PRESENTS );
                 } else {                  } else {
                           int locked = 0;
                 /* It's RefreshAndPersist, transition to Persist phase */                  /* It's RefreshAndPersist, transition to Persist phase */
                         rs->sr_rspoid = LDAP_SYNC_INFO;                          rs->sr_rspoid = LDAP_SYNC_INFO;
                         slap_send_syncinfo( op, rs, rs->sr_nentries ?                          slap_send_syncinfo( op, rs, rs->sr_nentries ?
                                 LDAP_TAG_SYNC_REFRESH_PRESENT : LDAP_TAG_SYNC_REFRESH_DELETE,                                  LDAP_TAG_SYNC_REFRESH_PRESENT : LDAP_TAG_SYNC_REFRESH_DELETE,
                                 &cookie, 1, NULL, 0 );                                  &cookie, 1, NULL, 0 );
                         /* Flush any queued persist messages */                          /* Flush any queued persist messages */
                                 ;                          if ( ss->ss_so->s_res ) {
                                   syncres *sr, *srnext;
                                   Entry *e;
                                   opcookie opc;
   
                                   opc.son = on;
                                   ldap_pvt_thread_mutex_lock( &ss->ss_so->s_mutex );
                                   locked = 1;
                                   for (sr = ss->ss_so->s_res; sr; sr=srnext) {
                                           int rc = LDAP_SUCCESS;
                                           srnext = sr->s_next;
                                           opc.sdn = sr->s_dn;
                                           opc.sndn = sr->s_ndn;
                                           opc.suuid = sr->s_uuid;
                                           opc.sctxcsn = sr->s_csn;
                                           opc.sreference = sr->s_isreference;
                                           e = NULL;
                                           
                                           if ( sr->s_mode != LDAP_SYNC_DELETE ) {
                                                   op->o_bd->bd_info = (BackendInfo *)on->on_info;
                                                   rc = be_entry_get_rw( op, &opc.sndn, NULL, NULL, 0, &e );
                                                   op->o_bd->bd_info = (BackendInfo *)on;
                                           }
                                           if ( rc == LDAP_SUCCESS )
                                                   syncprov_sendresp( op, &opc, ss->ss_so, e,
                                                           sr->s_mode, 0 );
   
                                           if ( e ) {
                                                   op->o_bd->bd_info = (BackendInfo *)on->on_info;
                                                   be_entry_release_r( op, e );
                                                   op->o_bd->bd_info = (BackendInfo *)on;
                                           }
                                           ch_free( sr );
                                   }
                                   ss->ss_so->s_res = NULL;
                                   ss->ss_so->s_restail = NULL;
                           }
   
                         /* Turn off the refreshing flag */                          /* Turn off the refreshing flag */
                                 ss->ss_so->s_flags ^= PS_IS_REFRESHING;                          ss->ss_so->s_flags ^= PS_IS_REFRESHING;
                           if ( locked )
                                   ldap_pvt_thread_mutex_unlock( &ss->ss_so->s_mutex );
   
                         /* Detach this Op from frontend control */                          /* Detach this Op from frontend control */
                                 ss->ss_done = 1;                          syncprov_detach_op( op, ss->ss_so );
                                 ;  
   
                         return LDAP_SUCCESS;                          return LDAP_SUCCESS;
                 }                  }
Line 809  syncprov_op_search( Operation *op, SlapR Line 947  syncprov_op_search( Operation *op, SlapR
   
         /* If this is a persistent search, set it up right away */          /* If this is a persistent search, set it up right away */
         if ( op->o_sync_mode & SLAP_SYNC_PERSIST ) {          if ( op->o_sync_mode & SLAP_SYNC_PERSIST ) {
                 syncops so;                  syncops so = {0};
                 fbase_cookie fc;                  fbase_cookie fc;
                 opcookie opc;                  opcookie opc;
                 slap_callback sc;                  slap_callback sc;
Line 833  syncprov_op_search( Operation *op, SlapR Line 971  syncprov_op_search( Operation *op, SlapR
                 }                  }
                 sop = ch_malloc( sizeof( syncops ));                  sop = ch_malloc( sizeof( syncops ));
                 *sop = so;                  *sop = so;
                   ldap_pvt_thread_mutex_init( &sop->s_mutex );
                 ldap_pvt_thread_mutex_lock( &si->si_ops_mutex );                  ldap_pvt_thread_mutex_lock( &si->si_ops_mutex );
                   sop->s_sid = srs->sr_state.sid;
                   sop->s_rid = srs->sr_state.rid;
                 sop->s_next = si->si_ops;                  sop->s_next = si->si_ops;
                 si->si_ops = sop;                  si->si_ops = sop;
                 ldap_pvt_thread_mutex_unlock( &si->si_ops_mutex );                  ldap_pvt_thread_mutex_unlock( &si->si_ops_mutex );
Line 899  syncprov_op_search( Operation *op, SlapR Line 1040  syncprov_op_search( Operation *op, SlapR
          * for persistent search evaluation           * for persistent search evaluation
          */           */
         if ( sop ) {          if ( sop ) {
                 sop->s_filter = op->ors_filter;                  sop->s_filterstr= op->ors_filterstr;
         }          }
   
         fand = op->o_tmpalloc( sizeof(Filter), op->o_tmpmemctx );          fand = op->o_tmpalloc( sizeof(Filter), op->o_tmpmemctx );
Line 929  shortcut: Line 1070  shortcut:
         ss = (searchstate *)(cb+1);          ss = (searchstate *)(cb+1);
         ss->ss_on = on;          ss->ss_on = on;
         ss->ss_so = sop;          ss->ss_so = sop;
         ss->ss_done = 0;  
         cb->sc_response = syncprov_search_response;          cb->sc_response = syncprov_search_response;
         cb->sc_cleanup = syncprov_search_cleanup;          cb->sc_cleanup = syncprov_search_cleanup;
         cb->sc_private = ss;          cb->sc_private = ss;
         cb->sc_next = op->o_callback;          cb->sc_next = op->o_callback;
         op->o_callback = cb;          op->o_callback = cb;
   
         /* FIXME: temporary hack to make sure back-bdb's native Psearch handling  
          * doesn't get invoked. We can skip this after the back-bdb code is  
          * removed, and also delete ss->ss_done.  
          */  
         op->o_sync_mode &= SLAP_CONTROL_MASK;          op->o_sync_mode &= SLAP_CONTROL_MASK;
   
         /* If this is a persistent search and no changes were reported during          /* If this is a persistent search and no changes were reported during

Removed from v.1.14  
changed lines
  Added in v.1.17


______________
© Copyright 1998-2020, OpenLDAP Foundation, info@OpenLDAP.org