Diff for /servers/slapd/overlays/syncprov.c between versions 1.147.2.92 and 1.323

version 1.147.2.92, 2011/01/31 19:05:48 version 1.323, 2010/12/30 22:43:12
Line 1 Line 1
 /* $OpenLDAP$ */  /* $OpenLDAP: pkg/ldap/servers/slapd/overlays/syncprov.c,v 1.322 2010/12/30 22:34:56 hallvard Exp $ */
 /* syncprov.c - syncrepl provider */  /* syncprov.c - syncrepl provider */
 /* This work is part of OpenLDAP Software <http://www.openldap.org/>.  /* This work is part of OpenLDAP Software <http://www.openldap.org/>.
  *   *
  * Copyright 2004-2011 The OpenLDAP Foundation.   * Copyright 2004-2010 The OpenLDAP Foundation.
  * All rights reserved.   * All rights reserved.
  *   *
  * Redistribution and use in source and binary forms, with or without   * Redistribution and use in source and binary forms, with or without
Line 113  typedef struct slog_entry { Line 113  typedef struct slog_entry {
 } slog_entry;  } slog_entry;
   
 typedef struct sessionlog {  typedef struct sessionlog {
         struct berval   sl_mincsn;  
         int             sl_num;          int             sl_num;
         int             sl_size;          int             sl_size;
         slog_entry *sl_head;          slog_entry *sl_head;
Line 225  syncprov_state_ctrl( Line 224  syncprov_state_ctrl(
   
         if ( ret < 0 ) {          if ( ret < 0 ) {
                 Debug( LDAP_DEBUG_TRACE,                  Debug( LDAP_DEBUG_TRACE,
                         "slap_build_sync_ctrl: ber_flatten2 failed (%d)\n",                          "slap_build_sync_ctrl: ber_flatten2 failed\n",
                         ret, 0, 0 );                          0, 0, 0 );
                 send_ldap_error( op, rs, LDAP_OTHER, "internal error" );                  send_ldap_error( op, rs, LDAP_OTHER, "internal error" );
                 return LDAP_OTHER;                  return ret;
         }          }
   
         return LDAP_SUCCESS;          return LDAP_SUCCESS;
Line 271  syncprov_done_ctrl( Line 270  syncprov_done_ctrl(
   
         if ( ret < 0 ) {          if ( ret < 0 ) {
                 Debug( LDAP_DEBUG_TRACE,                  Debug( LDAP_DEBUG_TRACE,
                         "syncprov_done_ctrl: ber_flatten2 failed (%d)\n",                          "syncprov_done_ctrl: ber_flatten2 failed\n",
                         ret, 0, 0 );                          0, 0, 0 );
                 send_ldap_error( op, rs, LDAP_OTHER, "internal error" );                  send_ldap_error( op, rs, LDAP_OTHER, "internal error" );
                 return LDAP_OTHER;                  return ret;
         }          }
   
         return LDAP_SUCCESS;          return LDAP_SUCCESS;
Line 338  syncprov_sendinfo( Line 337  syncprov_sendinfo(
   
         if ( ret < 0 ) {          if ( ret < 0 ) {
                 Debug( LDAP_DEBUG_TRACE,                  Debug( LDAP_DEBUG_TRACE,
                         "syncprov_sendinfo: ber_flatten2 failed (%d)\n",                          "syncprov_sendinfo: ber_flatten2 failed\n",
                         ret, 0, 0 );                          0, 0, 0 );
                 send_ldap_error( op, rs, LDAP_OTHER, "internal error" );                  send_ldap_error( op, rs, LDAP_OTHER, "internal error" );
                 return LDAP_OTHER;                  return ret;
         }          }
   
         rs->sr_rspoid = LDAP_SYNC_INFO;          rs->sr_rspoid = LDAP_SYNC_INFO;
Line 736  again: Line 735  again:
                         /* If we didn't find an exact match, then try for <= */                          /* If we didn't find an exact match, then try for <= */
                         if ( findcsn_retry ) {                          if ( findcsn_retry ) {
                                 findcsn_retry = 0;                                  findcsn_retry = 0;
                                 rs_reinit( &frs, REP_RESULT );  
                                 goto again;                                  goto again;
                         }                          }
                         rc = LDAP_NO_SUCH_OBJECT;                          rc = LDAP_NO_SUCH_OBJECT;
Line 1425  syncprov_checkpoint( Operation *op, slap Line 1423  syncprov_checkpoint( Operation *op, slap
         syncprov_info_t *si = (syncprov_info_t *)on->on_bi.bi_private;          syncprov_info_t *si = (syncprov_info_t *)on->on_bi.bi_private;
         Modifications mod;          Modifications mod;
         Operation opm;          Operation opm;
         SlapReply rsm = {REP_RESULT};          SlapReply rsm = { 0 };
         slap_callback cb = {0};          slap_callback cb = {0};
         BackendDB be;          BackendDB be;
         BackendInfo *bi;          BackendInfo *bi;
Line 1470  syncprov_checkpoint( Operation *op, slap Line 1468  syncprov_checkpoint( Operation *op, slap
                 char txtbuf[SLAP_TEXT_BUFLEN];                  char txtbuf[SLAP_TEXT_BUFLEN];
                 size_t textlen = sizeof txtbuf;                  size_t textlen = sizeof txtbuf;
                 Entry *e = slap_create_context_csn_entry( opm.o_bd, NULL );                  Entry *e = slap_create_context_csn_entry( opm.o_bd, NULL );
                 rs_reinit( &rsm, REP_RESULT );  
                 slap_mods2entry( &mod, &e, 0, 1, &text, txtbuf, textlen);                  slap_mods2entry( &mod, &e, 0, 1, &text, txtbuf, textlen);
                 opm.ora_e = e;                  opm.ora_e = e;
                 opm.o_bd->be_add( &opm, &rsm );                  opm.o_bd->be_add( &opm, &rsm );
Line 1558  syncprov_add_slog( Operation *op ) Line 1555  syncprov_add_slog( Operation *op )
                 while ( sl->sl_num > sl->sl_size ) {                  while ( sl->sl_num > sl->sl_size ) {
                         se = sl->sl_head;                          se = sl->sl_head;
                         sl->sl_head = se->se_next;                          sl->sl_head = se->se_next;
                         AC_MEMCPY( sl->sl_mincsn.bv_val, se->se_csn.bv_val, se->se_csn.bv_len );  
                         sl->sl_mincsn.bv_len = se->se_csn.bv_len;  
                         ch_free( se );                          ch_free( se );
                         sl->sl_num--;                          sl->sl_num--;
                 }                  }
Line 1644  syncprov_playlog( Operation *op, SlapRep Line 1639  syncprov_playlog( Operation *op, SlapRep
                         delcsn[0].bv_len = se->se_csn.bv_len;                          delcsn[0].bv_len = se->se_csn.bv_len;
                         delcsn[0].bv_val[delcsn[0].bv_len] = '\0';                          delcsn[0].bv_val[delcsn[0].bv_len] = '\0';
                 } else {                  } else {
                         if ( se->se_tag == LDAP_REQ_ADD )  
                                 continue;  
                         nmods++;                          nmods++;
                         j = num - nmods;                          j = num - nmods;
                 }                  }
Line 1686  syncprov_playlog( Operation *op, SlapRep Line 1679  syncprov_playlog( Operation *op, SlapRep
   
         if ( mmods ) {          if ( mmods ) {
                 Operation fop;                  Operation fop;
                   SlapReply frs = { REP_RESULT };
                 int rc;                  int rc;
                 Filter mf, af;                  Filter mf, af;
                 AttributeAssertion eq = ATTRIBUTEASSERTION_INIT;                  AttributeAssertion eq = ATTRIBUTEASSERTION_INIT;
Line 1715  syncprov_playlog( Operation *op, SlapRep Line 1709  syncprov_playlog( Operation *op, SlapRep
                 fop.o_bd->bd_info = (BackendInfo *)on->on_info;                  fop.o_bd->bd_info = (BackendInfo *)on->on_info;
   
                 for ( i=ndel; i<num; i++ ) {                  for ( i=ndel; i<num; i++ ) {
                   if ( uuids[i].bv_len != 0 ) {                          if ( uuids[i].bv_len == 0 ) continue;
                         SlapReply frs = { REP_RESULT };  
   
                         mf.f_av_value = uuids[i];                          mf.f_av_value = uuids[i];
                         cb.sc_private = NULL;                          cb.sc_private = NULL;
                         fop.ors_slimit = 1;                          fop.ors_slimit = 1;
                           frs.sr_nentries = 0;
                         rc = fop.o_bd->be_search( &fop, &frs );                          rc = fop.o_bd->be_search( &fop, &frs );
   
                         /* If entry was not found, add to delete list */                          /* If entry was not found, add to delete list */
                         if ( !cb.sc_private ) {                          if ( !cb.sc_private ) {
                                 uuids[ndel++] = uuids[i];                                  uuids[ndel++] = uuids[i];
                         }                          }
                   }  
                 }                  }
                 fop.o_bd->bd_info = (BackendInfo *)on;                  fop.o_bd->bd_info = (BackendInfo *)on;
         }          }
Line 1824  syncprov_op_response( Operation *op, Sla Line 1817  syncprov_op_response( Operation *op, Sla
                          * that changed, and only one can be passed in the csn queue.                           * that changed, and only one can be passed in the csn queue.
                          */                           */
                         Modifications *mod = op->orm_modlist;                          Modifications *mod = op->orm_modlist;
                         unsigned i;                          int i, j, sid;
                         int j, sid;  
   
                         for ( i=0; i<mod->sml_numvals; i++ ) {                          for ( i=0; i<mod->sml_numvals; i++ ) {
                                 sid = slap_parse_csn_sid( &mod->sml_values[i] );                                  sid = slap_parse_csn_sid( &mod->sml_values[i] );
Line 1936  syncprov_op_response( Operation *op, Sla Line 1928  syncprov_op_response( Operation *op, Sla
                 }                  }
   
                 /* Add any log records */                  /* Add any log records */
                 if ( si->si_logs ) {                  if ( si->si_logs && op->o_tag != LDAP_REQ_ADD ) {
                         syncprov_add_slog( op );                          syncprov_add_slog( op );
                 }                  }
 leave:          ldap_pvt_thread_mutex_unlock( &si->si_resp_mutex );  leave:          ldap_pvt_thread_mutex_unlock( &si->si_resp_mutex );
Line 2330  syncprov_search_response( Operation *op, Line 2322  syncprov_search_response( Operation *op,
                 rs->sr_ctrls = op->o_tmpalloc( sizeof(LDAPControl *)*2,                  rs->sr_ctrls = op->o_tmpalloc( sizeof(LDAPControl *)*2,
                         op->o_tmpmemctx );                          op->o_tmpmemctx );
                 rs->sr_ctrls[1] = NULL;                  rs->sr_ctrls[1] = NULL;
                 rs->sr_flags |= REP_CTRLS_MUSTBEFREED;  
                 /* If we're in delta-sync mode, always send a cookie */                  /* If we're in delta-sync mode, always send a cookie */
                 if ( si->si_nopres && si->si_usehint && a ) {                  if ( si->si_nopres && si->si_usehint && a ) {
                         struct berval cookie;                          struct berval cookie;
Line 2415  syncprov_op_search( Operation *op, SlapR Line 2406  syncprov_op_search( Operation *op, SlapR
         sync_control *srs;          sync_control *srs;
         BerVarray ctxcsn;          BerVarray ctxcsn;
         int i, *sids, numcsns;          int i, *sids, numcsns;
         struct berval mincsn, maxcsn;          struct berval mincsn;
         int dirty = 0;          int dirty = 0;
   
         if ( !(op->o_sync_mode & SLAP_SYNC_REFRESH) ) return SLAP_CB_CONTINUE;          if ( !(op->o_sync_mode & SLAP_SYNC_REFRESH) ) return SLAP_CB_CONTINUE;
Line 2530  syncprov_op_search( Operation *op, SlapR Line 2521  syncprov_op_search( Operation *op, SlapR
                         i++;                          i++;
                 }                  }
   
                 /* Find the smallest CSN which differs from contextCSN */                  /* Find the smallest CSN */
                 mincsn.bv_len = 0;                  mincsn = srs->sr_state.ctxcsn[0];
                 maxcsn.bv_len = 0;                  for ( i=1; i<srs->sr_state.numcsns; i++ ) {
                 for ( i=0; i<srs->sr_state.numcsns; i++ ) {                          if ( ber_bvcmp( &mincsn, &srs->sr_state.ctxcsn[i] ) > 0 )
                         for ( j=0; j<numcsns; j++ ) {                                  mincsn = srs->sr_state.ctxcsn[i];
                                 if ( srs->sr_state.sids[i] != sids[j] )                  }
                                         continue;  
                                 if ( BER_BVISEMPTY( &maxcsn ) || ber_bvcmp( &maxcsn,  
                                         &srs->sr_state.ctxcsn[i] ) < 0 ) {  
                                         maxcsn = srs->sr_state.ctxcsn[i];  
                                 }  
                                 if ( ber_bvcmp( &srs->sr_state.ctxcsn[i], &ctxcsn[j] ) < 0) {  
                                         if ( BER_BVISEMPTY( &mincsn ) || ber_bvcmp( &mincsn,  
                                                 &srs->sr_state.ctxcsn[i] ) > 0 ) {  
                                                 mincsn = srs->sr_state.ctxcsn[i];  
                                         }  
                                 }  
                         }  
                 }  
                 if ( BER_BVISEMPTY( &mincsn ))  
                         mincsn = maxcsn;  
   
                 /* If nothing has changed, shortcut it */                  /* If nothing has changed, shortcut it */
                 if ( srs->sr_state.numcsns == numcsns ) {                  if ( srs->sr_state.numcsns == numcsns ) {
Line 2615  no_change:  if ( !(op->o_sync_mode & SLA Line 2591  no_change:  if ( !(op->o_sync_mode & SLA
                         /* Are there any log entries, and is the consumer state                          /* Are there any log entries, and is the consumer state
                          * present in the session log?                           * present in the session log?
                          */                           */
                         if ( sl->sl_num > 0 && ber_bvcmp( &mincsn, &sl->sl_mincsn ) >= 0 ) {                          if ( sl->sl_num > 0 && ber_bvcmp( &mincsn, &sl->sl_head->se_csn ) >= 0 ) {
                                 do_present = 0;                                  do_present = 0;
                                 /* mutex is unlocked in playlog */                                  /* mutex is unlocked in playlog */
                                 syncprov_playlog( op, rs, sl, srs, ctxcsn, numcsns, sids );                                  syncprov_playlog( op, rs, sl, srs, ctxcsn, numcsns, sids );
Line 2762  syncprov_operational( Line 2738  syncprov_operational(
                                 }                                  }
   
                                 if ( !ap ) {                                  if ( !ap ) {
                                         if ( rs_entry2modifiable( op, rs, on )) {                                          if ( !(rs->sr_flags & REP_ENTRY_MODIFIABLE) ) {
                                                   Entry *e = entry_dup( rs->sr_entry );
                                                   if ( rs->sr_flags & REP_ENTRY_MUSTRELEASE ) {
                                                           overlay_entry_release_ov( op, rs->sr_entry, 0, on );
                                                           rs->sr_flags ^= REP_ENTRY_MUSTRELEASE;
                                                   } else if ( rs->sr_flags & REP_ENTRY_MUSTBEFREED ) {
                                                           entry_free( rs->sr_entry );
                                                   }
                                                   rs->sr_entry = e;
                                                   rs->sr_flags |=
                                                           REP_ENTRY_MODIFIABLE|REP_ENTRY_MUSTBEFREED;
                                                 a = attr_find( rs->sr_entry->e_attrs,                                                  a = attr_find( rs->sr_entry->e_attrs,
                                                         slap_schema.si_ad_contextCSN );                                                          slap_schema.si_ad_contextCSN );
                                         }                                          }
Line 2947  sp_cf_gen(ConfigArgs *c) Line 2933  sp_cf_gen(ConfigArgs *c)
                 }                  }
                 sl = si->si_logs;                  sl = si->si_logs;
                 if ( !sl ) {                  if ( !sl ) {
                         sl = ch_malloc( sizeof( sessionlog ) + LDAP_PVT_CSNSTR_BUFSIZE );                          sl = ch_malloc( sizeof( sessionlog ) );
                         sl->sl_mincsn.bv_val = (char *)(sl+1);  
                         sl->sl_mincsn.bv_len = 0;  
                         sl->sl_num = 0;                          sl->sl_num = 0;
                         sl->sl_head = sl->sl_tail = NULL;                          sl->sl_head = sl->sl_tail = NULL;
                         ldap_pvt_thread_mutex_init( &sl->sl_mutex );                          ldap_pvt_thread_mutex_init( &sl->sl_mutex );
Line 3075  syncprov_db_open( Line 3059  syncprov_db_open(
                 si->si_numops++;                  si->si_numops++;
         }          }
   
         /* Initialize the sessionlog mincsn */  
         if ( si->si_logs && si->si_numcsns ) {  
                 sessionlog *sl = si->si_logs;  
                 int i;  
                 /* If there are multiple, find the newest */  
                 for ( i=0; i < si->si_numcsns; i++ ) {  
                         if ( ber_bvcmp( &sl->sl_mincsn, &si->si_ctxcsn[i] ) < 0 ) {  
                                 AC_MEMCPY( sl->sl_mincsn.bv_val, si->si_ctxcsn[i].bv_val,  
                                         si->si_ctxcsn[i].bv_len );  
                                 sl->sl_mincsn.bv_len = si->si_ctxcsn[i].bv_len;  
                         }  
                 }  
         }  
   
 out:  out:
         op->o_bd->bd_info = (BackendInfo *)on;          op->o_bd->bd_info = (BackendInfo *)on;
         return 0;          return 0;
Line 3104  syncprov_db_close( Line 3074  syncprov_db_close(
 {  {
     slap_overinst   *on = (slap_overinst *) be->bd_info;      slap_overinst   *on = (slap_overinst *) be->bd_info;
     syncprov_info_t *si = (syncprov_info_t *)on->on_bi.bi_private;      syncprov_info_t *si = (syncprov_info_t *)on->on_bi.bi_private;
   #ifdef SLAP_CONFIG_DELETE
           syncops *so, *sonext;
   #endif /* SLAP_CONFIG_DELETE */
   
         if ( slapMode & SLAP_TOOL_MODE ) {          if ( slapMode & SLAP_TOOL_MODE ) {
                 return 0;                  return 0;
Line 3123  syncprov_db_close( Line 3096  syncprov_db_close(
                 syncprov_checkpoint( op, on );                  syncprov_checkpoint( op, on );
         }          }
   
   #ifdef SLAP_CONFIG_DELETE
           ldap_pvt_thread_mutex_lock( &si->si_ops_mutex );
           for ( so=si->si_ops, sonext=so;  so; so=sonext  ) {
                   SlapReply rs = {REP_RESULT};
                   rs.sr_err = LDAP_UNAVAILABLE;
                   send_ldap_result( so->s_op, &rs );
                   sonext=so->s_next;
                   syncprov_drop_psearch( so, 0);
           }
           si->si_ops=NULL;
           ldap_pvt_thread_mutex_unlock( &si->si_ops_mutex );
           overlay_unregister_control( be, LDAP_CONTROL_SYNC );
   #endif /* SLAP_CONFIG_DELETE */
   
     return 0;      return 0;
 }  }
   

Removed from v.1.147.2.92  
changed lines
  Added in v.1.323


______________
© Copyright 1998-2020, OpenLDAP Foundation, info@OpenLDAP.org