Diff for /servers/slapd/overlays/syncprov.c between versions 1.52 and 1.65

version 1.52, 2004/12/09 21:21:26 version 1.65, 2005/01/13 20:14:52
Line 1 Line 1
 /* $OpenLDAP: pkg/ldap/servers/slapd/overlays/syncprov.c,v 1.51 2004/12/09 18:52:30 hyc Exp $ */  /* $OpenLDAP: pkg/ldap/servers/slapd/overlays/syncprov.c,v 1.64 2005/01/13 18:51:01 hyc Exp $ */
 /* syncprov.c - syncrepl provider */  /* syncprov.c - syncrepl provider */
 /* This work is part of OpenLDAP Software <http://www.openldap.org/>.  /* This work is part of OpenLDAP Software <http://www.openldap.org/>.
  *   *
  * Copyright 2004 The OpenLDAP Foundation.   * Copyright 2004-2005 The OpenLDAP Foundation.
  * All rights reserved.   * All rights reserved.
  *   *
  * Redistribution and use in source and binary forms, with or without   * Redistribution and use in source and binary forms, with or without
Line 56  typedef struct syncops { Line 56  typedef struct syncops {
         struct berval   s_base;         /* ndn of search base */          struct berval   s_base;         /* ndn of search base */
         ID              s_eid;          /* entryID of search base */          ID              s_eid;          /* entryID of search base */
         Operation       *s_op;          /* search op */          Operation       *s_op;          /* search op */
         int             s_sid;  
         int             s_rid;          int             s_rid;
         struct berval s_filterstr;          struct berval s_filterstr;
         int             s_flags;        /* search status */          int             s_flags;        /* search status */
Line 84  typedef struct sync_control { Line 83  typedef struct sync_control {
 #define SLAP_SYNC_REFRESH_AND_PERSIST   (LDAP_SYNC_REFRESH_AND_PERSIST<<SLAP_CONTROL_SHIFT)  #define SLAP_SYNC_REFRESH_AND_PERSIST   (LDAP_SYNC_REFRESH_AND_PERSIST<<SLAP_CONTROL_SHIFT)
   
 #define PS_IS_REFRESHING        0x01  #define PS_IS_REFRESHING        0x01
   #define PS_IS_DETACHED          0x02
   
 /* Record of which searches matched at premodify step */  /* Record of which searches matched at premodify step */
 typedef struct syncmatches {  typedef struct syncmatches {
Line 100  typedef struct slog_entry { Line 100  typedef struct slog_entry {
 } slog_entry;  } slog_entry;
   
 typedef struct sessionlog {  typedef struct sessionlog {
         struct sessionlog *sl_next;  
         int             sl_sid;  
         struct berval   sl_mincsn;          struct berval   sl_mincsn;
         int             sl_num;          int             sl_num;
         int             sl_size;          int             sl_size;
Line 525  findmax_cb( Operation *op, SlapReply *rs Line 523  findmax_cb( Operation *op, SlapReply *rs
                 Attribute *a = attr_find( rs->sr_entry->e_attrs,                  Attribute *a = attr_find( rs->sr_entry->e_attrs,
                         slap_schema.si_ad_entryCSN );                          slap_schema.si_ad_entryCSN );
   
                 if ( a && ber_bvcmp( &a->a_vals[0], maxcsn )) {                  if ( a && ber_bvcmp( &a->a_vals[0], maxcsn ) > 0 ) {
                         maxcsn->bv_len = a->a_vals[0].bv_len;                          maxcsn->bv_len = a->a_vals[0].bv_len;
                         strcpy( maxcsn->bv_val, a->a_vals[0].bv_val );                          strcpy( maxcsn->bv_val, a->a_vals[0].bv_val );
                 }                  }
Line 644  syncprov_findcsn( Operation *op, int mod Line 642  syncprov_findcsn( Operation *op, int mod
                 fop.ors_slimit = SLAP_NO_LIMIT;                  fop.ors_slimit = SLAP_NO_LIMIT;
                 cb.sc_private = &maxcsn;                  cb.sc_private = &maxcsn;
                 cb.sc_response = findmax_cb;                  cb.sc_response = findmax_cb;
                   strcpy( cbuf, si->si_ctxcsn.bv_val );
                 maxcsn.bv_val = cbuf;                  maxcsn.bv_val = cbuf;
                 maxcsn.bv_len = 0;                  maxcsn.bv_len = si->si_ctxcsn.bv_len;
                 break;                  break;
         case FIND_CSN:          case FIND_CSN:
                 cf.f_choice = LDAP_FILTER_LE;                  cf.f_choice = LDAP_FILTER_LE;
Line 696  syncprov_findcsn( Operation *op, int mod Line 695  syncprov_findcsn( Operation *op, int mod
   
         switch( mode ) {          switch( mode ) {
         case FIND_MAXCSN:          case FIND_MAXCSN:
                 if ( maxcsn.bv_len ) {                  strcpy( si->si_ctxcsnbuf, maxcsn.bv_val );
                         strcpy( si->si_ctxcsnbuf, maxcsn.bv_val );                  si->si_ctxcsn.bv_len = maxcsn.bv_len;
                         si->si_ctxcsn.bv_len = maxcsn.bv_len;  
                 }  
                 break;                  break;
         case FIND_CSN:          case FIND_CSN:
                 /* If matching CSN was not found, invalidate the context. */                  /* If matching CSN was not found, invalidate the context. */
Line 771  syncprov_sendresp( Operation *op, opcook Line 768  syncprov_sendresp( Operation *op, opcook
         }          }
   
         ctrls[1] = NULL;          ctrls[1] = NULL;
         slap_compose_sync_cookie( op, &cookie, &opc->sctxcsn,          slap_compose_sync_cookie( op, &cookie, &opc->sctxcsn, so->s_rid );
                 so->s_sid, so->s_rid );  
   
         e_uuid.e_attrs = &a_uuid;          e_uuid.e_attrs = &a_uuid;
         a_uuid.a_desc = slap_schema.si_ad_entryUUID;          a_uuid.a_desc = slap_schema.si_ad_entryUUID;
Line 829  syncprov_free_syncop( syncops *so ) Line 825  syncprov_free_syncop( syncops *so )
                 return;                  return;
         }          }
         ldap_pvt_thread_mutex_unlock( &so->s_mutex );          ldap_pvt_thread_mutex_unlock( &so->s_mutex );
         filter_free( so->s_op->ors_filter );          if ( so->s_flags & PS_IS_DETACHED ) {
         for ( ga = so->s_op->o_groups; ga; ga=gnext ) {                  filter_free( so->s_op->ors_filter );
                 gnext = ga->ga_next;                  for ( ga = so->s_op->o_groups; ga; ga=gnext ) {
                 ch_free( ga );                          gnext = ga->ga_next;
                           ch_free( ga );
                   }
                   ch_free( so->s_op );
         }          }
         ch_free( so->s_op );  
         ch_free( so->s_base.bv_val );          ch_free( so->s_base.bv_val );
         for ( sr=so->s_res; sr; sr=srnext ) {          for ( sr=so->s_res; sr; sr=srnext ) {
                 srnext = sr->s_next;                  srnext = sr->s_next;
Line 847  syncprov_free_syncop( syncops *so ) Line 845  syncprov_free_syncop( syncops *so )
 static int  static int
 syncprov_drop_psearch( syncops *so, int lock )  syncprov_drop_psearch( syncops *so, int lock )
 {  {
         if ( lock )          if ( so->s_flags & PS_IS_DETACHED ) {
                 ldap_pvt_thread_mutex_lock( &so->s_op->o_conn->c_mutex );                  if ( lock )
         so->s_op->o_conn->c_n_ops_executing--;                          ldap_pvt_thread_mutex_lock( &so->s_op->o_conn->c_mutex );
         so->s_op->o_conn->c_n_ops_completed++;                  so->s_op->o_conn->c_n_ops_executing--;
         LDAP_STAILQ_REMOVE( &so->s_op->o_conn->c_ops, so->s_op, slap_op,                  so->s_op->o_conn->c_n_ops_completed++;
                 o_next );                  LDAP_STAILQ_REMOVE( &so->s_op->o_conn->c_ops, so->s_op, slap_op,
         if ( lock )                          o_next );
                 ldap_pvt_thread_mutex_unlock( &so->s_op->o_conn->c_mutex );                  if ( lock )
                           ldap_pvt_thread_mutex_unlock( &so->s_op->o_conn->c_mutex );
           }
         syncprov_free_syncop( so );          syncprov_free_syncop( so );
 }  }
   
Line 997  syncprov_matchops( Operation *op, opcook Line 997  syncprov_matchops( Operation *op, opcook
 done:  done:
         if ( op->o_tag != LDAP_REQ_ADD ) {          if ( op->o_tag != LDAP_REQ_ADD ) {
                 op->o_bd->bd_info = (BackendInfo *)on->on_info;                  op->o_bd->bd_info = (BackendInfo *)on->on_info;
                 be_entry_release_r( op, e );                  be_entry_release_rw( op, e, 0 );
                 op->o_bd->bd_info = (BackendInfo *)on;                  op->o_bd->bd_info = (BackendInfo *)on;
         }          }
         if ( freefdn ) {          if ( freefdn ) {
Line 1093  syncprov_add_slog( Operation *op, struct Line 1093  syncprov_add_slog( Operation *op, struct
         sessionlog *sl;          sessionlog *sl;
         slog_entry *se;          slog_entry *se;
   
         for ( sl = si->si_logs; sl; sl=sl->sl_next ) {          sl = si->si_logs;
           {
                 /* Allocate a record. UUIDs are not NUL-terminated. */                  /* Allocate a record. UUIDs are not NUL-terminated. */
                 se = ch_malloc( sizeof( slog_entry ) + opc->suuid.bv_len +                   se = ch_malloc( sizeof( slog_entry ) + opc->suuid.bv_len + 
                         csn->bv_len + 1 );                          csn->bv_len + 1 );
Line 1189  syncprov_playlog( Operation *op, SlapRep Line 1190  syncprov_playlog( Operation *op, SlapRep
   
         ndel = i;          ndel = i;
   
           /* Zero out unused slots */
           for ( i=ndel; i < num - nmods; i++ )
                   uuids[i].bv_len = 0;
   
         /* Mods must be validated to see if they belong in this delete set.          /* Mods must be validated to see if they belong in this delete set.
          */           */
   
Line 1576  syncprov_detach_op( Operation *op, synco Line 1581  syncprov_detach_op( Operation *op, synco
         op->o_conn->c_n_ops_executing++;          op->o_conn->c_n_ops_executing++;
         op->o_conn->c_n_ops_completed--;          op->o_conn->c_n_ops_completed--;
         LDAP_STAILQ_INSERT_TAIL( &op->o_conn->c_ops, op2, o_next );          LDAP_STAILQ_INSERT_TAIL( &op->o_conn->c_ops, op2, o_next );
           so->s_flags |= PS_IS_DETACHED;
         ldap_pvt_thread_mutex_unlock( &op->o_conn->c_mutex );          ldap_pvt_thread_mutex_unlock( &op->o_conn->c_mutex );
 }  }
   
Line 1602  syncprov_search_response( Operation *op, Line 1608  syncprov_search_response( Operation *op,
                 if ( srs->sr_state.ctxcsn ) {                  if ( srs->sr_state.ctxcsn ) {
                         Attribute *a = attr_find( rs->sr_entry->e_attrs,                          Attribute *a = attr_find( rs->sr_entry->e_attrs,
                                 slap_schema.si_ad_entryCSN );                                  slap_schema.si_ad_entryCSN );
                           
                         /* Don't send the ctx entry twice */                          /* Don't send the ctx entry twice */
                         if ( bvmatch( &a->a_nvals[0], srs->sr_state.ctxcsn ))                          if ( a && bvmatch( &a->a_nvals[0], srs->sr_state.ctxcsn ) )
                                 return LDAP_SUCCESS;                                  return LDAP_SUCCESS;
                 }                  }
                 rs->sr_ctrls = op->o_tmpalloc( sizeof(LDAPControl *)*2,                  rs->sr_ctrls = op->o_tmpalloc( sizeof(LDAPControl *)*2,
Line 1616  syncprov_search_response( Operation *op, Line 1623  syncprov_search_response( Operation *op,
   
                 slap_compose_sync_cookie( op, &cookie,                  slap_compose_sync_cookie( op, &cookie,
                         &op->ors_filter->f_and->f_ava->aa_value,                          &op->ors_filter->f_and->f_ava->aa_value,
                         srs->sr_state.sid, srs->sr_state.rid );                          srs->sr_state.rid );
   
                 /* Is this a regular refresh? */                  /* Is this a regular refresh? */
                 if ( !ss->ss_so ) {                  if ( !ss->ss_so ) {
Line 1662  syncprov_search_response( Operation *op, Line 1669  syncprov_search_response( Operation *op,
   
                                         if ( e ) {                                          if ( e ) {
                                                 op->o_bd->bd_info = (BackendInfo *)on->on_info;                                                  op->o_bd->bd_info = (BackendInfo *)on->on_info;
                                                 be_entry_release_r( op, e );                                                  be_entry_release_rw( op, e, 0 );
                                                 op->o_bd->bd_info = (BackendInfo *)on;                                                  op->o_bd->bd_info = (BackendInfo *)on;
                                         }                                          }
                                         ch_free( sr );                                          ch_free( sr );
Line 1736  syncprov_op_search( Operation *op, SlapR Line 1743  syncprov_op_search( Operation *op, SlapR
                 sop = ch_malloc( sizeof( syncops ));                  sop = ch_malloc( sizeof( syncops ));
                 *sop = so;                  *sop = so;
                 ldap_pvt_thread_mutex_init( &sop->s_mutex );                  ldap_pvt_thread_mutex_init( &sop->s_mutex );
                 ldap_pvt_thread_mutex_lock( &si->si_ops_mutex );  
                 sop->s_sid = srs->sr_state.sid;  
                 sop->s_rid = srs->sr_state.rid;                  sop->s_rid = srs->sr_state.rid;
                 sop->s_next = si->si_ops;  
                 sop->s_inuse = 1;                  sop->s_inuse = 1;
   
                   ldap_pvt_thread_mutex_lock( &si->si_ops_mutex );
                   sop->s_next = si->si_ops;
                 si->si_ops = sop;                  si->si_ops = sop;
                 ldap_pvt_thread_mutex_unlock( &si->si_ops_mutex );                  ldap_pvt_thread_mutex_unlock( &si->si_ops_mutex );
         }          }
Line 1756  syncprov_op_search( Operation *op, SlapR Line 1763  syncprov_op_search( Operation *op, SlapR
         if ( srs->sr_state.ctxcsn ) {          if ( srs->sr_state.ctxcsn ) {
                 sessionlog *sl;                  sessionlog *sl;
   
                 /* Is the CSN in a valid format? */                  /* The cookie was validated when it was parsed, just use it */
                 /* FIXME: should use csnValidate when that is implemented */  
                 {  
                         char *ptr;  
                         struct berval timestamp;  
                         slap_syntax_validate_func *validate;  
                         AttributeDescription *ad = slap_schema.si_ad_modifyTimestamp;  
   
                         if ( srs->sr_state.ctxcsn->bv_len >= LDAP_LUTIL_CSNSTR_BUFSIZE ) {  
                                 send_ldap_error( op, rs, LDAP_OTHER, "invalid sync cookie" );  
                                 return rs->sr_err;  
                         }  
                         ptr = strchr( srs->sr_state.ctxcsn->bv_val, '#' );  
                         if ( !ptr ) {  
                                 send_ldap_error( op, rs, LDAP_OTHER, "invalid sync cookie" );  
                                 return rs->sr_err;  
                         }  
                         timestamp.bv_val = srs->sr_state.ctxcsn->bv_val;  
                         timestamp.bv_len = ptr - timestamp.bv_val;  
                         validate = ad->ad_type->sat_syntax->ssyn_validate;  
                         if ( validate( ad->ad_type->sat_syntax, &timestamp )) {  
                                 send_ldap_error( op, rs, LDAP_OTHER, "invalid sync cookie" );  
                                 return rs->sr_err;  
                         }  
                 }  
                 /* If just Refreshing and nothing has changed, shortcut it */                  /* If just Refreshing and nothing has changed, shortcut it */
                 if ( bvmatch( srs->sr_state.ctxcsn, &ctxcsn )) {                  if ( bvmatch( srs->sr_state.ctxcsn, &ctxcsn )) {
                         nochange = 1;                          nochange = 1;
Line 1800  syncprov_op_search( Operation *op, SlapR Line 1784  syncprov_op_search( Operation *op, SlapR
                         goto shortcut;                          goto shortcut;
                 }                  }
                 /* Do we have a sessionlog for this search? */                  /* Do we have a sessionlog for this search? */
                 for ( sl=si->si_logs; sl; sl=sl->sl_next )                  sl=si->si_logs;
                         if ( sl->sl_sid == srs->sr_state.sid ) break;  
                 if ( sl ) {                  if ( sl ) {
                         ldap_pvt_thread_mutex_lock( &sl->sl_mutex );                          ldap_pvt_thread_mutex_lock( &sl->sl_mutex );
                         if ( ber_bvcmp( srs->sr_state.ctxcsn, &sl->sl_mincsn ) >= 0 ) {                          if ( ber_bvcmp( srs->sr_state.ctxcsn, &sl->sl_mincsn ) >= 0 ) {
Line 1959  syncprov_db_config( Line 1942  syncprov_db_config(
   
         } else if ( strcasecmp( argv[0], "syncprov-sessionlog" ) == 0 ) {          } else if ( strcasecmp( argv[0], "syncprov-sessionlog" ) == 0 ) {
                 sessionlog *sl;                  sessionlog *sl;
                 int sid, size;                  int size;
                 if ( argc != 3 ) {                  if ( argc != 2 ) {
                         fprintf( stderr, "%s: line %d: wrong number of arguments in "                          fprintf( stderr, "%s: line %d: wrong number of arguments in "
                                 "\"syncprov-sessionlog <sid> <size>\"\n", fname, lineno );                                  "\"syncprov-sessionlog <size>\"\n", fname, lineno );
                         return -1;                          return -1;
                 }                  }
                 sid = atoi( argv[1] );                  size = atoi( argv[1] );
                 if ( sid < 0 || sid > 999 ) {  
                         fprintf( stderr,  
                                 "%s: line %d: session log id %d is out of range [0..999]\n",  
                                 fname, lineno, sid );  
                         return -1;  
                 }  
                 size = atoi( argv[2] );  
                 if ( size < 0 ) {                  if ( size < 0 ) {
                         fprintf( stderr,                          fprintf( stderr,
                                 "%s: line %d: session log size %d is negative\n",                                  "%s: line %d: session log size %d is negative\n",
                                 fname, lineno, size );                                  fname, lineno, size );
                         return -1;                          return -1;
                 }                  }
                 for ( sl = si->si_logs; sl; sl=sl->sl_next ) {                  sl = si->si_logs;
                         if ( sl->sl_sid == sid ) {  
                                 sl->sl_size = size;  
                                 break;  
                         }  
                 }  
                 if ( !sl ) {                  if ( !sl ) {
                         sl = ch_malloc( sizeof( sessionlog ) + LDAP_LUTIL_CSNSTR_BUFSIZE );                          sl = ch_malloc( sizeof( sessionlog ) + LDAP_LUTIL_CSNSTR_BUFSIZE );
                         sl->sl_mincsn.bv_val = (char *)(sl+1);                          sl->sl_mincsn.bv_val = (char *)(sl+1);
                         sl->sl_mincsn.bv_len = 0;                          sl->sl_mincsn.bv_len = 0;
                         sl->sl_sid = sid;  
                         sl->sl_size = size;  
                         sl->sl_num = 0;                          sl->sl_num = 0;
                         sl->sl_head = sl->sl_tail = NULL;                          sl->sl_head = sl->sl_tail = NULL;
                         sl->sl_next = si->si_logs;  
                         ldap_pvt_thread_mutex_init( &sl->sl_mutex );                          ldap_pvt_thread_mutex_init( &sl->sl_mutex );
                         si->si_logs = sl;                          si->si_logs = sl;
                 }                  }
                   sl->sl_size = size;
                 return 0;                  return 0;
         }          }
   
Line 2058  syncprov_db_open( Line 2027  syncprov_db_open(
                         si->si_ctxcsnbuf[si->si_ctxcsn.bv_len] = '\0';                          si->si_ctxcsnbuf[si->si_ctxcsn.bv_len] = '\0';
                         strcpy( ctxcsnbuf, si->si_ctxcsnbuf );                          strcpy( ctxcsnbuf, si->si_ctxcsnbuf );
                 }                  }
                 be_entry_release_r( op, e );                  be_entry_release_rw( op, e, 0 );
                 op->o_bd->bd_info = (BackendInfo *)on;                  op->o_bd->bd_info = (BackendInfo *)on;
                 op->o_req_dn = be->be_suffix[0];                  op->o_req_dn = be->be_suffix[0];
                 op->o_req_ndn = be->be_nsuffix[0];                  op->o_req_ndn = be->be_nsuffix[0];

Removed from v.1.52  
changed lines
  Added in v.1.65


______________
© Copyright 1998-2020, OpenLDAP Foundation, info@OpenLDAP.org