]> diplodocus.org Git - nmh/blobdiff - sbr/netsec.c
Garbage-collect all of this unused code.
[nmh] / sbr / netsec.c
index 6a09d14015f994c1104f301f3360ef38b03fe59a..3fd31854f568c56655493f6fbf499a978931cd41 100644 (file)
@@ -11,7 +11,9 @@
 #include <h/mh.h>
 #include <h/utils.h>
 #include <h/netsec.h>
+#include <h/oauth.h>
 #include <stdarg.h>
+#include <sys/select.h>
 
 #ifdef CYRUS_SASL
 #include <sasl/sasl.h>
@@ -54,6 +56,9 @@ static SSL_CTX *sslctx = NULL;                /* SSL Context */
 struct _netsec_context {
     int ns_fd;                 /* Descriptor for network connection */
     int ns_snoop;              /* If true, display network data */
+    int ns_snoop_noend;                /* If true, didn't get a CR/LF on last line */
+    netsec_snoop_callback ns_snoop_cb; /* Snoop output callback */
+    int ns_timeout;            /* Network read timeout, in seconds */
     char *ns_userid;           /* Userid for authentication */
     unsigned char *ns_inbuffer;        /* Our read input buffer */
     unsigned char *ns_inptr;   /* Our read buffer input pointer */
@@ -63,9 +68,12 @@ struct _netsec_context {
     unsigned char *ns_outptr;  /* Output buffer pointer */
     unsigned int ns_outbuflen; /* Output buffer data length */
     unsigned int ns_outbufsize;        /* Output buffer size */
+    char *sasl_mech;           /* User-requested mechanism */
+#ifdef OAUTH_SUPPORT
+    char *oauth_service;       /* OAuth2 service name */
+#endif /* OAUTH_SUPPORT */
 #ifdef CYRUS_SASL
     char *sasl_hostname;       /* Hostname we've connected to */
-    char *sasl_mech;           /* User-requested mechanism */
     sasl_conn_t *sasl_conn;    /* SASL connection context */
     sasl_ssf_t sasl_ssf;       /* SASL Security Strength Factor */
     netsec_sasl_callback sasl_proto_cb; /* SASL callback we use */
@@ -74,7 +82,8 @@ struct _netsec_context {
     sasl_secret_t *sasl_secret;        /* SASL password structure */
     char *sasl_chosen_mech;    /* Mechanism chosen by SASL */
     int sasl_seclayer;         /* If true, SASL security layer is enabled */
-    size_t sasl_maxoutsize;    /* Negotiated maximum size of output messages */
+    char *sasl_tmpbuf;         /* Temporary read buffer for decodes */
+    size_t sasl_maxbufsize;    /* Maximum negotiated SASL buffer size */
 #endif /* CYRUS_SASL */
 #ifdef TLS_SUPPORT
     BIO *ssl_io;               /* BIO used for connection I/O */
@@ -83,10 +92,10 @@ struct _netsec_context {
 };
 
 /*
- * Function to allocate error message strings
+ * Function to read data from the actual network socket
  */
 
-static void netsec_err(char **errstr, const char *format, ...);
+static int netsec_fillread(netsec_context *ns_context, char **errstr);
 
 /*
  * How this code works, in general.
@@ -115,7 +124,10 @@ netsec_init(void)
 
     nsc->ns_fd = -1;
     nsc->ns_snoop = 0;
+    nsc->ns_snoop_noend = 0;
+    nsc->ns_snoop_cb = NULL;
     nsc->ns_userid = NULL;
+    nsc->ns_timeout = 60;      /* Our default */
     nsc->ns_inbufsize = NETSEC_BUFSIZE;
     nsc->ns_inbuffer = mh_xmalloc(nsc->ns_inbufsize);
     nsc->ns_inptr = nsc->ns_inbuffer;
@@ -124,15 +136,21 @@ netsec_init(void)
     nsc->ns_outbuffer = mh_xmalloc(nsc->ns_outbufsize);
     nsc->ns_outptr = nsc->ns_outbuffer;
     nsc->ns_outbuflen = 0;
+    nsc->sasl_mech = NULL;
+#ifdef OAUTH_SUPPORT
+    nsc->oauth_service = NULL;
+#endif /* OAUTH_SUPPORT */
 #ifdef CYRUS_SASL
     nsc->sasl_conn = NULL;
     nsc->sasl_hostname = NULL;
-    nsc->sasl_mech = NULL;
     nsc->sasl_cbs = NULL;
     nsc->sasl_creds = NULL;
     nsc->sasl_secret = NULL;
     nsc->sasl_chosen_mech = NULL;
-    nsc->sasl_maxoutsize = nsc->sasl_ssf = 0;
+    nsc->sasl_ssf = 0;
+    nsc->sasl_seclayer = 0;
+    nsc->sasl_tmpbuf = NULL;
+    nsc->sasl_maxbufsize = 0;
 #endif /* CYRUS_SASL */
 #ifdef TLS_SUPPORT
     nsc->ssl_io = NULL;
@@ -143,11 +161,11 @@ netsec_init(void)
 
 /*
  * Shutdown the connection completely and free all resources.
- * The connection is not closed, however.
+ * The connection is only closed if the flag is given.
  */
 
 void
-netsec_shutdown(netsec_context *nsc)
+netsec_shutdown(netsec_context *nsc, int closeflag)
 {
     if (nsc->ns_userid)
        free(nsc->ns_userid);
@@ -155,13 +173,17 @@ netsec_shutdown(netsec_context *nsc)
        free(nsc->ns_inbuffer);
     if (nsc->ns_outbuffer)
        free(nsc->ns_outbuffer);
+    if (nsc->sasl_mech)
+       free(nsc->sasl_mech);
+#ifdef OAUTH_SERVICE
+    if (nsc->oauth_service)
+       free(nsc->oauth_service);
+#endif /* OAUTH_SERVICE */
 #ifdef CYRUS_SASL
     if (nsc->sasl_conn)
        sasl_dispose(&nsc->sasl_conn);
     if (nsc->sasl_hostname)
        free(nsc->sasl_hostname);
-    if (nsc->sasl_mech)
-       free(nsc->sasl_mech);
     if (nsc->sasl_cbs)
        free(nsc->sasl_cbs);
     if (nsc->sasl_creds) {
@@ -178,6 +200,8 @@ netsec_shutdown(netsec_context *nsc)
     }
     if (nsc->sasl_chosen_mech)
        free(nsc->sasl_chosen_mech);
+    if (nsc->sasl_tmpbuf)
+       free(nsc->sasl_tmpbuf);
 #endif /* CYRUS_SASL */
 #ifdef TLS_SUPPORT
     if (nsc->ssl_io)
@@ -188,6 +212,9 @@ netsec_shutdown(netsec_context *nsc)
        BIO_free_all(nsc->ssl_io);
 #endif /* TLS_SUPPORT */
 
+    if (closeflag && nsc->ns_fd != -1)
+       close(nsc->ns_fd);
+
     free(nsc);
 }
 
@@ -232,9 +259,578 @@ netsec_set_snoop(netsec_context *nsc, int snoop)
 }
 
 /*
- * Write data to our network connection
+ * Set the read timeout for this connection
+ */
+
+void
+netsec_set_timeout(netsec_context *nsc, int timeout)
+{
+    nsc->ns_timeout = timeout;
+}
+
+/*
+ * Read data from the network.  Basically, return anything in our buffer,
+ * otherwise fill from the network.
+ */
+
+ssize_t
+netsec_read(netsec_context *nsc, void *buffer, size_t size, char **errstr)
+{
+    int retlen;
+
+    /*
+     * If our buffer is empty, then we should fill it now
+     */
+
+    if (nsc->ns_inbuflen == 0) {
+       if (netsec_fillread(nsc, errstr) != OK)
+           return NOTOK;
+    }
+
+    /*
+     * netsec_fillread only returns if the buffer is full, so we can
+     * assume here that this has something in it.
+     */
+
+    retlen = size > nsc->ns_inbuflen ? nsc->ns_inbuflen : size;
+
+    memcpy(buffer, nsc->ns_inptr, retlen);
+
+    if (retlen == (int) nsc->ns_inbuflen) {
+       /*
+        * We've emptied our buffer, so reset everything.
+        */
+       nsc->ns_inptr = nsc->ns_inbuffer;
+       nsc->ns_inbuflen = 0;
+    } else {
+       nsc->ns_inptr += size;
+       nsc->ns_inbuflen -= size;
+    }
+
+    return OK;
+}
+
+/*
+ * Get a "line" (CR/LF) terminated from the network.
+ *
+ * Okay, we play some games here, so pay attention:
+ *
+ * - Unlike every other function, we return a pointer to the
+ *   existing buffer.  This pointer is valid until you call another
+ *   read functiona again.
+ * - We NUL-terminated the buffer right at the end, before the terminator.
+ * - Technically we look for a LF; if we find a CR right before it, then
+ *   we back up one.
+ * - If your data may contain embedded NULs, this won't work.
+ */
+
+char *
+netsec_readline(netsec_context *nsc, size_t *len, char **errstr)
+{
+    unsigned char *ptr = nsc->ns_inptr;
+    size_t count = 0, offset;
+
+retry:
+    /*
+     * Search through our existing buffer for a LF
+     */
+
+    while (count < nsc->ns_inbuflen) {
+       count++;
+       if (*ptr++ == '\n') {
+           char *sptr = (char *) nsc->ns_inptr;
+           if (count > 1 && *(ptr - 2) == '\r')
+               ptr--;
+           *--ptr = '\0';
+           if (len)
+               *len = ptr - nsc->ns_inptr;
+           nsc->ns_inptr += count;
+           nsc->ns_inbuflen -= count;
+           if (nsc->ns_snoop) {
+#ifdef CYRUS_SASL
+               if (nsc->sasl_seclayer)
+                   fprintf(stderr, "(sasl-encrypted) ");
+#endif /* CYRUS_SASL */
+#ifdef TLS_SUPPORT
+               if (nsc->tls_active)
+                   fprintf(stderr, "(tls-encrypted) ");
+#endif /* TLS_SUPPORT */
+               fprintf(stderr, "<= ");
+               if (nsc->ns_snoop_cb)
+                   nsc->ns_snoop_cb(nsc, sptr, strlen(sptr));
+               else
+                   fprintf(stderr, "%s\n", sptr);
+           }
+           return sptr;
+       }
+    }
+
+    /*
+     * Hm, we didn't find a \n.  If we've already searched half of the input
+     * buffer, return an error.
+     */
+
+    if (count >= nsc->ns_inbufsize / 2) {
+       netsec_err(errstr, "Unable to find a line terminator after %d bytes",
+                  count);
+       return NULL;
+    }
+
+    /*
+     * Okay, get some more network data.  This may move inptr, so regenerate
+     * our ptr value;
+     */
+
+    offset = ptr - nsc->ns_inptr;
+
+    if (netsec_fillread(nsc, errstr) != OK)
+       return NULL;
+
+    ptr = nsc->ns_inptr + offset;
+
+    goto retry;
+
+    return NULL;       /* Should never reach this */
+}
+
+/*
+ * Fill our read buffer with some data from the network.
+ */
+
+static int
+netsec_fillread(netsec_context *nsc, char **errstr)
+{
+    unsigned char *end;
+    char *readbuf;
+    size_t readbufsize, remaining, startoffset;
+    int rc;
+
+    /*
+     * If inbuflen is zero, that means the buffer has been emptied
+     * completely.  In that case move inptr back to the start.
+     */
+
+    if (nsc->ns_inbuflen == 0) {
+       nsc->ns_inptr = nsc->ns_inbuffer;
+    }
+
+retry:
+    /*
+     * If we are using TLS and there's anything pending, then skip the
+     * select call
+     */
+#ifdef TLS_SUPPORT
+    if (!nsc->tls_active || BIO_pending(nsc->ssl_io) == 0)
+#endif /* TLS_SUPPORT */
+    {
+       struct timeval tv;
+       fd_set rfds;
+
+       FD_ZERO(&rfds);
+       FD_SET(nsc->ns_fd, &rfds);
+
+       tv.tv_sec = nsc->ns_timeout;
+       tv.tv_usec = 0;
+
+       rc = select(nsc->ns_fd + 1, &rfds, NULL, NULL, &tv);
+
+       if (rc == -1) {
+           netsec_err(errstr, "select() while reading failed: %s",
+                      strerror(errno));
+           return NOTOK;
+       }
+
+       if (rc == 0) {
+           netsec_err(errstr, "read() timed out after %d seconds",
+                      nsc->ns_timeout);
+           return NOTOK;
+       }
+
+       /*
+        * At this point, we know that rc is 1, so there's not even any
+        * point to check to see if our descriptor is set in rfds.
+        */
+    }
+
+    startoffset = nsc->ns_inptr - nsc->ns_inbuffer;
+    remaining = nsc->ns_inbufsize - (startoffset + nsc->ns_inbuflen);
+    end = nsc->ns_inptr + nsc->ns_inbuflen;
+
+    /*
+     * If we are using TLS, then just read via the BIO.  But we still
+     * use our local buffer.
+     */
+#ifdef TLS_SUPPORT
+    if (nsc->tls_active) {
+       rc = BIO_read(nsc->ssl_io, end, remaining);
+       if (rc == 0) {
+           /*
+            * Either EOF, or possibly an error.  Either way, it was probably
+            * unexpected, so treat as error.
+            */
+           netsec_err(errstr, "TLS peer aborted connection");
+           return NOTOK;
+       } else if (rc < 0) {
+           /* Definitely an error */
+           netsec_err(errstr, "Read on TLS connection failed: %s",
+                      ERR_error_string(ERR_get_error(), NULL));
+           return NOTOK;
+       }
+
+       nsc->ns_inbuflen += rc;
+
+       return OK;
+    }
+#endif /* TLS_SUPPORT */
+
+    /*
+     * Okay, time to read some data.  Either we're just doing it straight
+     * or we're passing it through sasl_decode() first.
+     */
+
+#ifdef CYRUS_SASL
+    if (nsc->sasl_seclayer) {
+       readbuf = nsc->sasl_tmpbuf;
+       readbufsize = nsc->sasl_maxbufsize;
+    } else
+#endif /* CYRUS_SASL */
+    {
+       readbuf = (char *) end;
+       readbufsize = remaining;
+    }
+
+    /*
+     * At this point, we should have active data on the connection (see
+     * select() above) so this read SHOULDN'T block.  Hopefully.
+     */
+
+    rc = read(nsc->ns_fd, readbuf, readbufsize);
+
+    if (rc == 0) {
+       netsec_err(errstr, "Received EOF on network read");
+       return NOTOK;
+    }
+
+    if (rc < 0) {
+       netsec_err(errstr, "Network read failed: %s", strerror(errno));
+       return NOTOK;
+    }
+
+    /*
+     * Okay, so we've had a successful read.  If we are doing SASL security
+     * layers, pass this through sasl_decode().  sasl_decode() can return
+     * 0 bytes decoded; if that happens, jump back to the beginning.  Otherwise
+     * we can just update our length pointer.
+     */
+
+#ifdef CYRUS_SASL
+    if (nsc->sasl_seclayer) {
+       const char *tmpout;
+       unsigned int tmpoutlen;
+
+       rc = sasl_decode(nsc->sasl_conn, nsc->sasl_tmpbuf, rc,
+                        &tmpout, &tmpoutlen);
+
+       if (rc != SASL_OK) {
+           netsec_err(errstr, "Unable to decode SASL network data: %s",
+                      sasl_errdetail(nsc->sasl_conn));
+           return NOTOK;
+       }
+
+       if (tmpoutlen == 0)
+           goto retry;
+
+       /*
+        * Just in case ...
+        */
+
+       if (tmpoutlen > remaining) {
+           netsec_err(errstr, "Internal error: SASL decode buffer overflow!");
+           return NOTOK;
+       }
+
+       memcpy(end, tmpout, tmpoutlen);
+
+       nsc->ns_inbuflen += tmpoutlen;
+    } else
+#endif /* CYRUS_SASL */
+       nsc->ns_inbuflen += rc;
+
+    /*
+     * If we're past the halfway point in our read buffers, shuffle everything
+     * back to the beginning.
+     */
+
+    if (startoffset > nsc->ns_inbufsize / 2) {
+       memmove(nsc->ns_inbuffer, nsc->ns_inptr, nsc->ns_inbuflen);
+       nsc->ns_inptr = nsc->ns_inbuffer;
+    }
+
+    return OK;
+}
+
+/*
+ * Write data to our network connection.  Really, fill up the buffer as
+ * much as we can, and flush it out if necessary.  netsec_flush() does
+ * the real work.
+ */
+
+int
+netsec_write(netsec_context *nsc, const void *buffer, size_t size,
+            char **errstr)
+{
+    const unsigned char *bufptr = buffer;
+    int rc, remaining;
+
+    /* Just in case */
+
+    if (size == 0)
+       return OK;
+
+    /*
+     * If TLS is active, then bypass all of our buffering logic; just
+     * write it directly to our BIO.  We have a buffering BIO first in
+     * our stack, so buffering will take place there.
+     */
+#ifdef TLS_SUPPORT
+    if (nsc->tls_active) {
+       rc = BIO_write(nsc->ssl_io, buffer, size);
+
+       if (rc <= 0) {
+           netsec_err(errstr, "Error writing to TLS connection: %s",
+                      ERR_error_string(ERR_get_error(), NULL));
+           return NOTOK;
+       }
+
+       return OK;
+    }
+#endif /* TLS_SUPPORT */
+
+    /*
+     * Run a loop copying in data to our local buffer; when we're done with
+     * any buffer overflows then just copy any remaining data in.
+     */
+
+    while ((int) size >= (remaining = nsc->ns_outbufsize - nsc->ns_outbuflen)) {
+       memcpy(nsc->ns_outptr, bufptr, remaining);
+
+       /*
+        * In theory I should increment outptr, but netsec_flush just resets
+        * it anyway.
+        */
+       nsc->ns_outbuflen = nsc->ns_outbufsize;
+
+       rc = netsec_flush(nsc, errstr);
+
+       if (rc != OK)
+           return NOTOK;
+
+       bufptr += remaining;
+       size -= remaining;
+    }
+
+    /*
+     * Copy any leftover data into the buffer.
+     */
+
+    if (size > 0) {
+       memcpy(nsc->ns_outptr, bufptr, size);
+       nsc->ns_outptr += size;
+       nsc->ns_outbuflen += size;
+    }
+
+    return OK;
+}
+
+/*
+ * Our network printf() routine, which really just calls netsec_vprintf().
+ */
+
+int
+netsec_printf(netsec_context *nsc, char **errstr, const char *format, ...)
+{
+    va_list ap;
+    int rc;
+
+    va_start(ap, format);
+    rc = netsec_vprintf(nsc, errstr, format, ap);
+    va_end(ap);
+
+    return rc;
+}
+
+/*
+ * Write bytes to the network using printf()-style formatting.
+ *
+ * Again, for the most part copy stuff into our buffer to be flushed
+ * out later.
+ */
+
+int
+netsec_vprintf(netsec_context *nsc, char **errstr, const char *format,
+              va_list ap)
+{
+    int rc;
+
+    /*
+     * Again, if we're using TLS, then bypass our local buffering
+     */
+#ifdef TLS_SUPPORT
+    if (nsc->tls_active) {
+       rc = BIO_vprintf(nsc->ssl_io, format, ap);
+
+       if (rc <= 0) {
+           netsec_err(errstr, "Error writing to TLS connection: %s",
+                      ERR_error_string(ERR_get_error(), NULL));
+           return NOTOK;
+       }
+
+       return OK;
+    }
+#endif /* TLS_SUPPORT */
+
+    /*
+     * Cheat a little.  If we can fit the data into our outgoing buffer,
+     * great!  If not, generate a flush and retry once.
+     */
+
+retry:
+    rc = vsnprintf((char *) nsc->ns_outptr,
+                  nsc->ns_outbufsize - nsc->ns_outbuflen, format, ap);
+
+    if (rc >= (int) (nsc->ns_outbufsize - nsc->ns_outbuflen)) {
+       /*
+        * This means we have an overflow.  Note that we don't actually
+        * make use of the terminating NUL, but according to the spec
+        * vsnprintf() won't write to the last byte in the string; that's
+        * why we have to use >= in the comparison above.
+        */
+       if (nsc->ns_outbuffer == nsc->ns_outptr) {
+           /*
+            * Whoops, if the buffer pointer was the same as the start of the
+            * buffer, that means we overflowed the internal buffer.
+            * At that point, just give up.
+            */
+           netsec_err(errstr, "Internal error: wanted to printf() a total of "
+                      "%d bytes, but our buffer size was only %d bytes",
+                      rc, nsc->ns_outbufsize);
+           return NOTOK;
+       } else {
+           /*
+            * Generate a flush (which may be inefficient, but hopefully
+            * it isn't) and then try again.
+            */
+           if (netsec_flush(nsc, errstr) != OK)
+               return NOTOK;
+           /*
+            * After this, outbuffer should == outptr, so we shouldn't
+            * hit this next time around.
+            */
+           goto retry;
+       }
+    }
+
+    if (nsc->ns_snoop) {
+       int outlen = rc;
+       if (outlen > 0 && nsc->ns_outptr[outlen - 1] == '\n') {
+           outlen--;
+           if (outlen > 0 && nsc->ns_outptr[outlen - 1] == '\r')
+               outlen--;
+       } else {
+           nsc->ns_snoop_noend = 1;
+       }
+       if (outlen > 0 || nsc->ns_snoop_noend == 0) {
+#ifdef CYRUS_SASL
+           if (nsc->sasl_seclayer)
+               fprintf(stderr, "(sasl-encrypted) ");
+#endif /* CYRUS_SASL */
+#ifdef TLS_SUPPORT
+           if (nsc->tls_active)
+               fprintf(stderr, "(tls-encrypted) ");
+#endif /* TLS_SUPPORT */
+           fprintf(stderr, "=> ");
+           if (nsc->ns_snoop_cb)
+               nsc->ns_snoop_cb(nsc, nsc->ns_outptr, outlen);
+           else
+                fprintf(stderr, "%.*s\n", outlen, nsc->ns_outptr); 
+       } else {
+           nsc->ns_snoop_noend = 0;
+       }
+    }
+
+    nsc->ns_outptr += rc;
+    nsc->ns_outbuflen += rc;
+
+    return OK;
+}
+
+/*
+ * Flush out any buffered data in our output buffers.  This routine is
+ * actually where the real network writes take place.
  */
 
+int
+netsec_flush(netsec_context *nsc, char **errstr)
+{
+    const char *netoutbuf = (const char *) nsc->ns_outbuffer;
+    unsigned int netoutlen = nsc->ns_outbuflen;
+    int rc;
+
+    /*
+     * For TLS connections, just call BIO_flush(); we'll let TLS handle
+     * all of our output buffering.
+     */
+#ifdef TLS_SUPPORT
+    if (nsc->tls_active) {
+       rc = BIO_flush(nsc->ssl_io);
+
+       if (rc <= 0) {
+           netsec_err(errstr, "Error flushing TLS connection: %s",
+                      ERR_error_string(ERR_get_error(), NULL));
+           return NOTOK;
+       }
+
+       return OK;
+    }
+#endif /* TLS_SUPPORT */
+
+    /*
+     * Small optimization
+     */
+
+    if (netoutlen == 0)
+       return OK;
+
+    /*
+     * If SASL security layers are in effect, run the data through
+     * sasl_encode() first and then write it.
+     */
+#ifdef CYRUS_SASL
+    if (nsc->sasl_seclayer) {
+       rc = sasl_encode(nsc->sasl_conn, (const char *) nsc->ns_outbuffer,
+                        nsc->ns_outbuflen, &netoutbuf, &netoutlen);
+
+       if (rc != SASL_OK) {
+           netsec_err(errstr, "SASL data encoding failed: %s",
+                      sasl_errdetail(nsc->sasl_conn));
+           return NOTOK;
+       }
+
+    }
+#endif /* CYRUS_SASL */
+    rc = write(nsc->ns_fd, netoutbuf, netoutlen);
+
+    if (rc < 0) {
+       netsec_err(errstr, "write() failed: %s", strerror(errno));
+       return NOTOK;
+    }
+
+    nsc->ns_outptr = nsc->ns_outbuffer;
+    nsc->ns_outbuflen = 0;
+
+    return OK;
+}
+
 /*
  * Set various SASL protocol parameters
  */
@@ -422,8 +1018,104 @@ netsec_negotiate_sasl(netsec_context *nsc, const char *mechlist, char **errstr)
     unsigned char *outbuf;
     unsigned int saslbuflen, outbuflen;
     sasl_ssf_t *ssf;
-    int rc, *outbufmax;
+    int *outbufmax;
+#endif
+#ifdef OAUTH_SUPPORT
+    unsigned char *xoauth_client_res;
+    size_t xoauth_client_res_len;
+#endif /* OAUTH_SUPPORT */
+    int rc;
+
+    /*
+     * If we've been passed a requested mechanism, check our mechanism
+     * list from the protocol.  If it's not supported, return an error.
+     */
+
+    if (nsc->sasl_mech) {
+       char **str, *mlist = getcpy(mechlist);
+       int i;
+
+       str = brkstring(mlist, " ", NULL);
+
+       for (i = 0; str[i] != NULL; i++) {
+           if (strcasecmp(nsc->sasl_mech, str[i]) == 0) {
+               break;
+           }
+       }
+
+       i = (str[i] == NULL);
+
+       free(str);
+       free(mlist);
+
+       if (i) {
+           netsec_err(errstr, "Chosen mechanism %s not supported by server",
+                      nsc->sasl_mech);
+           return NOTOK;
+       }
+    }
+
+#ifdef OAUTH_SUPPORT
+    if (nsc->sasl_mech && strcasecmp(nsc->sasl_mech, "XOAUTH2") == 0) {
+       /*
+        * This should be relatively straightforward, but requires some
+        * help from the plugin.  Basically, if XOAUTH2 is a success,
+        * the callback has to return success, but no output data.  If
+        * there is output data, it will be assumed that it is the JSON
+        * error message.
+        */
 
+       if (! nsc->oauth_service) {
+           netsec_err(errstr, "Internal error: OAuth2 service name not given");
+           return NOTOK;
+       }
+
+       nsc->sasl_chosen_mech = getcpy(nsc->sasl_mech);
+
+       if (mh_oauth_do_xoauth(nsc->ns_userid, nsc->oauth_service,
+                              &xoauth_client_res, &xoauth_client_res_len,
+                              nsc->ns_snoop ? stderr : NULL) != OK) {
+           netsec_err(errstr, "Internal error: Unable to get OAuth2 "
+                      "bearer token");
+           return NOTOK;
+       }
+
+       rc = nsc->sasl_proto_cb(NETSEC_SASL_START, xoauth_client_res,
+                               xoauth_client_res_len, NULL, 0, errstr);
+       free(xoauth_client_res);
+
+       if (rc != OK)
+           return NOTOK;
+
+       /*
+        * Okay, we need to do a NETSEC_SASL_FINISH now.  If we return
+        * success, we indicate that with no output data.  But if we
+        * fail, then send a blank message and get the resulting
+        * error.
+        */
+
+       rc = nsc->sasl_proto_cb(NETSEC_SASL_FINISH, NULL, 0, NULL, 0, errstr);
+
+       if (rc != OK) {
+           /*
+            * We're going to assume the error here is a JSON response;
+            * we ignore it and send a blank message in response.  We should
+            * then get either an +OK or -ERR
+            */
+           free(errstr);
+           nsc->sasl_proto_cb(NETSEC_SASL_WRITE, NULL, 0, NULL, 0, NULL);
+           rc = nsc->sasl_proto_cb(NETSEC_SASL_FINISH, NULL, 0, NULL, 0,
+                                   errstr);
+           if (rc == 0) {
+               netsec_err(errstr, "Unexpected success after OAuth failure!");
+           }
+           return NOTOK;
+       }
+       return OK;
+    }
+#endif /* OAUTH_SUPPORT */
+
+#ifdef CYRUS_SASL
     /*
      * In netsec_set_sasl_params, we've already done all of our setup with
      * sasl_client_init() and sasl_client_new().  So time to set security
@@ -457,7 +1149,8 @@ netsec_negotiate_sasl(netsec_context *nsc, const char *mechlist, char **errstr)
      * sasl_client_step() loop (after sasl_client_start, of course).
      */
 
-    rc = sasl_client_start(nsc->sasl_conn, mechlist, NULL,
+    rc = sasl_client_start(nsc->sasl_conn,
+                          nsc->sasl_mech ? nsc->sasl_mech : mechlist, NULL,
                           (const char **) &saslbuf, &saslbuflen,
                           &chosen_mech);
 
@@ -469,18 +1162,8 @@ netsec_negotiate_sasl(netsec_context *nsc, const char *mechlist, char **errstr)
 
     nsc->sasl_chosen_mech = getcpy(chosen_mech);
 
-    if (nsc->sasl_proto_cb(NETSEC_SASL_START, saslbuf, saslbuflen, &outbuf,
-                          &outbuflen, errstr) != OK)
-       return NOTOK;
-
-    if (netsec_write(nsc, outbuf, outbuflen, errstr) != OK) {
-       free(outbuf);
-       return NOTOK;
-    }
-
-    free(outbuf);
-
-    if (netsec_flush(nsc, errstr) != OK)
+    if (nsc->sasl_proto_cb(NETSEC_SASL_START, saslbuf, saslbuflen, NULL, 0,
+                          errstr) != OK)
        return NOTOK;
 
     /*
@@ -495,52 +1178,28 @@ netsec_negotiate_sasl(netsec_context *nsc, const char *mechlist, char **errstr)
 
        if (nsc->sasl_proto_cb(NETSEC_SASL_READ, NULL, 0, &outbuf, &outbuflen,
                               errstr) != OK) {
-           if (nsc->sasl_proto_cb(NETSEC_SASL_CANCEL, NULL, 0, &outbuf,
-                                  &outbuflen, NULL) == OK) {
-               netsec_write(nsc, outbuf, outbuflen, NULL);
-               netsec_flush(nsc, NULL);
-               free(outbuf);
-           }
+           nsc->sasl_proto_cb(NETSEC_SASL_CANCEL, NULL, 0, NULL, 0, NULL);
            return NOTOK;
        }
 
        rc = sasl_client_step(nsc->sasl_conn, (char *) outbuf, outbuflen, NULL,
                              (const char **) &saslbuf, &saslbuflen);
 
-       free(outbuf);
+       if (outbuf)
+           free(outbuf);
 
        if (rc != SASL_OK && rc != SASL_CONTINUE) {
            netsec_err(errstr, "SASL client negotiation failed: %s",
                       sasl_errdetail(nsc->sasl_conn));
-           if (nsc->sasl_proto_cb(NETSEC_SASL_CANCEL, NULL, 0, &outbuf,
-                                  &outbuflen, NULL) == OK) {
-               netsec_write(nsc, outbuf, outbuflen, NULL);
-               netsec_flush(nsc, NULL);
-               free(outbuf);
-           }
+           nsc->sasl_proto_cb(NETSEC_SASL_CANCEL, NULL, 0, NULL, 0, NULL);
            return NOTOK;
        }
 
        if (nsc->sasl_proto_cb(NETSEC_SASL_WRITE, saslbuf, saslbuflen,
-                              &outbuf, &outbuflen, errstr) != OK) {
-           if (nsc->sasl_proto_cb(NETSEC_SASL_CANCEL, NULL, 0, &outbuf,
-                                  &outbuflen, NULL) == OK) {
-               netsec_write(nsc, outbuf, outbuflen, NULL);
-               netsec_flush(nsc, NULL);
-               free(outbuf);
-           }
-           return NOTOK;
-       }
-
-       if (netsec_write(nsc, outbuf, outbuflen, errstr) != OK) {
-           free(outbuf);
+                              NULL, 0, errstr) != OK) {
+           nsc->sasl_proto_cb(NETSEC_SASL_CANCEL, NULL, 0, NULL, 0, NULL);
            return NOTOK;
        }
-
-       free(outbuf);
-
-       if (netsec_flush(nsc, errstr) != OK)
-           return NOTOK;
     }
 
     /*
@@ -583,13 +1242,49 @@ netsec_negotiate_sasl(netsec_context *nsc, const char *mechlist, char **errstr)
            return NOTOK;
        }
 
-       nsc->sasl_maxoutsize = *outbufmax;
+       /*
+        * If our output buffer isn't the same size as the input buffer,
+        * reallocate it and set the new size (since we won't encode any
+        * data larger than that).
+        */
+
+       nsc->sasl_maxbufsize = *outbufmax;
 
-       if (nsc->sasl_maxoutsize > nsc->ns_outbufsize) {
-           nsc->ns_outbufsize = nsc->sasl_maxoutsize;
+       if (nsc->ns_outbufsize != nsc->sasl_maxbufsize) {
+           nsc->ns_outbufsize = nsc->sasl_maxbufsize;
            nsc->ns_outbuffer = mh_xrealloc(nsc->ns_outbuffer,
                                            nsc->ns_outbufsize);
+           /*
+            * There shouldn't be any data in the buffer, but for
+            * consistency's sake discard it.
+            */
+           nsc->ns_outptr = nsc->ns_outbuffer;
+           nsc->ns_outbuflen = 0;
+       }
+
+       /*
+        * Allocate a buffer to do temporary reads into, before we
+        * call sasl_decode()
+        */
+
+       nsc->sasl_tmpbuf = mh_xmalloc(nsc->sasl_maxbufsize);
+
+       /*
+        * Okay, this is a bit weird.  Make sure that the input buffer
+        * is at least TWICE the size of the max buffer size.  That's
+        * because if we're consuming data but want to extend the current
+        * buffer, we want to be sure there's room for another full buffer's
+        * worth of data.
+        */
+
+       if (nsc->ns_inbufsize < nsc->sasl_maxbufsize * 2) {
+           size_t offset = nsc->ns_inptr - nsc->ns_inbuffer;
+           nsc->ns_inbufsize = nsc->sasl_maxbufsize * 2;
+           nsc->ns_inbuffer = mh_xrealloc(nsc->ns_inbuffer, nsc->ns_inbufsize);
+           nsc->ns_inptr = nsc->ns_inbuffer + offset;
        }
+
+       nsc->sasl_seclayer = 1;
     }
 
     return OK;
@@ -614,6 +1309,21 @@ netsec_get_sasl_mechanism(netsec_context *nsc)
 #endif /* CYRUS_SASL */
 }
 
+/*
+ * Set an OAuth2 service name, if we support it.
+ */
+
+int
+netsec_set_oauth_service(netsec_context *nsc, const char *service)
+{
+#ifdef OAUTH_SUPPORT
+    nsc->oauth_service = getcpy(service);
+    return OK;
+#else /* OAUTH_SUPPORT */
+    return NOTOK;
+#endif /* OAUTH_SUPPORT */
+}
+
 /*
  * Initialize (and enable) TLS for this connection
  */
@@ -668,6 +1378,12 @@ netsec_set_tls(netsec_context *nsc, int tls, char **errstr)
            return NOTOK;
        }
 
+       /*
+        * Never bother us, since we are using blocking sockets.
+        */
+
+       SSL_set_mode(ssl, SSL_MODE_AUTO_RETRY);
+
        /*
         * This is a bit weird, so pay attention.
         *
@@ -767,6 +1483,16 @@ netsec_negotiate_tls(netsec_context *nsc, char **errstr)
 
     nsc->tls_active = 1;
 
+    /*
+     * At this point, TLS has been activated; we're not going to use
+     * the output buffer, so free it now to save a little bit of memory.
+     */
+
+    if (nsc->ns_outbuffer) {
+       free(nsc->ns_outbuffer);
+       nsc->ns_outbuffer = NULL;
+    }
+
     return OK;
 #else /* TLS_SUPPORT */
     netsec_err(errstr, "TLS not supported");
@@ -779,7 +1505,7 @@ netsec_negotiate_tls(netsec_context *nsc, char **errstr)
  * Generate an (allocated) error string
  */
 
-static void
+void
 netsec_err(char **errstr, const char *fmt, ...)
 {
     va_list ap;