Detectar si una variable es un número o no (siendo en ese caso tipo texto)

[u_goldman]

IsNumeric, evalua una expresion numerica, por lo tanto, si IsNumeric, entonces, no necesitas comillas dobles...
Hay otra forma de evitarte todo el show de las comillas dobles y no comillas dobles, usa consultas parametrizadas.

Set rs = Server.CreateObject("ADODB.Recordset")
Set cmd = Server.CreateObject("ADODB.Command")
qry = "INSERT INTO tabla(campo1) VALUES(?)"
Set param = cmd.CreateParameter("parametro1", adInteger, adParamInput, 4)
cmd.Parameters.Append(param)
cmd.ActiveConnection = ObjConn 'conexion activa
cmd.CommandText = qry
cmd.CommandType = adCmdText
rs.Open cmd

En negritas las partes fundamentales, que son el tipo de dato, el tipo de parametro y la longitud del campo.
Con esto te dejas de preocupar por las famosas comillas simples, parece mas tedioso y quizas lo es, pero es mucho mas claro al final y mas facil en su mantenimiento.

Salu2,