como convertir de UTF8 a Latin1 en mysql

EroChvc · #1 (**permalink**) 01/11/2013, 12:47

hola, necesito convertir en mysql de UTF8 a latin1 porque ando haciendo un buscador y como los datos quedan guardados en utf8 en las tablas, al hacer una busqueda no me sale correctamente ejemplo:

si voy a buscar la palabra programacion. Como en la DB se guarda asi: ProgramaciÃ³n entonces no lo encuentra por el Ã³ entonces, si convierto eso primero a Latin1, quedaria programación que alli si lo encuentra porque toma la ó=o.

solo encontré este que lo hace de latin1 a utf8 y funciona
SELECT CAST( _latin1 'Programación' AS CHAR CHARACTER SET utf8);

pero de utf8 a latin1 no coje ni poniendolo asi
SELECT CAST( _utf8 'ProgramaciÃ³n' AS CHAR CHARACTER SET latin1);

no puedo cambiar el collage de las tablas, son muuuchas.

jurena · #2 (**permalink**) 01/11/2013, 13:08

Acláranos mejor tu situación, pero por lo pronto ya podemos decirte que es más bien un problema que resolverás en el foro de programación. Si tienes codificadas tu base, sus tablas y campos con UTF-8, has tomado una buena decisión. El problema, creo, es que cuando guardas con tu programación, el archivo php (si es ese tu programa), el archivo html en el que realizas la carga de datos no tienen la misma codificación y no se entienden. O tal vez el problema (me inclino por esto último) es el archivo php y el html desde el que realizas la búsqueda. Pide ayuda en el foro de programación, pues esa codificación es excelente y estos problemas suelen resolverse fácilmente. ¿O tal vez lo que dices es que las tablas están codificadas en latin1 y has cargado datos en UTF-8?

EroChvc · #3 (**permalink**) 01/11/2013, 13:32

Cita:

Iniciado por jurena

Acláranos mejor tu situación, pero por lo pronto ya podemos decirte que es más bien un problema que resolverás en el foro de programación. Si tienes codificadas tu base, sus tablas y campos con UTF-8, has tomado una buena decisión. El problema, creo, es que cuando guardas con tu programación, el archivo php (si es ese tu programa), el archivo html en el que realizas la carga de datos no tienen la misma codificación y no se entienden. O tal vez el problema (me inclino por esto último) es el archivo php y el html desde el que realizas la búsqueda. Pide ayuda en el foro de programación, pues esa codificación es excelente y estos problemas suelen resolverse fácilmente. ¿O tal vez lo que dices es que las tablas están codificadas en latin1 y has cargado datos en UTF-8?

Gracias por responder.
las base de datos y tablas estan en utf-8 igual que el PHP, el problema es este:

Cuando hago un: Select * from tabla where `categoria`="Programacion";

no arroja nada porque en la celda `categoria` la palabra programacion aparece asi: ProgramaciÃ³n

porque utf-8 convierte la ó en Ã³

y lo que necesito es que tome a o=Ã³

en php lo haría asi:
echo utf8_decode('Ã³'); //resultado seria ó

ahora, en mysql como hacer la funcion utf8_decode() de php?

gnzsoloyo · #4 (**permalink**) 01/11/2013, 13:51

Tienes un problema con los scripts de PHP y/o HTML.
Este es un tema recurrente en PHP, y es más probable que te ersulte útil si te muevo el post a ese foro.

EroChvc · #5 (**permalink**) 01/11/2013, 13:59

Cita:

Iniciado por gnzsoloyo

Tienes un problema con los scripts de PHP y/o HTML.
Este es un tema recurrente en PHP, y es más probable que te ersulte útil si te muevo el post a ese foro.

agale

cachusan · #6 (**permalink**) 01/11/2013, 14:43

http://dev.mysql.com/doc/refman/5.0/...t-convert.html

Espero te sirva la info, saludos.

Bier · #7 (**permalink**) 01/11/2013, 15:02

Yo tenía el mismo problema, lo resolví así:

1.- La tabla es: latin1_general_ci
2.- Los campos son: utf8_general_ci
3.- En el <Head> coloqué: <meta http-equiv="Content-Type" content="text/html; charset=iso-8859-2" >

Es todo... Espero te pueda servir.

EroChvc · #8 (**permalink**) 01/11/2013, 16:18

Cita:

Iniciado por Bier

Yo tenía el mismo problema, lo resolví así:

1.- La tabla es: latin1_general_ci
2.- Los campos son: utf8_general_ci
3.- En el <Head> coloqué: <meta http-equiv="Content-Type" content="text/html; charset=iso-8859-2" >

Es todo... Espero te pueda servir.

gracias pero a la final lo resolvi creando una funcion en mysql que convirtiera de utf8 a iso asi:

Código PHP:

  CREATE  FUNCTION convertir_uai(entrada VARCHAR(30)) RETURNS VARCHAR(30) 
BEGIN 
    DECLARE salida VARCHAR(30); 
        SET salida = REPLACE(entrada , 'Ã¡', 'á'); 
        SET salida = REPLACE(salida , 'Ã©', 'é'); 
        SET salida = REPLACE(salida , 'Ã*', 'í'); 
        SET salida = REPLACE(salida , 'Ã³', 'ó'); 
        SET salida = REPLACE(salida , 'Ãº', 'ú'); 
        SET salida = REPLACE(salida , 'Ã ', 'à'); 
        SET salida = REPLACE(salida , 'Ã¨', 'è'); 
        SET salida = REPLACE(salida , 'Ã¬', 'ì'); 
        SET salida = REPLACE(salida , 'Ã²', 'ò'); 
        SET salida = REPLACE(salida , 'Ã¹', 'ù'); 
        SET salida = REPLACE(salida , 'Ã¤', 'ä'); 
        SET salida = REPLACE(salida , 'Ã«', 'ë'); 
        SET salida = REPLACE(salida , 'Ã¯', 'ï'); 
        SET salida = REPLACE(salida , 'Ã¶', 'ö'); 
        SET salida = REPLACE(salida , 'Ã¼', 'ü'); 
        --SET salida = REPLACE(entrada , 'Ã', 'Á'); 
        --SET salida = REPLACE(entrada , 'Ã‰', 'É'); 
        --SET salida = REPLACE(entrada , 'Ã', 'Í'); 
        --SET salida = REPLACE(entrada , 'Ã“', 'Ó'); 
        --SET salida = REPLACE(entrada , 'Ãš', 'Ú'); 
        --SET salida = REPLACE(entrada , 'Ã‘', 'Ñ'); 
        --SET salida = REPLACE(entrada , 'Ã€', 'À'); 
        --SET salida = REPLACE(entrada , 'Ãˆ', 'È'); 
        --SET salida = REPLACE(entrada , 'ÃŒ', 'Ì'); 
        --SET salida = REPLACE(entrada , 'Ã’', 'Ò'); 
        --SET salida = REPLACE(entrada , 'Ã™', 'Ù'); 
        --SET salida = REPLACE(entrada , 'Ã‘', 'Ñ'); 
        --SET salida = REPLACE(entrada , 'Ã„', 'Ä'); 
        --SET salida = REPLACE(entrada , 'Ã‹', 'Ë'); 
        --SET salida = REPLACE(entrada , 'Ã', 'Ï'); 
        --SET salida = REPLACE(entrada , 'Ã–', 'Ö'); 
        --SET salida = REPLACE(entrada , 'Ãœ', 'Ü'); 
    RETURN salida; 
END; 
 
Prueba: 
select convertir_uai('ProgramaciÃ³n'); 
 
resultado: programación

los que estan con -- son porque no los necesito ya que todos los datos estan en minuscula, a demas sale un error

ahora la comparacion solo es Select * from TABLE where convertir_uai(`celda`) = 'programacion'

EroChvc · #9 (**permalink**) 01/11/2013, 16:20

si existia otro metodo por favor avisar ;)

Bier · #10 (**permalink**) 01/11/2013, 16:37

el procedimiento es correcto. Con expresiones regulares hubiese sido menos laborioso.

Triby · #11 (**permalink**) 01/11/2013, 18:15

Lo más óptimo y correcto sería tener todas tus fuentes de datos (tablas, campos, archivos php, txt, etc.) con la misma codificación y evitas tener que estar haciendo parches que te servirán solo para los caracteres que has tenido en cuenta por ahora, quien sabe si después necesites agregar otros.

EroChvc · #12 (**permalink**) 01/11/2013, 21:25

Cita:

Iniciado por Bier

el procedimiento es correcto. Con expresiones regulares hubiese sido menos laborioso.

el problema es que REPLACE de mysql no acepta expreciones regulares, si conoces alguna otra funcion que si los acepte por favor avisame

EroChvc · #13 (**permalink**) 01/11/2013, 21:29

Cita:

Iniciado por Triby

Lo más óptimo y correcto sería tener todas tus fuentes de datos (tablas, campos, archivos php, txt, etc.) con la misma codificación y evitas tener que estar haciendo parches que te servirán solo para los caracteres que has tenido en cuenta por ahora, quien sabe si después necesites agregar otros.

todo esta con la misma codificacion (UTF8), el problema es que para mysql, programación es diferente a programacion y peor programaciÃ³n.
La unica forma de resolver el error ubiera sido ponerlo todo en ISO pero ISO es muy limitado para el tipo de web que estoy haciendo

gnzsoloyo · #14 (**permalink**) 01/11/2013, 22:18

Cita:

todo esta con la misma codificacion (UTF8)

Error. En alguna parte hay algo que está haciendo otra cosa. En alguna etapa hay un error, que no estás viendo.
Si todo estuviese unificado, este problema no lo tendrías, como no lo tengo yo en las bases que manejo, ni otros tampoco.
El problema es que verificar qué y donde puede ser algo muy laborioso... Con un solo script que falle, por menor que sea, alcanza.

Cita:

el problema es que para mysql, programación es diferente a programacion y peor programaciÃ³n.

Nop. El problema no es MySQL. La base sólo almacena lo que recibe, y devuelve lo que tiene. No transforma cosas porque si, y en especial si está en UTF8.
Una prueba que puedes hacer es no usar tu aplicación para leer los datos, sino alguna otra interfaz (phpMyadmin sirve, pero yo preferiría usar MySQL Workbench). Sin con una interfaz distinta, los caracteres se ven mal, entonces es que la base los está recibiendo mal. Pero si en esa interfaz se ven bien, entonces la devolución de MySQL está siendo mal interpretada.
Cuidado: Tienes que hacer esta verificación con una interfaz que no sea la que tu has programado.

EroChvc · #15 (**permalink**) 01/11/2013, 22:36

Cita:

Iniciado por gnzsoloyo

Error. En alguna parte hay algo que está haciendo otra cosa. En alguna etapa hay un error, que no estás viendo.
Si todo estuviese unificado, este problema no lo tendrías, como no lo tengo yo en las bases que manejo, ni otros tampoco.
El problema es que verificar qué y donde puede ser algo muy laborioso... Con un solo script que falle, por menor que sea, alcanza.

Nop. El problema no es MySQL. La base sólo almacena lo que recibe, y devuelve lo que tiene. No transforma cosas porque si, y en especial si está en UTF8.
Una prueba que puedes hacer es no usar tu aplicación para leer los datos, sino alguna otra interfaz (phpMyadmin sirve, pero yo preferiría usar MySQL Workbench). Sin con una interfaz distinta, los caracteres se ven mal, entonces es que la base los está recibiendo mal. Pero si en esa interfaz se ven bien, entonces la devolución de MySQL está siendo mal interpretada.
Cuidado: Tienes que hacer esta verificación con una interfaz que no sea la que tu has programado.

gracias por contestar, pero desde mi phpmyadmin, cuando pongo a buscar la palabra programacion en una celda que contiene programaciÃ³n no lo encuentra. ese era el problema, lo que queria era que lo encontrara desde una sentencia SQL sin usar PHP y no estaba dispuesto a cambiar de utf8 a latin1

si en las bases de datos que manejas tu y otros, el resultado es diferente acepto tu comentario. ;)

alvidales · #16 (**permalink**) 01/11/2013, 22:40

Una vez más, esto es una configuración en el código o permanente en el servidor que tienes que realizar:

intenta con esto antes de mandar la consulta

Código PHP:

Ver originalmysql_query('SET NAMES utf8') or die(mysql_error());
mysql_query('SET CHARACTER SET utf8') or die(mysql_error());
mysql_query('SET COLLATION_CONNECTION="utf8_general_ci" ') or die(mysql_error());

el asunto es que puede que tengas tu BD en utf8, y tus archivos tambien, más no la comunicación entre php y mysql, y lo que hace esto es realizar la conexión o la comunicación en la misma codificación.

Lo mejor para no batallar es poner estas directivas en el archivo de my.cnf en tu servidor, quedarian algo como esto:

Código BASH:

Ver originalinit_connect='SET collation_connection = utf8_general_ci'
init_connect='SET NAMES utf8'
character-set-server=utf8
collation-server=utf8_general_ci
skip-character-set-client-handshake

Esto claro, si tienes acceso al servidor.

De esta manera no tienes que realizar ningun tipo de conversión y mantienes todo en UTF-8 que es muchisimo mejor que LATIN1

Espero te sirva, hazlo y me dices cual fue el resultado.

http://www.forosdelweb.com/f18/probl...raros-1058387/

EroChvc · #17 (**permalink**) 12/11/2013, 00:43

Cita:

Iniciado por alvidales

Una vez más, esto es una configuración en el código o permanente en el servidor que tienes que realizar:

intenta con esto antes de mandar la consulta

Código PHP:

Ver originalmysql_query('SET NAMES utf8') or die(mysql_error());
mysql_query('SET CHARACTER SET utf8') or die(mysql_error());
mysql_query('SET COLLATION_CONNECTION="utf8_general_ci" ') or die(mysql_error());

el asunto es que puede que tengas tu BD en utf8, y tus archivos tambien, más no la comunicación entre php y mysql, y lo que hace esto es realizar la conexión o la comunicación en la misma codificación.

Lo mejor para no batallar es poner estas directivas en el archivo de my.cnf en tu servidor, quedarian algo como esto:

Código BASH:

Ver originalinit_connect='SET collation_connection = utf8_general_ci'
init_connect='SET NAMES utf8'
character-set-server=utf8
collation-server=utf8_general_ci
skip-character-set-client-handshake

Esto claro, si tienes acceso al servidor.

De esta manera no tienes que realizar ningun tipo de conversión y mantienes todo en UTF-8 que es muchisimo mejor que LATIN1

Espero te sirva, hazlo y me dices cual fue el resultado.

[url]http://www.forosdelweb.com/f18/problema-con-caracteres-raros-1058387/[/url]

HOLA, gracias por contestar, pero ponerle eso hizo que toda la web que se muestra en el navegador apareciera con los caracteres raros en vez de tilde, o sea de la base de datos donde aparece la palabra (ProgramaciÃ³n) la muestra en el navegador con (ProgramaciÃ³n) con sus ó en UTF-8. abran otras soluciones, pero por el momento tenemos la que expongo arriba.

Triby · #18 (**permalink**) 12/11/2013, 20:50

Ahora resulta que la culpa es de quien te sugiere como hacer las cosas correctamente.

Como ya te había mencionado, el hacer parches para el problema que tienes actualmente quizá te solucione algo por ahora, pero después irán apareciendo más cosas, por lo que:

1- Insisto en que tengas todas tus fuentes de datos en la misma codificación
2- Descarga todas tus tablas a un archivo de texto, corrige los caracteres raros manualmente
3- Sube todas tus tablas ya corregidas
4- Fin del problema

Te recuerdo que si intentas saltar el primer paso, no funcionará todo lo demás.

alvidales · #19 (**permalink**) 23/11/2013, 00:37

Cita:

Iniciado por Triby

Ahora resulta que la culpa es de quien te sugiere como hacer las cosas correctamente.

Como ya te había mencionado, el hacer parches para el problema que tienes actualmente quizá te solucione algo por ahora, pero después irán apareciendo más cosas, por lo que:

1- Insisto en que tengas todas tus fuentes de datos en la misma codificación
2- Descarga todas tus tablas a un archivo de texto, corrige los caracteres raros manualmente
3- Sube todas tus tablas ya corregidas
4- Fin del problema

Te recuerdo que si intentas saltar el primer paso, no funcionará todo lo demás.

Tienes toda la razón, me he topado con muchos "desarrolladores" sin ofender a nadie, que lo unico que hacen es rascarle por encimita y no escarbar e ir a la raiz de la solución, y cierto, hay que hacer todo bien desde un principio.

alvidales · #20 (**permalink**) 23/11/2013, 00:40

1.- Base de datos en utf8_general_ci
2.- Archivos php en codificación utf8 (te recomiendo usar netbeans y no tendras problemas con eso).
3.- Haz lo que inique del servidor.

similar a lo que dijo Triby un poco más técnico y general.

Bier · #21 (**permalink**) 24/11/2013, 01:30

Triby ha puesto una opción válida.
Yo dije que con expresiones regulares, y lo podrías hacer así:

1- Insisto en que tengas todas tus fuentes de datos en la misma codificación (Triby)
2- Leer el registro (con PHP), aplicarle una expresión regular para intercambiar caracteres y UPDATE.