python程序中使用sqlalchemy时出现乱码的解决方案

今天对clubot进行了升级, 但是导入数据后中文乱码, 一开是找资料说是在创建引擎的时候添加编码信息:

engine = create_engine(“mysql://root:@localhost:3306/clubot?charset=utf8”)

但是这并不行, 然后查看表信息:

> show create table clubot_members;
clubot_members | create table `clubot_members` (
`id` int(11) not null auto_increment,
`email` varchar(100) default null,
`nick` varchar(50) default null,
`last_say` timestamp null default null,
`last_change` timestamp null default null,
`isonline` int(11) default null,
`join_date` timestamp null default null,
primary key (`id`),
unique key `email` (`email`),
unique key `nick` (`nick`)
) engine=innodb auto_increment=20 default charset=latin1;

发现原来创建表的时候用的latin1编码, 而老的表是用utf-8编码创建的, sqlalchemy中并没有发现有创建表时指定指定编码的方法. 所以只能在mysql本身来找:

> show variables like “character%%”;
+————————–+—————————–+
| variable_name | value |
+————————–+—————————–+
| character_set_client | utf8 |
| character_set_connection | utf8 |
| character_set_database | latin1 |
| character_set_filesystem | binary |
| character_set_results | utf8 |
| character_set_server | latin1 |
| character_set_system | utf8 |
| character_sets_dir | /data/share/mysql/charsets/ |
+————————–+—————————–+
8 rows in set (0.00 sec)
> show create database clubot;
+———-+——————————————————————-+
| database | create database |
+———-+——————————————————————-+
| clubot | create database `clubot` /*!40100 default character set latin1 */ |
+———-+——————————————————————-+
1 row in set (0.00 sec)

发现 mysql默认的和数据库都是latin1的编码, 所以更改数据库配置

代码如下:

vi /etc/mysql/my.cnf # mysql配置文件在ubuntu上的位置, 其他系统可能有差异

分别在[client] [mysqld]下添加

代码如下:

default-character-set = utf8

这时重启mysql居然起不来, 说default-character-set是无效的变量, 查看mysql版本发现是5.5, 找资料说5.5的服务端编码设置变量是character-set-server, 所以将[mysqld]上的default-character-set = utf8改为 character-set-server = utf8, 并重启mysql

然后更改数据库编码:

代码如下:

alter database clubot character set utf8;

删除新建的表, 并重新导入数据中文就正常了

代码如下:

> use clubot;
> drop table clubot_status;
> drop table clubot_infos;
> drop table clubot_history;
> drop table clubot_members;