解决mysql的配置ONLY_FULL_GROUP_BY引起的错误

感谢mysql大师波多老师、GV大师伟嘉在这个问题上对我的帮助和启发,感谢!

以下是本人在使用python-sqlalchemy时遇到的问题,如果使用原生mysql语句同样需注意这个问题。

报错

OperationalError: (_mysql_exceptions.OperationalError) (1055, "Expression #1 of
SELECT list is not in GROUP BY clause and contains nonaggregated column 
'db.table.create_time' which is not functionally dependent on columns in 
GROUP BY clause; this is incompatible with sql_mode=only_full_group_by") [SQL: 
u'SELECT table.create_time AS table_create_time, table.count AS 
table_count \nFROM table \nWHERE table.cluster_id = %s AND 
table.create_time > %s GROUP BY table.count'] [parameters: (1, 
datetime.datetime(2000, 1, 1, 0, 0))]

原因:

mysql5.7.5版本开始,sql_mode使用的是默认值( 如上),而之前使用的mysql配置文件中sql_mode=”“,由于这个特性使在使用group_by时出现报错,以下是新版的默认值:

sql_mode默认值

默认的sql-mode里的ONLY_FULL_GROUP_BY字段导致不能直接查询group_by包裹的之外的字段,如下使用,只查询group_by的字段可以正常使用,但是同时查询create_time和count字段会出现错误:

# 正确
session.query(Table.count).group_by(Table.count).all()
# 报错
session.query(Table.create_time,Table.count).group_by(Table.count).all()

解决办法:

  1. 修改sql_mode
    如设置:sql_mode=”“
    问题解决,但是由于sql_mode=”“会带来可以预估的错误,如数据被截断等,所以这种方法有数据丢失的风险。

  2. 程序中改变查询语句的写法,group_by之外的字段使用func函数包围
    为了符合ONLY_FULL_GROUP_BY=True的要求,如下:
    参考
    那么使用方法2,程序中正确的写法示例如下:

from sqlalchemy import func

# 1. 注意:这样生成的数据结果为[(),()],列表中的结果是元组,而不是生成器,
# 如果要对结果进行解析,解析方式也跟原来的方式不一样
objs= session.query(func.any_value(Table.create_time,Table.count).
                    group_by(Table.count).all()


# 2. 但是如果在这样的写法中只需要使用count字段,写成obj.count是可以的
obj= session.query(func.any_value(Table.create_time,Table.count).
                   group_by(Table.count).first()

以下为sql_mode常用值的含义,参考自这里

  • ONLY_FULL_GROUP_BY:对于GROUP BY聚合操作,如果在SELECT中的列,没有在GROUP BY中出现,那么这个SQL是不合法的,因为列不在GROUP BY从句中
  • NO_AUTO_VALUE_ON_ZERO:该值影响自增长列的插入。默认设置下,插入0或NULL代表生成下一个自增长值。如果用户希望插入的值为0,而该列又是自增长的,那么这个选项就有用了。
  • STRICT_TRANS_TABLES:在该模式下,如果一个值不能插入到一个事务表中,则中断当前的操作,对非事务表不做限制
  • NO_ZERO_IN_DATE:在严格模式下,不允许日期和月份为零
  • NO_ZERO_DATE:设置该值,mysql数据库不允许插入零日期,插入零日期会抛出错误而不是警告。
  • ERROR_FOR_DIVISION_BY_ZERO:在INSERT或UPDATE过程中,如果数据被零除,则产生错误而非警告。如果未给出该模式,那么数据被零除时MySQL返回NULL
  • NO_AUTO_CREATE_USER:禁止GRANT创建密码为空的用户
  • NO_ENGINE_SUBSTITUTION:如果需要的存储引擎被禁用或未编译,那么抛出错误。不设置此值时,用默认的存储引擎替代,并抛出一个异常
  • PIPES_AS_CONCAT:将”||”视为字符串的连接操作符而非或运算符,这和Oracle数据库是一样的,也和字符串的拼接函数Concat相类似
  • ANSI_QUOTES:启用ANSI_QUOTES后,不能用双引号来引用字符串,因为它被解释为识别符

猜你喜欢

转载自blog.csdn.net/vonhehe/article/details/79312098