解決mysql的配置ONLY_FULL_GROUP_BY引起的錯(cuò)誤

感謝mysql大師波多老師、GV大師偉嘉在這個(gè)問題上對(duì)我的幫助和啟發(fā),感謝!

以下是本人在使用python-sqlalchemy時(shí)遇到的問題,如果使用原生mysql語(yǔ)句同樣需注意這個(gè)問題。

報(bào)錯(cuò)

OperationalError: (_mysql_exceptions.OperationalError) (1055, "Expression #1 of
SELECT list is not in GROUP BY clause and contains nonaggregated column 
'db.table.create_time' which is not functionally dependent on columns in 
GROUP BY clause; this is incompatible with sql_mode=only_full_group_by") [SQL: 
u'SELECT table.create_time AS table_create_time, table.count AS 
table_count \nFROM table \nWHERE table.cluster_id = %s AND 
table.create_time > %s GROUP BY table.count'] [parameters: (1, 
datetime.datetime(2000, 1, 1, 0, 0))]

原因:

mysql5.7.5版本開始,sql_mode使用的是默認(rèn)值( 如下),而之前使用的mysql配置文件中sql_mode="",由于這個(gè)特性使在使用group_by時(shí)出現(xiàn)報(bào)錯(cuò),以下是新版的默認(rèn)值:

sql_mode默認(rèn)值

默認(rèn)的sql-mode里的ONLY_FULL_GROUP_BY字段導(dǎo)致不能直接查詢group_by包裹的之外的字段,如下使用,只查詢group_by的字段可以正常使用,但是同時(shí)查詢create_time和count字段會(huì)出現(xiàn)錯(cuò)誤:

# 正確
session.query(Table.count).group_by(Table.count).all()
# 報(bào)錯(cuò)
session.query(Table.create_time,Table.count).group_by(Table.count).all()

解決辦法:

  1. 修改sql_mode
    如設(shè)置:sql_mode=""
    問題解決,但是由于sql_mode=""會(huì)帶來可以預(yù)估的錯(cuò)誤,如數(shù)據(jù)被截?cái)嗟?,所以這種方法有數(shù)據(jù)丟失的風(fēng)險(xiǎn)。

  2. 程序中改變查詢語(yǔ)句的寫法,group_by之外的字段使用func函數(shù)包圍
    為了符合ONLY_FULL_GROUP_BY=True的要求,如下:


    參考

那么使用方法2,程序中正確的寫法示例如下:

from sqlalchemy import func

# 1. 注意:這樣生成的數(shù)據(jù)結(jié)果為[(),()],列表中的結(jié)果是元組,而不是生成器,
# 如果要對(duì)結(jié)果進(jìn)行解析,解析方式也跟原來的方式不一樣
objs= session.query(func.any_value(Table.create_time,Table.count).
                    group_by(Table.count).all()


# 2. 但是如果在這樣的寫法中只需要使用count字段,寫成obj.count是可以的
obj= session.query(func.any_value(Table.create_time,Table.count).
                   group_by(Table.count).first()

以下為sql_mode常用值的含義,參考自這里

  • ONLY_FULL_GROUP_BY:對(duì)于GROUP BY聚合操作,如果在SELECT中的列,沒有在GROUP BY中出現(xiàn),那么這個(gè)SQL是不合法的,因?yàn)榱胁辉贕ROUP BY從句中
  • NO_AUTO_VALUE_ON_ZERO:該值影響自增長(zhǎng)列的插入。默認(rèn)設(shè)置下,插入0或NULL代表生成下一個(gè)自增長(zhǎng)值。如果用戶希望插入的值為0,而該列又是自增長(zhǎng)的,那么這個(gè)選項(xiàng)就有用了。
  • STRICT_TRANS_TABLES:在該模式下,如果一個(gè)值不能插入到一個(gè)事務(wù)表中,則中斷當(dāng)前的操作,對(duì)非事務(wù)表不做限制
  • NO_ZERO_IN_DATE:在嚴(yán)格模式下,不允許日期和月份為零
  • NO_ZERO_DATE:設(shè)置該值,mysql數(shù)據(jù)庫(kù)不允許插入零日期,插入零日期會(huì)拋出錯(cuò)誤而不是警告。
  • ERROR_FOR_DIVISION_BY_ZERO:在INSERT或UPDATE過程中,如果數(shù)據(jù)被零除,則產(chǎn)生錯(cuò)誤而非警告。如果未給出該模式,那么數(shù)據(jù)被零除時(shí)MySQL返回NULL
  • NO_AUTO_CREATE_USER:禁止GRANT創(chuàng)建密碼為空的用戶
  • NO_ENGINE_SUBSTITUTION:如果需要的存儲(chǔ)引擎被禁用或未編譯,那么拋出錯(cuò)誤。不設(shè)置此值時(shí),用默認(rèn)的存儲(chǔ)引擎替代,并拋出一個(gè)異常
  • PIPES_AS_CONCAT:將”||”視為字符串的連接操作符而非或運(yùn)算符,這和Oracle數(shù)據(jù)庫(kù)是一樣的,也和字符串的拼接函數(shù)Concat相類似
最后編輯于
?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請(qǐng)聯(lián)系作者
【社區(qū)內(nèi)容提示】社區(qū)部分內(nèi)容疑似由AI輔助生成,瀏覽時(shí)請(qǐng)結(jié)合常識(shí)與多方信息審慎甄別。
平臺(tái)聲明:文章內(nèi)容(如有圖片或視頻亦包括在內(nèi))由作者上傳并發(fā)布,文章內(nèi)容僅代表作者本人觀點(diǎn),簡(jiǎn)書系信息發(fā)布平臺(tái),僅提供信息存儲(chǔ)服務(wù)。

相關(guān)閱讀更多精彩內(nèi)容

友情鏈接更多精彩內(nèi)容