百度360必应搜狗淘宝本站头条
当前位置:网站首页 > 技术分类 > 正文

一个时间戳精度问题,引发了一个MySQL血案

ztj100 2025-01-07 17:23 12 浏览 0 评论

文章来源:https://dwz.cn/ajsWJTWv

作者:阿杜的世界

最近工作中遇到两例mysql时间戳相关的问题,一个是mysql-connector-java和msyql的精度不一致导致数据查不到;另一例是应用服务器时区错误导致数据查询不到。

通过这篇文章,希望能够解答关于mysql中时间戳的几个问题:

  1. mysql中的DATETIME精度为什么只支持到秒?
  2. mysql中的DATETIME类型跟时区有关吗?
  3. mysql设计表的时候,表示时间的字段改如何选择?

案例分析:DATETIME的精度问题

前段时间,将负责的应用的mysql-connector-java的版本从5.1.16升级到5.1.30,在做功能回归的时候发现,使用了类似上面的SQL的用例的运行时数据会有遗漏,导致功能有问题。

考虑到我负责的应用中,有个功能需要用到类似下面这种SQL,即使用时间戳作为查询的条件,查询在某个时间戳之后的所有数据。

经过排查发现:mysql-connector-java在5.1.23之前会将秒后面的精度丢弃再传给MySQL服务端,正好我们使用的mysql版本中DATETIME的精度是秒;在我将mysql-connector-java升级到5.1.30后,从java应用通过mysql-connector-java将时间戳传到MySQL服务端的时候,就不会将毫秒数丢弃了,从mysql-connector-java的角度看是修复了一个BUG,但是对于我的应用来说却是触发了一个BUG。

如果你面对这个问题,你会怎么修复呢?

我们当时想了三种方案:

  • 将mybatis的Mapper接口中的时间戳参数的类型,从java.util.Date改成java.sql.Date;
  • 在传入Mapper接口之前,将传入的时间戳按秒取正,代码如下
  • 在查询之前,将传入的时间戳减1秒;
  • 经过验证,方案1会,java.util.Date转过去的java.sql.Date对象会将日期之后的精度全部丢掉,从而导致查询出更多不必要的数据;方案3是可以的,就是可能会查出多一两条数据;方案2也是可以的,相当于从代码上对mysql-connector-java的特性做了补偿。最终我选择的是方案2。

    案例复现

    利用homebrew安装MySQL,版本是8.0.15,装好后建一个表,用来存放用户信息,SQL如下:

    使用spirngboot + mybatis作为开发框架,定义一个用户实体,代码如下所示:

    定义该实体对应的Mapper,代码如下:

    设置连接mysql相关的配置,代码如下:

    编写测试代码,先插入一条数据,然后用时间戳作为查询条件去查询,代码如下:

    运行单测,如我们的设想,确实是没有查询出数据来,结果如下:

    然后修改代码,利用上面的代码将查询的时间戳按秒取正,代码如下:

    再次运行单测,如我们的设想,这次可以查询出数据来了。

    不过,这里有个小插曲,我在最开始设计表的时候,使用的SQL语句是下面这样的:

    你一定发现了,这里的datetime已经支持小数点后更小的时间精度了,最多支持6位即最多可以支持到微妙级别。这个特性是什么时候引入的呢,我去查阅了MySQL的官方文档(https://dev.mysql.com/doc/refman/5.6/en/fractional-seconds.html),发现这个特性是在mysql 5.6.4之后开始支持的。

    知识点总结

    经过了前面的实际案例分析和案例复现,想必读者已经对mysql中DATETIME这个类型有了一定的认识,接下来跟我一起看下,我们从这个案例中可以总结出哪些经验。

    1.mysql-connector-java的版本和mysql的版本需要配套使用,例如5.6.4之前的版本,就最好不要使用mysql-connector-java的5.1.23之后的版本,否则就可能会遇到我们这次遇到的问题。

    2.MySQL中用来表示时间的字段类型有:DATE、DATETIME、TIMESTAMP,它们之间有相同点,各自也有自己的特性,我总结了一个表格,如下所示:

    3.DATETIME类型在MySQL中是以“YYYYMMDDHHMMSS”格式的整数存放的,与时区无关,使用8个字节的空间;

    4.TIMESTAMP类型可以保存的时间范围要小很多,显示的值依赖时区,MySQL的服务器、操作系统以及客户端连接都有时区的设置。

    5.一般情况下推荐使用DATETIME作为时间戳字段,不推荐使用bigint类型来存储时间。

    6.在开发中,应该尽量避免使用时间戳作为查询条件,如果必须要用,则需要充分考虑MySQL的精度和查询参数的精度等问题。

    相关推荐

    Whoosh,纯python编写轻量级搜索工具

    引言在许多应用程序中,搜索功能是至关重要的。Whoosh是一个纯Python编写的轻量级搜索引擎库,可以帮助我们快速构建搜索功能。无论是在网站、博客还是本地应用程序中,Whoosh都能提供高效的全文搜...

    如何用Python实现二分搜索算法(python二分法查找代码)

    如何用Python实现二分搜索算法二分搜索(BinarySearch)是一种高效的查找算法,适用于在有序数组中快速定位目标值。其核心思想是通过不断缩小搜索范围,每次将问题规模减半,时间复杂度为(O...

    路径扫描 -- dirsearch(路径查找器怎么使用)

    外表干净是尊重别人,内心干净是尊重自己,干净,在今天这个时代,应该是一种极高的赞美和珍贵。。。----网易云热评一、软件介绍Dirsearch是一种命令行工具,可以强制获取web服务器中的目录和文件...

    78行Python代码帮你复现微信撤回消息!

    来源:悟空智能科技本文约700字,建议阅读5分钟。本文基于python的微信开源库itchat,教你如何收集私聊撤回的信息。...

    从零开始学习 Python!2《进阶知识》 Python进阶之路

    欢迎来到Python学习的进阶篇章!如果你说已经掌握了基础语法,那么这篇就是你开启高手之路的大门。我们将一起探讨面向对象编程...

    白帽黑客如何通过dirsearch脚本工具扫描和收集网站敏感文件

    一、背景介绍...

    Python之txt数据预定替换word预定义定位标记生成word报告(四)

    续接Python之txt数据预定替换word预定义定位标记生成word报告(一)https://mp.toutiao.com/profile_v4/graphic/preview?pgc_id=748...

    假期苦短,我用Python!这有个自动回复拜年信息的小程序

    ...

    Python——字符串和正则表达式中的反斜杠('\')问题详解

    在本篇文章里小编给大家整理的是关于Python字符串和正则表达式中的反斜杠('\')问题以及相关知识点,有需要的朋友们可以学习下。在Python普通字符串中在Python中,我们用'\'来转义某些普通...

    Python re模块:正则表达式综合指南

    Python...

    Python中re模块详解(rem python)

    在《...

    python之re模块(python re模块sub)

    re模块一.re模块的介绍1.什么是正则表达式"定义:正则表达式是一种对字符和特殊字符操作的一种逻辑公式,从特定的字符中,用正则表达字符来过滤的逻辑。(也是一种文本模式;)2、正则表达式可以帮助我们...

    MySQL、PostgreSQL、SQL Server 数据库导入导出实操全解

    在数字化时代,数据是关键资产,数据库的导入导出操作则是连接数据与应用场景的桥梁。以下是常见数据库导入导出的实用方法及代码,包含更多细节和特殊情况处理,助你应对各种实际场景。一、MySQL数据库...

    Zabbix监控系统系列之六:监控 mysql

    zabbix监控mysql1、监控规划在创建监控项之前要尽量考虑清楚要监控什么,怎么监控,监控数据如何存储,监控数据如何展现,如何处理报警等。要进行监控的系统规划需要对Zabbix很了解,这里只是...

    mysql系列之一文详解Navicat工具的使用(二)

    本章内容是系列内容的第二部分,主要介绍Navicat工具的使用。若查看第一部分请见:...

    取消回复欢迎 发表评论: