实战笔记丨JDBC问题定位指南「建议收藏」

实战笔记丨JDBC问题定位指南「建议收藏」JDBC(Java数据库连接性)是Java API,用于管理与数据库的连接,发出查询和命令以及处理从数据库获得的结果集。JDBC在1997年作为JDK 1.1的一部分发布,是为Java持久层开发的首…

实战笔记丨JDBC问题定位指南

JDBC(Java数据库连接性)是Java API,用于管理与数据库的连接,发出查询和命令以及处理从数据库获得的结果集。JDBC在1997年作为JDK 1.1的一部分发布,是为Java持久层开发的首批组件之一。

JDBC问题基础知识

JDBC问题是指比较宽泛的,体现在JDBC层面的问题,造成JDBC问题的原因主要是三个方面:1、应用程序和应用程序框架问题;2、JDBC业务功能问题;3、数据库内核问题。问题表现可以分为三个大的方面:1、执行报错,JDBC抛出异常;2、执行效率低,耗时异常;3、特性不支持,JDBC未实现的JDK接口。

JDBC问题分类

实战笔记丨JDBC问题定位指南「建议收藏」

JDBC问题定位方法及解决措施

建立数据库链接失败

1、 关键字:Check that the hostname and port are correct and that the postmaster is accepting TCP/IP connections. 客户端ping服务端IP,看网络是否畅通,网络不通首先解决网络问题,然后查看端口是否正确,端口不正确修改为正确的端口;

2、 关键字:FATAL: Invalid username/password,login denied. 检查用户名密码的配置是否正确。措施:将其修改为正确的用户名密码。

3、 关键字:No suitable driver found for XXXX 检查URL格式是否正确, 措施:将其修改为正确的格式gsjdbc4.jar对应 jdbc:postgresql://host:port/database, gsjdbc200.jar对应jdbc:gaussdb://host:port/database。

4、 关键字:FATAL: no pg_hba.conf entry for host 检查所链接CN是否配置远程访问权限,在cn下的pg_hba.conf文件中添加host all all 0.0.0.0/0 sha256。

5、 关键字:conflit JDBC jar包和应用程序冲突,措施:将gsjdbc4.jar替换为gsjdbc200.jar

执行业务抛异常

1、 关键字:receiveErrorResponse 若报错中含有次关键字,则JDBC报错是接收到了内核发来的异常报文和异常信息, 措施:需要收集相关报错及日志信息发回研发分析。

2、 关键字:Broken pipe, connection reset by peer 可能原因:网络故障,数据库链接超时,措施:检查网络状态,修复网络故障,影响数据库链接超时的因素,数据库参数session_timeout以及lvs。

3、 关键字:The column index is out of range 可能原因:应用程序获取的结果集和预期不一致,列数不一致,应用程序问题 措施:检查数据库表定义和查询sql,对返回结果集做一个正确预期,若结果集只有3列,取值时传入的index最大为3。

性能问题

1、 设置loglevel=3,打开jdbc日志,若主要耗时在processResult阶段,可分为两种情况:1)jdbc端一直等待内核返回的报文,等待时间较长; 判断方法:查看FE=> Syncr日志和<=BE ParseComplete日志之间的时间间隔,若时间间隔较久,则判断是内核执行慢;措施:需要内核人员分析sql执行慢的原因;2)结果集过大,一次性全部加载,消耗大量时间;判断方法:看日志若<=BE DataRow出现次数特别多,或则直接在gsql里执行select count(*)查询出来的数目特别大,则判断是结果集过大; 措施:设置fetchSize参数为一个较小的值,使数据按批次返回,客户端得到快速响应。

2、 若主要耗时在modifyJdbcCall(校验传入的sql是否符合规范)和createParameterizedQuery(将传入的sql解析为preparedQuery,以获取由simplequery组成的subqueries)阶段,则需要看一下传入的sql是不是过长,措施:jdbc本身没办法优化这部分耗时,需要应用端看下是否可以优化传入的sql。

功能问题

1、 关键字:not yet implemented ,JDBC未实现接口,措施:需要研究一下是否可实现,是否需要落需求,或则是否有其他接口已提供相同功能,调整业务使用已提供接口。

2、 JDK标准接口中未提供功能,JDK未提供标准接口,措施:理论上,JDK未提供接口,JDBC不支持,实际使用中可以使用JDBC类中的public方法获取部分过程数据,绝大部分情况下明确不支持。

常见案例

加载驱动失败

客户在使用JDBC的时候往往不是直接通过Java程序加载驱动建立链接,而是通过应用程序框架,做好配置之后通过应用程序框架自动建立链接,可能会由于配置问题导致建立链接失败,如:使用了gsjdbc200.jar,但是加载的驱动仍然是org.postgresql.Driver后者使用的url格式仍然是jdbc:postgresql,由于是应用程序框架加载的,所以有些时候驱动路径和url格式都是固定的,只允许配置ip、port、user、password等基本信息,并且在出错的时候只能看见建立链接失败的log信息,看不见堆栈。

解决措施:(1)首先应该检查用户使用的jdbc驱动是gsjdbc4.jar还是gsjdbc200.jar,若是gsjdbc200.jar应该替换为gsjdbc4.jar,尝试建立链接。(2)排除JDBC嫌疑,写一个Java测试用例,不通过应用程序架构,通过Java程序直接加载驱动,建立链接,在排除jdbc嫌疑之后再去细致研究应用程序框架,以解决问题。

JDBC jar包冲突

多个局点曾报出类冲突问题,都是由于JDBC和应用程序拥有相同路径相同名称的类导致,大体可以分为两类,一是gsjdbc4.jar和开源postgresql.jar冲突,两者具有完全相同的类名,二是gsjdbc4.jar 由于iam特性引入了一些其他工具,例如fastjson,和应用程序中的fastjson冲突;

解决措施:针对和开源postgresql.jar的冲突,我们提供了gsjdbc200.jar,使用和开源驱动不同的url格式和驱动路径,驱动名由org.postgresql.Driver修改为com.huawei.gauss200.jdbc.Driver,url格式由org:postgresql://host:port/database改为jdbc:gaussdb://host:port/database,彻底解决了和开源jar包的冲突;针对JDBC引入的jar和应用程序中引入jar的冲突,我们通过maven的shade修改了jar里类的路径,解决了这类冲突。

 

点击关注,第一时间了解华为云新鲜技术~

版权声明:本文内容由互联网用户自发贡献,该文观点仅代表作者本人。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如发现本站有涉嫌侵权/违法违规的内容, 请发送邮件至 举报,一经查实,本站将立刻删除。
转载请注明出处: https://daima100.com/7666.html

(0)
上一篇 2023-03-16
下一篇 2023-03-16

相关推荐

  • Qt数据库(5) – 使用SQL Model类「建议收藏」

    Qt数据库(5) – 使用SQL Model类「建议收藏」Qt助手关键字:Using the SQL Model Classes Qt Version 5.14.0 除了QSqlQuery,Qt还提供了三个高级类用来访问数据库,分别为QSqlQueryMo…

    2023-01-25
    158
  • JDBC快速入门_jdbc有必要学吗

    JDBC快速入门_jdbc有必要学吗JDBC快速入门 详解 1.0DriverManager 功能1 功能2 2.0 connection对象 3.0 statement对象 4.0 ResultSet 遍历结果集的一个案例 impor

    2023-03-22
    145
  • Python中如何处理年龄数据

    Python中如何处理年龄数据年龄数据是数据科学中非常重要的数据类型之一。在机器学习的模型中,年龄数据也经常被作为一个特征来使用。但是,年龄数据并不像其他数据类型那样直接可用,需要进行一些处理和转换。本文将从多个方面详细介绍Python中如何处理年龄数据。

    2024-03-19
    81
  • 快速学习python链接数据库(Python 数据库连接)

    快速学习python链接数据库(Python 数据库连接)你可以访问Python数据库接口及API查看详细的支持数据库列表。不同的数据库你需要下载不同的DB API模块,例如你需要访问Oracle数据库和Mysql数据,你需要下载Oracle和MySQL数据库模块。

    2023-11-26
    115
  • 用Python实现重复执行的方法

    用Python实现重复执行的方法在编程实践中,经常会需要重复执行一段代码。例如,需要在一个列表中查找特定元素,需要对输入的多个文件执行相同的操作等等。通常,程序员会使用循环语句来实现这种重复执行的功能。Python作为一门高级编程语言,提供了多种循环语句来满足不同的需求。

    2024-08-19
    20
  • Java中使用Jedis连接Redis对Set进行操作的常用命令「建议收藏」

    Java中使用Jedis连接Redis对Set进行操作的常用命令「建议收藏」场景 Centos中Redis的下载编译与安装(超详细): https://blog.csdn.net/BADAO_LIUMANG_QIZHI/article/details/103967334 Re

    2023-02-08
    147
  • 使用scipy.io.loadmat读取MATLAB文件的方法

    使用scipy.io.loadmat读取MATLAB文件的方法对于科学计算领域的数据分析工作,MATLAB是一个广泛使用的工具。在某些情况下,Python成为第二重要的语言,可用于使用诸如Numpy和Scipy之类的库的同样任务。这就需要将MATLAB文件导入Python中。因此,使用Python中的SciPy库中的scipy.io.loadmat函数可用于读取MATLAB文件(扩展名为mat)。

    2024-04-22
    55
  • 数据库之数据库的创建删除属性修改语句大全

    数据库之数据库的创建删除属性修改语句大全–创建数据库使用默认的方式 create database 数据库名称 –创建一个完整的数据库,带有主文件和日志文件 create database 数据库名称 –逻辑名称 on primary

    2022-12-24
    143

发表回复

您的电子邮箱地址不会被公开。 必填项已用*标注