实战笔记丨JDBC问题定位指南「建议收藏」

实战笔记丨JDBC问题定位指南「建议收藏」JDBC(Java数据库连接性)是Java API,用于管理与数据库的连接,发出查询和命令以及处理从数据库获得的结果集。JDBC在1997年作为JDK 1.1的一部分发布,是为Java持久层开发的首…

实战笔记丨JDBC问题定位指南

JDBC(Java数据库连接性)是Java API,用于管理与数据库的连接,发出查询和命令以及处理从数据库获得的结果集。JDBC在1997年作为JDK 1.1的一部分发布,是为Java持久层开发的首批组件之一。

JDBC问题基础知识

JDBC问题是指比较宽泛的,体现在JDBC层面的问题,造成JDBC问题的原因主要是三个方面:1、应用程序和应用程序框架问题;2、JDBC业务功能问题;3、数据库内核问题。问题表现可以分为三个大的方面:1、执行报错,JDBC抛出异常;2、执行效率低,耗时异常;3、特性不支持,JDBC未实现的JDK接口。

JDBC问题分类

实战笔记丨JDBC问题定位指南「建议收藏」

JDBC问题定位方法及解决措施

建立数据库链接失败

1、 关键字:Check that the hostname and port are correct and that the postmaster is accepting TCP/IP connections. 客户端ping服务端IP,看网络是否畅通,网络不通首先解决网络问题,然后查看端口是否正确,端口不正确修改为正确的端口;

2、 关键字:FATAL: Invalid username/password,login denied. 检查用户名密码的配置是否正确。措施:将其修改为正确的用户名密码。

3、 关键字:No suitable driver found for XXXX 检查URL格式是否正确, 措施:将其修改为正确的格式gsjdbc4.jar对应 jdbc:postgresql://host:port/database, gsjdbc200.jar对应jdbc:gaussdb://host:port/database。

4、 关键字:FATAL: no pg_hba.conf entry for host 检查所链接CN是否配置远程访问权限,在cn下的pg_hba.conf文件中添加host all all 0.0.0.0/0 sha256。

5、 关键字:conflit JDBC jar包和应用程序冲突,措施:将gsjdbc4.jar替换为gsjdbc200.jar

执行业务抛异常

1、 关键字:receiveErrorResponse 若报错中含有次关键字,则JDBC报错是接收到了内核发来的异常报文和异常信息, 措施:需要收集相关报错及日志信息发回研发分析。

2、 关键字:Broken pipe, connection reset by peer 可能原因:网络故障,数据库链接超时,措施:检查网络状态,修复网络故障,影响数据库链接超时的因素,数据库参数session_timeout以及lvs。

3、 关键字:The column index is out of range 可能原因:应用程序获取的结果集和预期不一致,列数不一致,应用程序问题 措施:检查数据库表定义和查询sql,对返回结果集做一个正确预期,若结果集只有3列,取值时传入的index最大为3。

性能问题

1、 设置loglevel=3,打开jdbc日志,若主要耗时在processResult阶段,可分为两种情况:1)jdbc端一直等待内核返回的报文,等待时间较长; 判断方法:查看FE=> Syncr日志和<=BE ParseComplete日志之间的时间间隔,若时间间隔较久,则判断是内核执行慢;措施:需要内核人员分析sql执行慢的原因;2)结果集过大,一次性全部加载,消耗大量时间;判断方法:看日志若<=BE DataRow出现次数特别多,或则直接在gsql里执行select count(*)查询出来的数目特别大,则判断是结果集过大; 措施:设置fetchSize参数为一个较小的值,使数据按批次返回,客户端得到快速响应。

2、 若主要耗时在modifyJdbcCall(校验传入的sql是否符合规范)和createParameterizedQuery(将传入的sql解析为preparedQuery,以获取由simplequery组成的subqueries)阶段,则需要看一下传入的sql是不是过长,措施:jdbc本身没办法优化这部分耗时,需要应用端看下是否可以优化传入的sql。

功能问题

1、 关键字:not yet implemented ,JDBC未实现接口,措施:需要研究一下是否可实现,是否需要落需求,或则是否有其他接口已提供相同功能,调整业务使用已提供接口。

2、 JDK标准接口中未提供功能,JDK未提供标准接口,措施:理论上,JDK未提供接口,JDBC不支持,实际使用中可以使用JDBC类中的public方法获取部分过程数据,绝大部分情况下明确不支持。

常见案例

加载驱动失败

客户在使用JDBC的时候往往不是直接通过Java程序加载驱动建立链接,而是通过应用程序框架,做好配置之后通过应用程序框架自动建立链接,可能会由于配置问题导致建立链接失败,如:使用了gsjdbc200.jar,但是加载的驱动仍然是org.postgresql.Driver后者使用的url格式仍然是jdbc:postgresql,由于是应用程序框架加载的,所以有些时候驱动路径和url格式都是固定的,只允许配置ip、port、user、password等基本信息,并且在出错的时候只能看见建立链接失败的log信息,看不见堆栈。

解决措施:(1)首先应该检查用户使用的jdbc驱动是gsjdbc4.jar还是gsjdbc200.jar,若是gsjdbc200.jar应该替换为gsjdbc4.jar,尝试建立链接。(2)排除JDBC嫌疑,写一个Java测试用例,不通过应用程序架构,通过Java程序直接加载驱动,建立链接,在排除jdbc嫌疑之后再去细致研究应用程序框架,以解决问题。

JDBC jar包冲突

多个局点曾报出类冲突问题,都是由于JDBC和应用程序拥有相同路径相同名称的类导致,大体可以分为两类,一是gsjdbc4.jar和开源postgresql.jar冲突,两者具有完全相同的类名,二是gsjdbc4.jar 由于iam特性引入了一些其他工具,例如fastjson,和应用程序中的fastjson冲突;

解决措施:针对和开源postgresql.jar的冲突,我们提供了gsjdbc200.jar,使用和开源驱动不同的url格式和驱动路径,驱动名由org.postgresql.Driver修改为com.huawei.gauss200.jdbc.Driver,url格式由org:postgresql://host:port/database改为jdbc:gaussdb://host:port/database,彻底解决了和开源jar包的冲突;针对JDBC引入的jar和应用程序中引入jar的冲突,我们通过maven的shade修改了jar里类的路径,解决了这类冲突。

 

点击关注,第一时间了解华为云新鲜技术~

版权声明:本文内容由互联网用户自发贡献,该文观点仅代表作者本人。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如发现本站有涉嫌侵权/违法违规的内容, 请发送邮件至 举报,一经查实,本站将立刻删除。
转载请注明出处: https://daima100.com/7666.html

(0)
上一篇 2023-03-16
下一篇 2023-03-16

相关推荐

  • 优化网页内容呈现:自然语言处理中文分词技术

    优化网页内容呈现:自然语言处理中文分词技术中文分词是对中文文本进行分隔的过程,将句子分成一个一个的词语,是自然语言处理中的重要环节。中文分词技术的主要目的是为了将中文文本转化成计算机可以理解的形式,方便进行文本分析、数据挖掘等操作。

    2024-02-04
    86
  • Python Suffix End: 简洁有效的后缀操作实现

    Python Suffix End: 简洁有效的后缀操作实现后缀是指字符串中最后几个字符构成的子串,通常用于匹配文件类型或者文件夹的特定结尾。比如一个文件名为example.jpg,这个文件的后缀就是jpg。在程序设计中,我们常常需要对文件类型进行判断,此时就需要对后缀进行操作。

    2024-04-10
    74
  • Mysql与redis缓存一致性「终于解决」

    Mysql与redis缓存一致性「终于解决」问题:线程A在修改mysql的时候,线程B先读取了数据,接着线程A执行完毕,此时redis中没有数据了,接着线程B处理业务然后设置redis缓存,此时redis中的数据还是线程A修改前的数据。

    2023-04-15
    159
  • mysql设置用户密码规则[通俗易懂]

    mysql设置用户密码规则[通俗易懂]一.查看密码规则 二.规则显示介绍 三.操作代码

    2022-12-16
    161
  • hadoop 伪分布配置[亲测有效]

    hadoop 伪分布配置[亲测有效]配置 Hadoop 伪分布式 任务配置说明: VMware 15 Centos 6.5 java -jdk 1.8 hadoop-2.6.0-cdh5.14.0.tar.gz 第一步 自行安装虚拟机

    2023-02-21
    186
  • Python Dictionaries – 一种方便快捷的数据检索方式

    Python Dictionaries – 一种方便快捷的数据检索方式Python中的字典是一种非常有用的数据结构。字典是一种键-值(key-value)对的数据类型,类似于Java中的Map或JavaScript中的对象。字典使用花括号{}定义,每个键-值对之间使用逗号分隔。

    2024-01-06
    106
  • mysql的锁机制详解

    mysql的锁机制详解这段时间一直在学习mysql数据库。项目组一直用的是oracle,所以对mysql的了解也不深。本文主要是对mysql锁的总结。 Mysql的锁主要分为3大类: 表级锁:存储引擎为Myisam。锁住整

    2022-12-18
    150
  • Python列表转字符串:使用

    Python列表转字符串:使用Python作为一门高级编程语言,因其语法简单、易学易用、功能强大等特点,广受开发者青睐。在Python中,列表是一个非常常见的数据结构,可以存储多个数值、字符串等元素。本文将介绍如何将Python列表转换并包装成字符串,方便后续的处理和输出。

    2024-08-10
    31

发表回复

您的电子邮箱地址不会被公开。 必填项已用*标注