尚硅谷JDBC学习笔记
尚硅谷jdbc学习笔记
写在前面
学习链接:java jdbc 视频教程全集
特别注意:该内容全是我自学时,一边听课一边做的笔记,本文的初衷是希望每一个学习时有疑问的同学能够在这篇文章里找到答案;里面关于吐槽的内容仅代表个人看法,白嫖党不会针对任何老师或书籍发表不合适的看法,如有冒犯,请见谅。所有传播知识的行为都应该受到尊重,该内容涉及的一切只为学习交流使用,希望每个求知进来的读者都可以满载而归。有任何问题或侵权行为,请联系本人李英俊小朋友,我会回应并删除;另外,做笔记真的不容易,希望大家转载时标明作者,若非个人使用的转载,请联系本人,否则必究。
学习体会:
- 先说优点:
- 细致细节细心,总之超级无敌细,对有耐心的初学者很友好。
- 在讲解各种底层的同时,还会介绍常用的工具。这个超级无敌棒!不是一味地为了学习而去学习,在实战上面并不会重复造*,所以这点也很重要。
- 再说缺点:
- 我觉得废话有点多,同一个知识点翻来覆去的讲,并且有的疑点还没解决。比如说:比如说:利用driver和drivermanager都能用不同的数据库,为什么drivermanager更好。视频中说的两个优点我觉得driver也能做到啊,没搞懂为什么。
- 由于本人已经学过了高琪老师的java300集,其中包括了jdbc的内容,因此仅以此视频作为查漏补缺。
- 视频中涉及到的练习,进行了简化学习。
- 学到第8集的时候发现,很多知识点都是基于作业进行的,而作业我并没有做,只是简单的跟着老师敲代码,老师怎么敲我就怎么敲。因此当老师在用student举例的时候,我用的还是高琪老师java300集中的t_user跟着学,并且很多知识点结构较差,不知道怎么就突然学到这点了,觉得跨越的幅度很大。因为我在java300集中学过,所以还可以接受,但是看到弹幕里面说整个人都蒙了,我表示理解。
- 在利用反射进行查询的时候,涉及到数据库的列名跟类的属性不一致的问题。
- 高琪老师的java300集中:类是根据数据库创建,并自动生成的。
- 该视频中:类是自己建的,数据库也是自己的,名字不一致就给数据库的的列名起别名解决
- 我觉得该视频的方式不好,既不如上面简单,又不如上面方便。
- 另外,该视频中在用map内容创建反射对象的时候,直接调用了以前写过的reflectionutils工具,我知道是什么意思和原理(根据列名和属性名对应,获取属性名对应的set方法,利用反射调用set方法将map中对应属性的值进行赋值,这样就将map的内容赋给了object对象,即clazz.newinstance(),最后得到了目标对象),但是没学过的人就会一脸懵逼。(看到最后几集的时候,我又回来吐槽一波这个reflectionutils工具,又去网上查了查getsuperclassgenrictype这个函数,补充了一下才能跑)
- 由于本视频讲解的结构很乱(不是指大纲乱,而是老师在讲的时候,东一下,西一下,一会这个文件一会儿那个文件,还常用复制粘贴,特别是多个知识点在一个类中通过各种函数、测试函数讲解,这点我真的吐了),因此我的笔记相对于较乱,请读者轻喷。
- 讲的太啰嗦了,一个知识点在讲的时候翻来覆去的讲,注释写了一遍又一遍,并且最后还会回过头来小结。(细致和啰嗦的度不好把握,看个人吧,勿喷,比如preparedstatement就是一遍又一遍的讲)
- 老师还是讲的很细致的,比如讲resultsetmetadata的时候,就会讲为什么要用,这个是什么,怎么用。我觉得这一点还是很不错的,比高琪老师要好,但是讲一遍就行了,我印象里是讲了至少3遍。
- 学到12集重构dao的时候,就觉得老师的讲课逻辑真的不行,前面写了最后重构竟然是在原来的基础上改的,这个行为真的不好;其次就是感觉想到哪儿写到哪儿,指哪儿改哪儿,查询多条记录写完了才想起来查询一条记录可以直接简化,好像没有备课的感觉。
1. 通过driver接口获取数据库连接
-
数据持久化
-
数据库存取技术分类
- jdbc直接访问数据库
- jdo技术
- 第三方o/r工具,如hibernate,ibatis等
-
jdbc是java访问数据库的基石
-
jdbc(java database connectivity)是一个独立于特定数据库管理系统、通用的sql数据库存取和操作的公共接口。
-
jdbc接口(api)包括两个层次:
- 面向应用的api:java api,抽象接口,供应用程序开发人员使用(连接数据库,执行sql语句,获得结果)。
- 面向数据库的api:java driver api,供开发商开发数据库驱动程序用。
-
jdbc试验,driver是一个接口:数据库厂商必须提供实现的接口,能从其中获取数据库连接。
-
可以通过driver的实现类对象获取数据库连接
- 加入mysql驱动
- 解压mysql-connector-java.zip
- 在挡墙项目下新建lib目录
- 吧.jar文件复制到lib目录下
- 右键buildpath,add to buildpath加入到类路径下
- jdbc的url的标准由三部分组成,各部分间用冒号分隔。
- jdbc:<子协议>:<子名称>
- 协议:jdbc url中的协议总是jdbc
- 子协议:子协议用于标识一个数据库驱动程序
- 子名称:一种标识数据库的方法。子名称可以依不同的子协议而变化,用子名称的目的是为了定位数据库提供足够的信息。
- 遇到的问题:
- 进不去,各种报错:可能是密码错误了。参考
- time zone错误:
package com.litian.jdbc; import java.sql.connection; import java.sql.driver; import java.sql.sqlexception; import java.util.properties; /** * @author: li tian * @contact: litian_cup@163.com * @software: intellij idea * @file: jdbctest.java * @time: 2019/12/15 18:56 * @desc: jdbc试验,driver是一个接口:数据库厂商必须提供实现的接口,能从其中获取数据库连接。 */ public class jdbctest { public static void main(string[] args) throws sqlexception { // 1. 创建一个driver实现类的对象 driver driver = new com.mysql.jdbc.driver(); // 2. 准备连接数据库的基本信息:url,user,password string url = "jdbc:mysql://localhost:3306/girls"; properties info = new properties(); info.put("user", "root"); info.put("password", "tian19951103"); // 3. 调用driver接口的connect(url, info)获取数据库连接 connection connection = driver.connect(url, info); system.out.println(connection); } }
- 加入mysql驱动
-
编写一个通用的方法,在不修改源程序的情况下,可以获取任何数据库的连接
-
解决方案:把数据库驱动driver 实现类的全类名、url、user、password放入一个配置文件中,通过修改配置文件的方式实现和具体的数据库解耦。
-
jdbc.properties
driver=com.mysql.jdbc.driver jdbcurl=jdbc:mysql://localhost:3306/girls user=root password=tian19951103
-
jdbctest
package com.litian.jdbc; import java.io.inputstream; import java.sql.connection; import java.sql.driver; import java.sql.sqlexception; import java.util.properties; /** * @author: li tian * @contact: litian_cup@163.com * @software: intellij idea * @file: jdbctest.java * @time: 2019/12/15 18:56 * @desc: jdbc试验,driver是一个接口:数据库厂商必须提供实现的接口,能从其中获取数据库连接。 */ public class jdbctest { public void test1() throws sqlexception { // 1. 创建一个driver实现类的对象 driver driver = new com.mysql.jdbc.driver(); // 2. 准备连接数据库的基本信息:url,user,password string url = "jdbc:mysql://localhost:3306/girls"; properties info = new properties(); info.put("user", "root"); info.put("password", "tian19951103"); // 3. 调用driver接口的connect(url, info)获取数据库连接 connection connection = driver.connect(url, info); system.out.println(connection); } // 编写一个通用的方法,在不修改源程序的情况下,可以获取任何数据库的连接 public connection getconnection() throws exception { string driverclass = null; string jdbcurl = null; string user = null; string password = null; // 读取类路径下的jdbc.propertites 文件 inputstream in = getclass().getclassloader().getresourceasstream("jdbc.properties"); properties properties = new properties(); properties.load(in); driverclass = properties.getproperty("driver"); jdbcurl = properties.getproperty("jdbcurl"); user = properties.getproperty("user"); password = properties.getproperty("password"); driver driver = (driver) class.forname(driverclass).newinstance(); properties info = new properties(); info.put("user", user); info.put("password", password); connection connection = driver.connect(jdbcurl, info); return connection; } public void testgetconnection() throws exception { system.out.println(getconnection()); } public static void main(string[] args) throws exception { new jdbctest().testgetconnection(); } }
-
2. 通过drivermanager获取数据库连接
-
修改一下配置文件
driver=com.mysql.cj.jdbc.driver jdbcurl=jdbc:mysql://localhost:3306/testjdbc?servertimezone=gmt%2b8 user=root password=123456
-
代码(我觉得废话有点多,同一个知识点翻来覆去的讲,并且有的疑点还没解决)
-
比如说:利用driver和drivermanager都能用不同的数据库,为什么drivermanager更好
package com.litian.jdbc; import java.io.inputstream; import java.sql.connection; import java.sql.driver; import java.sql.drivermanager; import java.sql.sqlexception; import java.util.properties; /** * @author: li tian * @contact: litian_cup@163.com * @software: intellij idea * @file: jdbctest.java * @time: 2019/12/15 18:56 * @desc: jdbc试验,driver是一个接口:数据库厂商必须提供实现的接口,能从其中获取数据库连接。 */ public class jdbctest { public connection getconnection2() throws exception { // 1. 准备连接数据库的4个字符串。 // 1.1 创建properties对象 properties properties = new properties(); // 1.2 获取jdbc.properties对应的输入流 inputstream in = this.getclass().getclassloader().getresourceasstream("jdbc.properties"); // 1.3 加载1.2对应的输入流 properties.load(in); // 1.4 具体决定user,password等4个字符串。 string user = properties.getproperty("user"); string password = properties.getproperty("password"); string jdbcurl = properties.getproperty("jdbcurl"); string driver = properties.getproperty("driver"); // 2. 加载数据库驱动程序 class.forname(driver); // 3. 通过drivermanager的getconnection()方法获取数据库连接。 return drivermanager.getconnection(jdbcurl, user, password); } /** * drivermanager是驱动的管理类 * 1. 可以通过重载的getconnection()方法获取数据库连接。较为方便 * 2. 可以同时管理多个驱动程序:若注册了多个数据库连接,则调动getconnection()方法时 * 传入的参数不同,则返回不同的数据库连接 */ public void testdrivermanager() throws exception { // 1. 准备连接数据库的4个字符串 // 驱动的全类名 string driverclass = null; string jdbcurl = null; string user = null; string password = null; // 读取类路径下的jdbc.propertites 文件 inputstream in = getclass().getclassloader().getresourceasstream("jdbc.properties"); properties properties = new properties(); properties.load(in); driverclass = properties.getproperty("driver"); jdbcurl = properties.getproperty("jdbcurl"); user = properties.getproperty("user"); password = properties.getproperty("password"); // 2. 加载数据库驱动程序(对应的driver实现类中有注册驱动的静态代码块程序) // 下面的注册程序已经写好了,不需要自己写 // drivermanager.registerdriver((driver) class.forname(driverclass).newinstance()); class.forname(driverclass); // 3. 通过drivermanager的getconnection()方法获取数据库连接 connection connection = drivermanager.getconnection(jdbcurl, user, password); system.out.println(connection); } public void test1() throws sqlexception { // 1. 创建一个driver实现类的对象 driver driver = new com.mysql.jdbc.driver(); // 2. 准备连接数据库的基本信息:url,user,password string url = "jdbc:mysql://localhost:3306/girls"; properties info = new properties(); info.put("user", "root"); info.put("password", "tian19951103"); // 3. 调用driver接口的connect(url, info)获取数据库连接 connection connection = driver.connect(url, info); system.out.println(connection); } // 编写一个通用的方法,在不修改源程序的情况下,可以获取任何数据库的连接 public connection getconnection() throws exception { string driverclass = null; string jdbcurl = null; string user = null; string password = null; // 读取类路径下的jdbc.propertites 文件 inputstream in = getclass().getclassloader().getresourceasstream("jdbc.properties"); properties properties = new properties(); properties.load(in); driverclass = properties.getproperty("driver"); jdbcurl = properties.getproperty("jdbcurl"); user = properties.getproperty("user"); password = properties.getproperty("password"); driver driver = (driver) class.forname(driverclass).newinstance(); properties info = new properties(); info.put("user", user); info.put("password", password); connection connection = driver.connect(jdbcurl, info); return connection; } public void testgetconnection() throws exception { system.out.println(getconnection()); } public static void main(string[] args) throws exception { // new jdbctest().testgetconnection(); // new jdbctest().testdrivermanager(); connection conn = new jdbctest().getconnection2(); system.out.println(conn); } }
3. 通过statement执行更新操作
-
statement测试
/** * 通过jdbc向指定的数据表中插入一条记录 * 1. statement:用于执行sql语句的对象 * 1.1 通过connection的createstatement()方法来获取 * 1.2 通过executeupdate(sql)可以执行sql语句 * 1.3 传入的sql可以是insert, update或delete,但不能是select * 2. connection、statement都是应用程序和数据库服务器的连接资源。使用后一定要关闭。 * 2.1 需要再finally中关闭 * 3. 关闭顺序:先获取的后关,后获取的先关 */ public void teststatement() { connection conn = null; statement statement = null; try { // 1. 获取数据库连接 conn = getconnection2(); // 2. 准备插入的sql语句 string sql = "insert into t_user (username, pwd) values('测试', 3352)"; string sql2 = "update t_user set username='傻瓜' where id = 20017"; // 3. 执行插入 // 3.1 获取操作sql语句的statement对象 statement = conn.createstatement(); // 3.2 调用statement对象的executeupdate(sql)执行sql语句 statement.executeupdate(sql); } catch (exception e) { e.printstacktrace(); } finally { try { if (statement != null) { // 4. 关闭statement对象 statement.close(); } } catch (sqlexception e) { e.printstacktrace(); } try { if (statement != null) { // 5. 关闭connection对象 conn.close(); } } catch (sqlexception e) { e.printstacktrace(); } } }
-
insert/update/delete封装
/** * 通用的更新的方法:insert/update/delete * 版本1 */ public void update(string sql){ connection conn = null; statement statement = null; try { conn = getconnection2(); statement = conn.createstatement(); statement.executeupdate(sql); }catch (exception e){ e.printstacktrace(); }finally { try { if (statement != null) { statement.close(); } } catch (sqlexception e) { e.printstacktrace(); } try { if (statement != null) { conn.close(); } } catch (sqlexception e) { e.printstacktrace(); } } }
-
创建jdbc的工具类,封装方法
-
工具类
package com.litian.jdbc; import java.io.inputstream; import java.sql.*; import java.util.properties; /** * @author: li tian * @contact: litian_cup@163.com * @software: intellij idea * @file: jdbcutils.java * @time: 2020/3/21 15:23 * @desc: |操作jdbc的工具类,其中封装了一些工具方法 * version1 */ public class jdbctools { /** * 关闭statement和connection的方法 */ public static void release(statement statement, connection conn) { try { if (statement != null) { statement.close(); } } catch (sqlexception e) { e.printstacktrace(); } try { if (statement != null) { conn.close(); } } catch (sqlexception e) { e.printstacktrace(); } } public static void release(resultset rs, statement statement, connection conn) { try { if (rs != null) { rs.close(); } } catch (sqlexception e) { e.printstacktrace(); } try { if (statement != null) { statement.close(); } } catch (sqlexception e) { e.printstacktrace(); } try { if (statement != null) { conn.close(); } } catch (sqlexception e) { e.printstacktrace(); } } /** * 1. 获取连接的方法 * 通过读取配置文件从数据库服务器获取一个连接。 * * @return */ public static connection getconnection() throws exception { // 1. 准备连接数据库的4个字符串。 // 1.1 创建properties对象 properties properties = new properties(); // 1.2 获取jdbc.properties对应的输入流 inputstream in = jdbctools.class.getclassloader().getresourceasstream("jdbc.properties"); // 1.3 加载1.2对应的输入流 properties.load(in); // 1.4 具体决定user,password等4个字符串。 string user = properties.getproperty("user"); string password = properties.getproperty("password"); string jdbcurl = properties.getproperty("jdbcurl"); string driver = properties.getproperty("driver"); // 2. 加载数据库驱动程序 class.forname(driver); // 3. 通过drivermanager的getconnection()方法获取数据库连接。 return drivermanager.getconnection(jdbcurl, user, password); } }
-
修改后的insert/update/delete封装
public void update(string sql) { connection conn = null; statement statement = null; try { conn = getconnection2(); statement = conn.createstatement(); statement.executeupdate(sql); } catch (exception e) { e.printstacktrace(); } finally { jdbctools.release(statement, conn); } }
-
4. 通过resultset执行查询操作
/** * resultset:结果集。封装了使用jdbc进行查询的结果。 * 1. 调用statement对象的executequery(sql)方法 * 2. resultset返回的实际上就是一张数据表。有一个指针指向数据表的第一行的前面。 * 可以调用next()方法检测下一行是否有效。若有效,该方法返回true,且指针下移。 * 相当于iterator对象的hasnext()和next()方法的结合体 * 3. 当指针对应到一行时,可以通过嗲用getxxx(index)或getxxx(columnname)获取 * 每一列的值。如:getint(1),getstring("name") * 4. 关闭resultset */ public void testresultset(){ // 获取各项记录,并打印 connection conn = null; statement statement = null; resultset rs = null; try { // 1. 获取connection conn = jdbctools.getconnection(); // 2. 获取statement statement = conn.createstatement(); // 3. 准备sql string sql = "select id, username, pwd, regtime, lastlogintime from t_user"; // 4. 执行查询,得到resultset rs = statement.executequery(sql); // 5. 处理resultset while(rs.next()){ int id = rs.getint(1); string username = rs.getstring(2); string pwd = rs.getstring(3); date regtime = rs.getdate(4); timestamp lastlogintime = rs.gettimestamp(5); system.out.println(id + "-->" + username + "-->" + pwd + "-->" + regtime + "-->" + lastlogintime); } // 6. 关闭数据库资源 } catch (exception e) { e.printstacktrace(); } finally { jdbctools.release(rs, statement, conn); } }
- 以面向对象的思想编写jdbc程序
- 将数据表中的属性封装为一个类,增删改变为从类到数据库,查变为从数据库到类。
5. preparedstatement
-
是statement的子接口,可以传入带占位符的sql语句,并且提供了补充占位符变量的方法。
-
使用statement需要进行拼写sql语句,很辛苦,很容易出错。
-
引号的问题处理很复杂,不利于维护。
-
可以有效的禁止sql注入。(通过用户输入非法的sql命令)
-
代码的可读性和可维护性,最大可能的提高性能(批量插入)
-
代码测试
public void testpreparedstatement() { connection connection = null; preparedstatement ps = null; try { connection = jdbctools.getconnection(); string sql = "insert into t_user (id, username, pwd, regtime, lastlogintime) values(?,?,?,?,?)"; ps = connection.preparestatement(sql); ps.setint(1, 2); ps.setstring(2, "狗贼"); ps.setstring(3, "123456"); ps.setdate(4, new date(system.currenttimemillis())); ps.settimestamp(5, new timestamp(system.currenttimemillis())); ps.executeupdate(); } catch (exception e) { e.printstacktrace(); } finally { jdbctools.release(ps, connection); } }
6. 利用反射及jdbc元数据编写通用的查询
- 先利用sql进行查询,得到结果集
- 利用反射创建实体类的对象:创建student对象
- 获取结果集的列的别名:idcard、studentname
- 再获取结果集的每一列的值,结合3得到一个map键值对。键:列的别名;值:列的值。
- 再利用反射为2对应的属性赋值,属性即为map的键,值即为map的值。
-
resultsetmetadata
- 是什么:是描述resultset的元数据对象。即从中可以获取到结果集中有多少列,列名是什么...
- 如何用:
- 得到resultsetmetadata对象:调用resultset的getmetadata()方法
- 常用好用的方法:
- int getcolumncount():sql语句中包含了哪些列
- string getcolumnlabel(int column):获取指定的列的别名,从1开始。
-
resultsetmetadata测试
public void testresultsetmetadata() { connection conn = null; preparedstatement ps = null; resultset rs = null; try { string sql = "select id, username, pwd, regtime, lastlogintime from t_user where id = ?"; conn = jdbctools.getconnection(); ps = conn.preparestatement(sql); ps.setint(1, 1); rs = ps.executequery(); // 1. 得到resultsetmetadata对象 resultsetmetadata rsmd = rs.getmetadata(); // 2. 打印每一列的列名 for (int i = 0; i < rsmd.getcolumncount(); i++) { string columnlabel = rsmd.getcolumnlabel(i + 1); system.out.println(columnlabel); } } catch (exception e) { e.printstacktrace(); } finally { jdbctools.release(rs, ps, conn); } }
-
取出列的别名和值
public void testresultsetmetadata() { connection conn = null; preparedstatement ps = null; resultset rs = null; try { string sql = "select id, username, pwd, regtime, lastlogintime from t_user where id = ?"; conn = jdbctools.getconnection(); ps = conn.preparestatement(sql); ps.setint(1, 1); rs = ps.executequery(); map<string, object> values = new hashmap<>(); // 1. 得到resultsetmetadata对象 resultsetmetadata rsmd = rs.getmetadata(); while(rs.next()){ // 2. 打印每一列的列名 for (int i = 0; i < rsmd.getcolumncount(); i++) { string columnlabel = rsmd.getcolumnlabel(i + 1); object columnvalue = rs.getobject(columnlabel); values.put(columnlabel, columnvalue); } } system.out.println(values); class clazz = user.class; object object = clazz.newinstance(); for (map.entry<string, object> entry: values.entryset()){ string fieldname = entry.getkey(); object fieldvalue = entry.getvalue(); system.out.println(fieldname + ": " + fieldvalue); } } catch (exception e) { e.printstacktrace(); } finally { jdbctools.release(rs, ps, conn); } }
-
通用的查询方法代码
public <t> t get(class<t> clazz, string sql, object... args) { t entity = null; connection conn = null; preparedstatement ps = null; resultset rs = null; try { conn = jdbctools.getconnection(); ps = conn.preparestatement(sql); for (int i = 0; i < args.length; i++) { ps.setobject(i + 1, args[i]); } rs = ps.executequery(); map<string, object> values = new hashmap<>(); resultsetmetadata rsmd = rs.getmetadata(); if (rs.next()) { // 利用反射创建对象 entity = clazz.newinstance(); // 通过解析sql语句来判断到底选择了哪些列,以及需要为entity对象的哪些属性赋值 for (int i = 0; i < rsmd.getcolumncount(); i++) { string columnlabel = rsmd.getcolumnlabel(i + 1); object columnvalue = rs.getobject(columnlabel); values.put(columnlabel, columnvalue); } } for (map.entry<string, object> entry : values.entryset()) { string fieldname = entry.getkey(); object fieldvalue = entry.getvalue(); system.out.println(fieldname + ": " + fieldvalue); } // 这里要加入reflectionutils方法,将map的内容写入entity中,并返回entity // 6. 关闭数据库资源 } catch (exception e) { e.printstacktrace(); } finally { jdbctools.release(rs, ps, conn); } return entity; }
7. dao设计模式
-
data access object,数据访问对象
-
what:访问数据信息的类。包含了对数据的crud(create、read、update、delete,增删改查)操作,而不包含任何业务相关的信息。
-
why:实现功能的模块化。更有利于代码的维护和升级。dao可以被子类集成或直接使用。
-
how:使用jdbc编写dao可能会包含的方法:
-
void update()
// insert, update, delete 操作都可以包含在其中 void update(string sql, object ... args)
-
查询
// 查询一条记录,返回对应的对象 <t> t get(class<t> clazz, string sql, object ... args) // 查询多条记录,返回对应的对象的集合 <t> list<t> getforlist(class<t> clazz, string sql, object ... args) // 返回某条记录的某一个字段的值或一个统计的值(一共有多少记录等。) <e> e getforvalue(string sql, object ... args)
-
-
代码实现
-
dao
package com.litian.jdbc; import java.sql.connection; import java.sql.preparedstatement; import java.sql.resultset; import java.sql.resultsetmetadata; import java.util.hashmap; import java.util.list; import java.util.map; /** * @author: li tian * @contact: litian_cup@163.com * @software: intellij idea * @file: dao.java * @time: 2020/3/26 18:37 * @desc: | */ public class dao { // insert, update, delete 操作都可以包含在其中 void update(string sql, object... args) { connection conn = null; preparedstatement ps = null; try { conn = jdbctools.getconnection(); ps = conn.preparestatement(sql); for (int i = 0; i < args.length; i++) { ps.setobject(i + 1, args[i]); } ps.executeupdate(); } catch (exception e) { e.printstacktrace(); } finally { jdbctools.release(null, ps, conn); } } // 查询一条记录,返回对应的对象 <t> t get(class<t> clazz, string sql, object... args) { t entity = null; connection conn = null; preparedstatement ps = null; resultset rs = null; try { // 1. 获取connection conn = jdbctools.getconnection(); // 2. 获取preparedstatement ps = conn.preparestatement(sql); // 3. 填充占位符 for (int i = 0; i < args.length; i++) { ps.setobject(i + 1, args[i]); } // 4. 进行查询,得到resultset rs = ps.executequery(); // 5. 若resultset中有记录,准备一个map<string, object>: 键:存放列的别名;值:存放列的值 if (rs.next()) { map<string, object> values = new hashmap<>(); // 6. 得到resultsetmetadata对象 resultsetmetadata rsmd = rs.getmetadata(); // 7. 处理resultset,把指针向下移动一个单位 // 8. 由resultsetmetadata对象得到结果集中有多少列 int columncount = rsmd.getcolumncount(); // 9. 由resultsetmetadata得到每一列的别名,由resultset得到具体每一列的值 for (int i = 0; i < columncount; i++) { string columnlabel = rsmd.getcolumnlabel(i + 1); object columnvalue = rs.getobject(columnlabel); // 10. 填充map对象 values.put(columnlabel, columnvalue); } // 11. 用反射创建class对象的对象 entity = clazz.newinstance(); // 12. 遍历map对象,用反射填充对象的属性值:属性名为map中的key,属性值为map中的value for (map.entry<string, object> entry : values.entryset()) { string propertyname = entry.getkey(); object value = entry.getvalue(); reflectionutils.setfieldvalue(entity, propertyname, value); } } } catch (exception e) { e.printstacktrace(); } finally { jdbctools.release(rs, ps, conn); } return entity; } // 查询多条记录,返回对应的对象的集合 <t> list<t> getforlist(class<t> clazz, string sql, object... args) { return null; } // 返回某条记录的某一个字段的值或一个统计的值(一共有多少记录等。) <e> e getforvalue(string sql, object... args) { return null; } }
-
dao测试
package com.litian.jdbc; import java.sql.date; import java.sql.timestamp; /** * @author: li tian * @contact: litian_cup@163.com * @software: intellij idea * @file: daotest.java * @time: 2020/3/26 18:59 * @desc: | */ public class daotest { public static void main(string[] args) { dao dao = new dao(); // 测试update // string sql = "insert into t_user(id, username, pwd, regtime, lastlogintime) values(?,?,?,?,?)"; // dao.update(sql, 4, "李英俊", "123456", new date(system.currenttimemillis()), new timestamp(system.currenttimemillis())); // 测试get string sql = "select id, username, pwd, regtime, lastlogintime from t_user where id=?"; user u = dao.get(user.class, sql, 4); system.out.println(u); } }
-
这里在网上找了一份reflectionutils
package com.litian.jdbc; /** * @author: li tian * @contact: litian_cup@163.com * @software: intellij idea * @file: reflectionutils.java * @time: 2020/3/26 18:57 * @desc: |jdbc 查询得到属性字段 反射机制返回到 javabean中相同类属性名的对象中 */ import java.lang.reflect.*; public class reflectionutils { /** * 使 filed 变为可访问 * * @param field */ public static void makeaccessible(field field) { if (!modifier.ispublic(field.getmodifiers())) { field.setaccessible(true); } } /** * 直接设置对象的属性,忽略 private/protected 修饰符, 也不经过 setter * * @param object * @param fieldname 属性名称 * @param value */ public static void setfieldvalue(object object, string fieldname, object value) { field field = getdeclaredfield(object, fieldname); if (field == null) throw new illegalargumentexception("could not find field [" + fieldname + "] on target [" + object + "]"); // 让 private 元素变得可以访问,field.setaccessible(); makeaccessible(field); try { field.set(object, value); } catch (illegalargumentexception | illegalaccessexception e) { // todo auto-generated catch block e.printstacktrace(); } } /** * 循环向上转型, 获取对象的 declaredfield * * @param object * @param filedname * @return */ public static field getdeclaredfield(object object, string filedname) { // 一步步的循环得到 获取声明对象的祖宗类 for (class<?> superclass = object.getclass(); superclass != object.class; superclass = superclass.getsuperclass()) { try { return superclass.getdeclaredfield(filedname); } catch (nosuchfieldexception | securityexception e) { // todo auto-generated catch block e.printstacktrace(); } } return null; } /** * 直接读取对象的属性值, 忽略 private/protected 修饰符, 也不经过 getter * * @param object * @param fieldname * @return */ public static object getfieldvalue(object object, string fieldname) { field field = getdeclaredfield(object, fieldname); if (field == null) throw new illegalargumentexception("could not find field [" + fieldname + "] on target [" + object + "]"); makeaccessible(field); object result = null; try { result = field.get(object); } catch (illegalargumentexception | illegalaccessexception e) { // todo auto-generated catch block e.printstacktrace(); } return result; } /** * 循环向上转型, 获取对象的 declaredmethod * * @param object * @param methodname * @param parametertypes: 指定特定成员方法有重载可能性,必须指定特定的类型变量 * @return */ public static method getdeclaredmethod(object object, string methodname, class<?>[] parametertypes) { for (class<?> superclass = object.getclass(); superclass != object.class; superclass = superclass.getsuperclass()) { try { //superclass.getmethod(methodname, parametertypes); return superclass.getdeclaredmethod(methodname, parametertypes); } catch (nosuchmethodexception e) { //method 不在当前类定义, 继续向上转型 } //.. } return null; } /** * 直接调用对象方法, 而忽略修饰符(private, protected) * * @param object * @param methodname * @param parametertypes * @param parameters * @return * @throws invocationtargetexception * @throws illegalargumentexception */ public static object invokemethod(object object, string methodname, class<?>[] parametertypes, object[] parameters) throws invocationtargetexception { method method = getdeclaredmethod(object, methodname, parametertypes); if (method == null) throw new illegalargumentexception("could not find method [" + methodname + "] on target [" + object + "]"); method.setaccessible(true); // 使用 method.invoke()方法进行运行 try { method.invoke(object, parameters); } catch (illegalaccessexception | illegalargumentexception e) { // todo auto-generated catch block e.printstacktrace(); } return method; } /** * 通过反射, 获得定义 class 时声明的父类的泛型参数的类型 * 如: public employeedao extends basedao<employee, string> * * @param clazz * @return */ public static class getsuperclassgenrictype(class clazz, int index) { type gentype = clazz.getgenericsuperclass(); // 判定s是否是parametertype相对应的 if (!(gentype instanceof parameterizedtype)) return object.class; // 强制转换 获取超类泛型参数实际类型,返回gentype 是类的接口,基本类型或者void type[] params = ((parameterizedtype) gentype).getactualtypearguments(); if (index >= params.length || index < 0) return object.class; if (!(params[index] instanceof class)) return object.class; return (class) params[index]; } /** * 通过反射,获得class定义中声明的父类的泛型参数的类型. * eg. * public userdao extends hibernatedao<user> * * @param clazz the class to introspect * @return the first generic declaration, or object.class if cannot be determined */ @suppresswarnings("unchecked") public static <t> class<t> getsuperclassgenrictype(final class clazz) { return getsuperclassgenrictype(clazz, 0); } }
-
-
java类属性
-
在javaee中,java类的属性通过getter,setter来定义:get(set)方法:去除get(或set)后,首字母小写即为该类的属性。
-
而之前的属性,即成员变量称之为字段。
-
操作java类的属性有一个工具包:beanutils(需要结合logging来用)
- beanutils.setproperty()
- beanutils.getproperty()
-
一般情况下,字段名和属性名都一致
-
通过该工具包可以将之前的reflectionutil替换为:
beanutils.setproperty(entity, propertyname, value);
-
beanutils测试代码
package com.litian.jdbc; import org.apache.commons.beanutils.beanutils; import java.lang.reflect.invocationtargetexception; /** * @author: li tian * @contact: litian_cup@163.com * @software: intellij idea * @file: beanutilstest.java * @time: 2020/3/27 15:37 * @desc: |测试工具包beanutils */ public class beanutilstest { public static void main(string[] args) throws invocationtargetexception, illegalaccessexception, nosuchmethodexception { // 测试赋值操作 object obj = new user(); system.out.println(obj); beanutils.setproperty(obj, "username", "二哈"); system.out.println(obj); // 测试获取操作 object val = beanutils.getproperty(obj, "username"); system.out.println(val); } }
-
-
dao的补充和重构
-
dao重构后的代码
package com.litian.jdbc; import org.apache.commons.beanutils.beanutils; import java.sql.*; import java.util.arraylist; import java.util.hashmap; import java.util.list; import java.util.map; /** * @author: li tian * @contact: litian_cup@163.com * @software: intellij idea * @file: dao.java * @time: 2020/3/26 18:37 * @desc: | */ public class dao { // insert, update, delete 操作都可以包含在其中 void update(string sql, object... args) { connection conn = null; preparedstatement ps = null; try { conn = jdbctools.getconnection(); ps = conn.preparestatement(sql); for (int i = 0; i < args.length; i++) { ps.setobject(i + 1, args[i]); } ps.executeupdate(); } catch (exception e) { e.printstacktrace(); } finally { jdbctools.release(null, ps, conn); } } // 查询一条记录,返回对应的对象 <t> t get(class<t> clazz, string sql, object... args) { list<t> result = getforlist(clazz, sql, args); if (result.size() > 0) { return result.get(0); } return null; /* 根据下面的方法进行了改写 t entity = null; connection conn = null; preparedstatement ps = null; resultset rs = null; try { // 1. 获取connection conn = jdbctools.getconnection(); // 2. 获取preparedstatement ps = conn.preparestatement(sql); // 3. 填充占位符 for (int i = 0; i < args.length; i++) { ps.setobject(i + 1, args[i]); } // 4. 进行查询,得到resultset rs = ps.executequery(); // 5. 若resultset中有记录,准备一个map<string, object>: 键:存放列的别名;值:存放列的值 if (rs.next()) { map<string, object> values = new hashmap<>(); // 6. 得到resultsetmetadata对象 resultsetmetadata rsmd = rs.getmetadata(); // 7. 处理resultset,把指针向下移动一个单位 // 8. 由resultsetmetadata对象得到结果集中有多少列 int columncount = rsmd.getcolumncount(); // 9. 由resultsetmetadata得到每一列的别名,由resultset得到具体每一列的值 for (int i = 0; i < columncount; i++) { string columnlabel = rsmd.getcolumnlabel(i + 1); object columnvalue = rs.getobject(columnlabel); // 10. 填充map对象 values.put(columnlabel, columnvalue); } // 11. 用反射创建class对象的对象 entity = clazz.newinstance(); // 12. 遍历map对象,用反射填充对象的属性值:属性名为map中的key,属性值为map中的value for (map.entry<string, object> entry : values.entryset()) { string propertyname = entry.getkey(); object value = entry.getvalue(); beanutils.setproperty(entity, propertyname, value); } } } catch (exception e) { e.printstacktrace(); } finally { jdbctools.release(rs, ps, conn); } return entity; */ } // 查询多条记录,返回对应的对象的集合 <t> list<t> getforlist(class<t> clazz, string sql, object... args) { list<t> list = new arraylist<>(); connection conn = null; preparedstatement ps = null; resultset rs = null; try { // 1. 得到结果集 conn = jdbctools.getconnection(); ps = conn.preparestatement(sql); for (int i = 0; i < args.length; i++) { ps.setobject(i + 1, args[i]); } rs = ps.executequery(); // 2. 处理结果集,得到一个map对应的list,其中一个map对象就是一条记录,map的key为rs中列的别名,value为列的值 list<map<string, object>> values = handleresultsettomaplist(rs); // 3. 把map的list转为clazz对应的list,其中map的key即clazz对应的对象的propertyname,value即为clazz对应对象的propertyvalue list = transfermaplisttobeanlist(clazz, values); } catch (exception e) { e.printstacktrace(); } finally { jdbctools.release(rs, ps, conn); } return list; } public <t> list<t> transfermaplisttobeanlist(class<t> clazz, list<map<string, object>> values) throws exception { // 12. 判断list是否为空集合,若不为空,则遍历list,得到一个个map对象,再把一个map对象转为一个class参数对应的object对象。 list<t> result = new arraylist<t>(); t bean = null; if (values.size() > 0) { for (map<string, object> m : values) { bean = clazz.newinstance(); for (map.entry<string, object> entry : m.entryset()) { string propertyname = entry.getkey(); object value = entry.getvalue(); beanutils.setproperty(bean, propertyname, value); } result.add(bean); } } return result; } /** * 处理结果集,得到map的一个list,其中一个map对象对应一条记录 * * @param rs * @return * @throws sqlexception */ private list<map<string, object>> handleresultsettomaplist(resultset rs) throws sqlexception { // 5. 若resultset中有记录,准备一个list<map<string, object>> // 键:存放列的别名;值:存放列的值,其中一个map对象对应着一条记录 list<map<string, object>> values = new arraylist<>(); list<string> columnlabels = getcolumnlabels(rs); // 7. 处理resultset,使用while循环 map<string, object> maps = null; while (rs.next()) { maps = new hashmap<>(); for (string columnlabel : columnlabels) { object value = rs.getobject(columnlabel); maps.put(columnlabel, value); } // 11. 把一条记录的填充好的map对象放入5准备的list中 values.add(maps); } return values; } /** * 获取结果集columnlabel对应的结果集 */ private list<string> getcolumnlabels(resultset rs) throws sqlexception { list<string> labels = new arraylist<>(); resultsetmetadata rsmd = rs.getmetadata(); for (int i = 0; i < rsmd.getcolumncount(); i++) { string columnlabel = rsmd.getcolumnlabel(i + 1); labels.add(columnlabel); } return labels; } // 返回某条记录的某一个字段的值或一个统计的值(一共有多少记录等。) <e> e getforvalue(string sql, object... args) { connection conn = null; preparedstatement ps = null; resultset rs = null; try { // 1. 得到结果集 conn = jdbctools.getconnection(); ps = conn.preparestatement(sql); for (int i = 0; i < args.length; i++) { ps.setobject(i + 1, args[i]); } rs = ps.executequery(); // 2. 取得结果 if (rs.next()){ return (e) rs.getobject(1); } } catch (exception e) { e.printstacktrace(); } finally { jdbctools.release(rs, ps, conn); } return null; } }
-
测试
package com.litian.jdbc; import java.sql.date; import java.sql.timestamp; import java.util.list; /** * @author: li tian * @contact: litian_cup@163.com * @software: intellij idea * @file: daotest.java * @time: 2020/3/26 18:59 * @desc: | */ public class daotest { public static void main(string[] args) { dao dao = new dao(); // 测试update // string sql = "insert into t_user(id, username, pwd, regtime, lastlogintime) values(?,?,?,?,?)"; // dao.update(sql, 4, "李英俊", "123456", new date(system.currenttimemillis()), new timestamp(system.currenttimemillis())); // 测试get // string sql = "select id, username, pwd, regtime, lastlogintime from t_user where id=?"; // user u = dao.get(user.class, sql, 4); // system.out.println(u); // 测试getforlist // string sql2 = "select id, username, pwd, regtime, lastlogintime from t_user where id<?"; // list<user> us = dao.getforlist(user.class, sql2, 10); // system.out.println(us); // 测试getforvalue string sql3 = "select username from t_user where id = ?"; string cc = dao.getforvalue(sql3, 1); system.out.println(cc); } }
-
8. jdbc的元数据
-
可以从connection对象中获得有关数据库管理系统的各种信息
-
获取这些信息的方法都是在databasemetadata类中。
-
databasemetadata:描述数据库的元数据对象
-
resultsetmetadata:描述结果集的元数据对象
package com.litian.jdbc; import java.sql.*; /** * @author: li tian * @contact: litian_cup@163.com * @software: intellij idea * @file: metadatatest.java * @time: 2020/3/29 15:12 * @desc: | */ public class metadatatest { public static void main(string[] args){ testdatabasemetadata(); testresultsetmetadata(); } /** * resultsetmetadata:描述结果集的元数据对象 * 可以得到结果集中的基本信息:结果集中有哪些列,列名、列的别名等。 * 结合反射可以写出通用的查询方法 */ public static void testresultsetmetadata(){ connection conn = null; preparedstatement ps = null; resultset rs = null; try { conn = jdbctools.getconnection(); string sql = "select id, username 姓名, pwd from t_user"; ps = conn.preparestatement(sql); rs = ps.executequery(); // 1. 得到resultsetmetadata对象 resultsetmetadata rsmd = rs.getmetadata(); // 2. 得到列的个数 int columncount = rsmd.getcolumncount(); system.out.println(columncount); for (int i = 0; i < columncount; i++) { // 3. 得到列名 string columnname = rsmd.getcolumnname(i + 1); // 4. 得到列的别名 string columnlabel = rsmd.getcolumnlabel(i + 1); system.out.println(columnname + "-->" + columnlabel); } } catch (exception e) { e.printstacktrace(); } finally { jdbctools.release(rs, ps, conn); } } /** * databasemetadata是描述数据库的元数据对象 * 可以由connection得到 */ public static void testdatabasemetadata(){ connection conn = null; resultset rs = null; try { conn = jdbctools.getconnection(); databasemetadata data = conn.getmetadata(); // 可以得到数据库本身的一些基本信息 // 1. 得到数据库的版本号 int version = data.getdatabasemajorversion(); system.out.println(version); // 2. 得到连接数据库的用户名 string user = data.getusername(); system.out.println(user); // 3. 得到mysql中有哪些数据库 rs = data.getcatalogs(); while (rs.next()) { system.out.println(rs.getstring(1)); } } catch (exception e) { e.printstacktrace(); } finally { jdbctools.release(rs, null, conn); } } }
9. jdbc获取插入记录的主键值
-
取得数据库自动生成的主键值
package com.litian.jdbc; import javax.swing.plaf.nimbus.state; import java.sql.*; /** * @author: li tian * @contact: litian_cup@163.com * @software: intellij idea * @file: jdbctest3.java * @time: 2020/3/29 15:27 * @desc: |取得数据库自动生成的主键值 */ public class jdbctest3 { public static void main(string[] args){ connection conn = null; preparedstatement ps = null; try { conn = jdbctools.getconnection(); string sql = "insert into t_user(username, pwd) values(?,?)"; // ps = conn.preparestatement(sql); // 使用重载的ps方法来生成ps对象 ps = conn.preparestatement(sql, statement.return_generated_keys); ps.setstring(1, "pika"); ps.setstring(2, "123456"); ps.executeupdate(); // 通过getgeneratedkeys方法获取包含了新生成的主键的resultset对象 // 在resultset中只有一列generated_keys,用于存放新生成的主键值 resultset rs = ps.getgeneratedkeys(); if(rs.next()){ system.out.println(rs.getint(1)); } resultsetmetadata rsmd = rs.getmetadata(); for (int i = 0; i < rsmd.getcolumncount(); i++) { system.out.println(rsmd.getcolumnname(i + 1)); } } catch (exception e) { e.printstacktrace(); } finally { jdbctools.release(null, ps, conn); } } }
10. 处理blob
-
lob,即large objects(大对象),是用来存储大量的二进制和文本数据的一种数据类型
-
lob分为两种内省:内部lob和外部lob
- 内部lob将数据以字节流的形式存储在数据库的内部。因而内部lob的许多操作都可以参与事务,也可以像处理普通数据一样对其进行备份和恢复操作。
- oracle支持三种类型的内部lob:
- blob:二进制数据
- clob:单字节字符数据
- nclob:多字节字符数据
- clob和nclob类型适用于存储超长的文本数据,blob字段适用于存储大量的二进制数据,如图像、视频、音频、文件等。
-
mysql四种blob类型(除了在存储的最大信息量上不同之外,他们是等同的)
- tinyblob:最大255字节
- blob:最大65k
- mediumblob:最大16m
- longblob:最大4g
-
如果存储的文件过大,数据库的性能会下降。
-
插入blob数据
package com.litian.jdbc; import java.io.fileinputstream; import java.io.inputstream; import java.sql.*; /** * @author: li tian * @contact: litian_cup@163.com * @software: intellij idea * @file: insertblob.java * @time: 2020/3/31 14:40 * @desc: |插入blob类型的数据必须使用preparedstatement,因为blob类型的数据是无法使用字符串拼写的 * 调用setblob方法插入blob */ public class insertblob { public static void main(string[] args){ connection conn = null; preparedstatement ps = null; try { conn = jdbctools.getconnection(); string sql = "insert into t_user(username, pwd, pic) values(?,?,?)"; ps = conn.preparestatement(sql); ps.setstring(1, "picture"); ps.setstring(2, "123456"); inputstream is = new fileinputstream("c:\\users\\administrator\\desktop\\参考投稿进程.jpg"); ps.setblob(3, is); ps.executeupdate(); } catch (exception e) { e.printstacktrace(); } finally { jdbctools.release(null, ps, conn); } } }
-
读取blob数据
package com.litian.jdbc; import java.io.fileoutputstream; import java.io.inputstream; import java.io.outputstream; import java.sql.blob; import java.sql.connection; import java.sql.preparedstatement; import java.sql.resultset; /** * @author: li tian * @contact: litian_cup@163.com * @software: intellij idea * @file: readblob.java * @time: 2020/3/31 14:47 * @desc: |读取blob数据 * 1. 使用getblob方法读取到blob对象 * 2. 调用blob的getbinarystream()方法得到输入流。再使用io操作即可。 */ public class readblob { public static void main(string[] args) { connection conn = null; preparedstatement ps = null; resultset rs = null; try { conn = jdbctools.getconnection(); string sql = "select id, username 姓名, pwd, pic from t_user where id=21028"; ps = conn.preparestatement(sql); rs = ps.executequery(); if (rs.next()) { int id = rs.getint(1); string name = rs.getstring(2); string pwd = rs.getstring(3); system.out.println(id + "->" + name + "->" + pwd); blob pic = rs.getblob(4); inputstream in = pic.getbinarystream(); outputstream out = new fileoutputstream("info.jpg"); byte[] buffer = new byte[1024]; int len = 0; while((len=in.read(buffer)) != -1){ out.write(buffer, 0, len); } out.close(); in.close(); } } catch (exception e) { e.printstacktrace(); } finally { jdbctools.release(rs, ps, conn); } } }
11. 处理事务
-
所谓事务是指:一组逻辑操作单元,使数据从一种状态变换到另一种状态。
-
事务的acid属性
- 原子性,atomicity:事务是一个不可分割的工作单位,事务中的操作要么都发生,要么都不发生。
- 一致性,consistency:事务必须使数据库从一个一致性状态变换到另一个一致性状态。
- 隔离性,isolation:一个事务的执行不能被其他事务干扰,即一个事务内部的操作及使用的数据对并发的其他事务是隔离的,并发执行的各个事务之间不能互相干扰。
- 持久性,durability:持久性是指一个事务一旦被提交,它对数据库中数据的改变就是永久性的,接下来的其他操作和数据库故障不应该对其有任何影响。
-
为了让多个sql语句作为一个事务执行:
- 调用connection对象的setautocommit(false);以取消自动提交事务
- 在所有sql语句都执行后,调用commit();方法提交事务
- 在出现异常时,调用rollback()方法回滚事务
- 若此时connection没有被关闭,则需要恢复其自动提交状态
-
关于事务:
- 如果多个操作,每个操作使用的是自己的单独的连接,则无法保证事务。
- 具体步骤:
- 事务操作开始前,开始事务:取消connection默认的提交行为;
- 如果事务的操作都成功,则提交事务;
- 回滚事务:若出现异常,则在catch块中回滚事务。
-
代码:
-
新增dao一个方法,这个方法把connection提出来作为传参
// 外部来处理connection void update(connection conn, string sql, object... args) { preparedstatement ps = null; try { ps = conn.preparestatement(sql); for (int i = 0; i < args.length; i++) { ps.setobject(i + 1, args[i]); } ps.executeupdate(); } catch (exception e) { e.printstacktrace(); } finally { jdbctools.release(null, ps, null); } }
-
测试事务
package com.litian.jdbc; import java.sql.connection; import java.sql.sqlexception; /** * @author: li tian * @contact: litian_cup@163.com * @software: intellij idea * @file: transactiontest.java * @time: 2020/4/1 14:06 * @desc: | */ public class transactiontest { public static void main(string[] args) { dao dao = new dao(); connection conn = null; try { conn = jdbctools.getconnection(); // 开始事务:取消默认提交 conn.setautocommit(false); string sql = "update t_user2 set money = money - 500 where id = 21023"; dao.update(conn, sql); // 插入错误 int i = 10 / 0; system.out.println(i); sql = "update t_user2 set money = money + 500 where id = 21024"; dao.update(conn, sql); // 提交事务 conn.commit(); } catch (exception e) { e.printstacktrace(); try { conn.rollback(); } catch (sqlexception ex) { ex.printstacktrace(); } } finally { jdbctools.release(null, null, conn); } } }
-
12. 事务的隔离级别
- 脏读:读取了更新还未提交的数据,但进行了回滚,所以读取的内容是临时的且无效的。
- 不可重复读:某个事务多次读取一个字段,值却不同,这是因为中间别的事务更新的该字段。
- 幻读:某个事务从一个表中读取了信息,然后另一个事务更新了该表,使得之前事务再读的时候,表的行数改变了。
- 数据库提供了4种事务隔离级别:
- read uncommited:读未提交数据,3种问题都会出现
- read commited:读已提交数据,避免脏读
- repeatable read:可重复度,避免脏读和不可重复读
- serializable:串行化,避免3种问题
- oracle支持2种事务隔离级别:read commited(默认)和serializable
- mysql支持4种事务隔离级别:默认repeatable read
- 在jdbc程序中可以通过connection的settransactionisolation来设置事务的隔离级别
13. 批量处理jdbc语句提高处理效率
-
当需要成批插入或者更新记录时。可以采用java的批量更新机制,这一机制允许多条语句一次性提交给数据库批量处理。通常情况下比单独提交处理更有效率。
-
jdbc的批量处理语句包括下面两个方法:
- addbatch(string):添加需要批量处理的sql语句或是参数;
- executebatch():执行批量处理语句
-
通常我们会遇到两种批量执行sql语句的情况:
- 多条sql语句的批量处理
- 一个sql语句的批量传参
-
代码(3种批量处理方式对比):
package com.litian.jdbc; import java.sql.connection; import java.sql.preparedstatement; import java.sql.statement; /** * @author: li tian * @contact: litian_cup@163.com * @software: intellij idea * @file: jdbctest4.java * @time: 2020/4/4 14:18 * @desc: |批量处理事务 */ public class jdbctest4 { public static void main(string[] args){ // teststatement(); testpreparestatement(); } /** * 向数据库的数据表中插入10w条记录 * 测试如何插入,用时最短 * 1. 使用statement:15038 */ public static void teststatement() { connection conn = null; statement st = null; string sql = null; try { conn = jdbctools.getconnection(); jdbctools.begintx(conn); st = conn.createstatement(); long begin = system.currenttimemillis(); for (int i = 0; i < 100000; i++) { sql = string.format("insert into t_user2(username, pwd) values(name_%d, 6666)", i); st.executeupdate(sql); } long end = system.currenttimemillis(); system.out.println(end - begin); jdbctools.commit(conn); } catch (exception e) { e.printstacktrace(); jdbctools.rollback(conn); } finally { jdbctools.release(null, st, conn); } } /** * 向数据库的数据表中插入10w条记录 * 测试如何插入,用时最短 * 2. 使用preparedstatement:13131 * 3. 在2的基础上使用批量处理:24596?这就很尴尬了 */ public static void testpreparestatement() { connection conn = null; preparedstatement st = null; string sql = null; try { conn = jdbctools.getconnection(); jdbctools.begintx(conn); sql = "insert into t_user2(username, pwd) values(?,?)"; st = conn.preparestatement(sql); long begin = system.currenttimemillis(); for (int i = 0; i < 100000; i++) { st.setstring(1, "name_" + i); st.setstring(2, "6666"); st.executeupdate(); // “积攒”sql语句 st.addbatch();; // 当积攒到一定程度,就统一地执行一次,并且清空先前积攒的sql if((i + 1) % 300 == 0){ st.executebatch(); st.clearbatch(); } } // 若总条数不是批量数值的整数倍,则还需要额外再执行一次 if(100000 % 300 != 0){ st.executebatch(); st.clearbatch(); } long end = system.currenttimemillis(); system.out.println(end - begin); jdbctools.commit(conn); } catch (exception e) { e.printstacktrace(); jdbctools.rollback(conn); } finally { jdbctools.release(null, st, conn); } } }
14. 数据库连接池
-
在使用开发基于数据库的web程序时,传统的模式基本是按一下步骤:
- 在主程序(如servlet、bean)中建立数据库连接
- 进行sql操作
- 断开数据库连接
-
这种模式开发存在各种各样的问题,最重要的是:数据库的连接资源并没有得到很好的重复利用。
-
为解决传统开发中的数据库连接问题,可以采用数据库连接池技术,其基本思想就是为数据库连接建立一个“缓冲池”。预先在缓冲池中放入一定数量的连接,当需要建立数据库连接时,只需要从“缓冲池”中取出一个,使用完毕之后再放回去。
-
数据库连接池:负责分配、管理和释放数据库连接,它允许应用程序重复使用一个现有的数据库连接,而不是重新建立一个。
-
数据库连接池在初始化时,将创建一定数量的数据库连接放到连接池中,这些数据库连接的数量是由最小数据库连接数来设定的。无论这些数据库连接是否被使用,连接池都将一直保持至少拥有这么多的连接数量。连接池的最大数据库连接数量限定了这个连接池能占有的最大连接数,当应用程序向连接池请求的连接数超过最大连接数量时,这些请求将被加入到等待队列中。
-
数据库连接池技术的优点
- 资源重用
- 更快的系统反应速度
- 新的资源分配手段
- 统一的连接管理,避免数据库连接泄露
-
两种开源的数据库连接池
- jdbc的数据库连接池使用javax.sql.datasource来表示,datasource只是一个接口,该接口通常由服务器(weblogic,websphere,tomcat)提供实现,也有一些开源组织提供实现
- dbcp
- c3p0
- datasource通常被称为数据源,它包含连接池和连接池管理两个部分,习惯上也经常把datasource称为连接池
- jdbc的数据库连接池使用javax.sql.datasource来表示,datasource只是一个接口,该接口通常由服务器(weblogic,websphere,tomcat)提供实现,也有一些开源组织提供实现
-
dbcp测试,tomcat内置
- 加入jar包(2个包)dbcp和pool
- 创建数据库连接池
-
dbcp工厂测试
- 加载dbcp的properties配置文件:配置文件中的键值对,键需要来自basicdatasource的属性
- 调用basicdatasourcefactory的createdatasource方法创建datasource实例
- 从datasource实例中获取数据库连接
-
dbcp.properties
username=root password=123456 driverclassname=com.mysql.cj.jdbc.driver url=jdbc:mysql://localhost:3306/testjdbc?servertimezone=gmt%2b8 initialsize=10 maxtotal=50 minidle=5 maxwaitmillis=5000
-
dbcp测试
package com.litian.jdbc; import org.apache.commons.dbcp2.basicdatasource; import org.apache.commons.dbcp2.basicdatasourcefactory; import javax.sql.datasource; import java.io.inputstream; import java.sql.connection; import java.sql.sqlexception; import java.util.properties; /** * @author: li tian * @contact: litian_cup@163.com * @software: intellij idea * @file: testdbcp.java * @time: 2020/4/6 13:28 * @desc: |使用dbcp数据库连接池 */ public class testdbcp { public static void main(string[] args) throws exception { testdbcpwithdatasourcefactory(); } /** * 利用dbcp工厂建立连接池 */ public static void testdbcpwithdatasourcefactory() throws exception { properties p = new properties(); inputstream is = testdbcp.class.getclassloader().getresourceasstream("dbcp.properties"); p.load(is); datasource ds = basicdatasourcefactory.createdatasource(p); system.out.println(ds.getconnection()); basicdatasource bs = (basicdatasource) ds; system.out.println(bs.getmaxwaitmillis()); } public static void testdbcp(){ // 1. 创建dbcp数据源实例 basicdatasource ds = null; ds = new basicdatasource(); // 2. 为数据源实例指定必须的属性 ds.setusername("root"); ds.setpassword("123456"); ds.seturl("jdbc:mysql://localhost:3306/testjdbc?servertimezone=gmt%2b8"); ds.setdriverclassname("com.mysql.cj.jdbc.driver"); // 3. 指定数据源的一些可选属性 // 3.1 指定数据库连接池初始化连接数的个数 ds.setinitialsize(10); // 3.2 指定最大的连接数,现在的代码中已经没有setmaxactive这个方法名了 // 同一时刻可以同时向数据库申请的连接数 ds.setmaxtotal(50); // 3.3 指定小连接数 // 在数据库中连接池中最少有多少个空闲连接数 ds.setminidle(5); // 3.4 等待连接池分配连接,最长的等待时间.单位为毫秒,超出该时间抛异常。 ds.setmaxwaitmillis(1000 * 5); try { // 4. 从数据源中获取数据库连接 connection conn = ds.getconnection(); system.out.println(conn); } catch (sqlexception e) { e.printstacktrace(); } } }
-
c3p0
- 加入jar包(2个包)c3p0和mchange-commons-java
- 创建数据库连接池
-
c3p0工厂测试,hibernate官方推荐,
- 在src创建一个c3p0-config.xml文件
- 创建combopooleddatasource实例
- 从datasource实例中获取数据库连接
-
c3p0-config.xml
<?xml version="1.0" encoding="utf-8"?> <c3p0-config> <!-- 这是默认配置信息 --> <default-config> <!-- 连接四大参数配置 --> <property name="jdbcurl">jdbc:mysql://localhost:3306/jdbctest</property> <property name="driverclass">com.mysql.jdbc.driver</property> <property name="user">root</property> <property name="password">root</property> <!-- 池参数配置 --> <property name="acquireincrement">3</property> <property name="initialpoolsize">10</property> <property name="minpoolsize">2</property> <property name="maxpoolsize">10</property> </default-config> <!-- 专门为oracle提供的配置信息 --> <named-config name="oracle-config"> <property name="jdbcurl">jdbc:mysql://localhost:3306/mydb1</property> <property name="driverclass">com.mysql.jdbc.driver</property> <property name="user">root</property> <property name="password">123</property> <property name="acquireincrement">3</property> <property name="initialpoolsize">10</property> <property name="minpoolsize">2</property> <property name="maxpoolsize">10</property> </named-config> <!-- 专门为mysql提供的配置信息 --> <named-config name="mysql-config"> <property name="jdbcurl">jdbc:mysql://localhost:3306/testjdbc?servertimezone=gmt%2b8</property> <property name="driverclass">com.mysql.cj.jdbc.driver</property> <property name="user">root</property> <property name="password">123456</property> <!-- 若数据库中连接数不足时,一次向数据库服务器申请多少个连接 --> <property name="acquireincrement">5</property> <!-- 初始化数据库连接池时连接的数量 --> <property name="initialpoolsize">5</property> <!-- 数据库连接池中最小的数据库连接数 --> <property name="minpoolsize">5</property> <!-- 数据库连接池中最大的数据库连接数 --> <property name="maxpoolsize">10</property> <!-- c3p0数据库连接池可以维护的statement的个数 --> <property name="maxstatements">20</property> <!-- 每个连接同时可以使用的statement对象的个数 --> <property name="maxstatementsperconnection">5</property> </named-config> </c3p0-config>
-
c3p0测试
package com.litian.jdbc; import com.mchange.v2.c3p0.combopooleddatasource; import javax.sql.datasource; import java.sql.connection; /** * @author: li tian * @contact: litian_cup@163.com * @software: intellij idea * @file: testc3p0.java * @time: 2020/4/6 14:40 * @desc: |使用c3p0数据库连接池 */ public class testc3p0 { public static void main(string[] args) throws exception { // test2(); test3(); } public static void test3() throws exception{ connection conn = jdbctools.getdsconnection(); system.out.println(conn); } public static void test2() throws exception{ datasource ds = new combopooleddatasource("mysql-config"); system.out.println(ds.getconnection()); combopooleddatasource cpds = (combopooleddatasource) ds; system.out.println(((combopooleddatasource) ds).getmaxstatements()); } public static void test1() throws exception{ combopooleddatasource cpds = new combopooleddatasource(); cpds.setdriverclass("com.mysql.cj.jdbc.driver"); cpds.setjdbcurl("jdbc:mysql://localhost:3306/testjdbc?servertimezone=gmt%2b8"); cpds.setuser("root"); cpds.setpassword("123456"); system.out.println(cpds.getconnection()); } }
-
修改jdbctools工具类,加入数据库连接池功能
private static datasource ds = null; // 数据库连接池应只被初始化一次。 static { ds = new combopooleddatasource("mysql-config"); } public static connection getdsconnection() throws exception { return ds.getconnection(); }
15. dbutils
-
dbutils是apache组织提供的一个开源的jdbc工具类库,能极大简化jdbc编码的工作量
-
api介绍
- queryrunner
- resultsethandler
- 工具类dbutils
-
用dbutils进行增删改查操作:update
-
查的操作要使用queryrunner
- 自定义返回值的操作:myresultsethandler
- 返回一个类的操作(单条记录):beanhandler
- 返回一个类的操作(多条记录):beanlisthandler
- 返回一个map的操作(单条记录):maphandler
- 返回多个map的操作(多条记录):maplisthandler
- 返回一个值的操作(单行单列):scalarhandler
-
代码
package com.litian.jdbc; import org.apache.commons.dbutils.queryrunner; import org.apache.commons.dbutils.resultsethandler; import org.apache.commons.dbutils.handlers.*; import java.sql.*; import java.util.arraylist; import java.util.list; import java.util.map; /** * @author: li tian * @contact: litian_cup@163.com * @software: intellij idea * @file: dbutilstest.java * @time: 2020/4/7 12:09 * @desc: |测试dbutils工具类 */ public class dbutilstest { public static void main(string[] args) { // testupdate(); // testquery(); // testbeanhanlder(); // testbeanlisthanlder(); // testmaphanlder(); // testmaplisthanlder(); testscalarhanlder(); } /** * scalarhandler:把结果集转为一个数值(可以是任意基本数据类型和字符串) * 默认返回第1列第1行的值,所以多行多列也就返回第一个值 */ public static void testscalarhanlder() { // 1. 创建queryrunner的实现类 queryrunner qr = new queryrunner(); connection conn = null; try { conn = jdbctools.getdsconnection(); string sql = "select username from t_user where id > ? && id < ?"; object result = qr.query(conn, sql, new scalarhandler(), 2, 5); system.out.println(result); } catch (exception e) { e.printstacktrace(); } finally { jdbctools.release(null, null, conn); } } /** * maplisthandler:将结果集转为一个map的list * map对应查询的一条记录:键:sql查询的列名(不是列的别名),值:列的值。 * 而maplisthandler:返回的是多条记录对应的map的集合。 */ public static void testmaplisthanlder() { // 1. 创建queryrunner的实现类 queryrunner qr = new queryrunner(); connection conn = null; try { conn = jdbctools.getdsconnection(); string sql = "select id, username, pwd from t_user where id > ? && id < ?"; list<map<string, object>> u = qr.query(conn, sql, new maplisthandler(), 2, 5); system.out.println(u); } catch (exception e) { e.printstacktrace(); } finally { jdbctools.release(null, null, conn); } } /** * maphandler:返回sql对应的第一条记录对应的map对象 * 键:sql查询的列名(不是列的别名),值:列的值。 */ public static void testmaphanlder() { // 1. 创建queryrunner的实现类 queryrunner qr = new queryrunner(); connection conn = null; try { conn = jdbctools.getdsconnection(); string sql = "select id, username, pwd from t_user where id > ? && id < ?"; map<string, object> u = qr.query(conn, sql, new maphandler(), 2, 5); system.out.println(u); } catch (exception e) { e.printstacktrace(); } finally { jdbctools.release(null, null, conn); } } /** * beanlisthandler:把结果集转为一个list,该list不为null,但可能为空集合(size()方法返回0) * 若sql语句的确能够查询到记录,list中存放创建beanlisthandler传入的class对象对应的对象。 */ public static void testbeanlisthanlder() { // 1. 创建queryrunner的实现类 queryrunner qr = new queryrunner(); connection conn = null; try { conn = jdbctools.getdsconnection(); string sql = "select id, username, pwd from t_user where id > ? && id < ?"; list<user> u = (list<user>) qr.query(conn, sql, new beanlisthandler(user.class), 2, 5); system.out.println(u); } catch (exception e) { e.printstacktrace(); } finally { jdbctools.release(null, null, conn); } } /** * beanhandler:把结果集的第一条记录转为创建beanhandler对象时传入的class参数对应的对象。 */ public static void testbeanhanlder() { // 1. 创建queryrunner的实现类 queryrunner qr = new queryrunner(); connection conn = null; try { conn = jdbctools.getdsconnection(); string sql = "select id, username, pwd from t_user where id = ?"; user u = (user) qr.query(conn, sql, new beanhandler(user.class), 3); system.out.println(u); } catch (exception e) { e.printstacktrace(); } finally { jdbctools.release(null, null, conn); } } /** * queryrunner的query方法的返回值屈居于其resultsethandler参数的handle方法的返回值 */ public static void testquery() { // 1. 创建queryrunner的实现类 queryrunner qr = new queryrunner(); connection conn = null; try { conn = jdbctools.getdsconnection(); string sql = "select id, username, pwd from t_user"; object obj = qr.query(conn, sql, new myresultsethandler()); system.out.println(obj); } catch (exception e) { e.printstacktrace(); } finally { jdbctools.release(null, null, conn); } } /** * 测试queryrunner类的update方法 * 该方法可用于insert、update和delete */ public static void testupdate() { // 1. 创建queryrunner的实现类 queryrunner qr = new queryrunner(); // 2. 使用update方法 string sql = "delete from t_user where id in (?, ?)"; connection conn = null; try { conn = jdbctools.getdsconnection(); qr.update(conn, sql, 1, 2); } catch (exception e) { e.printstacktrace(); } finally { jdbctools.release(null, null, conn); } } // 静态内部类 static class myresultsethandler implements resultsethandler { @override public object handle(resultset resultset) throws sqlexception { // system.out.println("handle。。。"); // return "111"; list<user> us = new arraylist<>(); while (resultset.next()) { integer id = resultset.getint(1); string username = resultset.getstring(2); string pwd = resultset.getstring(3); user u = new user(id, username, pwd, new date(system.currenttimemillis()), new timestamp(system.currenttimemillis())); us.add(u); } return us; } } }
-
使用dbutils编写通用的dao(讲道理这波我是没看懂的,dbutils直接用不香吗)
-
代码实现
-
dao接口
package com.litian.jdbc; import java.sql.connection; import java.sql.sqlexception; import java.util.list; /** * @author: li tian * @contact: litian_cup@163.com * @software: intellij idea * @file: dbutilsdao.java * @time: 2020/4/8 10:56 * @desc: |访问数据的dao接口 * 里面定义好访问数据表的各种方法 * t 是dao处理的实体类的类型 */ public interface dbutilsdao<t> { /** * 批量处理的方法 * * @param conn * @param sql * @param args 填充占位符的object[] 类型的可变参数 */ void batch(connection conn, string sql, object[]... args); /** * 返回具体的一个值,例如总人数,平均工资,某一个人的email等。 * * @param conn * @param sql * @param args * @param <e> * @return */ <e> e getforvalue(connection conn, string sql, object... args); /** * 返回t的一个集合 * * @param conn * @param sql * @param args * @return */ list<t> getforlist(connection conn, string sql, object... args); /** * 返回一个t的对象 * * @param conn * @param sql * @param args * @return */ t get(connection conn, string sql, object... args) throws sqlexception; /** * insert update delete * * @param conn 数据库连接 * @param sql sql语句 * @param args 填充占位符的可变参数 */ void update(connection conn, string sql, object... args); }
-
dao接口的具体实现(以get方法为例)
package com.litian.jdbc; import org.apache.commons.dbutils.queryrunner; import org.apache.commons.dbutils.handlers.beanhandler; import java.sql.connection; import java.sql.sqlexception; import java.util.list; /** * @author: li tian * @contact: litian_cup@163.com * @software: intellij idea * @file: jdbcdaoimpl.java * @time: 2020/4/8 11:07 * @desc: |使用queryrunner提供其具体的实现 * <t>为子类需传入的泛型类型 */ public class jdbcdaoimpl<t> implements dbutilsdao { private queryrunner qr = null; private class<t> type; public jdbcdaoimpl(){ qr = new queryrunner(); type = reflectionutils.getsuperclassgenrictype(getclass()); } @override public void batch(connection conn, string sql, object[]... args) { } @override public list getforlist(connection conn, string sql, object... args) { return null; } @override public object get(connection conn, string sql, object... args) throws sqlexception { return qr.query(conn, sql, new beanhandler<>(type), args); } @override public void update(connection conn, string sql, object... args) { } @override public object getforvalue(connection conn, string sql, object... args) { return null; } }
-
一个继承上面实现的子类,虽然啥也没写,但是方便以后扩展
package com.litian.jdbc; /** * @author: li tian * @contact: litian_cup@163.com * @software: intellij idea * @file: userdao.java * @time: 2020/4/8 11:08 * @desc: | */ public class userdao extends jdbcdaoimpl<user> { }
-
使用上面这个子类,看看能否完成dao的功能
package com.litian.jdbc; import java.sql.connection; /** * @author: li tian * @contact: litian_cup@163.com * @software: intellij idea * @file: userdaotest.java * @time: 2020/4/8 11:10 * @desc: | */ public class userdaotest { userdao ud = new userdao(); public static void main(string[] args){ new userdaotest().testget(); } public void testget(){ connection conn = null; try { conn = jdbctools.getdsconnection(); string sql = "select id, username, pwd from t_user where id = ?"; user u = (user) ud.get(conn, sql, 3); system.out.println(u); } catch (exception e) { e.printstacktrace(); } finally { jdbctools.release(null, null, conn); } } }
-
16. 调用函数&存储过程
-
步骤
-
通过connection对象的preparecall()方法创建一个callablestatement对象的实例。在使用connection对象的preparedcall()方法时,需要传入一个string类型的字符串,该字符串用于指明如何调用存储过程。(注意:函数名不需要带<>,同理传参也不用[],不能理解的话看例子,不然会报错)
{?= call <procedure-name> [(<arg1>, <arg2>, ...)]} call <procedure-name> [(<arg1>, <arg2>, ...)]}
-
通过callablestatement对象的registeroutparameter()方法注册out参数
-
通过callablestatement对象的setxxx()方法设定in或in out参数
若想将参数默认值设为null,可以使用setnull()方法
-
通过callablestatement对象的execute()方法执行存储过程
-
如果所调用的是带返回参数的存储过程,还需要通过callablestatement对象的getxxx()方法获取其返回值
-
-
通过数据字典查看存储过程或函数的定义:
select text from user_source where lower(name) = 'add_sal_procedure;'
-
实验
-
我自己写了一个函数
create function sum_salary(name varchar(20), i int) returns varchar(20) begin declare result int default 0; declare r varchar(20) default 'aaa'; select count(*) into result from t_user where username=name and i = id; select if(result>0, '成功!', '失败!') into r; return r; end;
-
这个函数在idea中显示的是
create definer = root@localhost function sum_salary(name varchar(20), i int) returns varchar(20) begin declare result int default 0; declare r varchar(20) default 'aaa'; select count(*) into result from t_user where username=name and i = id; select if(result>0, '成功!', '失败!') into r; return r; end;
-
函数的功能是输入用户名和id,查看是否有这个人,测试如下
package com.litian.jdbc; import java.sql.callablestatement; import java.sql.connection; import java.sql.types; /** * @author: li tian * @contact: litian_cup@163.com * @software: intellij idea * @file: testcalllablestatement.java * @time: 2020/4/8 12:14 * @desc: |如何使用jdbc调用存储在数据库中的函数或存储过程 */ public class testcalllablestatement { public static void main(string[] args){ connection conn = null; callablestatement cs = null; try { conn = jdbctools.getdsconnection(); // 1. 通过connection对象的preparecall()方法创建一个callablestatement对象的实例。 string sql = "{?= call sum_salary (?, ?)}"; cs = conn.preparecall(sql); // 2. 通过callablestatement对象的registeroutparameter()方法注册out参数 cs.registeroutparameter(1, types.varchar); // 3. 通过callablestatement对象的setxxx()方法设定in或in out参数 cs.setstring(2, "你大爷"); cs.setint(3, 3); // 4. 执行存储过程 cs.execute(); // 5. 获取返回值 string result = cs.getstring(1); system.out.println(result); } catch (exception e) { e.printstacktrace(); } finally { jdbctools.release(null, cs, conn); } } }
-
结果直接输出返回值!实验成功!
-
我的csdn:
我的博客园:
我的github:https://github.com/tinyhandsome
纸上得来终觉浅,绝知此事要躬行~
欢迎大家过来ob~
by 李英俊小朋友
上一篇: 程序员无休止加班的真正原因!
下一篇: 图解JVM类加载机制和双亲委派模型