广州做网站专业公司,wordpress 菜单 icon,南京手机网站设计,wordpress好看博客主题JDBC核心技术 笔记是以尚硅谷讲师宋红康JDBC课程为基础#xff0c;加入自身学习体会#xff0c;略有修改 第1章#xff1a;JDBC概述 JDBC是java应用程序和数据库之间的桥梁。JDBC提供一组规范#xff08;接口#xff09;。向上是面向应用API#xff0c;共应用程序使用。向…JDBC核心技术 笔记是以尚硅谷讲师宋红康JDBC课程为基础加入自身学习体会略有修改 第1章JDBC概述 JDBC是java应用程序和数据库之间的桥梁。JDBC提供一组规范接口。向上是面向应用API共应用程序使用。向下是面向数据库API供开发商开发数据库驱动程序用。 JDBC是sun公司提供一套用于数据库操作的接口java程序员只需要面向这套接口编程即可。 不同的数据库厂商需要针对这套接口提供不同实现。不同的实现的集合即为不同数据库的驱动。 ———面向接口编程 1.1 数据的持久化 持久化(persistence)把数据保存到可掉电式存储设备中以供之后使用。大多数情况下特别是企业级应用数据持久化意味着将内存中的数据保存到硬盘上加以”固化”而持久化的实现过程大多通过各种关系数据库来完成。就是数据从内存到可掉电存储设备的过程 持久化的主要应用是将内存中的数据存储在关系型数据库中当然也可以存储在磁盘文件、XML数据文件中。
1.2 Java中的数据存储技术 在Java中数据库存取技术可分为如下几类 JDBC直接访问数据库 JDO (Java Data Object )技术 第三方O/R工具如Hibernate, Mybatis 等 JDBC是java访问数据库的基石JDO、Hibernate、MyBatis等只是更好的封装了JDBC。
1.3 JDBC介绍
JDBC(Java Database Connectivity)是一个独立于特定数据库管理系统、通用的SQL数据库存取和操作的公共接口一组API定义了用来访问数据库的标准Java类库java.sql,javax.sql使用这些类库可以以一种标准的方法、方便地访问数据库资源。JDBC为访问不同的数据库提供了一种统一的途径为开发者屏蔽了一些细节问题。JDBC的目标是使Java程序员使用JDBC可以连接任何提供了JDBC驱动程序的数据库系统这样就使得程序员无需对特定的数据库系统的特点有过多的了解从而大大简化和加快了开发过程。如果没有JDBC那么Java程序访问数据库时是这样的 有了JDBCJava程序访问数据库时是这样的 总结如下 1.4 JDBC体系结构
JDBC接口API包括两个层次
面向应用的APIJava API抽象接口供应用程序开发人员使用连接数据库执行SQL语句获得结果。面向数据库的APIJava Driver API供开发商开发数据库驱动程序用。 JDBC是sun公司提供一套用于数据库操作的接口java程序员只需要面向这套接口编程即可。 不同的数据库厂商需要针对这套接口提供不同实现。不同的实现的集合即为不同数据库的驱动。 ———面向接口编程 1.5 JDBC程序编写步骤 补充ODBC(Open Database Connectivity开放式数据库连接)是微软在Windows平台下推出的。使用者在程序中只需要调用ODBC API由 ODBC 驱动程序将调用转换成为对特定的数据库的调用请求。 第2章获取数据库连接三要素
2.1 要素一Driver接口实现类
2.1.1 Driver接口介绍 java.sql.Driver 接口是所有 JDBC 驱动程序需要实现的接口。该接口是提供给数据库厂商使用的不同数据库厂商提供不同的实现。 在程序中不需要直接去访问 Driver 接口的**实现类而是由驱动程序管理器类(java.sql.DriverManager)**去调用这些Driver实现。 Oracle的驱动oracle.jdbc.driver.OracleDrivermySql的驱动 com.mysql.jdbc.Driver 总结就是不同数据库厂商实现Driver接口对应的实现类就是该数据库的驱动程序程序员通过驱动程序管理类来实现对数据库的操作 将上述jar包拷贝到Java工程的一个目录中习惯上新建一个lib文件夹。 在驱动jar上右键–Build Path–Add to Build Path 注意如果是Dynamic Web Project动态的web项目话则是把驱动jar放到WebContent有的开发工具叫WebRoot目录中的WEB-INF目录中的lib目录下即可 2.1.2 加载与注册JDBC驱动 加载驱动加载 JDBC 驱动需调用 Class 类的静态方法 forName()向其传递要加载的 JDBC 驱动的类名 Class.forName(“com.mysql.jdbc.Driver”); 注册驱动DriverManager 类是驱动程序管理器类负责管理驱动程序 使用DriverManager.registerDriver(com.mysql.jdbc.Driver)来注册驱动 通常不用显式调用 DriverManager 类的 registerDriver() 方法来注册驱动程序类的实例因为 Driver 接口的驱动程序类都包含了静态代码块在这个静态代码块中会调用 DriverManager.registerDriver() 方法来注册自身的一个实例。下图是MySQL的Driver实现类的源码
2.2 要素二URL统一资源定位符 JDBC URL 用于标识一个被注册的驱动程序驱动程序管理器通过这个 URL 选择正确的驱动程序从而建立到数据库的连接。 JDBC URL的标准由三部分组成各部分间用冒号分隔。 协议:子协议:子名称协议JDBC URL中的协议总是jdbc子协议子协议用于标识一个数据库驱动程序子名称一种标识数据库的方法。子名称可以依不同的子协议而变化用子名称的目的是为了定位数据库提供足够的信息。包含主机名(对应服务端的ip地址)端口号数据库名 举例 几种常用数据库的 JDBC URL MySQL的连接URL编写方式 jdbc:mysql://主机名称:mysql服务端口号/数据库名称?参数值参数值jdbc:mysql://localhost:3306/atguigujdbc:mysql://localhost:3306/atguigu**?useUnicodetruecharacterEncodingutf8**如果JDBC程序与服务器端的字符集不一致会导致乱码那么可以通过参数指定服务器端的字符集jdbc:mysql://localhost:3306/atguigu?userrootpassword123456 Oracle 9i的连接URL编写方式 jdbc:oracle:thin:主机名称:oracle服务端口号:数据库名称jdbc:oracle:thin:localhost:1521:atguigu SQLServer的连接URL编写方式 jdbc:sqlserver://主机名称:sqlserver服务端口号:DatabaseName数据库名称 jdbc:sqlserver://localhost:1433:DatabaseNameatguigu
2.3 要素三用户名和密码
user,password可以用“属性名属性值”方式告诉数据库可以调用 DriverManager 类的 getConnection() 方法建立到数据库的连接
2.4 数据库连接方式举例 这里说说连接方式里的一个语句Driver driver new com.mysql.jdbc.Driver(); 前面的Driver时Java提供的一个接口后面的com.mysql.jdbc.Driver时数据库厂商实现Driver接口的实现类所以也就是时implement的关系 2.4.1 连接方式一
Test
public void testConnection1() {try {//1.提供java.sql.Driver接口实现类的对象Driver driver null;driver new com.mysql.jdbc.Driver();//2.提供url指明具体操作的数据String url jdbc:mysql://localhost:3306/test;//3.提供Properties的对象指明用户名和密码Properties info new Properties();info.setProperty(user, root);info.setProperty(password, abc123);//4.调用driver的connect()获取连接Connection conn driver.connect(url, info);System.out.println(conn);} catch (SQLException e) {e.printStackTrace();}
}JDBC数据库连接的三要素体现在driver.connect(url, info)–Driver驱动URL统一资源定位符用户名密码 说明上述代码中显式出现了第三方数据库的API 2.4.2 连接方式二
Test
public void testConnection2() {try {//1.实例化DriverString className com.mysql.jdbc.Driver;Class clazz Class.forName(className);Driver driver (Driver) clazz.newInstance();//2.提供url指明具体操作的数据String url jdbc:mysql://localhost:3306/test;//3.提供Properties的对象指明用户名和密码Properties info new Properties();info.setProperty(user, root);info.setProperty(password, abc123);//4.调用driver的connect()获取连接Connection conn driver.connect(url, info);System.out.println(conn);} catch (Exception e) {e.printStackTrace();}
}说明相较于方式一这里使用反射实例化Driver不在代码中体现第三方数据库的API。体现了面向接口编程思想。 2.4.3 连接方式三 Testpublic void testConnection3() {try {//1.数据库连接的4个基本要素String url jdbc:mysql://localhost:3306/test;String user root;String password abc123;String driverName com.mysql.jdbc.Driver;//2.实例化DriverClass clazz Class.forName(driverName);Driver driver (Driver) clazz.newInstance();//3.注册驱动DriverManager.registerDriver(driver);//4.获取连接Connection conn DriverManager.getConnection(url, user, password);System.out.println(conn);} catch (Exception e) {e.printStackTrace();}}说明使用DriverManager实现数据库的连接。体会获取连接必要的4个基本要素。 2.4.4 连接方式四 Testpublic void testConnection4() {try {//1.数据库连接的4个基本要素String url jdbc:mysql://localhost:3306/test;String user root;String password abc123;String driverName com.mysql.jdbc.Driver;//2.加载驱动 ①实例化Driver ②注册驱动Class.forName(driverName);//Driver driver (Driver) clazz.newInstance();//3.注册驱动//DriverManager.registerDriver(driver);/*可以注释掉上述代码的原因是因为在mysql的Driver类中声明有static {try {DriverManager.registerDriver(new Driver());} catch (SQLException var1) {throw new RuntimeException(Cant register driver!);}}*///3.获取连接Connection conn DriverManager.getConnection(url, user, password);System.out.println(conn);} catch (Exception e) {e.printStackTrace();}}说明不必显式的注册驱动了。因为在DriverManager的源码中已经存在静态代码块实现了驱动的注册。 2.4.5 连接方式五(最终版) 使用properties配置文件作为字节流为数据库连接提供信息 使用到**load方法**用输入字节流构造一个Properites对象。 而这个输入字节流还是来自Properites这样一来一回实现了通用性
最终版本实现连接的步骤
用Properites加载配置文件用反射获得一个Porperites对象。用输入字节流读取配置信息从Properites对象中读取注册驱动 forName()获取连接 MangerDriver.getConnection
Test
public void testConnection5() throws Exception {//1.加载配置文件InputStream is ConnectionTest.class.getClassLoader().getResourceAsStream(jdbc.properties);//ConnectionTest是当前的public类名ConnectionTest.class.getClassLoader()是为了获得系统类加载器Properties pros new Properties();pros.load(is);//2.读取配置信息String user pros.getProperty(user);String password pros.getProperty(password);String url pros.getProperty(url);String driverClass pros.getProperty(driverClass);//3.加载驱动Class.forName(driverClass);//4.获取连接Connection conn DriverManager.getConnection(url,user,password);System.out.println(conn);}其中配置文件声明在工程的src目录下【jdbc.properties】
userroot
passwordabc123
urljdbc:mysql://localhost:3306/test
driverClasscom.mysql.jdbc.Driver说明使用配置文件的方式保存配置信息在代码中加载配置文件 使用配置文件的好处 ①实现了代码和数据的分离如果需要修改配置信息直接在配置文件中修改不需要深入代码 ②如果修改了配置信息省去重新编译的过程。 next后有空格或者回车都是结束
nextLine就是以换行为结束
第3章使用PreparedStatement实现CRUD操作
3.1 操作和访问数据库 数据库连接被用于向数据库服务器发送命令和 SQL 语句并接受数据库服务器返回的结果。其实一个数据库连接就是一个Socket连接。 在 java.sql 包中有 3 个接口分别定义了对数据库的调用的不同方式 Statement用于执行静态 SQL 语句并返回它所生成结果的对象。PreparedStatement预编译的SQL语句存储在r此对象中可以使用此对象多次高效地执行该语句。CallableStatement用于执行 SQL 存储过程
3.2 使用Statement操作数据表的弊端 通过调用 Connection 对象的 createStatement() 方法创建该对象。该对象用于执行静态的 SQL 语句并且返回执行结果。 Statement 接口中定义了下列方法用于执行 SQL 语句 int excuteUpdate(String sql)执行更新操作INSERT、UPDATE、DELETE
ResultSet executeQuery(String sql)执行查询操作SELECT但是使用Statement操作数据表存在弊端 问题一存在拼串操作繁琐问题二存在SQL注入问题 SQL 注入是利用某些系统没有对用户输入的数据进行充分的检查而在用户输入数据中注入非法的 SQL 语句段或命令(如SELECT user, password FROM user_table WHERE user‘a’ OR 1 ’ AND password ’ OR ‘1’ ‘1’) 从而利用系统的 SQL 引擎完成恶意行为的做法。 未充分检查导致用户输入数据中非法插入SQL语句 正是Statement的拼串导致了SQL注入问题本质就是SQL语句的二义性本来是AND逻辑为false但是引擎解析成OR逻辑true操作 对于 Java 而言要防范 SQL 注入只要用 PreparedStatement(从Statement扩展而来) 取代 Statement 就可以了。 代码演示
public class StatementTest {// 使用Statement的弊端需要拼写sql语句并且存在SQL注入的问题Testpublic void testLogin() {Scanner scan new Scanner(System.in);System.out.print(用户名);String userName scan.nextLine();System.out.print(密 码);String password scan.nextLine();// SELECT user,password FROM user_table WHERE USER 1 or AND PASSWORD 1 or 1 1;String sql SELECT user,password FROM user_table WHERE USER userName AND PASSWORD password ;User user get(sql, User.class);if (user ! null) {System.out.println(登陆成功!);} else {System.out.println(用户名或密码错误);}}// 使用Statement实现对数据表的查询操作public T T get(String sql, ClassT clazz) {T t null;Connection conn null;Statement st null;ResultSet rs null;try {// 1.加载配置文件InputStream is StatementTest.class.getClassLoader().getResourceAsStream(jdbc.properties);Properties pros new Properties();pros.load(is);// 2.读取配置信息String user pros.getProperty(user);String password pros.getProperty(password);String url pros.getProperty(url);String driverClass pros.getProperty(driverClass);// 3.加载驱动Class.forName(driverClass);// 4.获取连接conn DriverManager.getConnection(url, user, password);st conn.createStatement();rs st.executeQuery(sql);// 获取结果集的元数据ResultSetMetaData rsmd rs.getMetaData();// 获取结果集的列数int columnCount rsmd.getColumnCount();if (rs.next()) {t clazz.newInstance();for (int i 0; i columnCount; i) {// //1. 获取列的名称// String columnName rsmd.getColumnName(i1);// 1. 获取列的别名String columnName rsmd.getColumnLabel(i 1);// 2. 根据列名获取对应数据表中的数据Object columnVal rs.getObject(columnName);// 3. 将数据表中得到的数据封装进对象Field field clazz.getDeclaredField(columnName);field.setAccessible(true);field.set(t, columnVal);}return t;}} catch (Exception e) {e.printStackTrace();} finally {// 关闭资源if (rs ! null) {try {rs.close();} catch (SQLException e) {e.printStackTrace();}}if (st ! null) {try {st.close();} catch (SQLException e) {e.printStackTrace();}}if (conn ! null) {try {conn.close();} catch (SQLException e) {e.printStackTrace();}}}return null;}
}综上 3.3 PreparedStatement的使用
3.3.1 PreparedStatement介绍 可以通过调用 Connection 对象的 prepareStatement(String sql) 方法获取 PreparedStatement 对象 PreparedStatement 接口是 Statement 的子接口它表示一条预编译过的 SQL 语句预编译的SQL语句 PreparedStatement 对象所代表的 SQL 语句中的参数用问号(?)来表示调用 PreparedStatement 对象的 setXxx() 方法来设置这些参数. setXxx() 方法有两个参数第一个参数是要设置的 SQL 语句中的参数的索引(从 1 开始)第二个是设置的 SQL 语句中的参数的值
3.3.2 PreparedStatement vs Statement 代码的可读性和可维护性。 PreparedStatement 能最大可能提高性能 DBServer会对预编译语句提供性能优化。因为预编译语句有可能被重复调用所以语句在被DBServer的编译器编译后的执行代码被缓存下来那么下次调用相同的预编译语句就不需要编译只要将参数直接传入编译过的语句执行代码中就会得到执行。在statement语句中,不同参数相同的逻辑操作的sql语句作为整体需要编译没有缓存语句的意义。这样每执行一次都要对传入的语句编译一次。(语法检查语义检查翻译成二进制命令缓存) PreparedStatement 可以防止 SQL 注入
3.3.3 Java与SQL对应数据类型转换表
Java类型SQL类型booleanBITbyteTINYINTshortSMALLINTintINTEGERlongBIGINTStringCHAR,VARCHAR,LONGVARCHARbyte arrayBINARY , VAR BINARYjava.sql.DateDATEjava.sql.TimeTIMEjava.sql.TimestampTIMESTAMP
3.3.4 PreparedStatement实现增删改
不需要返回结果分为五步获取数据库连接获得preparedStatement完善sql语句执行sql语句关闭资源
//通用的增、删、改操作体现一增、删、改 体现二针对于不同的表
public void update(String sql,Object ... args){Connection conn null;PreparedStatement ps null;try {//获取数据库的连接conn JDBCUtils.getConnection();//获取PreparedStatement实例预编译的sql语句ps conn.prepareStatement(sql);//完善sql语句填充占位符for(int i 0;i args.length;i){ps.setObject(i 1, args[i]);}//4.执行sql语句ps.execute();//还有一个函数executeUpdate可以很好的反应插入数据是否成功} catch (Exception e) {e.printStackTrace();}finally{//关闭资源JDBCUtils.closeResource(conn, ps);}
}3.3.5 PreparedStatement实现查询
需要返回结果分为六步获取数据库连接获得preparedStatement完善sql语句执行sql语句获得结果集并返回关闭资源
public T ArrayListT getInstance(ClassT clazz,String sql,Object...args) {//返回的结果集ArrayListT arraylist new ArrayList();Connection connection null;ResultSet rs null;try {//获取数据库连接connection JDBCUtils.getConnection();//获取PreparedStatement实例预编译的sql语句PreparedStatement ps connection.prepareStatement(sql);//完善sql语句填充占位符for (int i 0; i args.length; i) {ps.setObject(i 1, args[i]);}//执行sql语句获得结果集rs ps.executeQuery();//结果集的元数据ResultSetMetaData rsmd rs.getMetaData();int columnCount rsmd.getColumnCount();while (rs.next()) {//一条记录对应一个对象ORM思想T t clazz.newInstance();//给对象赋值for (int i 0; i columnCount; i) {Object objecetVal rs.getObject(i 1);String columnName rsmd.getColumnLabel(i 1);//利用反射给对象赋值Field field clazz.getDeclaredField(columnName);field.setAccessible(true);field.set(t, objecetVal);}//插入结果集arraylist.add(t);}} catch (Exception e) {throw new RuntimeException(e);} finally {JDBCUtils.closeResource(connection, ps, rs);}return arraylist;
}说明使用PreparedStatement实现的查询操作可以替换Statement实现的查询操作解决Statement拼串和SQL注入问题。 3.4 ResultSet与ResultSetMetaData
3.4.1 ResultSet 查询需要调用PreparedStatement 的 executeQuery() 方法查询结果是一个ResultSet 对象 ResultSet 对象以逻辑表格的形式封装了执行数据库操作的结果集ResultSet 接口由数据库厂商提供实现 ResultSet 返回的实际上就是一张数据表。有一个指针指向数据表的第一条记录的前面。 ResultSet 对象维护了一个指向当前数据行的游标初始的时候游标在第一行之前可以通过 ResultSet 对象的 next() 方法移动到下一行。调用 next()方法检测下一行是否有效。若有效该方法返回 true且指针下移。相当于Iterator对象的 hasNext() 和 next() 方法的结合体。 当指针指向一行时, 可以通过调用 getXxx(int index) 或 getXxx(int columnName) 获取每一列的值。 例如: getInt(1), getString(“name”)注意Java与数据库交互涉及的索引都从1开始。 ResultSet 接口的常用方法 boolean next() getString() …
3.4.2 ResultSetMetaData 结果集的元数据也就是形容结果集的数据 可用于获取关于 ResultSet 对象中列的类型和属性信息的对象 ResultSetMetaData meta rs.getMetaData(); getColumnName(int column)获取指定列的名称 getColumnLabel(int column)获取指定列的别名用这个别用上面那个如果没有使用别名效果和上面的是一样的 getColumnCount()返回当前 ResultSet 对象中的列数。 getColumnTypeName(int column)检索指定列的数据库特定的类型名称。 getColumnDisplaySize(int column)指示指定列的最大标准宽度以字符为单位。 isNullable(int column)指示指定列中的值是否可以为 null。 isAutoIncrement(int column)指示是否自动为指定列进行编号这样这些列仍然是只读的。 问题1得到结果集后, 如何知道该结果集中有哪些列 列名是什么
需要使用一个描述 ResultSet 的对象 即 ResultSetMetaData
问题2关于ResultSetMetaData 如何获取 ResultSetMetaData 调用 ResultSet 的 getMetaData()方法即可 获取 ResultSet 中有多少列调用 ResultSetMetaData 的 getColumnCount() 方法 获取 ResultSet 每一列的列的别名是什么调用 ResultSetMetaData 的getColumnLabel() 方法 为什么用getColumnLabel而不是用getColumnName因为有时候数据库表中的列的名字和我们ORM映射的类中属性名并非一致这里和Java命名和MySQL命名习惯不同也可能是个人命名爱好如数据表中列名为student_name类中对应的属性为studentUser明显不一样。 这时我们需要指定这两个名字的关系也就是用别名select student_name studentUser…这样getColumnLabel就获取studentUser也就是类的属性相应的就能正确幅值啦 ORMObject/Relation Mapping对象/关系数据库映射 3.5 资源的释放
释放ResultSet, preparedStatement,Connection。update没有ResultSet自然不用管数据库连接Connection是非常稀有的资源用完后必须马上释放如果Connection不能及时正确的关闭将导致系统宕机。Connection的使用原则是尽量晚创建尽量早的释放。可以在finally中关闭保证及时其他代码出现异常资源也一定能被关闭。
代码实现很简单判断非空调用close()用trycatch包起来
3.6 JDBC API小结 两种思想 面向接口编程的思想 ORM思想(object relational mapping) 一个数据表对应一个java类表中的一条记录对应java类的一个对象表中的一个字段对应java类的一个属性 sql是需要结合列名和表的属性名来写。注意起别名。 两种技术 JDBC结果集的元数据ResultSetMetaData 获取列数getColumnCount()获取列的别名getColumnLabel() 通过反射创建指定类的对象获取指定的属性并赋值 3.7 preparedstatement函数介绍
以下是 PreparedStatement 的常用函数 setXxx() 系列方法 这些方法用于设置不同数据类型的参数值例如 setString()、setInt()、setDouble() 等。你需要提供参数的索引从1开始和对应的值。 javaCopy codepreparedStatement.setString(parameterIndex, stringValue);
preparedStatement.setInt(parameterIndex, intValue);
preparedStatement.setDouble(parameterIndex, doubleValue);
// ...executeUpdate() 用于执行数据更新操作例如 INSERT、UPDATE 或 DELETE。它返回一个整数表示受影响的行数。 javaCopy code
int rowsAffected preparedStatement.executeUpdate();executeQuery() 用于执行 SELECT 查询操作。它返回一个 ResultSet 对象可以从中获取查询结果。 javaCopy code
ResultSet resultSet preparedStatement.executeQuery();execute() 用于执行任意类型的 SQL 语句可以是查询也可以是更新操作。返回一个布尔值表示执行结果是否包含一个结果集。你可以通过 getResultSet() 方法获取结果集或者通过 getUpdateCount() 方法获取更新操作的受影响行数。 javaCopy codeboolean hasResultSet preparedStatement.execute();
ResultSet resultSet preparedStatement.getResultSet();
int rowsAffected preparedStatement.getUpdateCount();addBatch() 和 executeBatch() 这些方法可以用于执行批量操作可以一次性添加多个参数设置或 SQL 语句然后一起执行。 javaCopy codepreparedStatement.addBatch();
// ... 添加更多的参数设置或 SQL 语句
int[] batchResult preparedStatement.executeBatch();clearParameters() 用于清除所有已设置的参数可以在重新设置参数值时使用。 javaCopy code
preparedStatement.clearParameters();setNull() 用于设置参数为 NULL 值。 javaCopy code
preparedStatement.setNull(parameterIndex, Types.TYPE);setDate()、setTime() 和 setTimestamp() 用于设置日期和时间参数。 javaCopy codepreparedStatement.setDate(parameterIndex, date);
preparedStatement.setTime(parameterIndex, time);
preparedStatement.setTimestamp(parameterIndex, timestamp);这些是 PreparedStatement 中的一些常用函数。通过使用这些函数你可以更安全地构建和执行 SQL 语句防止 SQL 注入攻击并提高代码的可读性和维护性。
第4章 操作BLOB类型字段
4.1 MySQL BLOB类型 MySQL中BLOB是一个二进制大型对象是一个可以存储大量数据的容器它能容纳不同大小的数据。 插入BLOB类型的数据必须使用PreparedStatement因为BLOB类型的数据无法使用字符串拼接写的。 MySQL的四种BLOB类型(除了在存储的最大信息量上不同外他们是等同的) 实际使用中根据需要存入的数据大小定义不同的BLOB类型。需要注意的是如果存储的文件过大数据库的性能会下降。如果在指定了相关的Blob类型以后还报错xxx too large那么在mysql的安装目录下找my.ini文件加上如下的配置参数 max_allowed_packet16M。同时注意修改了my.ini文件之后需要重新启动mysql服务。
4.2 向数据表中插入大数据类型
//获取连接
Connection conn JDBCUtils.getConnection();String sql insert into customers(name,email,birth,photo)values(?,?,?,?);
PreparedStatement ps conn.prepareStatement(sql);// 填充占位符
ps.setString(1, 徐海强);
ps.setString(2, xhq126.com);
ps.setDate(3, new Date(new java.util.Date().getTime()));
// 操作Blob类型的变量
FileInputStream fis new FileInputStream(xhq.png);
ps.setBlob(4, fis);
//执行
ps.execute();fis.close();
JDBCUtils.closeResource(conn, ps);
4.3 修改数据表中的Blob类型字段
Connection conn JDBCUtils.getConnection();
String sql update customers set photo ? where id ?;
PreparedStatement ps conn.prepareStatement(sql);// 填充占位符
// 操作Blob类型的变量
FileInputStream fis new FileInputStream(coffee.png);
ps.setBlob(1, fis);
ps.setInt(2, 25);ps.execute();fis.close();
JDBCUtils.closeResource(conn, ps);4.4 从数据表中读取大数据类型
String sql SELECT id, name, email, birth, photo FROM customer WHERE id ?;
conn getConnection();
ps conn.prepareStatement(sql);
ps.setInt(1, 8);
rs ps.executeQuery();
if(rs.next()){//一定要写如果直接获取就会报错Before start of result set//方式一Integer id rs.getInt(1);String name rs.getString(2);String email rs.getString(3);Date birth rs.getDate(4);//方式二也可以通过别名获取有重载比如Integer id rs.getInt(id);Customer cust new Customer(id, name, email, birth);System.out.println(cust); //读取Blob类型的字段Blob photo rs.getBlob(5);InputStream is photo.getBinaryStream();OutputStream os new FileOutputStream(c.jpg);byte [] buffer new byte[1024];int len 0;while((len is.read(buffer)) ! -1){os.write(buffer, 0, len);}JDBCUtils.closeResource(conn, ps, rs);if(is ! null){is.close();}if(os ! null){os.close();}}
第5章 批量插入
5.1 批量执行SQL语句
当需要成批插入或者更新记录时可以采用Java的批量更新机制这一机制允许多条语句一次性提交给数据库批量处理。通常情况下比单独提交处理更有效率
JDBC的批量处理语句包括下面三个方法
addBatch(String)添加需要批量处理的SQL语句或是参数executeBatch()执行批量处理语句clearBatch():清空缓存的数据
通常我们会遇到两种批量执行SQL语句的情况
多条SQL语句的批量处理一个SQL语句的批量传参
5.2 高效的批量插入
举例向数据表中插入20000条数据
数据库中提供一个goods表。创建如下
CREATE TABLE goods(id INT PRIMARY KEY AUTO_INCREMENT,NAME VARCHAR(20)
);5.2.1 实现层次一使用Statement
直接不看不用Statement
Connection conn JDBCUtils.getConnection();
Statement st conn.createStatement();
for(int i 1;i 20000;i){String sql insert into goods(name) values(name_ i );st.executeUpdate(sql);
}5.2.2 实现层次二使用PreparedStatement
long start System.currentTimeMillis();Connection conn JDBCUtils.getConnection();String sql insert into goods(name)values(?);
PreparedStatement ps conn.prepareStatement(sql);
for(int i 1;i 20000;i){ps.setString(1, name_ i);ps.executeUpdate();
}long end System.currentTimeMillis();
System.out.println(花费的时间为 (end - start));//82340JDBCUtils.closeResource(conn, ps);5.2.3 实现层次三
/** 修改1 使用 addBatch() / executeBatch() / clearBatch()* 修改2有些mysql服务器关闭批处理的但我练习的时候是默认支持的。我们需要通过一个参数让mysql开启批处理的支持。如下* ?rewriteBatchedStatementstrue 写在配置文件的url后面* 修改3使用更新的mysql 驱动mysql-connector-java-5.1.37-bin.jar* */
Test
public void testInsert1() throws Exception{long start System.currentTimeMillis();Connection conn JDBCUtils.getConnection();String sql insert into goods(name)values(?);PreparedStatement ps conn.prepareStatement(sql);for(int i 1;i 1000000;i){ps.setString(1, name_ i);//1.“攒”sqlps.addBatch();if(i % 500 0){//这里的例子刚好除尽//2.执行ps.executeBatch();//3.清空ps.clearBatch();}}long end System.currentTimeMillis();System.out.println(花费的时间为 (end - start));//20000条625 //1000000条:14733 JDBCUtils.closeResource(conn, ps);
}5.2.4 实现层次四
/*
* 层次四在层次三的基础上不自动提交
* 使用Connection 的 setAutoCommit(false) / commit()
*/
Test
public void testInsert2() throws Exception{long start System.currentTimeMillis();Connection conn JDBCUtils.getConnection();//1.设置为不自动提交数据conn.setAutoCommit(false);String sql insert into goods(name)values(?) ;PreparedStatement ps conn.prepareStatement(sql);for(int i 1;i 1000000;i){ps.setString(1, name_ i);//1.“攒”sqlps.addBatch();if(i % 500 0){//2.执行ps.executeBatch();//3.清空ps.clearBatch();}}//2.提交数据conn.commit();long end System.currentTimeMillis();System.out.println(花费的时间为 (end - start));//1000000条:4978 JDBCUtils.closeResource(conn, ps);
}第6章 数据库事务
6.1 数据库事务介绍 事务一组逻辑操作单元,使数据从一种状态变换到另一种状态。 **事务处理事务操作**要么全部操作成功提交要么全部操作失败回滚事务ACID中的原子性具体可以看Mysql笔记 事务的ACID原子性一致性隔离性持久性
6.2 JDBC事务处理 数据一旦提交就不可回滚。 DDL操作一旦执行自动提交DML默认情况下一旦执行自动提交但可以通过设置autocommitfalse取消自动提交关闭连接自动提交 数据什么时候意味着提交 当一个连接对象被创建时默认情况下是自动提交事务每次执行一个 SQL 语句时如果执行成功就会向数据库自动提交而不能回滚。**关闭数据库连接数据就会自动的提交。**如果多个操作每个操作使用的是自己单独的连接则无法保证事务。即同一个事务的多个操作必须在同一个连接下。 JDBC程序中为了让多个 SQL 语句作为一个事务执行 调用 Connection 对象的 setAutoCommit(false); 以取消自动提交事务在所有的 SQL 语句都成功执行后调用 commit(); 方法提交事务在出现异常时调用 rollback(); 方法回滚事务 若此时 Connection 没有被关闭还可能被重复使用则需要恢复其自动提交状态 setAutoCommit(true)。尤其是在使用数据库连接池技术时执行close()方法前建议恢复自动提交状态。
【案例用户AA向用户BB转账100】
我们的数据库操作以DML为主主要考虑自动连接和关闭数据库连接导致的数据提交所以Connection采用外部传入的方式
外部获取数据库连接关闭自动提交。然后执行若干操作若有异常catch中回滚finally中打开自动提交关闭连接相当于提交
下面就是修改对数据库操作的方法为Connection作为参数传进来
//使用事务以后的通用的增删改操作version 2.0
public void update(Connection conn ,String sql, Object... args) {PreparedStatement ps null;try {// 1.获取PreparedStatement的实例 (或预编译sql语句)ps conn.prepareStatement(sql);// 2.填充占位符for (int i 0; i args.length; i) {ps.setObject(i 1, args[i]);}// 3.执行sql语句ps.execute();} catch (Exception e) {e.printStackTrace();} finally {// 4.关闭资源JDBCUtils.closeResource(null, ps);}
}转账操作
public void testJDBCTransaction() {Connection conn null;try {// 1.获取数据库连接conn JDBCUtils.getConnection();// 2.开启事务conn.setAutoCommit(false);// 3.进行数据库操作String sql1 update user_table set balance balance - 100 where user ?;update(conn, sql1, AA);// 模拟网络异常//System.out.println(10 / 0);String sql2 update user_table set balance balance 100 where user ?;update(conn, sql2, BB);// 4.若没有异常则提交事务conn.commit();} catch (Exception e) {e.printStackTrace();// 5.若有异常则回滚事务try {conn.rollback();} catch (SQLException e1) {e1.printStackTrace();}} finally {try {//6.恢复每次DML操作的自动提交功能conn.setAutoCommit(true);} catch (SQLException e) {e.printStackTrace();}//7.关闭连接JDBCUtils.closeResource(conn, null, null); }
}
6.3 事务的ACID属性 原子性Atomicity 原子性是指事务是一个不可分割的工作单位事务中的操作要么都发生要么都不发生。 一致性Consistency 事务必须使数据库从一个一致性状态变换到另外一个一致性状态。 隔离性Isolation 事务的隔离性是指一个事务的执行不能被其他事务干扰即一个事务内部的操作及使用的数据对并发的其他事务是隔离的并发事务之间不互相干扰。 持久性Durability 持久性是指一个事务一旦被提交它对数据库中数据的改变就是**永久性的**接下来的其他操作和数据库故障不应该对其有任何影响。
6.3.1 数据库的并发问题 四个并发问题有一个脏写0容忍四种隔离级别具体可以看Mysql笔记 对于同时运行的多个事务, 当这些事务访问数据库中相同的数据时, 如果没有采取必要的隔离机制, 就会导致各种并发问题: 脏读一个事务读取了另一个事务修改但未提交的数据–相当于走在路上我放了个p你吸完了不可重复读对于两个事务T1, T2, T1 读取了一个字段, 然后 T2 更新了该字段。之后, T1再次读取同一个字段, 值就不同了。–前后两次读取数据值不同幻读事务查询期间另一个事务插入了一些符合该查询条件的新数据 数据库事务的隔离性: 数据库系统必须具有隔离并发运行各个事务的能力, 使它们不会相互影响, 避免各种并发问题。 一个事务与其他事务隔离的程度称为隔离级别。数据库规定了多种事务隔离级别, 不同隔离级别对应不同的干扰程度, 隔离级别越高, 数据一致性就越好, 但并发性越弱。
6.3.2 四种隔离级别 四个并发问题有一个脏写0容忍四种隔离级别具体可以看Mysql笔记 数据库提供的4种事务隔离级别一般就在读已提交和可重复读之间选择读已提交最推荐 Oracle 支持的 2 种事务隔离级别READ COMMITED, SERIALIZABLE。 Oracle 默认的事务隔离级别为: READ COMMITED 。 Mysql 支持 4 种事务隔离级别。Mysql 默认的事务隔离级别为: REPEATABLE READ。
6.3.3 在MySql中设置隔离级别 每启动一个 mysql 程序, 就会获得一个单独的数据库连接. 每个数据库连接都有一个全局变量 tx_isolation, 表示当前的事务隔离级别。 查看当前的隔离级别: SELECT tx_isolation;设置当前 mySQL 连接的隔离级别: set transaction isolation level read committed;设置数据库系统的全局的隔离级别: set global transaction isolation level read committed;补充操作 创建mysql数据库用户 create user tom identified by abc123;授予权限 #授予通过网络方式登录的tom用户对所有库所有表的全部权限密码设为abc123.
grant all privileges on *.* to tom% identified by abc123; #给tom用户使用本地命令行方式授予atguigudb这个库下的所有表的插删改查的权限。
grant select,insert,delete,update on atguigudb.* to tomlocalhost identified by abc123;
第7章DAO及相关实现类
DAOData Access Object访问数据信息的类和接口包括了对数据的CRUDCreate、Retrival、Update、Delete而不包含任何业务相关的信息。有时也称作BaseDAO作用为了实现功能的模块化更有利于代码的维护和升级。下面是尚硅谷JavaWeb阶段书城项目中DAO使用的体现 层次结构 【BaseDAO.java】
package com.atguigu.bookstore.dao;import java.lang.reflect.ParameterizedType;
import java.lang.reflect.Type;
import java.sql.Connection;
import java.sql.SQLException;
import java.util.List;import org.apache.commons.dbutils.QueryRunner;
import org.apache.commons.dbutils.handlers.BeanHandler;
import org.apache.commons.dbutils.handlers.BeanListHandler;
import org.apache.commons.dbutils.handlers.ScalarHandler;/*** 定义一个用来被继承的对数据库进行基本操作的Dao* * author HanYanBing** param T*/
public abstract class BaseDaoT {private QueryRunner queryRunner new QueryRunner();// 定义一个变量来接收泛型的类型private ClassT type;// 获取T的Class对象获取泛型的类型泛型是在被子类继承时才确定public BaseDao() {// 获取子类的类型Class clazz this.getClass();// 获取父类的类型// getGenericSuperclass()用来获取当前类的父类的类型// ParameterizedType表示的是带泛型的类型ParameterizedType parameterizedType (ParameterizedType) clazz.getGenericSuperclass();// 获取具体的泛型类型 getActualTypeArguments获取具体的泛型的类型// 这个方法会返回一个Type的数组Type[] types parameterizedType.getActualTypeArguments();// 获取具体的泛型的类型·this.type (ClassT) types[0];}/*** 通用的增删改操作* * param sql* param params* return*/public int update(Connection conn,String sql, Object... params) {int count 0;try {count queryRunner.update(conn, sql, params);} catch (SQLException e) {e.printStackTrace();} return count;}/*** 获取一个对象* * param sql* param params* return*/public T getBean(Connection conn,String sql, Object... params) {T t null;try {t queryRunner.query(conn, sql, new BeanHandlerT(type), params);} catch (SQLException e) {e.printStackTrace();} return t;}/*** 获取所有对象* * param sql* param params* return*/public ListT getBeanList(Connection conn,String sql, Object... params) {ListT list null;try {list queryRunner.query(conn, sql, new BeanListHandlerT(type), params);} catch (SQLException e) {e.printStackTrace();} return list;}/*** 获取一个但一值得方法专门用来执行像 select count(*)...这样的sql语句* * param sql* param params* return*/public Object getValue(Connection conn,String sql, Object... params) {Object count null;try {// 调用queryRunner的query方法获取一个单一的值count queryRunner.query(conn, sql, new ScalarHandler(), params);} catch (SQLException e) {e.printStackTrace();} return count;}
}【BookDAO.java】
package com.atguigu.bookstore.dao;import java.sql.Connection;
import java.util.List;import com.atguigu.bookstore.beans.Book;
import com.atguigu.bookstore.beans.Page;public interface BookDao {/*** 从数据库中查询出所有的记录* * return*/ListBook getBooks(Connection conn);/*** 向数据库中插入一条记录* * param book*/void saveBook(Connection conn,Book book);/*** 从数据库中根据图书的id删除一条记录* * param bookId*/void deleteBookById(Connection conn,String bookId);/*** 根据图书的id从数据库中查询出一条记录* * param bookId* return*/Book getBookById(Connection conn,String bookId);/*** 根据图书的id从数据库中更新一条记录* * param book*/void updateBook(Connection conn,Book book);/*** 获取带分页的图书信息* * param page是只包含了用户输入的pageNo属性的page对象* return 返回的Page对象是包含了所有属性的Page对象*/PageBook getPageBooks(Connection conn,PageBook page);/*** 获取带分页和价格范围的图书信息* * param page是只包含了用户输入的pageNo属性的page对象* return 返回的Page对象是包含了所有属性的Page对象*/PageBook getPageBooksByPrice(Connection conn,PageBook page, double minPrice, double maxPrice);}【UserDAO.java】
package com.atguigu.bookstore.dao;import java.sql.Connection;import com.atguigu.bookstore.beans.User;public interface UserDao {/*** 根据User对象中的用户名和密码从数据库中获取一条记录* * param user* return User 数据库中有记录 null 数据库中无此记录*/User getUser(Connection conn,User user);/*** 根据User对象中的用户名从数据库中获取一条记录* * param user* return true 数据库中有记录 false 数据库中无此记录*/boolean checkUsername(Connection conn,User user);/*** 向数据库中插入User对象* * param user*/void saveUser(Connection conn,User user);
}【BookDaoImpl.java】
package com.atguigu.bookstore.dao.impl;import java.sql.Connection;
import java.util.List;import com.atguigu.bookstore.beans.Book;
import com.atguigu.bookstore.beans.Page;
import com.atguigu.bookstore.dao.BaseDao;
import com.atguigu.bookstore.dao.BookDao;public class BookDaoImpl extends BaseDaoBook implements BookDao {Overridepublic ListBook getBooks(Connection conn) {// 调用BaseDao中得到一个List的方法ListBook beanList null;// 写sql语句String sql select id,title,author,price,sales,stock,img_path imgPath from books;beanList getBeanList(conn,sql);return beanList;}Overridepublic void saveBook(Connection conn,Book book) {// 写sql语句String sql insert into books(title,author,price,sales,stock,img_path) values(?,?,?,?,?,?);// 调用BaseDao中通用的增删改的方法update(conn,sql, book.getTitle(), book.getAuthor(), book.getPrice(), book.getSales(), book.getStock(),book.getImgPath());}Overridepublic void deleteBookById(Connection conn,String bookId) {// 写sql语句String sql DELETE FROM books WHERE id ?;// 调用BaseDao中通用增删改的方法update(conn,sql, bookId);}Overridepublic Book getBookById(Connection conn,String bookId) {// 调用BaseDao中获取一个对象的方法Book book null;// 写sql语句String sql select id,title,author,price,sales,stock,img_path imgPath from books where id ?;book getBean(conn,sql, bookId);return book;}Overridepublic void updateBook(Connection conn,Book book) {// 写sql语句String sql update books set title ? , author ? , price ? , sales ? , stock ? where id ?;// 调用BaseDao中通用的增删改的方法update(conn,sql, book.getTitle(), book.getAuthor(), book.getPrice(), book.getSales(), book.getStock(), book.getId());}Overridepublic PageBook getPageBooks(Connection conn,PageBook page) {// 获取数据库中图书的总记录数String sql select count(*) from books;// 调用BaseDao中获取一个单一值的方法long totalRecord (long) getValue(conn,sql);// 将总记录数设置都page对象中page.setTotalRecord((int) totalRecord);// 获取当前页中的记录存放的ListString sql2 select id,title,author,price,sales,stock,img_path imgPath from books limit ?,?;// 调用BaseDao中获取一个集合的方法ListBook beanList getBeanList(conn,sql2, (page.getPageNo() - 1) * Page.PAGE_SIZE, Page.PAGE_SIZE);// 将这个List设置到page对象中page.setList(beanList);return page;}Overridepublic PageBook getPageBooksByPrice(Connection conn,PageBook page, double minPrice, double maxPrice) {// 获取数据库中图书的总记录数String sql select count(*) from books where price between ? and ?;// 调用BaseDao中获取一个单一值的方法long totalRecord (long) getValue(conn,sql,minPrice,maxPrice);// 将总记录数设置都page对象中page.setTotalRecord((int) totalRecord);// 获取当前页中的记录存放的ListString sql2 select id,title,author,price,sales,stock,img_path imgPath from books where price between ? and ? limit ?,?;// 调用BaseDao中获取一个集合的方法ListBook beanList getBeanList(conn,sql2, minPrice , maxPrice , (page.getPageNo() - 1) * Page.PAGE_SIZE, Page.PAGE_SIZE);// 将这个List设置到page对象中page.setList(beanList);return page;}}【UserDaoImpl.java】
package com.atguigu.bookstore.dao.impl;import java.sql.Connection;import com.atguigu.bookstore.beans.User;
import com.atguigu.bookstore.dao.BaseDao;
import com.atguigu.bookstore.dao.UserDao;public class UserDaoImpl extends BaseDaoUser implements UserDao {Overridepublic User getUser(Connection conn,User user) {// 调用BaseDao中获取一个对象的方法User bean null;// 写sql语句String sql select id,username,password,email from users where username ? and password ?;bean getBean(conn,sql, user.getUsername(), user.getPassword());return bean;}Overridepublic boolean checkUsername(Connection conn,User user) {// 调用BaseDao中获取一个对象的方法User bean null;// 写sql语句String sql select id,username,password,email from users where username ?;bean getBean(conn,sql, user.getUsername());return bean ! null;}Overridepublic void saveUser(Connection conn,User user) {//写sql语句String sql insert into users(username,password,email) values(?,?,?);//调用BaseDao中通用的增删改的方法update(conn,sql, user.getUsername(),user.getPassword(),user.getEmail());}}【Book.java】
package com.atguigu.bookstore.beans;
/*** 图书类* author songhongkang**/
public class Book {private Integer id;private String title; // 书名private String author; // 作者private double price; // 价格private Integer sales; // 销量private Integer stock; // 库存private String imgPath static/img/default.jpg; // 封面图片的路径//构造器get()set()toString()方法略
}【Page.java】
package com.atguigu.bookstore.beans;import java.util.List;
/*** 页码类* author songhongkang**/
public class PageT {private ListT list; // 每页查到的记录存放的集合public static final int PAGE_SIZE 4; // 每页显示的记录数private int pageNo; // 当前页
// private int totalPageNo; // 总页数通过计算得到private int totalRecord; // 总记录数通过查询数据库得到
【User.java】
package com.atguigu.bookstore.beans;
/*** 用户类* author songhongkang**/
public class User {private Integer id;private String username;private String password;private String email;
第8章数据库连接池
8.1 JDBC数据库连接池的必要性 在使用开发基于数据库的web程序时传统的模式基本是按以下步骤 在主程序如servlet、beans中建立数据库连接进行sql操作断开数据库连接 这种模式开发存在的问题: 普通的JDBC数据库连接使用 DriverManager 来获取每次向数据库建立连接的时候都要将 Connection 加载到内存中再验证用户名和密码(得花费0.05s1s的时间)。需要数据库连接的时候就向数据库要求一个执行完成后再断开连接。这样的方式将会消耗大量的资源和时间。**数据库的连接资源并没有得到很好的重复利用。**若同时有几百人甚至几千人在线频繁的进行数据库连接操作将占用很多的系统资源严重的甚至会造成服务器的崩溃。**对于每一次数据库连接使用完后都得断开。**否则如果程序出现异常而未能关闭将会导致数据库系统中的内存泄漏最终将导致重启数据库。回忆何为Java的内存泄漏这种开发不能控制被创建的连接对象数系统资源会被毫无顾及的分配出去如连接过多也可能导致内存泄漏服务器崩溃。
8.2 数据库连接池技术 为解决传统开发中的数据库连接问题可以采用数据库连接池技术。 数据库连接池的基本思想就是为数据库连接建立一个“缓冲池”。预先在缓冲池中放入一定数量的连接当需要建立数据库连接时只需从“缓冲池”中取出一个使用完毕之后再放回去。 数据库连接池负责分配、管理和释放数据库连接它允许应用程序重复使用一个现有的数据库连接而不是重新建立一个。 数据库连接池在初始化时将创建一定数量的数据库连接放到连接池中这些数据库连接的数量是由最小数据库连接数来设定的。无论这些数据库连接是否被使用连接池都将一直保证至少拥有这么多的连接数量。连接池的最大数据库连接数量限定了这个连接池能占有的最大连接数当应用程序向连接池请求的连接数超过最大连接数量时这些请求将被加入到等待队列中。 工作原理 数据库连接池技术的优点 1. 资源重用 由于数据库连接得以重用避免了频繁创建释放连接引起的大量性能开销。在减少系统消耗的基础上另一方面也增加了系统运行环境的平稳性。 2. 更快的系统反应速度 数据库连接池在初始化过程中往往已经创建了若干数据库连接置于连接池中备用。此时连接的初始化工作均已完成。对于业务请求处理而言直接利用现有可用连接避免了数据库连接初始化和释放过程的时间开销从而减少了系统的响应时间 3. 新的资源分配手段 对于多应用共享同一数据库的系统而言可在应用层通过数据库连接池的配置实现某一应用最大可用数据库连接数的限制避免某一应用独占所有的数据库资源 4. 统一的连接管理避免数据库连接泄漏 在较为完善的数据库连接池实现中可根据预先的占用超时设定强制回收被占用连接从而避免了常规数据库连接操作中可能出现的资源泄露
8.3 多种开源的数据库连接池
JDBC 的数据库连接池使用 javax.sql.DataSource 来表示DataSource 只是一个接口该接口通常由服务器(Weblogic, WebSphere, Tomcat)提供实现也有一些开源组织提供实现 DBCP 是Apache提供的数据库连接池。tomcat 服务器自带dbcp数据库连接池。速度相对c3p0较快但因自身存在BUGHibernate3已不再提供支持。C3P0 是一个开源组织提供的一个数据库连接池**速度相对较慢稳定性还可以。**hibernate官方推荐使用Proxool 是sourceforge下的一个开源项目数据库连接池有监控连接池状态的功能稳定性较c3p0差一点BoneCP 是一个开源组织提供的数据库连接池速度快Druid 是阿里提供的数据库连接池据说是集DBCP 、C3P0 、Proxool 优点于一身的数据库连接池但是速度不确定是否有BoneCP快–多数用它 DataSource 通常被称为数据源它包含连接池和连接池管理两个部分习惯上也经常把 DataSource 称为连接池DataSource用来取代DriverManager来获取Connection获取速度快同时可以大幅度提高数据库访问速度。特别注意 数据源和数据库连接不同数据源无需创建多个它是产生数据库连接的工厂因此整个应用只需要一个数据源即可。当数据库访问结束后程序还是像以前一样关闭数据库连接conn.close(); 但conn.close()并没有关闭数据库的物理连接它仅仅把数据库连接释放归还给了数据库连接池。
重点看druid记录看文档写代码的过程
8.3.1 C3P0数据库连接池
获取连接方式一
//使用C3P0数据库连接池的方式获取数据库的连接不推荐
public static Connection getConnection1() throws Exception{ComboPooledDataSource cpds new ComboPooledDataSource();cpds.setDriverClass(com.mysql.jdbc.Driver); cpds.setJdbcUrl(jdbc:mysql://localhost:3306/test);cpds.setUser(root);cpds.setPassword(abc123);// cpds.setMaxPoolSize(100);Connection conn cpds.getConnection();return conn;
}获取连接方式二
//使用C3P0数据库连接池的配置文件方式获取数据库的连接推荐
private static DataSource cpds new ComboPooledDataSource(helloc3p0);
//放外面不用多次造池子如果放方法里面就不是了
public static Connection getConnection2() throws SQLException{Connection conn cpds.getConnection();return conn;
}其中src下的配置文件为【c3p0-config.xml】
?xml version1.0 encodingUTF-8?
c3p0-confignamed-config namehelloc3p0!-- 获取连接的4个基本信息 --property nameuserroot/propertyproperty namepasswordabc123/propertyproperty namejdbcUrljdbc:mysql:///test/propertyproperty namedriverClasscom.mysql.jdbc.Driver/property!-- 涉及到数据库连接池的管理的相关属性的设置 --!-- 若数据库中连接数不足时, 一次向数据库服务器申请多少个连接 --property nameacquireIncrement5/property!-- 初始化数据库连接池时连接的数量 --property nameinitialPoolSize5/property!-- 数据库连接池中的最小的数据库连接数 --property nameminPoolSize5/property!-- 数据库连接池中的最大的数据库连接数 --property namemaxPoolSize10/property!-- C3P0 数据库连接池可以维护的 Statement 的个数 --property namemaxStatements20/property!-- 每个连接同时可以使用的 Statement 对象的个数 --property namemaxStatementsPerConnection5/property/named-config
/c3p0-config8.3.2 DBCP数据库连接池
DBCP 是 Apache 软件基金组织下的开源连接池实现该连接池依赖该组织下的另一个开源系统Common-pool。如需使用该连接池实现应在系统中增加如下两个 jar 文件 Commons-dbcp.jar连接池的实现Commons-pool.jar连接池实现的依赖库 **Tomcat 的连接池正是采用该连接池来实现的。**该数据库连接池既可以与应用服务器整合使用也可由应用程序独立使用。数据源和数据库连接不同数据源无需创建多个它是产生数据库连接的工厂因此整个应用只需要一个数据源即可。当数据库访问结束后程序还是像以前一样关闭数据库连接conn.close(); 但上面的代码并没有关闭数据库的物理连接它仅仅把数据库连接释放归还给了数据库连接池。配置属性说明
属性默认值说明initialSize0连接池启动时创建的初始化连接数量maxActive8连接池中可同时连接的最大的连接数maxIdle8连接池中最大的空闲的连接数超过的空闲连接将被释放如果设置为负数表示不限制minIdle0连接池中最小的空闲的连接数低于这个数量会被创建新的连接。该参数越接近maxIdle性能越好因为连接的创建和销毁都是需要消耗资源的但是不能太大。maxWait无限制最大等待时间当没有可用连接时连接池等待连接释放的最大时间超过该时间限制会抛出异常如果设置-1表示无限等待poolPreparedStatementsfalse开启池的Statement是否preparedmaxOpenPreparedStatements无限制开启池的prepared 后的同时最大连接数minEvictableIdleTimeMillis连接池中连接在时间段内一直空闲 被逐出连接池的时间removeAbandonedTimeout300超过时间限制回收没有用(废弃)的连接removeAbandonedfalse超过removeAbandonedTimeout时间后是否进 行没用连接废弃的回收
获取连接方式的逐步演化
获取连接方式一硬编码不可取难维护
public static Connection getConnection3() throws Exception {BasicDataSource source new BasicDataSource();source.setDriverClassName(com.mysql.jdbc.Driver);source.setUrl(jdbc:mysql:///test);source.setUsername(root);source.setPassword(abc123);//source.setInitialSize(10);Connection conn source.getConnection();return conn;
}获取连接方式二
//使用dbcp数据库连接池的配置文件方式获取数据库的连接推荐
private static DataSource source null;
static{try {Properties pros new Properties();InputStream is DBCPTest.class.getClassLoader().getResourceAsStream(dbcp.properties);pros.load(is);//根据提供的BasicDataSourceFactory创建对应的DataSource对象source BasicDataSourceFactory.createDataSource(pros);} catch (Exception e) {e.printStackTrace();}}
public static Connection getConnection4() throws Exception {Connection conn source.getConnection();return conn;
}其中src下的配置文件为【dbcp.properties】
driverClassNamecom.mysql.jdbc.Driver
urljdbc:mysql://localhost:3306/test?rewriteBatchedStatementstrueuseServerPrepStmtsfalse
usernameroot
passwordabc123initialSize10
#...8.3.3 Druid德鲁伊数据库连接池
Druid是阿里巴巴开源平台上一个数据库连接池实现它结合了C3P0、DBCP、Proxool等DB池的优点同时加入了日志监控可以很好的监控DB池连接和SQL的执行情况可以说是针对监控而生的DB连接池可以说是目前最好的连接池之一。
看文档的过程首先数据库连接池中用DataSource取代DriverManager来获取Connection。
也就是连接的过程就是获取DataSource获取Connection。
如何获取通过文档文档的哪个包那就先找DataSource在Druid中对应的类选中DataSource按下F4打开type hierarchy快捷键因快捷键模板而异 对应的驱动DruidDataSource在Driud驱动文件夹中打开文档index.html找到对应的包com.alibaba.druid.pool找到DruidDataSource我们需要根据类对应文档调用方法来连接数据库 上述的DruidDataSource为硬编码的方式可以获取数据库连接。我们希望通过配置文件获取数据库连接的基本信息通常采用DruidDataSourceFactory点开 剩下的就是写配置文件点函数咯~
package com.atguigu.druid;import java.sql.Connection;
import java.util.Properties;import javax.sql.DataSource;import com.alibaba.druid.pool.DruidDataSourceFactory;public class TestDruid {public static void main(String[] args) throws Exception {Properties pro new Properties(); pro.load(TestDruid.class.getClassLoader().getResourceAsStream(druid.properties));DataSource ds DruidDataSourceFactory.createDataSource(pro);Connection conn ds.getConnection();System.out.println(conn);}
}
其中src下的配置文件为【druid.properties】
urljdbc:mysql://localhost:3306/test?rewriteBatchedStatementstrue
usernameroot
password123456
driverClassNamecom.mysql.jdbc.DriverinitialSize10
maxActive20
maxWait1000
filterswall详细配置参数
配置缺省说明name配置这个属性的意义在于如果存在多个数据源监控的时候可以通过名字来区分开来。 如果没有配置将会生成一个名字格式是”DataSource-” System.identityHashCode(this)url连接数据库的url不同数据库不一样。例如mysql : jdbc:mysql://10.20.153.104:3306/druid2 oracle : jdbc:oracle:thin:10.20.149.85:1521:ocnautousername连接数据库的用户名password连接数据库的密码。如果你不希望密码直接写在配置文件中可以使用ConfigFilter。详细看这里https://github.com/alibaba/druid/wiki/使用ConfigFilterdriverClassName根据url自动识别 这一项可配可不配如果不配置druid会根据url自动识别dbType然后选择相应的driverClassName(建议配置下)initialSize0初始化时建立物理连接的个数。初始化发生在显示调用init方法或者第一次getConnection时maxActive8最大连接池数量maxIdle8已经不再使用配置了也没效果minIdle最小连接池数量maxWait获取连接时最大等待时间单位毫秒。配置了maxWait之后缺省启用公平锁并发效率会有所下降如果需要可以通过配置useUnfairLock属性为true使用非公平锁。poolPreparedStatementsfalse是否缓存preparedStatement也就是PSCache。PSCache对支持游标的数据库性能提升巨大比如说oracle。在mysql下建议关闭。maxOpenPreparedStatements-1要启用PSCache必须配置大于0当大于0时poolPreparedStatements自动触发修改为true。在Druid中不会存在Oracle下PSCache占用内存过多的问题可以把这个数值配置大一些比如说100validationQuery用来检测连接是否有效的sql要求是一个查询语句。如果validationQuery为nulltestOnBorrow、testOnReturn、testWhileIdle都不会其作用。testOnBorrowtrue申请连接时执行validationQuery检测连接是否有效做了这个配置会降低性能。testOnReturnfalse归还连接时执行validationQuery检测连接是否有效做了这个配置会降低性能testWhileIdlefalse建议配置为true不影响性能并且保证安全性。申请连接的时候检测如果空闲时间大于timeBetweenEvictionRunsMillis执行validationQuery检测连接是否有效。timeBetweenEvictionRunsMillis有两个含义 1)Destroy线程会检测连接的间隔时间2)testWhileIdle的判断依据详细看testWhileIdle属性的说明numTestsPerEvictionRun不再使用一个DruidDataSource只支持一个EvictionRunminEvictableIdleTimeMillisconnectionInitSqls物理连接初始化的时候执行的sqlexceptionSorter根据dbType自动识别 当数据库抛出一些不可恢复的异常时抛弃连接filters属性类型是字符串通过别名的方式配置扩展插件常用的插件有 监控统计用的filter:stat日志用的filter:log4j防御sql注入的filter:wallproxyFilters类型是List如果同时配置了filters和proxyFilters是组合关系并非替换关系
第9章Apache-DBUtils实现CRUD操作
9.1 Apache-DBUtils简介 commons-dbutils 是 Apache 组织提供的一个开源 JDBC工具类库它是对JDBC的简单封装学习成本极低并且使用dbutils能极大简化jdbc编码的工作量同时也不会影响程序的性能。 API介绍 org.apache.commons.dbutils.QueryRunnerorg.apache.commons.dbutils.ResultSetHandler工具类org.apache.commons.dbutils.DbUtils API包说明 9.2 主要API的使用
9.2.1 DbUtils
DbUtils 提供如关闭连接、装载JDBC驱动程序等常规工作的工具类里面的所有方法都是静态的。主要方法如下 public static void close(…) throws java.sql.SQLException DbUtils类提供了三个重载的关闭方法。这些方法检查所提供的参数是不是NULL如果不是的话它们就关闭Connection、Statement和ResultSet。public static void closeQuietly(…): 这一类方法不仅能在Connection、Statement和ResultSet为NULL情况下避免关闭还能隐藏一些在程序中抛出的SQLEeception。public static void commitAndClose(Connection conn)throws SQLException 用来提交连接的事务然后关闭连接public static void commitAndCloseQuietly(Connection conn) 用来提交连接然后关闭连接并且在关闭连接时不抛出SQL异常。public static void rollback(Connection conn)throws SQLException允许conn为null因为方法内部做了判断public static void rollbackAndClose(Connection conn)throws SQLExceptionrollbackAndCloseQuietly(Connection)public static boolean loadDriver(java.lang.String driverClassName)这一方装载并注册JDBC驱动程序如果成功就返回true。使用该方法你不需要捕捉这个异常ClassNotFoundException。
9.2.2 QueryRunner类 该类简单化了SQL查询它与ResultSetHandler组合在一起使用可以完成大部分的数据库操作能够大大减少编码量。 QueryRunner类提供了两个构造器 默认的构造器需要一个 javax.sql.DataSource 来作参数的构造器 QueryRunner类的主要方法 更新 public int update(Connection conn, String sql, Object… params) throws SQLException:用来执行一个更新插入、更新或删除操作。… 插入 public T insert(Connection conn,String sql,ResultSetHandler rsh, Object… params) throws SQLException只支持INSERT语句其中 rsh - The handler used to create the result object from the ResultSet of auto-generated keys. 返回值: An object generated by the handler.即自动生成的键值… 批处理 public int[] batch(Connection conn,String sql,Object[][] params)throws SQLException INSERT, UPDATE, or DELETE语句public T insertBatch(Connection conn,String sql,ResultSetHandler rsh,Object[][] params)throws SQLException只支持INSERT语句… 查询 public Object query(Connection conn, String sql, ResultSetHandler rsh,Object… params) throws SQLException执行一个查询操作在这个查询中对象数组中的每个元素值被用来作为查询语句的置换参数。该方法会自行处理 PreparedStatement 和 ResultSet 的创建和关闭。… 测试
// 测试添加
Test
public void testInsert() throws Exception {QueryRunner runner new QueryRunner();Connection conn JDBCUtils.getConnection3();String sql insert into customers(name,email,birth)values(?,?,?);int count runner.update(conn, sql, 何成飞, heqq.com, 1992-09-08);System.out.println(添加了 count 条记录);JDBCUtils.closeResource(conn, null);}// 测试删除
Test
public void testDelete() throws Exception {QueryRunner runner new QueryRunner();Connection conn JDBCUtils.getConnection3();String sql delete from customers where id ?;int count runner.update(conn, sql,3);System.out.println(删除了 count 条记录);JDBCUtils.closeResource(conn, null);}9.2.3 ResultSetHandler接口及实现类 该接口用于处理 java.sql.ResultSet将数据按要求转换为另一种形式。 ResultSetHandler 接口提供了一个单独的方法Object handle (java.sql.ResultSet .rs)。 接口的主要实现类 ArrayHandler把结果集中的第一行数据转成对象数组。 ArrayListHandler把结果集中的每一行数据都转成一个数组再存放到List中。 **BeanHandler**将结果集中的第一行数据封装到一个对应的JavaBean实例中。 **BeanListHandler**将结果集中的每一行数据都封装到一个对应的JavaBean实例中存放到List里。 ColumnListHandler将结果集中某一列的数据存放到List中。 KeyedHandler(name)将结果集中的每一行数据都封装到一个Map里再把这些map再存到一个map里其key为指定的key。 **MapHandler**将结果集中的第一行数据封装到一个Map里key是列名value就是对应的值。 **MapListHandler**将结果集中的每一行数据都封装到一个Map里然后再存放到List **ScalarHandler**查询单个值对象 测试
/** 测试查询:查询一条记录* * 使用ResultSetHandler的实现类BeanHandler*/
Test
public void testQueryInstance() throws Exception{QueryRunner runner new QueryRunner();Connection conn JDBCUtils.getConnection3();String sql select id,name,email,birth from customers where id ?;//BeanHandlerCustomer handler new BeanHandler(Customer.class);Customer customer runner.query(conn, sql, handler, 23);System.out.println(customer); JDBCUtils.closeResource(conn, null);
}/** 测试查询:查询多条记录构成的集合* * 使用ResultSetHandler的实现类BeanListHandler*/
Test
public void testQueryList() throws Exception{QueryRunner runner new QueryRunner();Connection conn JDBCUtils.getConnection3();String sql select id,name,email,birth from customers where id ?;//BeanListHandlerCustomer handler new BeanListHandler(Customer.class);ListCustomer list runner.query(conn, sql, handler, 23);list.forEach(System.out::println);JDBCUtils.closeResource(conn, null);
}/** 自定义ResultSetHandler的实现类*/
Test
public void testQueryInstance1() throws Exception{QueryRunner runner new QueryRunner();Connection conn JDBCUtils.getConnection3();String sql select id,name,email,birth from customers where id ?;ResultSetHandlerCustomer handler new ResultSetHandlerCustomer() {Overridepublic Customer handle(ResultSet rs) throws SQLException {System.out.println(handle);
// return new Customer(1,Tom,tom126.com,new Date(123323432L));if(rs.next()){int id rs.getInt(id);String name rs.getString(name);String email rs.getString(email);Date birth rs.getDate(birth);return new Customer(id, name, email, birth);}return null;}};Customer customer runner.query(conn, sql, handler, 23);System.out.println(customer);JDBCUtils.closeResource(conn, null);
}/** 如何查询类似于最大的最小的平均的总和个数相关的数据* 使用ScalarHandler* */
Test
public void testQueryValue() throws Exception{QueryRunner runner new QueryRunner();Connection conn JDBCUtils.getConnection3();//测试一
// String sql select count(*) from customers where id ?;
// ScalarHandler handler new ScalarHandler();
// long count (long) runner.query(conn, sql, handler, 20);
// System.out.println(count);//测试二String sql select max(birth) from customers;ScalarHandler handler new ScalarHandler();Date birth (Date) runner.query(conn, sql, handler);System.out.println(birth);JDBCUtils.closeResource(conn, null);
}JDBC总结
总结
Test
public void testUpdateWithTx() {Connection conn null;try {//1.获取连接的操作//① 手写的连接JDBCUtils.getConnection();//② 使用数据库连接池C3P0;DBCP;Druid//2.对数据表进行一系列CRUD操作//① 使用PreparedStatement实现通用的增删改、查询操作version 1.0 \ version 2.0)
//version2.0的增删改public void update(Connection conn,String sql,Object ... args){}
//version2.0的查询 public T T getInstance(Connection conn,ClassT clazz,String sql,Object ... args){}//② 使用dbutils提供的jar包中提供的QueryRunner类//提交数据conn.commit();} catch (Exception e) {e.printStackTrace();try {//回滚数据conn.rollback();} catch (SQLException e1) {e1.printStackTrace();}}finally{//3.关闭连接等操作//① JDBCUtils.closeResource();//② 使用dbutils提供的jar包中提供的DbUtils类提供了关闭的相关操作}
}
