javaweb学习总结——使用JDBC处理MySQL大数据

更新时间：2016年11月01日 16:32:53 作者：孤傲苍狼

本篇文章主要介绍了JDBC处理MySQL大数据，有时是需要用程序把大文本或二进制数据直接保存到数据库中进行储存的，非常具有实用价值，需要的朋友可以参考下。

BLOB (binary large object)，二进制大对象，是一个可以存储二进制文件的容器。在计算机中，BLOB常常是数据库中用来存储二进制文件的字段类型，BLOB是一个大文件，典型的BLOB是一张图片或一个声音文件，由于它们的尺寸，必须使用特殊的方式来处理（例如：上传、下载或者存放到一个数据库）。

一、基本概念

在实际开发中，有时是需要用程序把大文本或二进制数据直接保存到数据库中进行储存的。

对MySQL而言只有blob，而没有clob，mysql存储大文本采用的是Text，Text和blob分别又分为：

TINYTEXT、TEXT、MEDIUMTEXT和LONGTEXT

TINYBLOB、BLOB、MEDIUMBLOB和LONGBLOB

二、搭建测试环境

2.1、搭建的测试项目架构

如图：

2.2、编写db.properties配置文件

driver=com.mysql.jdbc.Driver
url=jdbc:mysql://localhost:3306/jdbcStudy
username=root
password=XDP

2.3、编写JdbcUtils工具类

package me.gacl.utils;

import java.io.InputStream;
import java.sql.Connection;
import java.sql.DriverManager;
import java.sql.ResultSet;
import java.sql.SQLException;
import java.sql.Statement;
import java.util.Properties;

public class JdbcUtils {

  private static String driver = null;
  private static String url = null;
  private static String username = null;
  private static String password = null;
  
  static{
    try{
      //读取db.properties文件中的数据库连接信息
      InputStream in = JdbcUtils.class.getClassLoader().getResourceAsStream("db.properties");
      Properties prop = new Properties();
      prop.load(in);
      
      //获取数据库连接驱动
      driver = prop.getProperty("driver");
      //获取数据库连接URL地址
      url = prop.getProperty("url");
      //获取数据库连接用户名
      username = prop.getProperty("username");
      //获取数据库连接密码
      password = prop.getProperty("password");
      
      //加载数据库驱动
      Class.forName(driver);
      
    }catch (Exception e) {
      throw new ExceptionInInitializerError(e);
    }
  }
  
  /**
  * @Method: getConnection
  * @Description: 获取数据库连接对象
  * @Anthor:孤傲苍狼
  *
  * @return Connection数据库连接对象
  * @throws SQLException
  */ 
  public static Connection getConnection() throws SQLException{
    return DriverManager.getConnection(url, username,password);
  }
  
  /**
  * @Method: release
  * @Description: 释放资源，
  *   要释放的资源包括Connection数据库连接对象，负责执行SQL命令的Statement对象，存储查询结果的ResultSet对象
  * @Anthor:孤傲苍狼
  *
  * @param conn
  * @param st
  * @param rs
  */ 
  public static void release(Connection conn,Statement st,ResultSet rs){
    if(rs!=null){
      try{
        //关闭存储查询结果的ResultSet对象
        rs.close();
      }catch (Exception e) {
        e.printStackTrace();
      }
      rs = null;
    }
    if(st!=null){
      try{
        //关闭负责执行SQL命令的Statement对象
        st.close();
      }catch (Exception e) {
        e.printStackTrace();
      }
    }
    
    if(conn!=null){
      try{
        //关闭Connection数据库连接对象
        conn.close();
      }catch (Exception e) {
        e.printStackTrace();
      }
    }
  }
}

三、使用JDBC处理MySQL的大文本

对于MySQL中的Text类型，可调用如下方法设置

PreparedStatement.setCharacterStream(index, reader, length);//注意length长度须设置，并且设置为int型

对MySQL中的Text类型，可调用如下方法获取

reader = resultSet. getCharacterStream(String columnLabel);2 string s = resultSet.getString(String columnLabel);

3.1、测试范例

1、编写SQL测试脚本

create database jdbcstudy;
use jdbcstudy;
create table testclob
(
     id int primary key auto_increment,
     resume text
);

2、编写测试代码如下：

package me.gacl.demo;

import java.io.File;
import java.io.FileReader;
import java.io.FileWriter;
import java.io.Reader;
import java.sql.Connection;
import java.sql.PreparedStatement;
import java.sql.ResultSet;
import me.gacl.utils.JdbcUtils;
import org.junit.Test;

/**
* @ClassName: JdbcOperaClob
* @Description: 使用JDBC操作MySQL的大文本
* @author: 孤傲苍狼
* @date: 2014-9-19 下午10:10:04
*
*/ 
public class JdbcOperaClob {

  /**
  * @Method: add
  * @Description:向数据库中插入大文本数据
  * @Anthor:孤傲苍狼
  *
  */ 
  @Test
  public void add(){
    Connection conn = null;
    PreparedStatement st = null;
    ResultSet rs = null;
    Reader reader = null;
    try{
      conn = JdbcUtils.getConnection();
      String sql = "insert into testclob(resume) values(?)";
      st = conn.prepareStatement(sql);
      //这种方式获取的路径，其中的空格会被使用“%20”代替
      String path = JdbcOperaClob.class.getClassLoader().getResource("data.txt").getPath();
      //将“%20”替换回空格
      path = path.replaceAll("%20", " ");
      File file = new File(path);
      reader = new FileReader(file);
      st.setCharacterStream(1, reader,(int) file.length());
      int num = st.executeUpdate();
      if(num>0){
        System.out.println("插入成功！！");
      }
      //关闭流
      reader.close();
    }catch (Exception e) {
      e.printStackTrace();
    }finally{
      JdbcUtils.release(conn, st, rs);
    }
  }
  
  /**
  * @Method: read
  * @Description: 读取数据库中的大文本数据
  * @Anthor:孤傲苍狼
  *
  */ 
  @Test
  public void read(){
    Connection conn = null;
    PreparedStatement st = null;
    ResultSet rs = null;
    try{
      conn = JdbcUtils.getConnection();
      String sql = "select resume from testclob where id=2";
      st = conn.prepareStatement(sql);
      rs = st.executeQuery();
      
      String contentStr ="";
      String content = "";
      if(rs.next()){
        //使用resultSet.getString("字段名")获取大文本数据的内容
        content = rs.getString("resume");
        //使用resultSet.getCharacterStream("字段名")获取大文本数据的内容
        Reader reader = rs.getCharacterStream("resume");
        char buffer[] = new char[1024];
        int len = 0;
        FileWriter out = new FileWriter("D:\\1.txt");
        while((len=reader.read(buffer))>0){
          contentStr += new String(buffer);
          out.write(buffer, 0, len);
        }
        out.close();
        reader.close();
      }
      System.out.println(content);
      System.out.println("-----------------------------------------------");
      System.out.println(contentStr);
    }catch (Exception e) {
      e.printStackTrace();
    }finally{
      JdbcUtils.release(conn, st, rs);
    }
  }
}

四、使用JDBC处理MySQL的二进制数据

对于MySQL中的BLOB类型，可调用如下方法设置：

PreparedStatement. setBinaryStream(i, inputStream, length);

对MySQL中的BLOB类型，可调用如下方法获取：

InputStream in = resultSet.getBinaryStream(String columnLabel);
InputStream in = resultSet.getBlob(String columnLabel).getBinaryStream();

4.1、测试范例

1、编写SQL测试脚本

create table testblob
(
   id int primary key auto_increment,
   image longblob
 );

2、编写测试代码如下：

package me.gacl.demo;

import java.io.File;
import java.io.FileInputStream;
import java.io.FileOutputStream;
import java.io.InputStream;
import java.sql.Connection;
import java.sql.PreparedStatement;
import java.sql.ResultSet;
import me.gacl.utils.JdbcUtils;
import org.junit.Test;

/**
* @ClassName: JdbcOperaClob
* @Description: 使用JDBC操作MySQL的二进制数据(例如图像、声音、二进制文)
* @author: 孤傲苍狼
* @date: 2014-9-19 下午10:10:04
*
*/ 
public class JdbcOperaBlob {

  /**
  * @Method: add
  * @Description:向数据库中插入二进制数据
  * @Anthor:孤傲苍狼
  *
  */ 
  @Test
  public void add(){
    Connection conn = null;
    PreparedStatement st = null;
    ResultSet rs = null;
    try{
      conn = JdbcUtils.getConnection();
      String sql = "insert into testblob(image) values(?)";
      st = conn.prepareStatement(sql);
      //这种方式获取的路径，其中的空格会被使用“%20”代替
      String path = JdbcOperaBlob.class.getClassLoader().getResource("01.jpg").getPath();
      //将“%20”替换会空格
      path = path.replaceAll("%20", " ");
      File file = new File(path);
      FileInputStream fis = new FileInputStream(file);//生成的流
      st.setBinaryStream(1, fis,(int) file.length());
      int num = st.executeUpdate();
      if(num>0){
        System.out.println("插入成功！！");
      }
      fis.close();
    }catch (Exception e) {
      e.printStackTrace();
    }finally{
      JdbcUtils.release(conn, st, rs);
    }
  }
  
  /**
  * @Method: read
  * @Description: 读取数据库中的二进制数据
  * @Anthor:孤傲苍狼
  *
  */ 
  @Test
  public void read() {
    Connection conn = null;
    PreparedStatement st = null;
    ResultSet rs = null;
    try {
      conn = JdbcUtils.getConnection();
      String sql = "select image from testblob where id=?";
      st = conn.prepareStatement(sql);
      st.setInt(1, 1);
      rs = st.executeQuery();
      if (rs.next()) {
        //InputStream in = rs.getBlob("image").getBinaryStream();//这种方法也可以
        InputStream in = rs.getBinaryStream("image");
        int len = 0;
        byte buffer[] = new byte[1024];
        
        FileOutputStream out = new FileOutputStream("D:\\1.jpg");
        while ((len = in.read(buffer)) > 0) {
          out.write(buffer, 0, len);
        }
        in.close();
        out.close();
      }
    } catch (Exception e) {
      e.printStackTrace();
    } finally {
      JdbcUtils.release(conn, st, rs);
    }
  }
}

以上就是本文的全部内容，希望对大家的学习有所帮助，也希望大家多多支持脚本之家。

您可能感兴趣的文章:

jdbc
mysql

浅谈idea中导入maven项目的两种方式
本文主要介绍了浅谈idea中导入maven项目的两种方式,文中通过示例代码介绍的非常详细,对大家的学习或者工作具有一定的参考学习价值,需要的朋友们下面随着小编来一起学习学习吧
2023-08-08
Java后端向前端返回文件流实现下载功能的方法
这篇文章主要给大家介绍了关于Java后端向前端返回文件流实现下载功能的相关资料,Java后端可以通过调用接口返回文件流来实现文件传输功能，文中通过代码介绍的非常详细,需要的朋友可以参考下
2023-10-10
Lombok注解之@SuperBuilder--解决无法builder父类属性问题
这篇文章主要介绍了Lombok注解之@SuperBuilder--解决无法builder父类属性问题，具有很好的参考价值，希望对大家有所帮助。如有错误或未考虑完全的地方，望不吝赐教
2022-09-09
java 实现链栈存储的方法
下面小编就为大家带来一篇java 实现链栈存储的方法。小编觉得挺不错的，现在就分享给大家，也给大家做个参考。一起跟随小编过来看看吧
2017-08-08
Java中Static关键字的五种用法详解
这篇文章主要介绍了Java中static的五种用法：修饰成员变量，修饰成员方法，修饰内部类，静态代码块，静态导包，想详细了解的小伙伴可以参考阅读本文
2023-03-03
Java最简单的DES加密算法实现案例
下面小编就为大家带来一篇Java最简单的DES加密算法实现案例。小编觉得挺不错的，现在就分享给大家，也给大家做个参考。一起跟随小编过来看看吧
2017-06-06
eclipse启动tomcat无法访问的解决方法
这篇文章介绍了eclipse启动tomcat无法访问的解决方法，有需要的朋友可以参考一下
2013-10-10
java 重定义数组的实现方法(与VB的ReDim相像)
java 重定义数组的实现方法(与VB的ReDim相像)，需要的朋友可以参考一下
2013-04-04
Java享元设计模式优化对象创建提高性能和效率
Java享元设计模式通过共享可重用的对象，减少了系统中对象的数量，优化了对象的创建和管理，提高了性能和效率。它是一种经典的设计模式，适用于需要处理大量相似对象的应用程序
2023-04-04
Java中使用WebSocket的几种方式
本文主要介绍了Java中使用WebSocket的几种方式
2024-06-06

javaweb学习总结——使用JDBC处理MySQL大数据

相关文章

最新评论

大家感兴趣的内容

最近更新的内容

常用在线小工具