JDBC往MYSQL存储1G以上的BLOB字段问题

Posted

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了JDBC往MYSQL存储1G以上的BLOB字段问题相关的知识,希望对你有一定的参考价值。

当BLOB对象较小的时候,我们通常采用下面的方法存储blob对象:
InputStream fis = new FileInputStream(infile);
pstmt = conn.prepareStatement("insert into tmp(descs,pic) values(?,?)"); pstmt.setString(1,file.getName()); //把传过来的第一个参数设为文件名
pstmt.setBinaryStream(2,fis,fis.available()); //第二个参数为文件的pstmt.executeUpdate();
但是如果文件非常大,而系统的内存又非常有限的情况下,比如1GB以上的时候这样的代码会造成超大的内存占用,使java虚拟机崩溃。有没有办法像平时普通的I/O流那样可以设定buffer大小,让文件能通过buffer循环读取的方式存到数据库中呢?以前用Oracle时是有的,mysql下没找到方法。
高手,大大们救命,帮忙解答下哇,就50分了,不好意思!

1. 你数据库字段是什么类型的?

MYSQL数据库中的字段大小如下:
BLOB 64KB
MEDIUMBLOB 16MB
LONGBLOB 4GB

2.我建议使用InputStreamBuffered 性能高
参考技术A 不太明白,感觉1g的东西 要存库 ,什么需求,会很慢吧 参考技术B 答案在QQ留言里

如果对您有帮助,请记得采纳为满意答案,谢谢!祝您生活愉快!

vaela

jdbc 读写 blob 类型有哪些方式?

1 MySQL BLOB类型
MySQL中,BLOB是一个二进制大型对象,是一个可以存储大量数据的容器,它能容纳不同大小的数据。

插入BLOB类型的数据必须使用PreparedStatement,因为BLOB类型的数据无法使用字符串拼接写的。

MySQL的四种BLOB类型(除了在存储的最大信息量上不同外,他们是等同的)

点击并拖拽以移动

实际使用中根据需要存入的数据大小定义不同的BLOB类型。
需要注意的是:如果存储的文件过大,数据库的性能会下降。
如果在指定了相关的Blob类型以后,还报错:xxx too large,那么在mysql的安装目录下,找my.ini文件加上如下的配置参数: max_allowed_packet=16M。同时注意:修改了my.ini页游文件之后,需要重新启动mysql服务。
2 向数据表中插入大数据类型
//获取连接
Connection conn = JDBCUtils.getConnection();

String sql = "insert into customers(name,email,birth,photo)values(?,?,?,?)";
PreparedStatement ps = conn.prepareStatement(sql);
//java项目www fhadmin org
// 填充占位符
ps.setString(1, "张强");
ps.setString
ps.setDate(3, new Date(new java.util.Date().getTime()));
// 操作Blob类型的变量
FileInputStream fis = new FileInputStream("xhq.png");
ps.setBlob(4, fis);
//执行
ps.execute();

fis.close();
JDBCUtils.closeResource(conn, ps);
点击并拖拽以移动
3 修改数据表中的Blob类型字段
Connection conn = JDBCUtils.getConnection();
String sql = "update customers set photo = ? where id = ?";
PreparedStatement ps = conn.prepareStatement(sql);
//java项目www.walajiao.com
// 填充占位符
// 操作Blob类型的变量
FileInputStream fis = new FileInputStream("coffee.png");
ps.setBlob(1, fis);
ps.setInt(2, 25);
ps.execute();
fis.close();
JDBCUtils.closeResource(conn, ps);
点击并拖拽以移动
4 从数据表中读取大数据类型
//java项目www fhadmin org
String sql = "SELECT id, name, email, birth, photo FROM customer WHERE id = ?";
conn = getConnection();
ps = conn.prepareStatement(sql);
ps.setInt(1, 8);
rs = ps.executeQuery();
if(rs.next()){

Integer id = rs.getInt(1);
String name = rs.getString(2);
String email = rs.getString(3);
Date birth = rs.getDate(4);
Customer cust = new Customer(id, name, email, birth);
System.out.println(cust); 
//读取Blob类型的字段
Blob photo = rs.getBlob(5);
InputStream is = photo.getBinaryStream();
OutputStream os = new FileOutputStream("c.jpg");
byte [] buffer = new byte[1024];
int len = 0;
while((len = is.read(buffer)) != -1){
    os.write(buffer, 0, len);
}
JDBCUtils.closeResource(conn, ps, rs);
    
if(is != null){
    is.close();
}
    
if(os !=  null){
    os.close();
}

}

以上是关于JDBC往MYSQL存储1G以上的BLOB字段问题的主要内容,如果未能解决你的问题,请参考以下文章

[19/05/07-星期二] JDBC(Java DataBase Connectivity)_CLOB(存储大量的文本数据)与BLOB(存储大量的二进制数据)

JDBC处理mysql大数据

12.JDBC

jdbc 读写 blob 类型有哪些方式?

Java -- JDBC 学习--处理Blob

jdbc获取blob类型乱码