学习笔记 -- 数据库开发

本贴最后更新于 2531 天前,其中的信息可能已经时移世异

//JDBC 基础

JDBC URL

jdbc:

jdbc:oracle:thin:@::database

jdbc:microsoft::; DatabaseName=database

常用方法:

Statement stmt = conn.createStatement();

ResultSet rs = stmt.executeQuery("select userName from user“);

ResultSet 常用方法:

.next();

.previous();

.absolute();

.beforeFirst();

.afterLast();

.getString(ColumnName/Index);

.getInt(ColumnName/Index);

.getObject(ColumnName/Index);

构建步骤:

1. 装载驱动程序

Class.forName("com.mysql.jdbc.Driver");

2. 建立数据库连接

Connection conn = DriverManager.getConnection("jdbc:, user, password);

3. 执行 SQL 语句

Statement stmt = conn.createStatement(); //java.sql 包

ResultSet rs = stmt.executeQuery("select userName from user");

4. 获取执行结果

while (rs.next()) {

System.out.println("Hello " + rs.getString("userName"));

}

5. 清理环境

conn.close(); //一般需判断不为 null,需要放在异常处理的 finally 中

stmt.close();

rs.close();

//JDBC 进阶

游标提供一种客户端读取部分服务器端结果集的机制

DB_URL = jdbc: //开启游标

利用 PreparedStatement

.setFetchSize(1);

对于大对象的读取,采用流方式

ResultSet.getBinaryStream("columnName")

一次性往数据库中插入大量数据,采用批处理

Statement

.addBatch()

.executeBatch()

.clearBatch()

字符集编码

mysql 语句:

show variables like '%character%'; //显示字符集编码信息,优先级别:column>table>database>server

show create table user;

JDBC 设置:

DB_URL = DB_URL + characterEncoding=utf8

//数据库连接池

DBCP 连接池,Tomcat 的连接池组件,由三个 jar 包组成:

commons-dbcp.jar

commons-pool.jar

commons-logging.jar

创建 BasicDataSource 对象:

    public static BasicDataSource ds = null;

    ds = new BasicDataSource();

    ds.setUrl(DB_URL);

    ds.setDriverClassName(JDBC_DRIVER);

    ds.setUsername(USER);

    ds.setPassword(PASSWORD);

创建连接:

        conn = ds.getConnection();

        ...同JDBC基础

DBCP 高级配置

BasicDataSource

.setInitialSize() //设置初始连接数

.setMaxTotal() //设置最大连接数

.setMaxWaitMillis() //设置最大等待时间

.setMaxIdle() //设置最大空闲连接数

.setMinIdle() //设置最小空闲连接数,一般设置与最大空闲相同

DBCP 定期检查

BasicDataSource

.setTestWhiteIdle(true) //开启检查线程是否为有效的功能

.setMinEvictableIdleTimeMillis() //设置关闭数据库连接的空闲时间阈值

.setTimeBetweenEvictionRunMillis() //设置检查运行时间的间隔,一般小于默认最小空闲连接时间 8 小时

//SQL 注入与防范

SQL 注入例子:

在 SQL 语句拼接中,userName = "zhangsan';#",欺骗服务器

SQL 注入防范:

使用 PreparedStatement:

        PreparedStatement ptmt = null;

        ptmt = conn.prepareStatement("select * from user where userName = ? and password = ?");

        ptmt.setString(1, userName);

        ptmt.setString(2, password);

        rs = ptmt.executeQuery();

//事务

JDBC 事务控制

Connection

.setAutoCommit(false) //开启事务,默认为 true 即未开启事务,设置为 false 为开启事务

.commit() //提交事务

.rollback() //回滚事务

检查点

Savepoint sp = conn.setSavepoint(); //设置检查点

conn.rollback(sp); //回滚到检查点状态

脏读,不可重复读,幻读

事务并发执行

事务隔离级别:

读未提交(read uncommitted)

读提交 (read committed)

重复读(repeatable read)

串行化(serializable)

默认级别为重复读,级别越高,数据库性能越差

设置隔离级别:

Connection

.getTransactionIsolation()

.setTransactionIsolation()

死锁

死锁的必要条件:

互斥,请求和保持,不剥夺,环路等待

外部加锁:

共享锁(S):select * from table lock in share mode

排他锁(X):select * from table for update

内部加锁:

数据库系统为实现 ACID 特性自动添加

快照读:支持不加锁,select * from table 为快照读

当前读:可能加锁

解决死锁方法:强制回滚代价小的事务

分析死锁方法:show engine innodb status

//Mybatis

ORM 框架

SqlSessionFactory 配置,xml 文件内容:

<?xml version="1.0" encoding="UTF-8"?>
<!DOCTYPE configuration PUBLIC "-//mybatis.org//DTD Config 3.0//EN" "http://mybatis.org/dtd/mybatis-3-config.dtd">
<configuration>
	<environments default="development">
		<environment id="development">
			<transactionManager type="jdbc" />
			<!-- 配置数据库连接信息 -->
			<dataSource type="POOLED">
				<property name="driver" value="com.mysql.jdbc.Driver" />
				<property name="url" value="jdbc:mysql://localhost:3306/test" />
				<property name="username" value="root" />
				<property name="password" value="qiyao.luo" />
			</dataSource>
		</environment>
	</environments>
</configuration>	

创建 Java 对象与 SQL 语句映射关系配置文件,xml 文件内容:

<?xml version="1.0" encoding="UTF-8"?>
<!DOCTYPE mapper PUBLIC "-//mybatis.org//DTD Mapper 3.0//EN" "http://mybatis.org/dtd/mybatis-3-mapper.dtd">
<mapper namespace="com.micro.profession.mybatis.GetUserInfo">
	<!-- 在select标签中编写查询的SQL语句,设置select标签的id属性为getUser,
		 resultType="MyBatisTest.User"就表示将查询结果封装成一个User类 -->
	<!-- 根据id查询得到一个user对象 -->
	<select id="getUser" parameterType="int" resultType="com.micro.profession.mybatis.User">
	select id, userName, corp from user where id =#{id}
	</select>
</mapper>

注册配置文件

在 SqlSessionFactory 的配置文件中加入

<mappers>
    <mapper resource="com/micro/profession/mybatis/userMapper.xml" />
</mappers>

Mybatis 使用步骤:

    //1. 声明配置文件的目录

    String resource = "conf.xml";

    //2. 加载应用配置文件

    InputStream is = HelloMybatis.class.getClassLoader().getResourceAsStream(resource);

    //3. 创建SqlSessionFactory

    SqlSessionFactory sessionFactory = new SqlSessionFactoryBuilder().build(is);

    //4. 获取session

    SqlSession session = sessionFactory.openSession();

    //5. 获取操作类

    GetUserInfo getUserInfo = session.getMapper(GetUserInfo.class);

    User user = getUserInfo.getUser(2);

    System.out.println(user.getId() + " " + user.getUserName() + " " + user.getPassword());

    session.close();

采用注解的方法进行映射:

@Select("select * from user where user_id = #{id}")

public User getUser(int id);

使用方法:

在原来使用步骤基础上插入:

    SqlSessionFactory sessionFactory = new SqlSessionFactoryBuilder().build(is); 

    Configuration conf = sessionFactory.getConfiguration();

    conf.addMapper(GetUserInfoAnnotation.class);

    SqlSession session = sessionFactory.openSession();  

其他操作,增删查改:

select user_id, userName, password from user where user_id =#{user_id}

insert into user (userName, password) values(#{userName}, #{password})

update user set userName = #{userName}, password = #{password} where user_id = #{user_id}

delete from user where user_id = #{user_id}

使用实例:

    //1. 声明配置文件的目录

    String resource = "conf.xml";

    //2. 加载应用配置文件

    InputStream is = HelloMybatis.class.getClassLoader().getResourceAsStream(resource);

    //3. 创建SqlSessionFactory

    SqlSessionFactory sessionFactory = new SqlSessionFactoryBuilder().build(is);

    //4. 获取session

    SqlSession session = sessionFactory.openSession(true);

    //5. 获取操作类

    GetUserInfo getUserInfo = session.getMapper(GetUserInfo.class);

    //插入用户

    User user = new User("xiaoming", "123456");

    getUserInfo.addUser(user);

    System.out.println(user.getId());

    //查询用户

    user = getUserInfo.getUser(user.getId());

    System.out.println(user.getId() + " " + user.getUserName() + " " + user.getPassword());

    //更改用户

    user.setUserName("LiMing");

    getUserInfo.updateUser(user);

    //删除用户

    getUserInfo.deleteUser(user);

    //关闭session

    session.close();

Mybatis 传递多个参数的方法

DAO 层函数

Public User selectUser(@param(“userName”)String name,@param(“userArea”)String area);

对应 Mapper

<select id=" selectUser" resultMap="BaseResultMap">
   select  *  from user_user_t   where user_name = #{userName,jdbcType=VARCHAR} and user_area=#{userArea,jdbcType=VARCHAR}
</select> 

复杂查询,使用 ResultMap,实现复杂查询结果到复杂对象关联关系的转化

Constructor

类在实例化时,用来注入结果到构造方法中

idArg —— ID 参数;标记结果作为 ID 可以帮助提高整体性能

arg —— 注入到构造方法的一个普通结果

Collection

实现一对多的关联

id —— 一个 ID 结果;标记结果作为 ID 可以帮助提高整体性能

result —— 注入到字段或 JavaBean 属性的普通结果

Mapper 的 xml 文件内容:

<?xml version="1.0" encoding="UTF-8"?>
<!DOCTYPE mapper PUBLIC "-//mybatis.org//DTD Mapper 3.0//EN" "http://mybatis.org/dtd/mybatis-3-mapper.dtd">
<mapper namespace="com.netease.mybatis.practice.UserOp">
	<select id="getUser" parameterType="int" resultMap="UserMap">
	select u.user_id as user_id, userName, password, c.id as courseId, courseName from user u left
	join
	UserCourse uc on u.user_id = uc.user_id left
	join
	course c on c.id = uc.course_id	where u.user_id =#{user_id}
	</select>

	<resultMap id="UserMap" type="com.netease.mybatis.practice.User">
		<constructor>
			<idArg column="user_id" javaType="int" />
			<arg column="userName" javaType="String" />
			<arg column="password" javaType="String" />
		</constructor>
		<collection property="courses" ofType="com.netease.mybatis.practice.Course">
			<id property="courseId" column="courseId" />
			<result property="courseName" column="courseName" />
		</collection>
	</resultMap>
</mapper>

collection 项若为 Integer,String 等类型,可设为

  <collection property="list" column="productname" ofType="java.lang.String">
     <result column="productname" />
  </collection>

Association,实现复杂类型之间的关联

id —— 一个 ID 结果;标记结果作为 ID 可以帮助提高整体性能

result —— 注入到字段或 JavaBean 属性的普通结果

xml 文件内容中增加 association 项,修改为:

<collection property="courses" ofType="com.netease.mybatis.practice.Course">
			<id property="courseId" column="courseId" />
			<result property="courseName" column="courseName" />
			<association property="teacher" column="teacherId" javaType="com.netease.mybatis.practice.Teacher">
				<id property="teacherId" column="teacherId" />
				<result property="teacherName" column="teacherName" />
			</association>
</collection>

Mybatis 自带连接池

连接池常用配置选项

poolMaximumActiveConnections:

数据库最大活跃连接数,不宜设置过大

poolMaximumIdleConnections:

最大空闲连接数,一般设置与 poolMaximum 相同即可

poolMaximumCheckoutTime:

获取连接时如果没有 idleConnection 同时 activeConnection 达到最大值,则从 activeConnection 列表第一个连接开始检查,如果超过此时间,则使其失效,返回该连接,建议设置为预期最大 SQL 执行时间

poolTimeToWait:

获取服务器连接的超时时间,如果超时,打印日志重新获取连接。默认为 20s

poolPingEnabled:

启用连接侦测,检查连接池中的连接是否为有效连接,默认为关闭,建议开启

poolPingQuery:

侦测 SQL,建议使用 select 1,开销小

poolPingConnectionsNotUsedFor:

侦测时间,建议小于服务器端超时时间,MySQL 默认超时 8 小时

  • 数据库

    据说 99% 的性能瓶颈都在数据库。

    330 引用 • 614 回帖 • 3 关注
  • MySQL

    MySQL 是一个关系型数据库管理系统,由瑞典 MySQL AB 公司开发,目前属于 Oracle 公司。MySQL 是最流行的关系型数据库管理系统之一。

    675 引用 • 535 回帖

相关帖子

欢迎来到这里!

我们正在构建一个小众社区,大家在这里相互信任,以平等 • 自由 • 奔放的价值观进行分享交流。最终,希望大家能够找到与自己志同道合的伙伴,共同成长。

注册 关于
请输入回帖内容 ...

推荐标签 标签

  • Hibernate

    Hibernate 是一个开放源代码的对象关系映射框架,它对 JDBC 进行了非常轻量级的对象封装,使得 Java 程序员可以随心所欲的使用对象编程思维来操纵数据库。

    39 引用 • 103 回帖 • 683 关注
  • 快应用

    快应用 是基于手机硬件平台的新型应用形态;标准是由主流手机厂商组成的快应用联盟联合制定;快应用标准的诞生将在研发接口、能力接入、开发者服务等层面建设标准平台;以平台化的生态模式对个人开发者和企业开发者全品类开放。

    15 引用 • 127 回帖
  • CodeMirror
    1 引用 • 2 回帖 • 115 关注
  • Google

    Google(Google Inc.,NASDAQ:GOOG)是一家美国上市公司(公有股份公司),于 1998 年 9 月 7 日以私有股份公司的形式创立,设计并管理一个互联网搜索引擎。Google 公司的总部称作“Googleplex”,它位于加利福尼亚山景城。Google 目前被公认为是全球规模最大的搜索引擎,它提供了简单易用的免费服务。不作恶(Don't be evil)是谷歌公司的一项非正式的公司口号。

    49 引用 • 192 回帖
  • 音乐

    你听到信仰的声音了么?

    59 引用 • 509 回帖
  • Tomcat

    Tomcat 最早是由 Sun Microsystems 开发的一个 Servlet 容器,在 1999 年被捐献给 ASF(Apache Software Foundation),隶属于 Jakarta 项目,现在已经独立为一个顶级项目。Tomcat 主要实现了 JavaEE 中的 Servlet、JSP 规范,同时也提供 HTTP 服务,是市场上非常流行的 Java Web 容器。

    162 引用 • 529 回帖
  • Python

    Python 是一种面向对象、直译式电脑编程语言,具有近二十年的发展历史,成熟且稳定。它包含了一组完善而且容易理解的标准库,能够轻松完成很多常见的任务。它的语法简捷和清晰,尽量使用无异义的英语单词,与其它大多数程序设计语言使用大括号不一样,它使用缩进来定义语句块。

    535 引用 • 672 回帖
  • CentOS

    CentOS(Community Enterprise Operating System)是 Linux 发行版之一,它是来自于 Red Hat Enterprise Linux 依照开放源代码规定释出的源代码所编译而成。由于出自同样的源代码,因此有些要求高度稳定的服务器以 CentOS 替代商业版的 Red Hat Enterprise Linux 使用。两者的不同在于 CentOS 并不包含封闭源代码软件。

    238 引用 • 224 回帖 • 2 关注
  • Kubernetes

    Kubernetes 是 Google 开源的一个容器编排引擎,它支持自动化部署、大规模可伸缩、应用容器化管理。

    108 引用 • 54 回帖 • 1 关注
  • Bug

    Bug 本意是指臭虫、缺陷、损坏、犯贫、窃听器、小虫等。现在人们把在程序中一些缺陷或问题统称为 bug(漏洞)。

    77 引用 • 1741 回帖
  • jsoup

    jsoup 是一款 Java 的 HTML 解析器,可直接解析某个 URL 地址、HTML 文本内容。它提供了一套非常省力的 API,可通过 DOM,CSS 以及类似于 jQuery 的操作方法来取出和操作数据。

    6 引用 • 1 回帖 • 457 关注
  • IPFS

    IPFS(InterPlanetary File System,星际文件系统)是永久的、去中心化保存和共享文件的方法,这是一种内容可寻址、版本化、点对点超媒体的分布式协议。请浏览 IPFS 入门笔记了解更多细节。

    20 引用 • 245 回帖 • 228 关注
  • Logseq

    Logseq 是一个隐私优先、开源的知识库工具。

    Logseq is a joyful, open-source outliner that works on top of local plain-text Markdown and Org-mode files. Use it to write, organize and share your thoughts, keep your to-do list, and build your own digital garden.

    4 引用 • 55 回帖 • 7 关注
  • OAuth

    OAuth 协议为用户资源的授权提供了一个安全的、开放而又简易的标准。与以往的授权方式不同之处是 oAuth 的授权不会使第三方触及到用户的帐号信息(如用户名与密码),即第三方无需使用用户的用户名与密码就可以申请获得该用户资源的授权,因此 oAuth 是安全的。oAuth 是 Open Authorization 的简写。

    36 引用 • 103 回帖 • 8 关注
  • HHKB

    HHKB 是富士通的 Happy Hacking 系列电容键盘。电容键盘即无接点静电电容式键盘(Capacitive Keyboard)。

    5 引用 • 74 回帖 • 405 关注
  • CloudFoundry

    Cloud Foundry 是 VMware 推出的业界第一个开源 PaaS 云平台,它支持多种框架、语言、运行时环境、云平台及应用服务,使开发人员能够在几秒钟内进行应用程序的部署和扩展,无需担心任何基础架构的问题。

    5 引用 • 18 回帖 • 150 关注
  • 负能量

    上帝为你关上了一扇门,然后就去睡觉了....努力不一定能成功,但不努力一定很轻松 (° ー °〃)

    85 引用 • 1201 回帖 • 454 关注
  • VirtualBox

    VirtualBox 是一款开源虚拟机软件,最早由德国 Innotek 公司开发,由 Sun Microsystems 公司出品的软件,使用 Qt 编写,在 Sun 被 Oracle 收购后正式更名成 Oracle VM VirtualBox。

    10 引用 • 2 回帖 • 7 关注
  • BAE

    百度应用引擎(Baidu App Engine)提供了 PHP、Java、Python 的执行环境,以及云存储、消息服务、云数据库等全面的云服务。它可以让开发者实现自动地部署和管理应用,并且提供动态扩容和负载均衡的运行环境,让开发者不用考虑高成本的运维工作,只需专注于业务逻辑,大大降低了开发者学习和迁移的成本。

    19 引用 • 75 回帖 • 621 关注
  • 以太坊

    以太坊(Ethereum)并不是一个机构,而是一款能够在区块链上实现智能合约、开源的底层系统。以太坊是一个平台和一种编程语言 Solidity,使开发人员能够建立和发布下一代去中心化应用。 以太坊可以用来编程、分散、担保和交易任何事物:投票、域名、金融交易所、众筹、公司管理、合同和知识产权等等。

    34 引用 • 367 回帖 • 2 关注
  • 工具

    子曰:“工欲善其事,必先利其器。”

    273 引用 • 679 回帖
  • SQLServer

    SQL Server 是由 [微软] 开发和推广的关系数据库管理系统(DBMS),它最初是由 微软、Sybase 和 Ashton-Tate 三家公司共同开发的,并于 1988 年推出了第一个 OS/2 版本。

    19 引用 • 31 回帖 • 3 关注
  • Webswing

    Webswing 是一个能将任何 Swing 应用通过纯 HTML5 运行在浏览器中的 Web 服务器,详细介绍请看 将 Java Swing 应用变成 Web 应用

    1 引用 • 15 回帖 • 635 关注
  • Ruby

    Ruby 是一种开源的面向对象程序设计的服务器端脚本语言,在 20 世纪 90 年代中期由日本的松本行弘(まつもとゆきひろ/Yukihiro Matsumoto)设计并开发。在 Ruby 社区,松本也被称为马茨(Matz)。

    7 引用 • 31 回帖 • 177 关注
  • 深度学习

    深度学习(Deep Learning)是机器学习的分支,是一种试图使用包含复杂结构或由多重非线性变换构成的多个处理层对数据进行高层抽象的算法。

    40 引用 • 40 回帖
  • 友情链接

    确认过眼神后的灵魂连接,站在链在!

    24 引用 • 373 回帖 • 3 关注
  • 互联网

    互联网(Internet),又称网际网络,或音译因特网、英特网。互联网始于 1969 年美国的阿帕网,是网络与网络之间所串连成的庞大网络,这些网络以一组通用的协议相连,形成逻辑上的单一巨大国际网络。

    96 引用 • 330 回帖