`

(收藏)深入分析Java的序列化与反序列化

 
阅读更多
https://mp.weixin.qq.com/s/T2Bn4pmH3F61Q11_QMvJSw

序列化是一种对象持久化的手段。普遍应用在网络传输、RMI等场景中。本文通过分析ArrayList的序列化来介绍Java序列化的相关内容。主要涉及到以下几个问题:

怎么实现Java的序列化

为什么实现了java.io.Serializable接口才能被序列化

transient的作用是什么

怎么自定义序列化策略

自定义的序列化策略是如何被调用的

ArrayList对序列化的实现有什么好处

Java对象的序列化
Java平台允许我们在内存中创建可复用的Java对象,但一般情况下,只有当JVM处于运行时,这些对象才可能存在,即,这些对象的生命周期不会比JVM的生命周期更长。但在现实应用中,就可能要求在JVM停止运行之后能够保存(持久化)指定的对象,并在将来重新读取被保存的对象。Java对象序列化就能够帮助我们实现该功能。

使用Java对象序列化,在保存对象时,会把其状态保存为一组字节,在未来,再将这些字节组装成对象。必须注意地是,对象序列化保存的是对象的”状态”,即它的成员变量。由此可知, 对象序列化不会关注类中的静态变量 。

除了在持久化对象时会用到对象序列化之外,当使用RMI(远程方法调用),或在网络中传递对象时,都会用到对象序列化。Java序列化API为处理对象序列化提供了一个标准机制,该API简单易用,在本文的后续章节中将会陆续讲到。

1public class ArrayList<E> extends AbstractList<E>
2        implements List<E>, RandomAccess, Cloneable, java.io.Serializable
3{
4    private static final long serialVersionUID = 8683452581122892189L;
5    transient Object[] elementData; // non-private to simplify nested class access
6    private int size;
7}
如何对Java对象进行序列化与反序列化
在Java中,只要一个类实现了 java.io.Serializable 接口,那么它就可以被序列化。这里先来一段代码:

code 1 创建一个User类,用于序列化及反序列化

1package com.hollis;
2import java.io.Serializable;
3import java.util.Date;
4/**
5 * Created by hollis on 16/2/2.
6 */
7public class User implements Serializable{
8    private String name;
9    private int age;
10    private Date birthday;
11    private transient String gender;
12    private static final long serialVersionUID = -6849794470754667710L;
13    public String getName() {
14        return name;
15    }
16    public void setName(String name) {
17        this.name = name;
18    }
19    public int getAge() {
20        return age;
21    }
22    public void setAge(int age) {
23        this.age = age;
24    }
25    public Date getBirthday() {
26        return birthday;
27    }
28    public void setBirthday(Date birthday) {
29        this.birthday = birthday;
30    }
31    public String getGender() {
32        return gender;
33    }
34    public void setGender(String gender) {
35        this.gender = gender;
36    }
37    @Override
38    public String toString() {
39        return "User{" +
40                "name='" + name + '/'' +
41                ", age=" + age +
42                ", gender=" + gender +
43                ", birthday=" + birthday +
44                '}';
45    }
46}
47
code 2 对User进行序列化及反序列化的Demo

1package com.hollis;
2import org.apache.commons.io.FileUtils;
3import org.apache.commons.io.IOUtils;
4import java.io.*;
5import java.util.Date;
6/**
7 * Created by hollis on 16/2/2.
8 */
9public class SerializableDemo {
10    public static void main(String[] args) {
11        //Initializes The Object
12        User user = new User();
13        user.setName("hollis");
14        user.setGender("male");
15        user.setAge(23);
16        user.setBirthday(new Date());
17        System.out.println(user);
18        //Write Obj to File
19        ObjectOutputStream oos = null;
20        try {
21            oos = new ObjectOutputStream(new FileOutputStream("tempFile"));
22            oos.writeObject(user);
23        } catch (IOException e) {
24            e.printStackTrace();
25        } finally {
26            IOUtils.closeQuietly(oos);
27        }
28        //Read Obj from File
29        File file = new File("tempFile");
30        ObjectInputStream ois = null;
31        try {
32            ois = new ObjectInputStream(new FileInputStream(file));
33            User newUser = (User) ois.readObject();
34            System.out.println(newUser);
35        } catch (IOException e) {
36            e.printStackTrace();
37        } catch (ClassNotFoundException e) {
38            e.printStackTrace();
39        } finally {
40            IOUtils.closeQuietly(ois);
41            try {
42                FileUtils.forceDelete(file);
43            } catch (IOException e) {
44                e.printStackTrace();
45            }
46        }
47    }
48}
49//output
50//User{name='hollis', age=23, gender=male, birthday=Tue Feb 02 17:37:38 CST 2016}
51//User{name='hollis', age=23, gender=null, birthday=Tue Feb 02 17:37:38 CST 2016}
序列化及反序列化相关知识
1、在Java中,只要一个类实现了 java.io.Serializable 接口,那么它就可以被序列化。

2、通过 ObjectOutputStream 和 ObjectInputStream 对对象进行序列化及反序列化

3、虚拟机是否允许反序列化,不仅取决于类路径和功能代码是否一致,一个非常重要的一点是两个类的序列化 ID 是否一致(就是 private static final long serialVersionUID )

4、序列化并不保存静态变量。

5、要想将父类对象也序列化,就需要让父类也实现 Serializable 接口。

6、Transient 关键字的作用是控制变量的序列化,在变量声明前加上该关键字,可以阻止该变量被序列化到文件中,在被反序列化后,transient 变量的值被设为初始值,如 int 型的是 0,对象型的是 null。

7、服务器端给客户端发送序列化对象数据,对象中有一些数据是敏感的,比如密码字符串等,希望对该密码字段在序列化时,进行加密,而客户端如果拥有解密的密钥,只有在客户端进行反序列化时,才可以对密码进行读取,这样可以一定程度保证序列化对象的数据安全。

ArrayList的序列化
在介绍ArrayList序列化之前,先来考虑一个问题:

如何自定义的序列化和反序列化策略
带着这个问题,我们来看 java.util.ArrayList 的源码

code 3

1public class ArrayList<E> extends AbstractList<E>
2        implements List<E>, RandomAccess, Cloneable, java.io.Serializable
3{
4    private static final long serialVersionUID = 8683452581122892189L;
5    transient Object[] elementData; // non-private to simplify nested class access
6    private int size;
7}
笔者省略了其他成员变量,从上面的代码中可以知道ArrayList实现了 java.io.Serializable 接口,那么我们就可以对它进行序列化及反序列化。因为elementData是 transient 的,所以我们认为这个成员变量不会被序列化而保留下来。我们写一个Demo,验证一下我们的想法:

code 4

1public static void main(String[] args) throws IOException, ClassNotFoundException {
2        List<String> stringList = new ArrayList<String>();
3        stringList.add("hello");
4        stringList.add("world");
5        stringList.add("hollis");
6        stringList.add("chuang");
7        System.out.println("init StringList" + stringList);
8        ObjectOutputStream objectOutputStream = new ObjectOutputStream(new FileOutputStream("stringlist"));
9        objectOutputStream.writeObject(stringList);
10        IOUtils.close(objectOutputStream);
11        File file = new File("stringlist");
12        ObjectInputStream objectInputStream = new ObjectInputStream(new FileInputStream(file));
13        List<String> newStringList = (List<String>)objectInputStream.readObject();
14        IOUtils.close(objectInputStream);
15        if(file.exists()){
16            file.delete();
17        }
18        System.out.println("new StringList" + newStringList);
19    }
20//init StringList[hello, world, hollis, chuang]
21//new StringList[hello, world, hollis, chuang]
了解ArrayList的人都知道,ArrayList底层是通过数组实现的。那么数组 elementData 其实就是用来保存列表中的元素的。通过该属性的声明方式我们知道,他是无法通过序列化持久化下来的。那么为什么code 4的结果却通过序列化和反序列化把List中的元素保留下来了呢?

writeObject和readObject方法
在ArrayList中定义了来个方法: writeObject 和 readObject 。

这里先给出结论:

在序列化过程中,如果被序列化的类中定义了writeObject 和 readObject 方法,虚拟机会试图调用对象类里的 writeObject 和 readObject 方法,进行用户自定义的序列化和反序列化。

如果没有这样的方法,则默认调用是 ObjectOutputStream 的 defaultWriteObject 方法以及 ObjectInputStream 的 defaultReadObject 方法。

用户自定义的 writeObject 和 readObject 方法可以允许用户控制序列化的过程,比如可以在序列化的过程中动态改变序列化的数值。

来看一下这两个方法的具体实现:

code 5

private void readObject(java.io.ObjectInputStream s)
        throws java.io.IOException, ClassNotFoundException {
       elementData = EMPTY_ELEMENTDATA;
       // Read in size, and any hidden stuff
       s.defaultReadObject();
        // Read in capacity
      s.readInt(); // ignored
       if (size > 0) {
           // be like clone(), allocate array based upon size not capacity
            ensureCapacityInternal(size);
            Object[] a = elementData;
            // Read in all elements in the proper order.
            for (int i=0; i<size; i++) {
               a[i] = s.readObject();
            }
       }
    }


private void writeObject(java.io.ObjectOutputStream s)
        throws java.io.IOException{
        // Write out element count, and any hidden stuff
       int expectedModCount = modCount;
        s.defaultWriteObject();
        // Write out size as capacity for behavioural compatibility with clone()
        s.writeInt(size);
       // Write out all elements in the proper order.
        for (int i=0; i<size; i++) {
            s.writeObject(elementData[i]);
        }
       if (modCount != expectedModCount) {
            throw new ConcurrentModificationException();
        }
  }
那么为什么ArrayList要用这种方式来实现序列化呢?

why transient
ArrayList实际上是动态数组,每次在放满以后自动增长设定的长度值,如果数组自动增长长度设为100,而实际只放了一个元素,那就会序列化99个null元素。为了保证在序列化的时候不会将这么多null同时进行序列化,ArrayList把元素数组设置为transient。

why writeObject and readObject
前面说过,为了防止一个包含大量空对象的数组被序列化,为了优化存储,所以,ArrayList使用 transient 来声明 elementData 。

但是,作为一个集合,在序列化过程中还必须保证其中的元素可以被持久化下来,所以,通过重写 writeObject 和 readObject 方法的方式把其中的元素保留下来。

writeObject 方法把 elementData 数组中的元素遍历的保存到输出流(ObjectOutputStream)中。

readObject 方法从输入流(ObjectInputStream)中读出对象并保存赋值到 elementData 数组中。

至此,我们先试着来回答刚刚提出的问题:

如何自定义的序列化和反序列化策略

答:可以通过在被序列化的类中增加writeObject 和 readObject方法。那么问题又来了:

虽然ArrayList中写了writeObject 和 readObject 方法,但是这两个方法并没有显示的被调用啊。
那么如果一个类中包含writeObject 和 readObject 方法,那么这两个方法是怎么被调用的呢?

ObjectOutputStream
从code 4中,我们可以看出,对象的序列化过程通过ObjectOutputStream和ObjectInputputStream来实现的,那么带着刚刚的问题,我们来分析一下ArrayList中的writeObject 和 readObject 方法到底是如何被调用的呢?

为了节省篇幅,这里给出ObjectOutputStream的writeObject的调用栈:

writeObject — writeObject0 —writeOrdinaryObject—writeSerialData—invokeWriteObject

这里看一下invokeWriteObject:

void invokeWriteObject(Object obj, ObjectOutputStream out)
       throws IOException, UnsupportedOperationException
    {
        if (writeObjectMethod != null) {
            try {
               writeObjectMethod.invoke(obj, new Object[]{ out });
           } catch (InvocationTargetException ex) {
               Throwable th = ex.getTargetException();
                if (th instanceof IOException) {
                   throw (IOException) th;
               } else {
                    throwMiscException(th);
                }
           } catch (IllegalAccessException ex) {
               // should not occur, as access checks have been suppressed
              throw new InternalError(ex);
            }
       } else {
            throw new UnsupportedOperationException();
       }
    }
其中 writeObjectMethod.invoke(obj, new Object[]{ out }); 是关键,通过反射的方式调用writeObjectMethod方法。官方是这么解释这个writeObjectMethod的:

class-defined writeObject method, or null if none

在我们的例子中,这个方法就是我们在ArrayList中定义的writeObject方法。通过反射的方式被调用了。

至此,我们先试着来回答刚刚提出的问题:
如果一个类中包含writeObject 和 readObject 方法,那么这两个方法是怎么被调用的?

答:在使用ObjectOutputStream的writeObject方法和ObjectInputStream的readObject方法时,会通过反射的方式调用。

至此,我们已经介绍完了ArrayList的序列化方式。那么,不知道有没有人提出这样的疑问:

Serializable明明就是一个空的接口,它是怎么保证只有实现了该接口的方法才能进行序列化与反序列化的呢?

Serializable接口的定义:

1 public interface Serializable {
2}
读者可以尝试把code 1中的继承Serializable的代码去掉,再执行code 2,会抛出 java.io.NotSerializableException 。

其实这个问题也很好回答,我们再回到刚刚ObjectOutputStream的writeObject的调用栈:

writeObject — writeObject0 —writeOrdinaryObject—writeSerialData—invokeWriteObject

writeObject0方法中有这么一段代码:

if (obj instanceof String) {
               writeString((String) obj, unshared);
            } else if (cl.isArray()) {
               writeArray(obj, desc, unshared);
            } else if (obj instanceof Enum) {
               writeEnum((Enum<?>) obj, desc, unshared);
           } else if (obj instanceof Serializable) {
                writeOrdinaryObject(obj, desc, unshared);
           } else {
              if (extendedDebugInfo) {
                   throw new NotSerializableException(
                       cl.getName() + "/n" + debugInfoStack.toString());
               } else {
                    throw new NotSerializableException(cl.getName());
                }
           }
在进行序列化操作时,会判断要被序列化的类是否是Enum、Array和Serializable类型,如果不是则直接抛出 NotSerializableException 。

总结
1、如果一个类想被序列化,需要实现Serializable接口。否则将抛出 NotSerializableException 异常,这是因为,在序列化操作过程中会对类型进行检查,要求被序列化的类必须属于Enum、Array和Serializable类型其中的任何一种。

2、在变量声明前加上该关键字,可以阻止该变量被序列化到文件中。

3、在类中增加writeObject 和 readObject 方法可以实现自定义序列化策略
分享到:
评论

相关推荐

    深入分析Java的序列化与反序列化

    本文通过分析ArrayList的序列化来介绍Java序列化的相关内容。主要涉及到以下几个问题:  怎么实现Java的序列化  为什么实现了java.io.Serializable接口才能被序列化  transient的作用是什么  怎么自定义序列...

    通过实例深入了解java序列化

    本文将通过实例深入了解 Java 序列化,分析一些真实情境,帮助读者轻松牢记 Java 序列化中的一些高级认识。 序列化 ID 问题 ---------------- 在 Java 序列化中,序列化 ID 是一个非常重要的一点。它决定了两个类...

    java反序列化利用程序UI版Beta1.1.rar

    1. **Java序列化机制**:Java对象序列化是通过实现`Serializable`接口来标记一个类可被序列化。`ObjectOutputStream`用于将对象写入流,`ObjectInputStream`用于从流中读取并反序列化对象。 2. **易受攻击的库**:...

    深入理解Java虚拟机-Java内存区域透彻分析(序列化、反序列化概念及其使用场景+实现序列化的方式+transient关键字)

    Java序列化和反序列化是Java虚拟机中的一种重要机制,它们可以将Java对象转换为二进制数据,然后将其保存到磁盘中或通过网络传输到其他机器上。今天,我们将深入理解Java虚拟机-Java内存区域透彻分析,探讨序列化和...

    Java序列化和反序列化

    ### Java序列化与反序列化的深入解析 #### 序列化的功能与意义 序列化是Java编程语言中的一项核心功能,其主要目的是将对象的状态转换为可以存储或传输的格式,便于持久化保存或网络传输。序列化并不涉及对象的...

    hessian学习基础篇——序列化和反序列化

    本文将深入探讨Hessian框架的基础知识,它是一个高效的二进制序列化协议,广泛应用于Java和.NET之间跨语言通信。通过学习Hessian,我们可以更有效地处理数据传输,提高应用性能。 首先,让我们理解什么是序列化。...

    Java对象的序列化和反序列化实践

    在Java编程语言中,对象的序列化和反序列化是两个关键的概念,它们允许我们将对象的状态转换为可存储或传输的格式,然后再恢复为原始对象。这个过程对于数据持久化、网络传输以及跨进程通信等场景非常有用。下面将...

    Java反序列化实战.pdf

    通过深入分析Fastjson和Weblogic的经典案例,我们可以看到,虽然反序列化技术在实际应用中带来了便利性和灵活性,但也伴随着一定的安全风险。因此,在设计和实现系统时,需要充分考虑安全性,采取有效的防御措施,...

    序列化与反序列化经典例子

    序列化与反序列化是计算机科学中的重要概念,特别是在数据存储、网络通信和持久化对象等领域。简单来说,序列化是将对象的状态转换为可存储或传输的数据格式的过程,而反序列化则是将这种数据格式恢复为原来的对象...

    Java反序列化回显解决方案.docx

    Java序列化是指将对象的状态信息转换为可以存储或传输的形式的过程。相反,反序列化则是在适当的时候把这个流转换回原对象的过程。当应用程序接收来自不受信任源的数据并进行反序列化时,可能触发安全漏洞。例如,...

    java对象序列化 传输 保存

    在标签中提到了"源码"和"工具",这可能意味着博客作者还深入分析了Java序列化机制的源代码,并介绍了一些辅助工具,例如`jserialcom`或`serialver`命令,用于查看类的serialVersionUID。 文件列表中的"ser"可能是...

    序列化和反序列化

    序列化和反序列化是计算机科学中的重要概念,特别是在数据存储、网络通信和持久化对象等领域广泛应用。...通过学习和分析这些代码,我们可以深入理解序列化和反序列化的具体实现,并能灵活运用到自己的项目中。

    序列化(三) 实例分析深入了解序列化

    博文中可能深入分析了`ObjectOutputStream`和`ObjectInputStream`的源码,解释了序列化和反序列化过程的内部工作原理。 11. **安全性问题**: 序列化可能导致安全风险,如反序列化攻击。因此,谨慎处理接收到的...

    反序列化利用工具ShiroExploit.V2.51.7z

    本文将深入探讨反序列化利用工具ShiroExploit.V2.51,帮助读者理解其工作原理、应用场景以及防范策略。 首先,我们需要理解什么是反序列化。序列化是将对象的状态转化为可存储或传输的形式的过程,而反序列化则是将...

    Bboss和xstream序列化反序列化性能对比1

    在本文中,我们将深入探讨Bboss和Xstream两个序列化和反序列化库在性能方面的差异。这两个库在Java开发中广泛用于将对象转换为XML格式,以便于存储、传输或持久化。以下是对这两个库的详细分析。 首先,Bboss和...

    基于混合分析的Java反序列化利用链挖掘方法.docx

    ### 基于混合分析的Java反序列化利用链挖掘方法 #### 一、引言与背景 2015年,Lawrence和Frohoff首次揭示了Java反序列化漏洞的存在及其潜在风险。此后不久,Breenmachine利用这一漏洞成功攻击了包括WebLogic、...

    Java反序列化漏洞探析及其修复方法研究.pdf

    文章通过研究Java反序列化漏洞的原理和修复方法,不仅提供了对漏洞成因的深入分析,而且提出了一系列实用的修复策略,旨在提升Java应用程序的安全性,减少漏洞带来的潜在风险。此外,文章的作者徐江珮、王捷、蔡攸敏...

    反序列化代码……备忘一下……

    2. **源码分析**:博主可能详细讲解了反序列化的源码实现,包括如何读取字节流,解析数据结构,并重建对象实例。这可能涉及到反射、类型判断以及内存管理等概念。 3. **工具**:在处理反序列化时,可能会用到一些...

Global site tag (gtag.js) - Google Analytics