protostuff java_Protostuff一键序列化工具、Protobuf JAVA实现

protostuff java_Protostuff一键序列化工具、Protobuf JAVA实现前言:由于搜集网络,发现Protostuff相关内容较少,故此发布这篇文章1.何为序列化序列化(Serialization)将对象的状态信息转换为可以存储或传输的形式的过程。在序列化期间,对象将其当前状态写入到临时或持久性存储区。以后,可以通过从存储区中读取或反序列化对象的状态,重新创建该对象。序列化使其他代码可以查看或修改那些不序列化便无法访问的对象实例数据。确切地说,代码执行序列化需要特殊…

大家好,又见面了,我是你们的朋友全栈君。

前言:由于搜集网络,发现Protostuff相关内容较少,故此发布这篇文章

1. 何为序列化

序列化 (Serialization)将对象的状态信息转换为可以存储或传输的形式的过程。在序列化期间,对象将其当前状态写入到临时或持久性存储区。以后,可以通过从存储区中读取或反序列化对象的状态,重新创建该对象。

序列化使其他代码可以查看或修改那些不序列化便无法访问的对象实例数据。确切地说,代码执行序列化需要特殊的权限:即指定了 SerializationFormatter 标志的 SecurityPermission。在默认策略下,通过 Internet 下载的代码或 Internet 代码不会授予该权限;只有本地计算机上的代码才被授予该权限。

通常,对象实例的所有字段都会被序列化,这意味着数据会被表示为实例的序列化数据。这样,能够解释该格式的代码有可能能够确定这些数据的值,而不依赖于该成员的可访问性。类似地,反序列化从序列化的表示形式中提取数据,并直接设置对象状态,这也与可访问性规则无关。

对于任何可能包含重要的安全性数据的对象,如果可能,应该使该对象不可序列化。如果它必须为可序列化的,请尝试生成特定字段来保存不可序列化的重要数据。如果无法实现这一点,则应注意该数据会被公开给任何拥有序列化权限的代码,并确保不让任何恶意代码获得该权限。

2. 常见的序列化有哪些

Xml、Json、JDK传统序列化、Protobuf序列化  (随口举例,笔者也懒得去收集了)

3. 序列化体积对比

理论分析结论:Xml >或 Json > Protobuf

其中在某些特殊场景下,Json可能大于Jdk,Xml可能大于或小于Jdk。

原理分析:传统的Xml序列化,以字段名开头,字段名结尾,存在一个字段冗余,在某些特定的级别格式下,Xml报文长度过量冗余。

:Json序列化,某些Json序列化可能将空字段也序列化出来,如:{“user”:”null”},在过滤空的场景下,Json序列化内容比Jdk传统序列化体积小

:Jdk传统序列化,即实现Serializable接口的对象或数据模型转化为Byte数组,内容包含类信息、字段信息等,故此体积较大

:Protobuf序列化,讲对象或数据模型中有效的内容转化成Byte数组,不包括类信息与数据模型,再反序列化时需要指定目标数据结构,根据数据结构类型对应反序列化,由于仅仅包含内容,故此体积最小

4. 序列效率对比

根据第3点理论原理分析我们不难看出来,xml和json实际效率相差不多,可能就在于xml稍多的内容读写,故此xml效率低于json

由于json序列化和反序列化是完全基于反射,故此,json效率低于Jdk原生序列化

Jdk原生序列化属于基于半反射完成,效率高于Json

而Protobuf,相比jdk原生序列化来说,少做了很多事情,故此Protobuf效率较jdk原生序列化高出很多(排除谷歌对Protobuf的特定算法带来的优势)。

5. 图标分析

笔者并非传说中的那么蛋疼,故此在网络收集相关评测结果。

6. 在JAVA中如何使用

maven引入:

com.dyuproject.protostuff

protostuff-core

1.0.12

com.dyuproject.protostuff

protostuff-runtime

1.0.12

工具类:

package com.protobuf.util;

import java.io.ByteArrayInputStream;

import java.io.ByteArrayOutputStream;

import java.io.IOException;

import java.io.Serializable;

import java.lang.reflect.Field;

import java.util.ArrayList;

import java.util.Collection;

import java.util.HashSet;

import java.util.List;

import java.util.Map;

import java.util.Set;

import java.util.concurrent.ConcurrentHashMap;

import com.dyuproject.protostuff.LinkedBuffer;

import com.dyuproject.protostuff.ProtostuffIOUtil;

import com.dyuproject.protostuff.Schema;

import com.dyuproject.protostuff.runtime.RuntimeSchema;

@SuppressWarnings(“unchecked”)

public class ProtobufUtil {

private static Map, Schema>> cachedSchema = new ConcurrentHashMap, Schema>>();

private static Map, Field> wrapperMap = new ConcurrentHashMap, Field>();

private static Map, Object> unWrapperMap = new ConcurrentHashMap, Object>();

private static Schema getSchema(Class cls) {

Schema schema = (Schema) cachedSchema.get(cls);

if (schema == null) {

schema = RuntimeSchema.createFrom(cls);

if (schema != null) {

cachedSchema.put(cls, schema);

}

}

return schema;

}

/**

* 序列化

*

* @param obj

* @return

*/

public static byte[] serialize(T obj) {

if (isNullOrEmpty(obj)) {

return null;

}

try {

if(List.class.isAssignableFrom(obj.getClass())){

List list=(List)obj;

Class> clazz=list.get(0).getClass();

byte [] data=serializeList(list);

CustomWrapper wrapper=new CustomWrapper(clazz,data);

return serializeT(wrapper);

}

if(Set.class.isAssignableFrom(obj.getClass())){

List list=new ArrayList((Set)obj);

Class> clazz=list.get(0).getClass();

byte [] data=serializeList(list);

CustomWrapper wrapper=new CustomWrapper(clazz,data);

return serializeT(wrapper);

}

if(ValueWrapper.isSpecialType(obj.getClass())){

ValueWrapper wrapper=new ValueWrapper(obj);

return serializeT(wrapper);

}

return serializeT(obj);

} catch (Exception e) {

e.printStackTrace();

return null;

}

}

public static byte[] serializeList(List objList) {

if (objList == null || objList.isEmpty()) {

throw new RuntimeException(“序列化对象列表(” + objList + “)参数异常!”);

}

Schema schema = (Schema) RuntimeSchema.getSchema(objList.get(0).getClass());

LinkedBuffer buffer = LinkedBuffer.allocate(1024 * 1024);

byte[] protostuff = null;

ByteArrayOutputStream bos = null;

try {

bos = new ByteArrayOutputStream();

ProtostuffIOUtil.writeListTo(bos, objList, schema, buffer);

protostuff = bos.toByteArray();

} catch (Exception e) {

throw new RuntimeException(“序列化对象列表(” + objList + “)发生异常!”, e);

} finally {

buffer.clear();

try {

if(bos!=null){

bos.close();

}

} catch (IOException e) {

e.printStackTrace();

}

}

return protostuff;

}

private static byte[] serializeT(T obj) {

Class cls = (Class) obj.getClass();

LinkedBuffer buffer = LinkedBuffer.allocate(LinkedBuffer.MIN_BUFFER_SIZE);

try {

Schema schema = getSchema(cls);

return ProtostuffIOUtil.toByteArray(obj, schema, buffer);

} catch (Exception e) {

throw new IllegalStateException(e.getMessage(), e);

} finally {

buffer.clear();

}

}

/**

* 反序列化

*

* @param data

* @param cls

* @return

*/

public static T unSerialize(byte[] data,Class> clazz) {

if (isNullOrEmpty(data)) {

return null;

}

try {

if(List.class.isAssignableFrom(clazz)){

CustomWrapper wrapper= unSerializeT(data, CustomWrapper.class);

return (T) unSerializeList(data, wrapper.getClazz());

}

if(Set.class.isAssignableFrom(clazz)){

CustomWrapper wrapper= unSerializeT(data, CustomWrapper.class);

return (T) unSerializeSet(data, wrapper.getClazz());

}

if(ValueWrapper.isSpecialType(clazz)){

ValueWrapper wrapper= unSerializeT(data, ValueWrapper.class);

if(wrapper==null||isNullOrEmpty(wrapper)){

return null;

}

return wrapper.getValue();

}

return (T) unSerializeT(data, clazz);

} catch (Exception e) {

e.printStackTrace();

return null;

}

}

public static Set unSerializeSet(byte[] data, Class clazz) {

if (data == null || data.length == 0) {

throw new RuntimeException(“反序列化对象发生异常,byte序列为空!”);

}

Schema schema = RuntimeSchema.getSchema(clazz);

try {

List list = ProtostuffIOUtil.parseListFrom(new ByteArrayInputStream(data), schema);

return new HashSet(list);

} catch (IOException e) {

throw new RuntimeException(“反序列化对象列表发生异常!”,e);

}

}

public static List unSerializeList(byte[] data, Class clazz) {

if (data == null || data.length == 0) {

throw new RuntimeException(“反序列化对象发生异常,byte序列为空!”);

}

Schema schema = RuntimeSchema.getSchema(clazz);

List result = null;

try {

result = ProtostuffIOUtil.parseListFrom(new ByteArrayInputStream(data), schema);

} catch (IOException e) {

throw new RuntimeException(“反序列化对象列表发生异常!”,e);

}

return result;

}

private static T unSerializeT(byte[] data, Class cls) {

try {

T message = cls.newInstance();

Schema schema = getSchema(cls);

ProtostuffIOUtil.mergeFrom(data, message, schema);

return message;

} catch (Exception e) {

throw new IllegalStateException(e.getMessage(), e);

}

}

public static boolean isNullOrEmpty(Object obj) {

try {

if (obj == null)

return true;

if (obj instanceof CharSequence) {

return ((CharSequence) obj).length() == 0;

}

if (obj instanceof Collection) {

return ((Collection>) obj).isEmpty();

}

if (obj instanceof Map) {

return ((Map, ?>) obj).isEmpty();

}

if (obj instanceof Object[]) {

Object[] object = (Object[]) obj;

if (object.length == 0) {

return true;

}

boolean empty = true;

for (int i = 0; i < object.length; i++) {

if (!isNullOrEmpty(object[i])) {

empty = false;

break;

}

}

return empty;

}

return false;

} catch (Exception e) {

e.printStackTrace();

return true;

}

}

@SuppressWarnings({ “serial” })

public static class CustomWrapper implements Serializable{

private Class> clazz;

private byte []data;

public CustomWrapper(){}

public CustomWrapper(Class> clazz,byte[] data){

this.clazz=clazz;

this.data=data;

}

public byte[] getData() {

return data;

}

public void setData(byte[] data) {

this.data = data;

}

public Class> getClazz() {

return clazz;

}

public void setClazz(Class> clazz) {

this.clazz = clazz;

}

}

@SuppressWarnings({ “rawtypes”, “serial”, “unused” })

public static class ValueWrapper implements Serializable{

private Map mapValue;

private List listValue;

private Collection collectionValue;

private Iterable iterableValue;

private Set setValue;

private String stringValue;

private Byte byteValue;

private Short shortValue;

private Long longValue;

private Integer integerValue;

private Double doubleValue;

private Float floatValue;

private Character characterValue;

private Boolean booleanValue;

public ValueWrapper(){}

public ValueWrapper(Object data) throws IllegalArgumentException, IllegalAccessException {

if (data == null) {

return;

}

if (isNullOrEmpty(wrapperMap)) {

initFiledType();

}

if (wrapperMap.containsKey(data.getClass())) {

Field f = wrapperMap.get(data.getClass());

f.setAccessible(true);

f.set(this, data);

}

for (Class> clazz : wrapperMap.keySet()) {

if (!clazz.isAssignableFrom(data.getClass())) {

continue;

}

Field f = wrapperMap.get(clazz);

f.setAccessible(true);

f.set(this, data);

wrapperMap.put(data.getClass(), f);

return;

}

}

public static boolean isSpecialType(Class> clazz){

if (isNullOrEmpty(wrapperMap)) {

initFiledType();

}

if(unWrapperMap.containsKey(clazz)){

return false;

}

if(wrapperMap.containsKey(clazz)){

return true;

}

for (Class> clazzTmp : wrapperMap.keySet()) {

if (!clazzTmp.isAssignableFrom(clazz)) {

continue;

}

Field f = wrapperMap.get(clazzTmp);

f.setAccessible(true);

wrapperMap.put(clazz, f);

return true;

}

unWrapperMap.put(clazz, clazz);

return false;

}

private static void initFiledType() {

Field[] fields = ValueWrapper.class.getDeclaredFields();

for (Field f : fields) {

wrapperMap.put(f.getType(), f);

}

}

public T getValue() throws IllegalArgumentException, IllegalAccessException {

for (Class> clazz : wrapperMap.keySet()) {

T result = (T) wrapperMap.get(clazz).get(this);

if (isNullOrEmpty(result)) {

continue;

}

return result;

}

return null;

}

}

}

测试图:

d676be78f6f04f64630d83af9a9684f0.png

版权声明:本文内容由互联网用户自发贡献,该文观点仅代表作者本人。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如发现本站有涉嫌侵权/违法违规的内容, 请发送邮件至 举报,一经查实,本站将立刻删除。

发布者:全栈程序员-用户IM,转载请注明出处:https://javaforall.cn/137361.html原文链接:https://javaforall.cn

【正版授权,激活自己账号】: Jetbrains全家桶Ide使用,1年售后保障,每天仅需1毛

【官方授权 正版激活】: 官方授权 正版激活 支持Jetbrains家族下所有IDE 使用个人JB账号...

(0)
blank

相关推荐

  • 网站留言板的功能_网页留言板源码

    网站留言板的功能_网页留言板源码本文描述如何在网页上实现一个简单的留言板功能,仅支持文字留言。开发环境:dreamweaverCChtml+jscirpt+php前置条件:1、一个简单的网站已经搭建完毕,支持用户登录网站。2、用户已登录网站。实现步骤:一、新建留言板网页1、新建网页:whiteboard.html留言板(js-div-whiteboard…

    2022年10月26日
  • 用计算机制作动画的方法,电脑怎么制作flash动画?电脑制作flash动画的方法

    用计算机制作动画的方法,电脑怎么制作flash动画?电脑制作flash动画的方法Flash动画可以将音乐,声效,动画以及富有新意的界面融合在一起,以制作出高品质的网页动态效果。一些初学者想要用电脑制作flash动画,但是不知道怎么操作?其实Flash做动画有很多种方法,但最主要的是调关键帧,为此,大家一起看下电脑制作flash动画的方法。具体方法如下:win8.1-14、首先,执行菜单操作:“开始”→“程序”→“Macromedia”→“MacromediaFlash…

  • idea2021 激活码【最新永久激活】

    (idea2021 激活码)JetBrains旗下有多款编译器工具(如:IntelliJ、WebStorm、PyCharm等)在各编程领域几乎都占据了垄断地位。建立在开源IntelliJ平台之上,过去15年以来,JetBrains一直在不断发展和完善这个平台。这个平台可以针对您的开发工作流进行微调并且能够提供…

  • 现代OpenGL教程(一):绘制三角形(imgui+OpenGL3.3)

    前言:imgui是一个开源的GUI框架,自带的例子里面直接集成了glfw+gl3w环境,本例使用的版本是imguiv1.61,下载地址:https://github.com/ocornut/imgui/tags教程目录(持续更新中):现代OpenGL教程(一):绘制三角形(imgui+OpenGL3.3)现代OpenGL教程(二):矩阵变换(imgui+OpenGL3.3)

  • pr添加删除关键帧_pr怎么全选关键帧

    pr添加删除关键帧_pr怎么全选关键帧使用的版本依旧是PrProCC2017添加关键帧双击需要添加关键帧的素材左边指向区域双击后,区域会变大,鼠标滚轮滑动效果一样然后点击素材,在点左侧的指向区域的小点点,添加或删除关键帧点

  • Oracle 学习之 11g Clone 安装

    Oracle 学习之 11g Clone 安装

发表回复

您的电子邮箱地址不会被公开。

关注全栈程序员社区公众号