protostuff java_Protostuff一键序列化工具、Protobuf JAVA实现

protostuff java_Protostuff一键序列化工具、Protobuf JAVA实现前言:由于搜集网络,发现Protostuff相关内容较少,故此发布这篇文章1.何为序列化序列化(Serialization)将对象的状态信息转换为可以存储或传输的形式的过程。在序列化期间,对象将其当前状态写入到临时或持久性存储区。以后,可以通过从存储区中读取或反序列化对象的状态,重新创建该对象。序列化使其他代码可以查看或修改那些不序列化便无法访问的对象实例数据。确切地说,代码执行序列化需要特殊…

大家好,又见面了,我是你们的朋友全栈君。

前言:由于搜集网络,发现Protostuff相关内容较少,故此发布这篇文章

1. 何为序列化

序列化 (Serialization)将对象的状态信息转换为可以存储或传输的形式的过程。在序列化期间,对象将其当前状态写入到临时或持久性存储区。以后,可以通过从存储区中读取或反序列化对象的状态,重新创建该对象。

序列化使其他代码可以查看或修改那些不序列化便无法访问的对象实例数据。确切地说,代码执行序列化需要特殊的权限:即指定了 SerializationFormatter 标志的 SecurityPermission。在默认策略下,通过 Internet 下载的代码或 Internet 代码不会授予该权限;只有本地计算机上的代码才被授予该权限。

通常,对象实例的所有字段都会被序列化,这意味着数据会被表示为实例的序列化数据。这样,能够解释该格式的代码有可能能够确定这些数据的值,而不依赖于该成员的可访问性。类似地,反序列化从序列化的表示形式中提取数据,并直接设置对象状态,这也与可访问性规则无关。

对于任何可能包含重要的安全性数据的对象,如果可能,应该使该对象不可序列化。如果它必须为可序列化的,请尝试生成特定字段来保存不可序列化的重要数据。如果无法实现这一点,则应注意该数据会被公开给任何拥有序列化权限的代码,并确保不让任何恶意代码获得该权限。

2. 常见的序列化有哪些

Xml、Json、JDK传统序列化、Protobuf序列化  (随口举例,笔者也懒得去收集了)

3. 序列化体积对比

理论分析结论:Xml >或 Json > Protobuf

其中在某些特殊场景下,Json可能大于Jdk,Xml可能大于或小于Jdk。

原理分析:传统的Xml序列化,以字段名开头,字段名结尾,存在一个字段冗余,在某些特定的级别格式下,Xml报文长度过量冗余。

:Json序列化,某些Json序列化可能将空字段也序列化出来,如:{“user”:”null”},在过滤空的场景下,Json序列化内容比Jdk传统序列化体积小

:Jdk传统序列化,即实现Serializable接口的对象或数据模型转化为Byte数组,内容包含类信息、字段信息等,故此体积较大

:Protobuf序列化,讲对象或数据模型中有效的内容转化成Byte数组,不包括类信息与数据模型,再反序列化时需要指定目标数据结构,根据数据结构类型对应反序列化,由于仅仅包含内容,故此体积最小

4. 序列效率对比

根据第3点理论原理分析我们不难看出来,xml和json实际效率相差不多,可能就在于xml稍多的内容读写,故此xml效率低于json

由于json序列化和反序列化是完全基于反射,故此,json效率低于Jdk原生序列化

Jdk原生序列化属于基于半反射完成,效率高于Json

而Protobuf,相比jdk原生序列化来说,少做了很多事情,故此Protobuf效率较jdk原生序列化高出很多(排除谷歌对Protobuf的特定算法带来的优势)。

5. 图标分析

笔者并非传说中的那么蛋疼,故此在网络收集相关评测结果。

6. 在JAVA中如何使用

maven引入:

com.dyuproject.protostuff

protostuff-core

1.0.12

com.dyuproject.protostuff

protostuff-runtime

1.0.12

工具类:

package com.protobuf.util;

import java.io.ByteArrayInputStream;

import java.io.ByteArrayOutputStream;

import java.io.IOException;

import java.io.Serializable;

import java.lang.reflect.Field;

import java.util.ArrayList;

import java.util.Collection;

import java.util.HashSet;

import java.util.List;

import java.util.Map;

import java.util.Set;

import java.util.concurrent.ConcurrentHashMap;

import com.dyuproject.protostuff.LinkedBuffer;

import com.dyuproject.protostuff.ProtostuffIOUtil;

import com.dyuproject.protostuff.Schema;

import com.dyuproject.protostuff.runtime.RuntimeSchema;

@SuppressWarnings(“unchecked”)

public class ProtobufUtil {

private static Map, Schema>> cachedSchema = new ConcurrentHashMap, Schema>>();

private static Map, Field> wrapperMap = new ConcurrentHashMap, Field>();

private static Map, Object> unWrapperMap = new ConcurrentHashMap, Object>();

private static Schema getSchema(Class cls) {

Schema schema = (Schema) cachedSchema.get(cls);

if (schema == null) {

schema = RuntimeSchema.createFrom(cls);

if (schema != null) {

cachedSchema.put(cls, schema);

}

}

return schema;

}

/**

* 序列化

*

* @param obj

* @return

*/

public static byte[] serialize(T obj) {

if (isNullOrEmpty(obj)) {

return null;

}

try {

if(List.class.isAssignableFrom(obj.getClass())){

List list=(List)obj;

Class> clazz=list.get(0).getClass();

byte [] data=serializeList(list);

CustomWrapper wrapper=new CustomWrapper(clazz,data);

return serializeT(wrapper);

}

if(Set.class.isAssignableFrom(obj.getClass())){

List list=new ArrayList((Set)obj);

Class> clazz=list.get(0).getClass();

byte [] data=serializeList(list);

CustomWrapper wrapper=new CustomWrapper(clazz,data);

return serializeT(wrapper);

}

if(ValueWrapper.isSpecialType(obj.getClass())){

ValueWrapper wrapper=new ValueWrapper(obj);

return serializeT(wrapper);

}

return serializeT(obj);

} catch (Exception e) {

e.printStackTrace();

return null;

}

}

public static byte[] serializeList(List objList) {

if (objList == null || objList.isEmpty()) {

throw new RuntimeException(“序列化对象列表(” + objList + “)参数异常!”);

}

Schema schema = (Schema) RuntimeSchema.getSchema(objList.get(0).getClass());

LinkedBuffer buffer = LinkedBuffer.allocate(1024 * 1024);

byte[] protostuff = null;

ByteArrayOutputStream bos = null;

try {

bos = new ByteArrayOutputStream();

ProtostuffIOUtil.writeListTo(bos, objList, schema, buffer);

protostuff = bos.toByteArray();

} catch (Exception e) {

throw new RuntimeException(“序列化对象列表(” + objList + “)发生异常!”, e);

} finally {

buffer.clear();

try {

if(bos!=null){

bos.close();

}

} catch (IOException e) {

e.printStackTrace();

}

}

return protostuff;

}

private static byte[] serializeT(T obj) {

Class cls = (Class) obj.getClass();

LinkedBuffer buffer = LinkedBuffer.allocate(LinkedBuffer.MIN_BUFFER_SIZE);

try {

Schema schema = getSchema(cls);

return ProtostuffIOUtil.toByteArray(obj, schema, buffer);

} catch (Exception e) {

throw new IllegalStateException(e.getMessage(), e);

} finally {

buffer.clear();

}

}

/**

* 反序列化

*

* @param data

* @param cls

* @return

*/

public static T unSerialize(byte[] data,Class> clazz) {

if (isNullOrEmpty(data)) {

return null;

}

try {

if(List.class.isAssignableFrom(clazz)){

CustomWrapper wrapper= unSerializeT(data, CustomWrapper.class);

return (T) unSerializeList(data, wrapper.getClazz());

}

if(Set.class.isAssignableFrom(clazz)){

CustomWrapper wrapper= unSerializeT(data, CustomWrapper.class);

return (T) unSerializeSet(data, wrapper.getClazz());

}

if(ValueWrapper.isSpecialType(clazz)){

ValueWrapper wrapper= unSerializeT(data, ValueWrapper.class);

if(wrapper==null||isNullOrEmpty(wrapper)){

return null;

}

return wrapper.getValue();

}

return (T) unSerializeT(data, clazz);

} catch (Exception e) {

e.printStackTrace();

return null;

}

}

public static Set unSerializeSet(byte[] data, Class clazz) {

if (data == null || data.length == 0) {

throw new RuntimeException(“反序列化对象发生异常,byte序列为空!”);

}

Schema schema = RuntimeSchema.getSchema(clazz);

try {

List list = ProtostuffIOUtil.parseListFrom(new ByteArrayInputStream(data), schema);

return new HashSet(list);

} catch (IOException e) {

throw new RuntimeException(“反序列化对象列表发生异常!”,e);

}

}

public static List unSerializeList(byte[] data, Class clazz) {

if (data == null || data.length == 0) {

throw new RuntimeException(“反序列化对象发生异常,byte序列为空!”);

}

Schema schema = RuntimeSchema.getSchema(clazz);

List result = null;

try {

result = ProtostuffIOUtil.parseListFrom(new ByteArrayInputStream(data), schema);

} catch (IOException e) {

throw new RuntimeException(“反序列化对象列表发生异常!”,e);

}

return result;

}

private static T unSerializeT(byte[] data, Class cls) {

try {

T message = cls.newInstance();

Schema schema = getSchema(cls);

ProtostuffIOUtil.mergeFrom(data, message, schema);

return message;

} catch (Exception e) {

throw new IllegalStateException(e.getMessage(), e);

}

}

public static boolean isNullOrEmpty(Object obj) {

try {

if (obj == null)

return true;

if (obj instanceof CharSequence) {

return ((CharSequence) obj).length() == 0;

}

if (obj instanceof Collection) {

return ((Collection>) obj).isEmpty();

}

if (obj instanceof Map) {

return ((Map, ?>) obj).isEmpty();

}

if (obj instanceof Object[]) {

Object[] object = (Object[]) obj;

if (object.length == 0) {

return true;

}

boolean empty = true;

for (int i = 0; i < object.length; i++) {

if (!isNullOrEmpty(object[i])) {

empty = false;

break;

}

}

return empty;

}

return false;

} catch (Exception e) {

e.printStackTrace();

return true;

}

}

@SuppressWarnings({ “serial” })

public static class CustomWrapper implements Serializable{

private Class> clazz;

private byte []data;

public CustomWrapper(){}

public CustomWrapper(Class> clazz,byte[] data){

this.clazz=clazz;

this.data=data;

}

public byte[] getData() {

return data;

}

public void setData(byte[] data) {

this.data = data;

}

public Class> getClazz() {

return clazz;

}

public void setClazz(Class> clazz) {

this.clazz = clazz;

}

}

@SuppressWarnings({ “rawtypes”, “serial”, “unused” })

public static class ValueWrapper implements Serializable{

private Map mapValue;

private List listValue;

private Collection collectionValue;

private Iterable iterableValue;

private Set setValue;

private String stringValue;

private Byte byteValue;

private Short shortValue;

private Long longValue;

private Integer integerValue;

private Double doubleValue;

private Float floatValue;

private Character characterValue;

private Boolean booleanValue;

public ValueWrapper(){}

public ValueWrapper(Object data) throws IllegalArgumentException, IllegalAccessException {

if (data == null) {

return;

}

if (isNullOrEmpty(wrapperMap)) {

initFiledType();

}

if (wrapperMap.containsKey(data.getClass())) {

Field f = wrapperMap.get(data.getClass());

f.setAccessible(true);

f.set(this, data);

}

for (Class> clazz : wrapperMap.keySet()) {

if (!clazz.isAssignableFrom(data.getClass())) {

continue;

}

Field f = wrapperMap.get(clazz);

f.setAccessible(true);

f.set(this, data);

wrapperMap.put(data.getClass(), f);

return;

}

}

public static boolean isSpecialType(Class> clazz){

if (isNullOrEmpty(wrapperMap)) {

initFiledType();

}

if(unWrapperMap.containsKey(clazz)){

return false;

}

if(wrapperMap.containsKey(clazz)){

return true;

}

for (Class> clazzTmp : wrapperMap.keySet()) {

if (!clazzTmp.isAssignableFrom(clazz)) {

continue;

}

Field f = wrapperMap.get(clazzTmp);

f.setAccessible(true);

wrapperMap.put(clazz, f);

return true;

}

unWrapperMap.put(clazz, clazz);

return false;

}

private static void initFiledType() {

Field[] fields = ValueWrapper.class.getDeclaredFields();

for (Field f : fields) {

wrapperMap.put(f.getType(), f);

}

}

public T getValue() throws IllegalArgumentException, IllegalAccessException {

for (Class> clazz : wrapperMap.keySet()) {

T result = (T) wrapperMap.get(clazz).get(this);

if (isNullOrEmpty(result)) {

continue;

}

return result;

}

return null;

}

}

}

测试图:

d676be78f6f04f64630d83af9a9684f0.png

版权声明:本文内容由互联网用户自发贡献,该文观点仅代表作者本人。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如发现本站有涉嫌侵权/违法违规的内容, 请发送邮件至 举报,一经查实,本站将立刻删除。

发布者:全栈程序员-用户IM,转载请注明出处:https://javaforall.cn/137361.html原文链接:https://javaforall.cn

【正版授权,激活自己账号】: Jetbrains全家桶Ide使用,1年售后保障,每天仅需1毛

【官方授权 正版激活】: 官方授权 正版激活 支持Jetbrains家族下所有IDE 使用个人JB账号...

(0)


相关推荐

  • Java服务器接收上传的文件

    Java服务器接收上传的文件有时候我们服务器需要接收来自用户上传过来的文件,这时候就需要服务器端有相应的服务能够接收这个文件下面写一个简单的服务器端代码,需要的朋友可以参考一下注释很全就不多啰嗦了packagecom.SM_test.saomiao.constroller;importjava.io.File;importjava.io.FileOutputStream;importjav

  • android之R cannot be resolved to a variable

    刚才又遇到了R cannot be resolved to a variable的问题,就翻了翻网上的资料,调理的整理了一下1. 检查Android 的SDK是否丢失需要重新下载,检查build path,把需要导入的JAR包确认都导入成功2. 确保class没有import Android.R,注意是不能有Android.R,可以有其他R文件,比如你自己的包;3. 错误cla

  • Ags 9.3 文档逐步上线

    Ags 9.3 文档逐步上线

  • java 日志时间错误

    java时区错误解决方法问题参考链接电脑上所有java应用、项目时间都不对。核心业务系统启动后日志时间和当前系统时间差11个小时30分钟,电脑用的是云桌面系统有严格的权限控制,找相关人和同事弄了几次没好;都知道是时区问题,但没注意到系统桌面右下角的提示。最后解决方法很简单,先说解决方法。(出现问题的主机是无法连接公网的,文件也无法外传,图片都是照片;)解决方法在windows…

  • 基于Java开发的testNG接口自动化测试

    基于Java开发的testNG接口自动化测试1.TestNG简介TestNG是一个开源的测试框架与Junit的发行顺序:Junit3->TestNG->Junit4,TestNG的灵感来自于Junit3,在TestNG推出不久后,Junit借鉴了其中很多概念,也推出了差不多四年以来首个发行版本Junit4。所以,TestNG跟JUnit4很像,但它并不是JUnit的扩展,它的创建目的是超越Junit。TestNG具有更强…

    2022年10月23日
  • mysql全文索引是什么_Mysql中的全文索引

    以前只是简单听说过Mysql有全文索引,但是一直没有认真去了解过。最近在《MYSQL必知必会》中学习到这个知识点,做下记录。首先,什么是全文索引?简单来说,全文索引其实就是类似于LIKE语句,把包含一定的字符串的的行记录挑选出来。那么问题来了,既然只是达到这个需求的话使用LIKE就行了,LIKE不行的话也还能使用正则表达式,为什么还要大费周章弄个全文索引出来呢?书上提到了三个原因:①性能,Like…

发表回复

您的电子邮箱地址不会被公开。

关注全栈程序员社区公众号