- 浏览: 2661840 次
- 来自: 杭州
文章分类
- 全部博客 (1188)
- webwork (4)
- 网摘 (18)
- java (103)
- hibernate (1)
- Linux (85)
- 职业发展 (1)
- activeMQ (2)
- netty (14)
- svn (1)
- webx3 (12)
- mysql (81)
- css (1)
- HTML (6)
- apache (3)
- 测试 (2)
- javascript (1)
- 储存 (1)
- jvm (5)
- code (13)
- 多线程 (12)
- Spring (18)
- webxs (2)
- python (119)
- duitang (0)
- mongo (3)
- nosql (4)
- tomcat (4)
- memcached (20)
- 算法 (28)
- django (28)
- shell (1)
- 工作总结 (5)
- solr (42)
- beansdb (6)
- nginx (3)
- 性能 (30)
- 数据推荐 (1)
- maven (8)
- tonado (1)
- uwsgi (5)
- hessian (4)
- ibatis (3)
- Security (2)
- HTPP (1)
- gevent (6)
- 读书笔记 (1)
- Maxent (2)
- mogo (0)
- thread (3)
- 架构 (5)
- NIO (5)
- 正则 (1)
- lucene (5)
- feed (4)
- redis (17)
- TCP (6)
- test (0)
- python,code (1)
- PIL (3)
- guava (2)
- jython (4)
- httpclient (2)
- cache (3)
- signal (1)
- dubbo (7)
- HTTP (4)
- json (3)
- java socket (1)
- io (2)
- socket (22)
- hash (2)
- Cassandra (1)
- 分布式文件系统 (5)
- Dynamo (2)
- gc (8)
- scp (1)
- rsync (1)
- mecached (0)
- mongoDB (29)
- Thrift (1)
- scribe (2)
- 服务化 (3)
- 问题 (83)
- mat (1)
- classloader (2)
- javaBean (1)
- 文档集合 (27)
- 消息队列 (3)
- nginx,文档集合 (1)
- dboss (12)
- libevent (1)
- 读书 (0)
- 数学 (3)
- 流程 (0)
- HBase (34)
- 自动化测试 (1)
- ubuntu (2)
- 并发 (1)
- sping (1)
- 图形 (1)
- freemarker (1)
- jdbc (3)
- dbcp (0)
- sharding (1)
- 性能测试 (1)
- 设计模式 (2)
- unicode (1)
- OceanBase (3)
- jmagick (1)
- gunicorn (1)
- url (1)
- form (1)
- 安全 (2)
- nlp (8)
- libmemcached (1)
- 规则引擎 (1)
- awk (2)
- 服务器 (1)
- snmpd (1)
- btrace (1)
- 代码 (1)
- cygwin (1)
- mahout (3)
- 电子书 (1)
- 机器学习 (5)
- 数据挖掘 (1)
- nltk (6)
- pool (1)
- log4j (2)
- 总结 (11)
- c++ (1)
- java源代码 (1)
- ocr (1)
- 基础算法 (3)
- SA (1)
- 笔记 (1)
- ml (4)
- zokeeper (0)
- jms (1)
- zookeeper (5)
- zkclient (1)
- hadoop (13)
- mq (2)
- git (9)
- 问题,io (1)
- storm (11)
- zk (1)
- 性能优化 (2)
- example (1)
- tmux (1)
- 环境 (2)
- kyro (1)
- 日志系统 (3)
- hdfs (2)
- python_socket (2)
- date (2)
- elasticsearch (1)
- jetty (1)
- 树 (1)
- 汽车 (1)
- mdrill (1)
- 车 (1)
- 日志 (1)
- web (1)
- 编译原理 (1)
- 信息检索 (1)
- 性能,linux (1)
- spam (1)
- 序列化 (1)
- fabric (2)
- guice (1)
- disruptor (1)
- executor (1)
- logback (2)
- 开源 (1)
- 设计 (1)
- 监控 (3)
- english (1)
- 问题记录 (1)
- Bitmap (1)
- 云计算 (1)
- 问题排查 (1)
- highchat (1)
- mac (3)
- docker (1)
- jdk (1)
- 表达式 (1)
- 网络 (1)
- 时间管理 (1)
- 时间序列 (1)
- OLAP (1)
- Big Table (0)
- sql (1)
- kafka (1)
- md5 (1)
- springboot (1)
- spring security (1)
- Spring Boot (3)
- mybatis (1)
- java8 (1)
- 分布式事务 (1)
- 限流 (1)
- Shadowsocks (0)
- 2018 (1)
- 服务治理 (1)
- 设计原则 (1)
- log (0)
- perftools (1)
最新评论
-
siphlina:
课程——基于Python数据分析与机器学习案例实战教程分享网盘 ...
Python机器学习库 -
san_yun:
leibnitz 写道hi,我想知道,无论在92还是94版本, ...
hbase的行锁与多版本并发控制(MVCC) -
leibnitz:
hi,我想知道,无论在92还是94版本,更新时(如Puts)都 ...
hbase的行锁与多版本并发控制(MVCC) -
107x:
不错,谢谢!
Latent Semantic Analysis(LSA/ LSI)算法简介 -
107x:
不错,谢谢!
Python机器学习库
通过GZIPOutputStream,GZIPInputStream可以方便的对数据进行压缩,本以为很简单的代码,写好运行居然报错:
Exception in thread "main" java.io.EOFException: Unexpected end of ZLIB input stream
at java.util.zip.InflaterInputStream.fill(InflaterInputStream.java:223)
at java.util.zip.InflaterInputStream.read(InflaterInputStream.java:141)
at java.util.zip.GZIPInputStream.read(GZIPInputStream.java:92)
at java.io.FilterInputStream.read(FilterInputStream.java:90)
at Main.main(Main.java:25)
代码很简单:
ByteArrayOutputStream out = new ByteArrayOutputStream(); GZIPOutputStream gzip = new GZIPOutputStream(out); gzip.write("testlalala2389223423sdfds383274llalall".getBytes()); byte[] data = out.toByteArray(); GZIPInputStream gunzip = new GZIPInputStream(new ByteArrayInputStream(data)); data = new byte[gunzip.available()]; gunzip.read(data);
打点分析:
System.out.println("data_length "+data.length);
System.out.println("data_available "+gunzip.available());
data_length 10
data_available 1
原因:
1.没有 gzip.close();
2. gunzip.available()不能获取正确的数据,改成while
完整的代码:
import java.io.ByteArrayInputStream; import java.io.ByteArrayOutputStream; import java.util.zip.GZIPInputStream; import java.util.zip.GZIPOutputStream; public class Main { public static void main(String[] args) throws Exception { ByteArrayOutputStream out = new ByteArrayOutputStream(); GZIPOutputStream gzip = new GZIPOutputStream(out); gzip.write("testlalala23892234分詞誒四是23sdfds383274llalall".getBytes("utf-8")); gzip.close(); byte[] data = out.toByteArray(); System.out.println("data_length " + data.length); GZIPInputStream gunzip = new GZIPInputStream(new ByteArrayInputStream(data)); System.out.println("data_available " + gunzip.available()); ByteArrayOutputStream outStream = new ByteArrayOutputStream(); byte[] buffer = new byte[256]; int n; while ((n = gunzip.read(buffer)) >= 0) { outStream.write(buffer, 0, n); } System.out.println(outStream.toString("utf-8")); } }
发表评论
-
spring-cloud问题排查
2019-11-18 14:58 536### 问题1报错,应用无法启动 org.springfra ... -
log4j 和slf4j的 类冲突解决
2018-07-14 16:11 20001. 检查 log4j 和slf4j的冲突 pub ... -
Raft
2018-07-12 14:20 760前言 上篇文章说解决问题要分而治之,先把分片的问题解决了再 ... -
HikariPool-1 - Connection is not available, request timed out after
2018-05-07 19:13 6714在开发中遇到 HikariPool-1 - Conn ... -
java.io.StreamCorruptedException: invalid stream header: EFBFBDEF
2018-05-03 16:54 2472Java代码 publi ... -
java uuid
2017-09-14 18:18 558在java中产生uuid的方式是使用java.util.UU ... -
JAVA 编码规范
2017-09-06 11:34 413https://google.github.io/style ... -
mac 入门
2015-12-01 16:28 626http://foocoder.com/blog/wo-zai ... -
log4j问题总结-加载配置文件
2014-08-20 16:34 1067今天遇到log4j的log4j.properties没有生效 ... -
一个诡异的类冲突错误排查记录
2014-08-13 10:44 820今天遇到一个问题排查了很久,记录一下。 问题原因,日常环境 ... -
java 反编译工具gad
2014-05-09 12:04 975java 反编译工具gad,备个份。 -
java 代码大全(code book)
2014-04-29 10:59 1080参考这里: http://www.java2s.com/C ... -
tomcat7.0.26的连接数控制bug的问题排查
2014-04-23 19:51 1715今儿线上一台机器,监控一直在告警, mtophost[CM ... -
tomcat,jboss,jetty访问出现404错误问题记录
2014-04-21 19:51 1707原因是WEB-INF下面缺少jboss-web.xml ... -
记录Hadoop native libraries无法load的问题
2014-04-10 19:45 2312今天遇到一个错误,在本地往Hadoop写文件的时候报了一个错 ... -
SQL语法解析器JSQLParser
2014-02-09 19:53 2148SQL 语法解释器jsqlparser 是用java ... -
Exception性能问题
2014-01-24 22:25 13111.从Exception往上介绍相关结构、代码 ... -
spring加载xml去远程获取dtd验证xml的问题
2014-01-24 11:57 901最近遇到spring 加载xml去远程获取dtd,但外网不 ... -
hbase查询超时导致的错误
2013-12-25 19:53 2717今天上线跑一个hbase程序出现如下错误: org.ap ... -
hbase无法启动问题
2013-12-24 23:53 934今天遇到hbase无法启动,找了很久,才发现可能是data ...
相关推荐
以下是使用Delphi和ZLib库进行gzip字符串压缩和解压的详细步骤: 1. **压缩gzip字符串**: - 首先,你需要将`ZLib`库导入到Delphi项目中。这通常涉及到将`DelphiZLib.123`这样的库文件添加到你的项目路径中,并...
在IT行业中,字符串压缩是一种常见的优化技术,尤其是在Delphi编程环境下。Delphi是Pascal语言的一个强大版本,它提供了一套完整的开发工具,用于创建高效、高性能的应用程序。字符串压缩的目的是减小数据的存储空间...
VB.NET写的字符串压缩函数,使用.NET的Compression写的。
对字符串,字节数组进行GZIP压缩和解压缩
字符串压缩的主要目的是通过消除数据中的冗余来降低存储需求,这在处理大量文本数据时尤其有用。在编程领域,有许多不同的压缩算法,如霍夫曼编码、LZ77、LZ78、DEFLATE(广泛应用于ZIP和GZIP格式)等。 描述中提到...
在IT领域,字符串压缩与解压是数据处理和存储中常见的技术。特别是在处理大量文本信息时,为了节省存储空间和提高传输效率,我们会对字符串进行压缩。本文将深入探讨C#语言中三种实现字符串压缩与解压的方法。 1. *...
对于字符串压缩,SharpZipLib提供了`GZipStream`和`DeflaterStream`类,分别用于GZip和ZIP格式的压缩。这里我们以GZip为例,演示如何压缩和解压缩字符串: ```csharp public static string CompressString(string ...
字符串压缩的主要目的是通过减少冗余信息来减小文件或数据的大小。它基于数据的统计特性,比如某些字符或模式出现的频率,将频繁出现的元素用更短的编码表示。常见的压缩方法有哈夫曼编码(Huffman Coding)、LZ77...
在IT领域,字符串压缩是一种常见的数据处理技术,用于减少存储空间的需求,特别是在处理大量文本数据时。...而"string-yasuo.zip_字符串压缩"这个程序,作为对字符串压缩的实现,无疑是IT从业者的一个宝贵工具。
在Java编程中,字符串压缩和文件压缩是常见的数据处理任务,尤其在大数据传输、存储优化等方面扮演着重要角色。本文将深入探讨Java中如何实现字符串和文件的压缩,以及涉及的相关技术。 首先,字符串压缩通常涉及到...
字符串压缩的应用非常广泛,例如在HTTP协议中,服务器和客户端可以通过gzip压缩来减少网页的传输时间;在存档文件格式如.zip和.tar.gz中,ZLIB压缩也被广泛采用。此外,数据库系统可能会对索引和数据进行压缩,以...
例如,要对一个包含中文字符的字符串进行gzip压缩,你可以这样操作: ```javascript var text = "你好,世界!"; var compressed = pako.gzip(text, { to: 'string' }); ``` 这里,`to: 'string'`参数指定我们希望...
在Python编程语言中,字符串压缩是一项重要的数据处理技术,它用于减少存储空间需求或在网络传输时减小数据量。Python提供了多种内置库和第三方库来实现字符串的压缩和解压缩功能。以下是关于Python字符串压缩的一些...
需要注意的是,这个自定义的字符串压缩和解压缩方法使用了GZIP算法,它是一种广泛使用的数据压缩方法。GZIP通常用于文件和网络数据的压缩,但由于它是基于块的压缩,对于小规模的数据(如单个字符串),可能不会达到...
**cpp-smaz小型字符串压缩库** `cpp-smaz` 是一个基于 `Smaz` 的小型字符串压缩库,专为C++编程语言设计。`Smaz` 是由Paolo Bergantino开发的一个开源压缩算法,它专注于对小字符串进行高效压缩。在处理大量文本...
1. **压缩**:使用`pako.gzip()`方法,将未压缩的数据作为输入,它会返回一个已压缩的二进制字符串或Buffer(在Node.js环境下)。例如: ```javascript var input = "这是需要压缩的文本"; var compressed = pako...
总的来说,Delphi环境下的gZip字符串解压涉及到了对gZip压缩格式的理解,以及如何在Delphi中利用ZLib库实现解压操作。通过学习提供的源代码和Demo,开发者不仅可以掌握具体的解压技术,还能加深对Delphi编程和库集成...