Comments (8)
压缩进度到多少的时候出现这个提示的?
我们觉得很有可能是gz数据的中间,或者尾部出现了数据错误。GTZ对 fastq.gz的的压缩,是边解压gz,边重压缩解出的fastq数据的,这个错误提示,意味着,GTZ在解压gz数据过程中,发现gz文件有错误。
您是否可以尝试使用 gzip 完全解压一次,看一下,是否gz数据本身真的完整?
(如果gzip解压确定没有任何问题,请回复我们,我们将专门派工程师跟您取得联系以解决这个问题。)
(PS. GTX.Zip 本身就是为大型数据设计的,这个大小对于GTZ不是问题。)
from gtz.
@superligen 这是显示到100%时出现的错误,实际这个进度显示很任性啊,进度100%还能往上继续蹦的
我们磁盘阵列崩了,联系厂商换硬盘得几天时间,暂时没法测试了
from gtz.
ok, 对于 fastq.gz的文件,你会经常看到进度超过 100% 的情况,这个是因为gz数据本身不记录到底有多长(gz里实际有一个size,但由于是32位的,所以并没有什么实际意义),因此,我们无法准确的估计进度,我们的进度数值是根据 实际解压出的fastq数据大小来估计的。这块我们后面会寻找一个合理的方案。
等你们盘阵修改好了,你可以测一下,很大概率是这个gz数据损坏了。
另外,我们配合阿里在推动基因数据云上存储,10TB容量的OSS 3年,只需999。这个可以很肯定的说是赔本的。在配合 我们的 www.gtz.io 的 云数据压缩服务,你可以存下 几千个 全基因组数据。
PS, www.gtz.io 云上数据压缩服务,使用的是我们的企业级压缩技术,一般情况下,比你现在用的public版压出的数据再小一半,通常是gz数据1/7 ~ 1/4大小。而且是完全免费的,非常划算。
from gtz.
关键是,完全不用担心数据损坏。
from gtz.
上云的方案跟老板提过,因为下行流量费用和数据敏感性已经被老板否掉。
不过对GTX.Zip离线版倒是很有兴趣,另外不知道什么时候发布支持Windows平台的版本,很是期待啊。
from gtz.
离线版,我们正在紧张测试。简单调查一下,
1、你们对Windows 平台的工具最大期望是什么:命令行还是GUI界面?
2、你们的Windows平台是什么Windows 系统?运行这个Windows系统的机器是多少核心,多少内存的?
3、大部分的生信分析程序应该都是Linux的,为什么你们期待 Windows的产品?
非常感谢!
from gtz.
- GUI界面最好,因为用户比较小白。至于我们自己用的话无所谓GUI,也无所谓Windows,反正服务器都是Linux;
- 现在一般都是Windows10了,配置方面就是普通电脑,一般4核心8GB左右吧;
- 期待Windows的产品是跟我们业务特点相关的,简单讲下就是我们可以帮助合作用户深度分析下机数据,一般用户测完序拿到一大坨fq文件,可能需要跨地区传输给我们,这时候就期待能够有靠谱的压缩工具能够尽可能的减小传输文件体积,缩短传输时间;
- 传输前压缩是由一般用户操作,所以越傻瓜越好。
from gtz.
@superligen 确认gz数据尾部约98%的位置损坏,与gtz无关
from gtz.
Related Issues (20)
- fastqc-gtz couldn't be installed without root permission HOT 2
- can you add a new feature HOT 1
- Emergency ERROR needs to be fixed HOT 1
- fastqc-gtz error HOT 1
- broken pipe issue HOT 6
- Installer modifies user's .bashrc without asking or warning the user HOT 2
- GTX.Zip Professional stops working after 6 months HOT 4
- hisat2默认流程下处理的bam文件不能用gtz压缩 HOT 1
- 有关压缩率的问题 HOT 1
- 二级:GTZ.IO网页优化
- GTZ stuck on .bam file after 72% HOT 2
- Can I use it in cpu based on powerPC? HOT 2
- gtz需下rbin的旧版压缩数据在aws北京区的机器上解压失败,报错Segmentation fault (core dumped)
- NCBI上ERR1993376.1的一组Rat第三代数据走高倍压缩失败
- 生态软件技术提问 HOT 2
- 'gtz -c' doesn't work HOT 2
- How to estimate the compressed file is unbroken? HOT 1
- When the program can run on Arm architecture v8 ? HOT 1
- Certificate Expires
- Compress bam file
Recommend Projects
-
React
A declarative, efficient, and flexible JavaScript library for building user interfaces.
-
Vue.js
🖖 Vue.js is a progressive, incrementally-adoptable JavaScript framework for building UI on the web.
-
Typescript
TypeScript is a superset of JavaScript that compiles to clean JavaScript output.
-
TensorFlow
An Open Source Machine Learning Framework for Everyone
-
Django
The Web framework for perfectionists with deadlines.
-
Laravel
A PHP framework for web artisans
-
D3
Bring data to life with SVG, Canvas and HTML. 📊📈🎉
-
Recommend Topics
-
javascript
JavaScript (JS) is a lightweight interpreted programming language with first-class functions.
-
web
Some thing interesting about web. New door for the world.
-
server
A server is a program made to process requests and deliver data to clients.
-
Machine learning
Machine learning is a way of modeling and interpreting data that allows a piece of software to respond intelligently.
-
Visualization
Some thing interesting about visualization, use data art
-
Game
Some thing interesting about game, make everyone happy.
Recommend Org
-
Facebook
We are working to build community through open source technology. NB: members must have two-factor auth.
-
Microsoft
Open source projects and samples from Microsoft.
-
Google
Google ❤️ Open Source for everyone.
-
Alibaba
Alibaba Open Source for everyone
-
D3
Data-Driven Documents codes.
-
Tencent
China tencent open source team.
from gtz.