草庐IT

chunksize

全部标签

javascript - 使用 Javascript 将文件拆分为 block

我正在尝试获取单个文件对象并按指定的block大小将其拆分为多个block。在我的示例中,尝试将单个文件拆分为1MB的block。因此,我计算出需要多少block,然后我尝试从“偏移量”(我所在的当前block*block大小)开始对文件进行切片,然后切掉一个block大小。我的第一个切片以1MB正确输出,但我的后续切片结果为0,知道为什么吗?在这里有一个工作代码笔:http://codepen.io/ngalluzzo/pen/VvpYKz?editors=001[1]varfile=$('#uploadFile')[0].files[0];varchunkSize=1024*102

javascript - 是否可以在 FileReader 之后清理内存?

FileReader似乎消耗了所有内存,因为它被反复用于预加载多个blob,并且从不释放它。有什么已知的方法可以强制它释放消耗的内存吗?将FileReader对象及其结果属性设置为null似乎不起作用。更新:这是一个samplecode(在大文件上测试它,比如电影,否则你不会在任务管理器中注意到效果):functionsliceMe(){varfile=document.getElementById('file').files[0],fr,chunkSize=2097152,chunks=Math.ceil(file.size/chunkSize),chunk=0;functionlo

javascript - 为 angular 1.1.x 中的 ng-repeat 编写的过滤器的 $digest 迭代错误

我一直在考虑尝试编写过滤器,但它非常令人沮丧。以下是我为编写“block”过滤器而遵循的一些资源https://groups.google.com/forum/#!topic/angular/IEIQok-YkpUhttps://groups.google.com/forum/#!topic/angular/gEv1-YV-Ojg我试了一下,成功了。但发现版本之间的行为存在差异所描述的生成$$hashKey的方法在1.1.5版本中不起作用。第一个fiddle很好,而第二个fiddle产生迭代错误,即使代码完全相同:http://jsfiddle.net/nRGTX/38/-1.0.3版

go - 新手 : Properly sizing a []byte size in GO (Chunking)

新手警报!不太确定该怎么做-我想做一个“文件分块器”,我从二进制文件中抓取固定的slice,以便以后作为学习项目上传。我目前有这个:type(fileChunk[]bytefileChunks[]fileChunk)funcNumChunks(fios.FileInfo,chunkSizeint)int{chunks:=fi.Size()/int64(chunkSize)ifrem:=fi.Size()%int64(chunkSize)!=0;rem{chunks++}returnint(chunks)}//leftouterrchecksforbrevityfuncchunker(f

c# - 在 x86 上处理非常大的列表

我需要处理大量的float列表,但我在x86系统上遇到了内存限制。我不知道最终长度,所以我需要使用可扩展的类型。在x64系统上,我可以使用.我当前的数据类型:Listparam1=newList();Listparam2=newList();Listparam3=newList();publicclassRawData{publicstringname;publicListdata;}paramN列表的长度很低(目前为50或更低),但数据可以超过10m。当长度为50时,我在1m数据点上方达到内存限制(OutOfMemoryException),而当长度为25时,我在2m数据点上方达到内

C# - 以字节 block 的形式从 Google Drive 下载

我目前正在为网络连接不佳的环境进行开发。我的应用程序有助于自动为用户下载所需的Google云端硬盘文件。它适用于小文件(从40KB到2MB),但对于较大的文件(9MB)却经常失败。我知道这些文件大小可能看起来很小,但就我客户的网络环境而言,GoogleDriveAPI经常因9MB文件而失败。我已经得出结论,我需要以较小的字节block下载文件,但我不知道如何使用GoogleDriveAPI来做到这一点。我读过this一遍又一遍,我尝试了以下代码://withtheDriveFileID,andtheappropriateexportMIMEtype,Icreatetheexportre

c# - 我如何分块可枚举?

我需要一个优雅的方法,它接受一个可枚举对象,并获取可枚举对象的可枚举对象,其中每个元素的数量都相同,但最后一个:publicstaticIEnumerable>Chunk(thisIEnumerablevalues,Int32chunkSize){//TODO:codethatchunks}这是我试过的:publicstaticIEnumerable>Chunk(thisIEnumerablevalues,Int32chunkSize){varcount=values.Count();varnumberOfFullChunks=count/chunkSize;varlastChunkS

javascript - 在上传循环期间获取字节位置

我正在开发一个函数,该函数将使用第3方API将数据分块写入远程服务器。通过StackOverflow上的一些帮助,我能够完成此任务,现在它正在按预期工作。问题是我只能写入一个16kb的block,因为我需要提前写入下一个字节的位置的pos。初始写入很容易从0开始。由于我对此不熟悉,我不确定下一个pos应该只是16还是什么。如果有帮助,API调用writeFileChunk()需要3个参数,文件路径(str)、pos(int64)和数据(base64编码字符串)。reader.onload=function(evt){//GetSERVER_IDfromURLvarserver_id=g

Java:如何 "trim"字节数组?

所以我有一些代码可以从文件中读取一定数量的字节并返回生成的字节数组(这基本上用于将文件分块以作为(最终)base64编码的ascii文本通过网络发送)。它工作正常,除了生成文件的最后一个block时,它不是一个完整的block。因此,生成的字节数组未满。然而,它是一个恒定大小,这意味着文件被重新组合,最后附加了一大堆额外的数据(可能是0)。我怎样才能使文件最后一block的byte[]真正只包含它需要的数据?代码如下所示:privatebyte[]readData(Filef,intstartByte,intchunkSize)throwsException{RandomAccessF

java - google app engine chunkSize & prefetchSize - 我在哪里可以阅读它的详细信息?

关于这两个总和的所有信息:chunkSizeSetsthechunksize.Pleasereadtheclassjavadocforanexplanationofhowchunksizeisused.prefetchSizeSetsthenumberofentitiestoprefetch.尝试查看javadocs,并在sourcecode在SVN中。一点信息都没有!我的意思是,有关这两者的实际含义的信息。好吧,prefetchSize或多或少是清楚的——运行查询时获取了多少实体。如果我的理解是正确的,例如如果我将查询的限制设置为1000并将prefetchSize设置为1000,它