草庐IT

spark-csv

全部标签

javascript - 在 d3.js 中从 csv 创建层次结构

我有一个包含以下数据的csv:world,country,stateWorld,US,CAWorld,US,NJWorld,INDIA,ORWorld,INDIA,APWorld,INDIA,TN我需要转换成如下所示的树层次结构:{"name":"World","children":[{"name":"US","children":[{"name":"CA"},{"name":"NJ"}]},{"name":"INDIA","children":[{"name":"OR"},{"name":"TN"},{"name":"AP"}]}]};然后这棵树将用于树可视化。有人可以帮忙吗?

javascript - 使用 javascript 在 Web 浏览器中解压 csv 文件

我想从网络服务器下载gzip压缩的csv文件,然后在浏览器中解压缩。到目前为止,我已尝试使用pako和zlib将文件压缩到我的服务器上,但遇到了各种问题。尝试解压缩unix-gzipped文件时,我不断收到不正确的header消息。接下来,我尝试使用节点在服务器上压缩文件,但目前出现此错误UncaughtError:invalidfilesignature:,�这是我用来获取文件的命令:$.ajax({type:"GET",url:'public/pols_zlib.csv.gz'}).done(function(d){vargunzip=newZlib.Gunzip(d);plain

javascript - 如何使用 Papa Parse 从 CSV 文件中将数据提取到 React 状态?

我正在使用PapaParse解析图形的CSV文件。我想将数据存储在Reactstate中解析文件后。Papa.Parse()不返回任何内容,结果异步提供给回调函数。此外,setState()在异步回调中不起作用。这个问题类似于RetrievingparseddatafromCSV.我尝试使用以下代码将数据存储在状态中,但正如预期的那样,它不起作用。componentWillMount(){functiongetData(result){console.log(result);//displayswholedatathis.setState({data:result});//butget

javascript - 如何从自定义按钮调用数据表 csv 按钮

需要从我的自定义按钮调用csv按钮。ExportreporttoExcel我不想从“数据表”按钮调用它,而是希望从上面的按钮获得相同的功能。在Datatable中寻找一些配置更改,以便我可以调用我的自定义按钮将表记录导出为csv。vartable=$('#tableId').DataTable({"paging":true,"info":true,"searching":true,,buttons:true});$("#SEARCH").on("keyupsearchinputpastecut",function(){table.search(this.value).draw();})

[Spark、hadoop]spark Streaming的核心DStream

目录SparkStreaming的核心是DStream一、DStream简介二.DStream编程模型三.DStream转换操作SparkStreaming的核心是DStream一、DStream简介1.Spark Streaming提供了一个高级抽象的流,即DStream(离散流)。2.DStream的内部结构是由一系列连续的RDD组成,每个RDD都是一小段由时间分隔开来的数据集。二.DStream编程模型三.DStream转换操作transform()1.在3个节点启动zookeeper集群服务$zkServer.shstart2.启动kafka(3个节点都要)$/opt/module/k

javascript - Javascript 中的 CSV 分隔符自动检测

如何从Javascript/NodeJS中的字符串中检测CSV分隔符?什么是标准算法?请注意,分隔符并不总是逗号。最常见的分隔符是;、、和\t(制表符)。 最佳答案 获取可能分隔符的可能算法非常简单,并假设数据格式正确:对于每个分隔符,对于每一行,用分隔符分割行,检查长度。如果其长度不等于最后一行的长度,则这不是有效的分隔符。概念验证(不处理带引号的字段):functionguessDelimiters(text,possibleDelimiters){returnpossibleDelimiters.filter(weedOut)

javascript - 如果行太多,Chrome 无法导出到 csv?

我编写了这个导出按钮,基本上可以将我在google表中的所有数据输出到CSV文件中以供下载。它工作得很好,直到我有太多行并且当我尝试下载csv时Chrome给我“awsnap”错误页面。我该如何解决这个问题?varcsvContent="data:text/csv;charset=utf-8,";data.forEach(function(infoArray,index){dataString=infoArray.join(",");csvContent+=dataString+"\n";});varencodedUri=encodeURI(csvContent);varlink=do

javascript - 下载 csv 文件作为对 AJAX 请求的响应

我有一个名为“/downloadUserAction”的端点,用于收集数据并下载一个csv文件。我面临的挑战是,当使用按钮点击功能调用端点时,文件不会被下载,但只有当我直接在浏览器中访问端点时,它才会下载。经过研究,我得出的结论是您不能使用AJAX下载文件。这是有道理的,因为当我点击我的按钮时,我看到端点被点击并且文件内容被传递到网络选项卡中,但是没有文件被下载到客户端。这就是我在javascript端使用我页面上的数据表按钮插件功能来调用我的端点所要做的全部事情。$(document).ready(function(){vartable=$("#userActivity").on('

javascript - 如何使用 Node.js 解析脏 CSV?

由于许多错误,我无法正确解析CSV文件,这让我抓狂。我提取了一个示例,您可以在此处下载:TestCSVFile主要错误(或产生错误的原因)是:引号和逗号(尝试使用R解析文件时出现许多错误)空行字段内意外换行我首先决定在将数据加载到R之前逐行使用正则表达式来清理数据,但无法解决问题,而且速度很慢(200Mo文件)所以我决定使用CSVparser在Node.js下使用以下代码:'usestrict';constFs=require('fs');constCsv=require('csv');letinput='data_stack.csv';letreadStream=Fs.createR

javascript - 来自 CSV 的 d3 可缩放 TreeMap

我是D3的新手,我发现它非常令人羞愧。我的目标是从CSV文件制作树状图。我想使用CSV格式,因为我将处理电子表格中的值,而且以这种方式保存文件对我来说很容易。我正在尝试以分层格式存储数据,类似这样(hier.csv):parent,child,valueHomerSimpson,Bart,20HomerSimpson,Lisa,14HomerSimpson,Maggie,6PeterGriffin,Chris,19PeterGriffin,Meg,12PeterGriffin,Stewie,9我正在使用这个ZoomableTreemapexample.我希望树可以任意深,即如果Bart