草庐IT

spark-framework

全部标签

windows - 将 spark.local.dir 设置为不同的驱动器

我正在尝试在Windows10上设置独立的Spark。我想设置spark.local.dir至D:\spark-tmp\tmp,因为目前它似乎正在使用C:\Users\\AppData\Local\Temp,在我的例子中是在SSD驱动器上,考虑到某些数据集的大小,它可能没有足够的空间。所以我更改了文件%SPARK_HOME%\conf\spark-defaults.conf到以下,没有成功spark.eventLog.enabledtruespark.eventLog.dirfile:/D:/spark-tmp/logspark.local.dirfile:/D:/spark-tmp/

R Spark 一次从文件夹中读取一个文件,与 Shiny 集成

我在HDFS上有一个文件夹,其中包含10个CSV文件。每个CSV文件包含10000行和17列。目标响应式读取HDFS上的文件夹。如果文件夹中包含文件,则从文件夹中一次读取一个文件(从旧到新)。在Shiny中绘制一些参数。当新文件添加到文件夹或从文件夹中读取时更新绘图。状态目前,借助SparklyR,我能够一次响应式(Reactive)读取所有文件并生成包含100000个点的绘图(ggplot)。如果我在启动应用程序后添加第11个文件(包含10000行),绘图将更新为110000个点。library(sparklyr)conf=spark_config()conf$spark.drive

.net - 新的 Windows 版本中是否包含所有 .NET Framework 版本?

我知道.NETFramework不向后兼容(例如,安装4.0dll不包括3.0dll)但是Windows安装呢?前任。Windows7包含.NET3.5,那么它也安装了2.0呢?哪些Windows版本包含.NET2.0dll? 最佳答案 如果您查看WikipediaEntry对于.NETFramework版本历史,您将看到版本表以及随附的操作系统。总结wiki条目:1.0ispartofWindowsXPTabletandMediaCenterEditions.1.1ispartofWindowsServer20032.0ispar

windows - Spark 发射 : find version

我的环境是Windows7,安装了scala2.11.4(运行良好),Java1.8我已经尝试过spark-1.2.0-bin-hadoop2.4和spark-1.2.1-bin-hadoop2.4并且每次我都放bin\spark-shell.cmd我刚刚收到来自Windows的错误:find:'version':Nosuchfileordirectoryelsewasunexpectedatthistime.这里有什么我忽略的吗?非常感谢。更新:(来自spark-class2.cmd)C:\Users\spark-1.2.1-bin-hadoop2.4>for/F"tokens=3"

.net - 我可以从 JavaScript (JScript) 或 VBScript 使用 .NET Framework 吗?

我想编写一个可以在普通Windows(XP或更高版本)系统上运行的脚本,并在已安装的(GAC'd).NET程序集中调用方法。(我需要将脚本交付给其他人,我不想假设他们安装了任何特别的东西(除了有问题的程序集)。我可以使用JavaScript(JScript)或VBScript(与标准一起使用吗?Windowscscript/wscript命令)以某种方式执行此操作? 最佳答案 如果您希望调用其方法的类向COM公开,您应该能够执行如下操作(VBScript):DimoSeto=CreateObject("MyAssembly.MyOb

windows - .NET Framework 3.5 SP1 是否可用于 Windows 7 x64?

.NETFramework3.5SP1是否可用于Windows7x64? 最佳答案 它作为Windows7的一部分提供。您必须通过以下方式启用它:控制面板->程序和功能->打开或关闭Windows功能: 关于windows-.NETFramework3.5SP1是否可用于Windows7x64?,我们在StackOverflow上找到一个类似的问题: https://stackoverflow.com/questions/5730277/

c# - .Net framework 4 适用于 Windows XP 的应用程序

这个问题在这里已经有了答案:关闭10年前。PossibleDuplicate:can.netframework4worksontopofwindowsxp?我们正在考虑各种框架和语言选项来为我们的目标市场开发我们的数据库驱动的桌面应用程序,不幸的是,他们的系统中大量使用WindowsXP。任何人都可以确认如果我们在C#/.NET框架4.0中开发桌面应用程序,该应用程序是否能够在WindowsXP上运行?我知道要运行.net开发的应用程序,我们需要在最终用户的系统中安装.net框架,所以我的第二个问题是:我们可以在WindowsXP上安装.net框架吗(没有安装服务包)?等待您的专家解答

windows - 如何将 Play Framework 2.4.4 应用程序作为 Windows 服务运行?

我正在尝试按照中描述的步骤进行操作HowdoIrunaPlayFramework2.0applicationasaWindowsservice?我在第5步失败了。起初服务显示错误关于play.core.server.NettyServer脚本的一部分。我改成了play.core.server.ProdServerStart但现在我在运行start.bat时遇到错误C:\GCS>java-cp"C:\GCS\lib\*"play.core.server.ProdServerStartOops,cannotstarttheserver.Configurationerror:Configur

windows - 如何在 Windows 10 上逐步设置 Spark

我尝试在Windows10上设置spark,在堆栈溢出方面发现了很多好的解决方案。因此,我正在尝试结合所有解决方案并创建标准化的安装步骤 最佳答案 安装前需要下载以下内容:JAVAJDK-http://www.oracle.com/technetwork/java/javase/downloads/jdk8-downloads-2133151.htmlSBT和Scala-https://www.scala-lang.org/download/Winutils.exe-https://github.com/steveloughran/

windows - 在 Windows 中运行 Play Framework 2.0,出现 NoClassDefFoundError

我正在尝试在Windows(XP)中运行PlayFramework2.0,但是当我启动游戏时,我遇到了这个异常:>play.batExceptioninthread"main"java.lang.NoClassDefFoundError:andCausedby:java.lang.ClassNotFoundException:andatjava.net.URLClassLoader$1.run(UnknownSource)atjava.security.AccessController.doPrivileged(NativeMethod)atjava.net.URLClassLoade