草庐IT

linux - 管道文本到外部程序附加一个尾随换行符

coder 2023-06-18 原文

我一直在比较多个系统之间的哈希值，并惊讶地发现 PowerShell 的哈希值与其他终端的不同。

Linux 终端(CygWin、Bash for Windows 等)和 Windows 命令提示符都显示相同的哈希值，而 PowerShell 显示不同的哈希值。



这是使用 SHA256 测试的，但在使用其他算法(如 md5)时发现了相同的问题。

编码更新:

尝试更改 PShell 编码，但对返回的哈希值没有任何影响。

[Console]::OutputEncoding.BodyName 
iso-8859-1
[Console]::OutputEncoding = [Text.UTF8Encoding]::UTF8
utf-8

GitHub PowerShell 问题

https://github.com/PowerShell/PowerShell/issues/5974

最佳答案

tl;博士:
当 PowerShell 将字符串通过管道传输到外部程序时 :

  • 它使用存储在 $OutputEncoding preference variable 中的字符编码对其进行编码。
  • 它总是附加一个尾随(适合平台的)换行符。

    • 因此，关键是避免 PowerShell 的管道 赞成 native shell 的，以便 防止隐式添加尾随换行符 :
  • 如果您在 上运行您的命令Unix 类似平台(使用 PowerShell Core):
    • sh -c "printf %s 'string' | openssl dgst -sha256 -hmac authcode"
    printf %s是 echo -n 的便携替代品.如果字符串包含 '字符。，将它们加倍或使用 `"...`"而是引用。
  • 如果您需要在 上执行此操作Windows 通过 cmd.exe ，事情变得更加棘手，因为 cmd.exe不直接支持没有尾随换行符的回显:
    • cmd /c "<NUL set /p =`"string`"| openssl dgst -sha256 -hmac authcode"
    注意|前不能有空格为了这个工作。有关此解决方案的说明和局限性，请参阅 this answer .
    仅当字符串包含非 ASCII 字符并且您在 Windows PowerShell 中运行时才会出现编码问题；在那个事件中，第一组$OutputEncoding到目标实用程序期望的编码，通常是 UTF-8:$OutputEncoding = [Text.Utf8Encoding]::new()
  • 从 Windows PowerShell v5.1/PowerShell (Core) v7.2 开始，当您通过管道将没有字符串的字符串发送到外部实用程序时，PowerShell 总是会附加一个尾随换行符 ，这就是您观察到的差异的原因(尾随换行符仅在 Unix 平台上为 LF，而在 Windows 上为 CRLF 序列)。
  • 您可以在 GitHub issue #5974 中跟踪解决此问题的努力，由 OP 打开。

  • 此外，PowerShell 的管道在将数据传输到外部程序时总是基于文本的；内部基于 UTF-16LE 的 PowerShell (.NET) 字符串根据存储在自动 $OutputEncoding 中的编码进行转码。变量，在 Windows PowerShell 中默认为仅 ASCII 编码，在 PowerShell Core 中默认为 UTF-8 编码(在 Windows 和类 Unix 平台上)。
  • 在 PowerShell Core 中，一个 change is being discussed用于在外部程序之间传输原始字节流。

  • 事实echo -n在 PowerShell 中不会产生没有尾随换行符的字符串，因此您的问题是附带的；为了完整起见，这里有一个解释:
  • echo是 PowerShell Write-Output 的别名cmdlet，它 - 在管道到外部程序的上下文中 - 将文本写入下一个管道段中程序的标准输入(类似于 Bash/cmd.exe 的 echo )。
  • -n被解释为 Write-Output 的(明确的)缩写的 -NoEnumerate转变。
  • -NoEnumerate仅在写入多个对象时适用，因此在此处不起作用。
  • 因此，简而言之:在 PowerShell 中，echo -n "string"与 Write-Output -NoEnumerate "string" 相同，这 - 因为只输出一个字符串 - 与 Write-Output "string" 相同，反过来，这与仅使用 "string" 相同，依赖于 PowerShell 的隐式输出行为。
  • Write-Output没有选项可以取消尾随换行符，即使这样做，使用管道将其通过管道传输到外部程序也会将其添加回。

    • 关于linux - 管道文本到外部程序附加一个尾随换行符，我们在Stack Overflow上找到一个类似的问题： https://stackoverflow.com/questions/48371447/

    换行符尾随codePowerShellstronglinuxhashpipenewline

    有关linux - 管道文本到外部程序附加一个尾随换行符的更多相关文章

    1. ruby - 在 Ruby 程序执行时阻止 Windows 7 PC 进入休眠状态 - 2

      我需要在客户计算机上运行Ruby应用程序。通常需要几天才能完成(复制大备份文件)。问题是如果启用sleep，它会中断应用程序。否则，计算机将持续运行数周，直到我下次访问为止。有什么方法可以防止执行期间休眠并让Windows在执行后休眠吗？欢迎任何疯狂的想法;-) 最佳答案 Here建议使用SetThreadExecutionStateWinAPI函数，使应用程序能够通知系统它正在使用中，从而防止系统在应用程序运行时进入休眠状态或关闭显示。像这样的东西:require'Win32API'ES_AWAYMODE_REQUIRED=0x0

    2. ruby - 使用 ruby​​ 将 HTML 转换为纯文本并维护结构/格式 - 2

      我想将html转换为纯文本。不过，我不想只删除标签，我想智能地保留尽可能多的格式。为插入换行符标签，检测段落并格式化它们等。输入非常简单，通常是格式良好的html(不是整个文档，只是一堆内容，通常没有anchor或图像)。我可以将几个正则表达式放在一起，让我达到80%，但我认为可能有一些现有的解决方案更智能。 最佳答案 首先，不要尝试为此使用正则表达式。很有可能你会想出一个脆弱/脆弱的解决方案，它会随着HTML的变化而崩溃，或者很难管理和维护。您可以使用Nokogiri快速解析HTML并提取文本:require'nokogiri'h

    3. ruby - 如何指定 Rack 处理程序 - 2

      Rackup通过Rack的默认处理程序成功运行任何Rack应用程序。例如:classRackAppdefcall(environment)['200',{'Content-Type'=>'text/html'},["Helloworld"]]endendrunRackApp.new但是当最后一行更改为使用Rack的内置CGI处理程序时，rackup给出“NoMethodErrorat/undefinedmethod`call'fornil:NilClass”:Rack::Handler::CGI.runRackApp.newRack的其他内置处理程序也提出了同样的反对意见。例如Rack

    4. ruby - 使用 Vim Rails，您可以创建一个新的迁移文件并一次性打开它吗？ - 2

      使用带有Rails插件的vim，您可以创建一个迁移文件，然后一次性打开该文件吗？textmate也可以这样吗？ 最佳答案 你可以使用rails.vim然后做类似的事情::Rgeneratemigratonadd_foo_to_bar插件将打开迁移生成的文件，这正是您想要的。我不能代表textmate。 关于ruby-使用VimRails，您可以创建一个新的迁移文件并一次性打开它吗？，我们在StackOverflow上找到一个类似的问题： https://sta

    5. ruby-on-rails - Rails - 一个 View 中的多个模型 - 2

      我需要从一个View访问多个模型。以前，我的links_controller仅用于提供以不同方式排序的链接资源。现在我想包括一个部分(我假设)显示按分数排序的顶级用户(@users=User.all.sort_by(&:score))我知道我可以将此代码插入每个链接操作并从View访问它，但这似乎不是“ruby方式”，我将需要在不久的将来访问更多模型。这可能会变得很脏，是否有针对这种情况的任何技术？注意事项:我认为我的应用程序正朝着单一格式和动态页面内容的方向发展，本质上是一个典型的网络应用程序。我知道before_filter但考虑到我希望应用程序进入的方向，这似乎很麻烦。最终从任何

    6. ruby-on-rails - 渲染另一个 Controller 的 View - 2

      我想要做的是有2个不同的Controller，client和test_client。客户端Controller已经构建，我想创建一个test_clientController，我可以使用它来玩弄客户端的UI并根据需要进行调整。我主要是想绕过我在客户端中内置的验证及其对加载数据的管理Controller的依赖。所以我希望test_clientController加载示例数据集，然后呈现客户端Controller的索引View，以便我可以调整客户端UI。就是这样。我在test_clients索引方法中试过这个:classTestClientdefindexrender:template=>

    7. ruby - 在 Ruby 中编写命令行实用程序 - 2

      我想用ruby​​编写一个小的命令行实用程序并将其作为gem分发。我知道安装后，Guard、Sass和Thor等某些gem可以从命令行自行运行。为了让gem像二进制文件一样可用，我需要在我的gemspec中指定什么。 最佳答案 Gem::Specification.newdo|s|...s.executable='name_of_executable'...endhttp://docs.rubygems.org/read/chapter/20 关于ruby-在Ruby中编写命令行实用程序

    8. ruby-on-rails - Rails 应用程序之间的通信 - 2

      我构建了两个需要相互通信和发送文件的Rails应用程序。例如，一个Rails应用程序会发送请求以查看其他应用程序数据库中的表。然后另一个应用程序将呈现该表的json并将其发回。我还希望一个应用程序将存储在其公共(public)目录中的文本文件发送到另一个应用程序的公共(public)目录。我从来没有做过这样的事情，所以我什至不知道从哪里开始。任何帮助，将不胜感激。谢谢! 最佳答案 无论Rails是什么，几乎所有Web应用程序都有您的要求，大多数现代Web应用程序都需要相互通信。但是有一个小小的理解需要你坚持下去，网站不应直接访问彼此

    9. ruby - 无法运行 Rails 2.x 应用程序 - 2

      我尝试运行2.x应用程序。我使用rvm并为此应用程序设置其他版本的ruby​​:$rvmuseree-1.8.7-head我尝试运行服务器，然后出现很多错误:$script/serverNOTE:Gem.source_indexisdeprecated,useSpecification.Itwillberemovedonorafter2011-11-01.Gem.source_indexcalledfrom/Users/serg/rails_projects_terminal/work_proj/spohelp/config/../vendor/rails/railties/lib/r

    10. ruby-on-rails - Rails 应用程序中的 Rails : How are you using application_controller. rb 是新手吗？ - 2

      刚入门rails，开始慢慢理解。有人可以解释或给我一些关于在application_controller中编码的好处或时间和原因的想法吗？有哪些用例。您如何为Rails应用程序使用应用程序Controller？我不想在那里放太多代码，因为据我了解，每个请求都会调用此Controller。这是真的？ 最佳答案 ApplicationController实际上是您应用程序中的每个其他Controller都将从中继承的类(尽管这不是强制性的)。我同意不要用太多代码弄乱它并保持干净整洁的态度，尽管在某些情况下ApplicationContr

    随机推荐