草庐IT

Rust 实现的简单 http 转发

千里之行,始于足下 2023-03-28 原文

学习Rust时练手的小程序,功能类似代理,将网络请求转发到新的地址和端口。

目前只有http请求的转发,未来希望能够代理各种常用的网络协议。
代码地址:https://gitee.com/wangyubin/mario

概要

程序主要有2个参数:

  1. -L:监听的地址和端口
  2. -F:转发的地址和端口

整体结构如下:

程序启动之后,解析 -L-F 参数,获取相应的的地址和端口,然后生成2个 connection
-L 参数对应的connection 生成监听器(listener), -F 参数对应的 connection 生成转发器(handler)。

client不直接请求最终的服务器,而是请求listener监听的地址,listener调用handler转发请求,并将请求结果返回给client

主要模块

程序的主要功能包括:

命令行参数解析

Rust的命令行参数解析常用的库是 clap

#[derive(Parser, Debug)]
#[clap(author, version, about, long_about = None)]
struct Args {
    /// Listen host and port
    #[clap(short = 'L', value_parser)]
    listen: String,

    /// Forward host and port
    #[clap(short = 'F', value_parser)]
    forward: String,
}

// 解析参数,获取地址和端口信息 
fn parse_args(s: &str) -> Connection {
    let strs: Vec<&str> = s.split("://").collect();
    let hostport: Vec<&str> = strs[1].split(":").collect();

    let pt: Vec<&str> = strs[0].split("+").collect();
    let mut p = Protocol::Default;
    let mut t = Transport::Default;

    if pt.len() == 1 || pt.len() == 2 {
        p = match pt[0] {
            "http" => Protocol::Http,
            "http2" => Protocol::Http2,
            _ => Protocol::Default,
        }
    }

    if pt.len() == 2 {
        t = match pt[1] {
            "tcp" => Transport::Tcp,
            "tls" => Transport::Tls,
            _ => Transport::Default,
        }
    }

    let host = match hostport[0] {
        "" => "127.0.0.1",
        _ => hostport[0],
    };

    Connection::new(p, t, host, hostport[1].parse::<u32>().unwrap())
}

Connection 定义

Connection 保存了监听和转发所需要的相关信息,目前主要有4个字段

pub enum Protocol {
    Default,
    Http,
    Http2,
}
pub enum Transport {
    Default,
    Tcp,
    Tls,
}

// 监听或者转发的链接
pub struct Connection<'a> {
    pub protocol: Protocol,   // 通信协议
    pub transport: Transport, // 传输协议
    pub host: &'a str,        // 主机(ip或者域名)
    pub port: u32,            // 端口
}

Listener 定义

listener 是用来监听client请求的,目前是创建了一个简单的 TcpListener 来监听请求。
这里用到了另一个知名的Rust库:
tokio


pub struct HttpListener<'a> {
    conn: Connection<'a>,
}

impl<'a> HttpListener<'a> {
    pub fn new(conn: Connection) -> HttpListener {
        HttpListener { conn }
    }

    pub async fn listen(&self, handler: &dyn Handler) -> Result<(), Box<dyn Error>> {
        let addr = format!("{}:{}", self.conn.host, self.conn.port);
        let listener = TcpListener::bind(addr).await.unwrap();

        while let Ok((inbound, _)) = listener.accept().await {
            match handler.handle(inbound).await {
                Err(e) => println!("error={}", e),
                _ => println!("success"),
            }
        }

        Ok(())
    }
}

Handler 定义

handler是用来处理请求转发的,它的主要作用是将listener和真正的服务连接起来。

pub struct HttpHandler<'a> {
    conn: Connection<'a>,
}

impl<'a> HttpHandler<'a> {
    pub fn new(conn: Connection<'a>) -> HttpHandler<'a> {
        HttpHandler { conn }
    }
}

#[async_trait]
impl<'a> Handler for HttpHandler<'a> {
    async fn handle(&self, mut inbound: TcpStream) -> Result<(), Box<dyn Error>> {
        let proxy_addr = format!("{}:{}", self.conn.host, self.conn.port);
        let mut outbound = TcpStream::connect(proxy_addr).await?;

        let (mut ri, mut wi) = inbound.split();
        let (mut ro, mut wo) = outbound.split();

        let client_to_server = async {
            io::copy(&mut ri, &mut wo).await?;
            wo.shutdown().await
        };

        let server_to_client = async {
            io::copy(&mut ro, &mut wi).await?;
            wi.shutdown().await
        };

        tokio::try_join!(client_to_server, server_to_client)?;

        Ok(())
    }
}

对于不同的协议,会有不同的handler,所以封装了一个trait来解耦 listenerhandler之间的联系。

#[async_trait]
pub trait Handler {
    async fn handle(&self, inbound: TcpStream) -> Result<(), Box<dyn Error>>;
}

这里需要安装 async_trait 这个额外的Rust库,因为Rust原生是不支持异步的trait的。

转发测试

最后看看测试的效果。

测试用的http服务

创建一个文本文件,然后用python在当前目录启动一个静态服务。

echo "hello rust" > hello.txt

python -m http.server 8080

在8080端口启动一个静态http服务,浏览器访问 http://localhost:8080/hello.txt,显示如下:

开启转发

下载 https://gitee.com/wangyubin/mario 的代码,在代码根目录下运行如下命令:

cargo run -- -L http://0.0.0.0:8000 -F http://:8080

再次访问浏览器:http://localhost:8000/hello.txt,显示结果和转发一样:

有关Rust 实现的简单 http 转发的更多相关文章

  1. ruby - 如何模拟 Net::HTTP::Post? - 2

    是的,我知道最好使用webmock,但我想知道如何在RSpec中模拟此方法:defmethod_to_testurl=URI.parseurireq=Net::HTTP::Post.newurl.pathres=Net::HTTP.start(url.host,url.port)do|http|http.requestreq,foo:1endresend这是RSpec:let(:uri){'http://example.com'}specify'HTTPcall'dohttp=mock:httpNet::HTTP.stub!(:start).and_yieldhttphttp.shou

  2. ruby - 如何根据特征实现 FactoryGirl 的条件行为 - 2

    我有一个用户工厂。我希望默认情况下确认用户。但是鉴于unconfirmed特征,我不希望它们被确认。虽然我有一个基于实现细节而不是抽象的工作实现,但我想知道如何正确地做到这一点。factory:userdoafter(:create)do|user,evaluator|#unwantedimplementationdetailshereunlessFactoryGirl.factories[:user].defined_traits.map(&:name).include?(:unconfirmed)user.confirm!endendtrait:unconfirmeddoenden

  3. ruby - 简单获取法拉第超时 - 2

    有没有办法在这个简单的get方法中添加超时选项?我正在使用法拉第3.3。Faraday.get(url)四处寻找,我只能先发起连接后应用超时选项,然后应用超时选项。或者有什么简单的方法?这就是我现在正在做的:conn=Faraday.newresponse=conn.getdo|req|req.urlurlreq.options.timeout=2#2secondsend 最佳答案 试试这个:conn=Faraday.newdo|conn|conn.options.timeout=20endresponse=conn.get(url

  4. ruby - 用 Ruby 编写一个简单的网络服务器 - 2

    我想在Ruby中创建一个用于开发目的的极其简单的Web服务器(不,不想使用现成的解决方案)。代码如下:#!/usr/bin/rubyrequire'socket'server=TCPServer.new('127.0.0.1',8080)whileconnection=server.acceptheaders=[]length=0whileline=connection.getsheaders想法是从命令行运行这个脚本,提供另一个脚本,它将在其标准输入上获取请求,并在其标准输出上返回完整的响应。到目前为止一切顺利,但事实证明这真的很脆弱,因为它在第二个请求上中断并出现错误:/usr/b

  5. ruby-on-rails - 简单的 Ruby on Rails 问题——如何将评论附加到用户和文章? - 2

    我意识到这可能是一个非常基本的问题,但我现在已经花了几天时间回过头来解决这个问题,但出于某种原因,Google就是没有帮助我。(我认为部分问题在于我是一个初学者,我不知道该问什么......)我也看过O'Reilly的RubyCookbook和RailsAPI,但我仍然停留在这个问题上.我找到了一些关于多态关系的信息,但它似乎不是我需要的(尽管如果我错了请告诉我)。我正在尝试调整MichaelHartl'stutorial创建一个包含用户、文章和评论的博客应用程序(不使用脚手架)。我希望评论既属于用户又属于文章。我的主要问题是:我不知道如何将当前文章的ID放入评论Controller。

  6. ruby - Net::HTTP 获取源代码和状态 - 2

    我目前正在使用以下方法获取页面的源代码:Net::HTTP.get(URI.parse(page.url))我还想获取HTTP状态,而无需发出第二个请求。有没有办法用另一种方法做到这一点?我一直在查看文档,但似乎找不到我要找的东西。 最佳答案 在我看来,除非您需要一些真正的低级访问或控制,否则最好使用Ruby的内置Open::URI模块:require'open-uri'io=open('http://www.example.org/')#=>#body=io.read[0,50]#=>"["200","OK"]io.base_ur

  7. ruby - 使用 Ruby 通过 Outlook 发送消息的最简单方法是什么? - 2

    我的工作要求我为某些测试自动生成电子邮件。我一直在四处寻找,但未能找到可以快速实现的合理解决方案。它需要在outlook而不是其他邮件服务器中,因为我们有一些奇怪的身份验证规则,我们需要保存草稿而不是仅仅发送邮件的选项。显然win32ole可以做到这一点,但我找不到任何相当简单的例子。 最佳答案 假设存储了Outlook凭据并且您设置为自动登录到Outlook,WIN32OLE可以很好地完成此操作:require'win32ole'outlook=WIN32OLE.new('Outlook.Application')message=

  8. 华为OD机试用Python实现 -【明明的随机数】 2023Q1A - 2

    华为OD机试题本篇题目:明明的随机数题目输入描述输出描述:示例1输入输出说明代码编写思路最近更新的博客华为od2023|什么是华为od,od薪资待遇,od机试题清单华为OD机试真题大全,用Python解华为机试题|机试宝典【华为OD机试】全流程解析+经验分享,题型分享,防作弊指南华为o

  9. 基于C#实现简易绘图工具【100010177】 - 2

    C#实现简易绘图工具一.引言实验目的:通过制作窗体应用程序(C#画图软件),熟悉基本的窗体设计过程以及控件设计,事件处理等,熟悉使用C#的winform窗体进行绘图的基本步骤,对于面向对象编程有更加深刻的体会.Tutorial任务设计一个具有基本功能的画图软件**·包括简单的新建文件,保存,重新绘图等功能**·实现一些基本图形的绘制,包括铅笔和基本形状等,学习橡皮工具的创建**·设计一个合理舒适的UI界面**注明:你可能需要先了解一些关于winform窗体应用程序绘图的基本知识,以及关于GDI+类和结构的知识二.实验环境Windows系统下的visualstudio2017C#窗体应用程序三.

  10. Get https://registry-1.docker.io/v2/: net/http: request canceled while waiting - 2

    1.错误信息:Errorresponsefromdaemon:Gethttps://registry-1.docker.io/v2/:net/http:requestcanceledwhilewaitingforconnection(Client.Timeoutexceededwhileawaitingheaders)或者:Errorresponsefromdaemon:Gethttps://registry-1.docker.io/v2/:net/http:TLShandshaketimeout2.报错原因:docker使用的镜像网址默认为国外,下载容易超时,需要修改成国内镜像地址(首先阿里

随机推荐