skywalking测试环境部署实战

一、skywalking组成

• 探针(agent)

  agent会被安装到服务所在的服务器上，负责进行数据的收集，并向oap发送收集的数据。

• 可观测性分析平台 OAP(Observability Analysis Platform)

  接收探针发送的数据进行整合运算，然后将数据存储到对应的存储介质上，比如 Elasticsearch、MySQL等存储服务。OAP默认监听两个端口gRPC协议端口11800、HTTP端口12800，gRPC用于探针上报数据，HTTP端口用于UI连接OAP平台获取数据。

• Skywalking UI

  Skywalking 提供单独的UI进行数据的查看，UI调用OAP提供的接口，获取对应的数据根据UI模板的配置进行展示。

二、elasticsearch安装

skywalking 的数据默认会存储在h2,生产环境一般用elasticsearch(已有环境可跳过此步)

为了方便这里用docker 安装elasticsearch
1.数据持久化

#创建持久化目录
mkdir -p /mnt/es/elasticsearch/data
mkdir -p /mnt/es/elasticsearch/logs
mkdir -p /mnt/es/elasticsearch/config

#启动es
docker run -d --name=es7 --restart=always -e "ES_JAVA_OPTS=-Xms512m -Xmx512m" elasticsearch:7.9.0

#复制配置文件到宿主机
docker cp es7:/usr/share/elasticsearch/config/elasticsearch.yml /mnt/es/elasticsearch/config

#删除容器
docker rm -f es7

2.dockers启动elasticsearch

docker run -d --name=es7 \
--restart=always \
-e "ES_JAVA_OPTS=-Xms512m -Xmx512m" \
-p 9200:9200 -p 9300:9300 \
-e "discovery.type=single-node" \
-v /mnt/es/elasticsearch/data:/usr/share/elasticsearch/data \
-v /mnt/es/elasticsearch/logs:/usr/share/elasticsearch/logs \
-v /mnt/es/elasticsearch/config/elasticsearch.yml:/usr/share/elasticsearch/config/elasticsearch.yml \
elasticsearch:7.9.0

访问ip:9200出现以下代表安装成功

三、skywalking 安装

1.通过安装包安装

1.下载包

apm包（包含oap和skywalking-ui）
https://archive.apache.org/dist/skywalking/8.9.1/apache-skywalking-apm-8.9.1.tar.gz
agent包
https://archive.apache.org/dist/skywalking/java-agent/8.9.0/apache-skywalking-java-agent-8.9.0.tgz

2.下载完后解压包，目录结构如下

├── bin								# 运行脚本
│   ├── oapService.bat
│   ├── oapServiceInit.bat
│   ├── oapServiceInit.sh			# 初始化启动脚本，用于集群环境。为了防止多节点同时启动导致冲突，
									# 单节点执行oapServiceInit.sh进行初始化，其他节点执行oapServiceNoInit.sh等待初始化完成后再启动。
│   ├── oapServiceNoInit.bat
│   ├── oapServiceNoInit.sh
│   ├── oapService.sh				# OAP 启动并初始化
│   ├── startup.bat
│   ├── startup.sh					# 启动并初始化脚本（同时启动OAP与UI）
│   ├── webappService.bat
│   └── webappService.sh			# Skywalking UI 启动脚本
├── config							# 配置文件
│   ├── alarm-settings.yml			# 告警配置
│   ├── application.yml				# OAP 主配置文件
│   ├── component-libraries.yml		# 组件库配置,定义被监控应用中使用的组件库
│   ├── endpoint-name-grouping.yml	# 接口名称分组规则
│   ├── envoy-metrics-rules			# envoy 网关监控策略
│   │   ├── envoy-svc-relation.yaml
│   │   └── envoy.yaml
│   ├── fetcher-prom-rules			# Prometheus Fetcher 配置文件，用于OAP自监测。
│   │   └── self.yaml
│   ├── gateways.yml				# 网关配置，单节点无需配置
│   ├── lal
│   │   ├── default.yaml
│   │   └── envoy-als.yaml
│   ├── log4j2.xml					# 日志配置
│   ├── log-mal-rules
│   │   └── placeholder.yaml
│   ├── metadata-service-mapping.yaml
│   ├── meter-analyzer-config
│   │   └── spring-sleuth.yaml
│   ├── oal							# oal监控度量指标
│   │   ├── browser.oal
│   │   ├── core.oal
│   │   ├── disable.oal
│   │   ├── dotnet-agent.oal
│   │   ├── event.oal
│   │   ├── java-agent.oal
│   │   └── tcp.oal
│   ├── openapi-definitions		 	
│   │   └── serviceA
│   ├── otel-oc-rules				# OpenTelemetry receiver规则
│   │   ├── istio-controlplane.yaml
│   │   ├── k8s-cluster.yaml
│   │   ├── k8s-node.yaml
│   │   ├── k8s-service.yaml
│   │   ├── oap.yaml
│   │   └── vm.yaml
│   ├── service-apdex-threshold.yml	# apdex配置
│   ├── trace-sampling-policy-settings.yml	# 采样配置
│   ├── ui-initialized-templates	# UI配置模板
│   │   ├── apm.yml
│   │   ├── browser.yml
│   │   ├── database.yml
│   │   ├── event.yml
│   │   ├── istio-dp.yml
│   │   ├── istio.yml
│   │   ├── k8s.yml
│   │   ├── self-observability.yml
│   │   ├── spring-sleuth.yml
│   │   ├── topology-endpoint-relation.yml
│   │   ├── topology-endpoint.yml
│   │   ├── topology-instance.yml
│   │   ├── topology-service-instance-relation.yml
│   │   ├── topology-service-relation.yml
│   │   ├── topology-service.yml
│   │   └── vm.yml
│   └── zabbix-rules			# zabbix 规则
│       └── agent.yaml
├── config-examples						# 配置文件示例
│   ├── alarm-settings.yml
│   ├── lal.yaml
│   └── log-mal.yaml
├── LICENSE
├── licenses
├── NOTICE
├── oap-libs							# OAP Jar文件与依赖库
├── README.txt
├── tools								# 开发运维工具
│   └── profile-exporter
│       ├── application.yml
│       ├── profile_exporter_log4j2.xml
│       └── profile_exporter.sh
└── webapp								# Skywalking UI
    ├── skywalking-webapp.jar
    └── webapp.yml						# Skywalking UI 配置文件

3.修改config目录下主配置文件：application.yml

storage:
  selector: ${SW_STORAGE:elasticsearch} #存储介质选择es
  elasticsearch:
    namespace: ${SW_NAMESPACE:""}
    clusterNodes: ${SW_STORAGE_ES_CLUSTER_NODES:localhost:9200} #es地址和端口

4.修改webapp目录下webapp.yml

server:
  port: 8088 #ui访问端口改为8088避免占用8080端口

5.启动oap和skywalking-ui

sh start.sh

6.访问skywalking-ui

ip:8088

2.通过docker安装

拉取镜像

docker pull apache/skywalking-oap-server:8.9.1
docker pull apache/skywalking-ui:8.9.1

oap安装

docker run --name oap --restart=always -d \
-e TZ=Asia/Shanghai \
-p 12800:12800 \
-p 11800:11800 \
--link es7:es7 \
-e SW_STORAGE=elasticsearch \
-e SW_STORAGE_ES_CLUSTER_NODES=192.168.8.136:9200 \
apache/skywalking-oap-server:8.9.1

skywalking-ui安装

docker run -d --name skywalking-ui \
--restart=always \
-e TZ=Asia/Shanghai \
-p 8088:8080 \
--link oap:oap \
-e SW_OAP_ADDRESS=oap:12800 \
apache/skywalking-ui:8.9.1

四、部署skywalking-agent

1.idea连接agent

# skywalking-agent.jar的本地磁盘的路径 
# 在skywalking上显示的服务名
# skywalking的collector服务的IP及端口
-javaagent:D:\middleware\skywalking-agent\skywalking-agent.jar
-DSW_AGENT_NAME=local-userService
-DSW_AGENT_COLLECTOR_BACKEND_SERVICES=192.168.8.136:11800

skywalking-agent采集信息

1.pom文件加入依赖

       <dependency>
            <groupId>org.apache.skywalking</groupId>
            <artifactId>apm-toolkit-logback-1.x</artifactId>
            <version>8.8.0</version>
        </dependency>

2.logback-spring.xml中加入以下配置

<!--输出到skywalking-->
    <appender name="grpc" class="org.apache.skywalking.apm.toolkit.log.logback.v1.x.log.GRPCLogClientAppender">
        <encoder class="ch.qos.logback.core.encoder.LayoutWrappingEncoder">
            <layout class="org.apache.skywalking.apm.toolkit.log.logback.v1.x.mdc.TraceIdMDCPatternLogbackLayout">
                <Pattern>%contextName %d{yyyy-MM-dd HH:mm:ss} [%thread] %-5level %logger{36} [%X{tid}] -%msg%n</Pattern>
            </layout>
        </encoder>
    </appender>
    
    
    <root level="info">
        ..........
        ..........
        <appender-ref ref="grpc"/>
    </root>

3.在jar包启动命令后加入以下参数

-javaagent:/root/java/apache-skywalking-apm-bin/agent/skywalking-agent.jar 

-Dskywalking.agent.service_name=user 

-Dskywalking.collector.backend_service=192.168.100.149:11800 

#第一个是Agent jar的绝对路径
#第二个是SkyWalking上显示的服务名称
#第三个是SkyWalking OAP的服务的ip:port

例如：aaa-service.jar的启动

nohup java -jar -server 
-javaagent:/home/dz_dev/skywaking/agent/skywalking-agent.jar 
-Dskywalking.agent.service_name=user-service  
-Dskywalking.collector.backend_service=192.168.8.136:11800   
aaa-service.jar 

五、kibana安装

Kibana是一个针对Elasticsearch的开源分析及可视化平台，用来搜索、查看交互存储在Elasticsearch索引中的数据。使用Kibana，可以通过各种图表进行高级数据分析及展示。

挂载kibana配置文件

mkdir -p /mnt/es/kibana/config

复制容器内的配置文件

#启动容器
docker run -d --name kibana --link es7:es7 -e ELASTICSEARCH_URL=http://192.168.8.136:9200 -e I18N_LOCALE=zh-CN -p 5601:5601 kibana:7.7.0
#复制配置文件
docker cp kibana://opt/kibana/config/kibana.yml /mnt/es/kibana/config
#删除容器
docker rm -f kibana

修改kibana.yml 配置文件

server.name: kibana
server.host: "0"
#es连接地址
elasticsearch.hosts: [ "http://192.168.8.136:9200" ]
monitoring.ui.container.elasticsearch.enabled: true
#设置kibana中文显示
i18n.locale: zh-CN

运行kibana容器

docker run -d --privileged --name kibana -v /etc/localtime:/etc/localtime:ro -v /mnt/es/kibana/config/kibana.yml:/opt/kibana/config/kibana.yml --link es7:es7 -e ELASTICSEARCH_URL=192.168.8.136:9200 -e I18N_LOCALE=zh-CN -p 5601:5601 kibana:7.7.0

访问kibana

浏览器打开地址 http://{{ip}}:5601

六、elasticsearch-head安装

elasticsearch-head 是用于监控 Elasticsearch 状态的客户端插件，包括数据可视化、执行增删改查操作等。

docker pull mobz/elasticsearch-head:5

docker run --restart=always --name elasticsearch-head -d -p 30910:9100 docker.io/mobz/elasticsearch-head:5

解决跨域问题

编辑elasticsearch.yml

#添加跨域配置
http.cors.enabled: true
http.cors.allow-origin: "*"