微服務(wù)治理-APM-skywalking環(huán)境搭建（開發(fā)及測(cè)試）

部署方案

根據(jù)houyi平臺(tái)規(guī)劃，日志歸集相關(guān)的技術(shù)組件都是基于k8s進(jìn)行部署。
相關(guān)部署文件列表如圖所示：


image.png

對(duì)應(yīng)各個(gè)技術(shù)組件的部署以最簡(jiǎn)單的單點(diǎn)方式部署，暫時(shí)不考慮高可用性及性能彈性伸縮等非功能需求。

skywalking-oap部署

skywalking-oap主要用于從應(yīng)用收集服務(wù)性能監(jiān)控信息，并提供接口對(duì)UI或第三方提供查詢服務(wù)。

skywalking-oap-deployment

apiVersion: extensions/v1beta1
kind: Deployment
metadata:
  name: skywalking-oap-deployment
  namespace: t-paas
spec:
  replicas: 1
  selector:
    matchLabels:
      tier: skywalking-oap
  template:
    metadata:
      labels:
        tier: skywalking-oap
    spec:
      containers:
      - name: skywalking-oap-container
        image: apache/skywalking-oap-server:6.0.0-GA
        imagePullPolicy: IfNotPresent
        ports:
        - containerPort: 11800
        - containerPort: 12800
        env:
        - name: SW_STORAGE
          value: "elasticsearch"
        - name: SW_STORAGE_ES_CLUSTER_NODES
          value: "elasticsearch-service.t-paas:9200"

由于skywalking 數(shù)據(jù)需要存儲(chǔ)在elasticsearch中，所以需要先部署es?？梢詤⒖?a href="http://m.itdecent.cn/p/0c6c0b5e7850" target="_blank">微服務(wù)治理-日志歸集-技術(shù)選型中ES的部署。

skywalking-oap-service

以CluserIp方式部署service,對(duì)外提供11800、12800兩個(gè)端口：

  • 11800端口用于skywalking將應(yīng)用的服務(wù)監(jiān)控信息收集端口。
  • 12800端口用于skywalking對(duì)UI提供查詢接口。
apiVersion: v1
kind: Service
metadata:
  name: sw-service
  namespace: t-paas
spec:
  ports:
  - name: p11800
    port: 11800 
    targetPort: 11800
  - name: p12800
    port: 12800 
    targetPort: 12800
  selector:
    tier: skywalking-oap

skywalking-ui部署

skywalking-ui-deployment

apiVersion: extensions/v1beta1
kind: Deployment
metadata:
  name: skywalking-ui-deployment
  namespace: t-paas
spec:
  replicas: 1
  selector:
    matchLabels:
      tier: skywalking-ui
  template:
    metadata:
      labels:
        tier: skywalking-ui
    spec:
      containers:
      - name: skywalking-ui-container
        image: apache/skywalking-ui:6.0.0-GA
        imagePullPolicy: IfNotPresent
        ports:
        - containerPort: 8080
        env:
        - name: collector.ribbon.listOfServers
          value: "sw-service.t-paas:12800"   
        - name: collector.ribbon.ReadTimeout
          value: "20000"             
        - name: TZ
          value: "Asia/Shanghai"

通過訪問skywalking-oap的service名稱及12800端口，查詢應(yīng)用性能監(jiān)控信息，并通過UI展示性能監(jiān)控界面。

skywalking-ui-service

由于skywalking-ui是web界面，所以在容器外通過端口訪問。
所以使用NodePort類型service部署。

apiVersion: v1
kind: Service
metadata:
  name: skywalking-ui-service
  namespace: t-paas
spec:
  type: NodePort
  ports:
  - port: 8080 
    targetPort: 8080
    name: sw-ui-port
    nodePort: 30081    
  selector:
    tier: skywalking-ui

skywalking-agent部署

上面已經(jīng)將skywalking的服務(wù)端搭建好了，下面主需要在應(yīng)用中添加skywalking的插件，將應(yīng)用的性能數(shù)據(jù)發(fā)送給skywalking-oap服務(wù)。
通過skywalking的官方文檔可以了解，skywalking對(duì)應(yīng)用的影響是松耦合的。不需要對(duì)應(yīng)用做任何修改。
以spring-boot為例，只需要在應(yīng)用啟動(dòng)時(shí)，在參數(shù)中添加-javaagent參數(shù)就可以了。

java -javaagent:/path/to/skywalking-agent/skywalking-agent.jar -jar ${spirng-boot-app}.jar

通過該參數(shù)，可以了解到應(yīng)用鏡像中需要包括skywalking-agent相關(guān)的jar包及配置文件。
所以本人考慮為skywalking-agent單獨(dú)生成一個(gè)鏡像，在應(yīng)用的deployment中，通過initContainers的方式將skywalking-agent的插件掛載到應(yīng)用容器中。具體可以查看應(yīng)用部署的deployment文件。

skywalking-agent鏡像生成

以下是生成skywalking-agent鏡像的目錄：


image.png

其中/skywalking-agent目錄中的相關(guān)信息獲取如下：

agent目錄說明

agent在server的目錄下，插件和配置都包含在包中，請(qǐng)不要改變目錄結(jié)構(gòu)


image
  • 配置文件在/config目錄中
  • 插件全部放置在/plugins目錄中.新的插件,也只需要在啟動(dòng)階段,放在目錄中,就自動(dòng)生效,刪除則失效.
  • ptional-plugins是可以插件.

修改配置

agent的配置可通過修改配置文件或者添加啟動(dòng)參數(shù)配置
vim config/agent.config

  • agent.service_name：應(yīng)用名
  • collector.backend_service：server端地址
image

添加trace-ignore插件

復(fù)制optional-plugins里面的apm-trace-ignore-plugin-x.jar到plugins里面

cp optional-plugins/apm-trace-ignore-plugin-6.0.0-GA.jar plugins/

可以通過配置skywalking.trace.ignore_path環(huán)境變量去設(shè)置忽略的url，多個(gè)以,隔開

-Dskywalking.trace.ignore_path=/your/path/1/**,/your/path/2/**

生成skywalking-鏡像

在docker環(huán)境下執(zhí)行docker-build.sh腳本

docker build -t skywalking-agent:6.0.0 .

Dockerfile文件如下：

FROM busybox:latest
ADD /agent //agent

應(yīng)用引入skywalking-agent

app-deployment

  • 在應(yīng)用啟動(dòng)加將skywalking-agent鏡像中的/agent目錄復(fù)制到sky-agent-volume中，
  • 再將sky-agent-volume掛載到應(yīng)用容器的/skywalking路徑下。
  • 應(yīng)用容器配置三個(gè)環(huán)境變量，分別設(shè)置：
    • 1.ENV_PROFILE -> 應(yīng)用環(huán)境
    • 2.SW_AGENT_NAMESPACE -> skywalking代理應(yīng)用的命名空間。
    • 3.SW_AGENT_COLLECTOR_BACKEND_SERVICES -> skywalking-aop的服務(wù)主機(jī)及端口。
apiVersion: extensions/v1beta1
kind: Deployment
metadata:
  name: sc-admin
  namespace: default
spec:
  replicas: 1
  selector:
    matchLabels:
      tier: sc-admin-server
  template:
    metadata:
      labels:
        tier: sc-admin-server
    spec:
      initContainers:
      - name: skywalking-agent-gateway
        image: skywalking-agent:6.0.0 
        command: ["cp", "-rf", "/agent", "/tmp"]
        volumeMounts:
        - mountPath: /tmp
          name: sky-agent-volume    
      containers:
      - name: sc-admin-containers
        image: houyi-platform/sc-admin:latest
        imagePullPolicy: IfNotPresent
        ports:
          - containerPort: 6500
        env: 
        - name: ENV_PROFILE
          value: dev          
        - name: SW_AGENT_NAMESPACE
          value: houyi-paltform
        - name: SW_AGENT_NAME
          value: dev_sc-admin
        - name: SW_AGENT_COLLECTOR_BACKEND_SERVICES
          value: sw-service.t-paas:11800
        volumeMounts:
        - mountPath: /logs
          name: tmp
        - mountPath: /skywalking
          name: sky-agent-volume
      volumes:
      - name: tmp
        hostPath:
          path: /D/home/k8s/containers/houyi-platform
      - name: sky-agent-volume
        emptyDir: {}

其中應(yīng)用鏡像生成的Dockerfile為：

FROM java:8-jre
ENV JAVA_OPTS -javaagent:/skywalking/agent/skywalking-agent.jar -Xms128m -Xmx128m
ADD /zuul-gateway.jar //
ENTRYPOINT ["sh","-c","java $JAVA_OPTS -Djava.security.egd=file:/dev/./urandom -jar /zuul-gateway.jar --spring.profiles.active=$ENV_PROFILE"]
VOLUME /tmp

從鏡像生成的腳本中可以看到應(yīng)用在啟動(dòng)的時(shí)候是如何與skywalking-agent集成在一起的。

?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請(qǐng)聯(lián)系作者
【社區(qū)內(nèi)容提示】社區(qū)部分內(nèi)容疑似由AI輔助生成，瀏覽時(shí)請(qǐng)結(jié)合常識(shí)與多方信息審慎甄別。
平臺(tái)聲明：文章內(nèi)容（如有圖片或視頻亦包括在內(nèi)）由作者上傳并發(fā)布，文章內(nèi)容僅代表作者本人觀點(diǎn)，簡(jiǎn)書系信息發(fā)布平臺(tái)，僅提供信息存儲(chǔ)服務(wù)。

相關(guān)閱讀更多精彩內(nèi)容

友情鏈接更多精彩內(nèi)容