簡介:
pinpoint是開源在github上的一款APM監控工具,它是用Java編寫的,用于大規模分布式系統監控。它對性能的影響最小(只增加約3%資源利用率),安裝agent是無侵入式的,只需要在被測試的Tomcat中加上3句話,打下探針,就可以監控整套程序了。簡單來說就是可以分析請求經過那些地方,響應時間,SQL語句等。看下截圖很有誘惑力
一.? 環境準備
jdk7 --- Java運行環境
hbase-1.0 --- 數據庫,用來存儲監控信息
tomcat8.0 --- Web服務器
pinpoint-collector.war --- pp的控制器
pinpoint-web.war --- pp展示頁面
pp-collector.init --- 用來快速啟動pp-col,不要也可以
pp-web.init --- 用來快速啟動pp-web,不要也可以
1. 創建安裝包路徑
mkdir /home/pp_res
cd /home/pp_res/
2.java程序 必備jdk
cd /home/pp_res/
tar -zxvf jdk-7u79-linux-x64.tar.gz
mkdir /usr/java
mv jdk1.7.0_79/ /usr/java/jdk17
vim /etc/profile
export JAVA_HOME=/usr/java/jdk17
export PATH=$PATH:$JAVA_HOME/bin
source /etc/profile
3.關閉防火墻 Selinx?
systemctl? stop firewalld?
setenforce? 0?
二. 安裝hbase
pinpoint收集來的測試數據,主要是存在Hbase數據庫的。所以它可以收集大量的數據,可以進行更加詳細的分析。
1.解壓安裝包
cd /home/pp_res/
tar -zxvf hbase-1.0.3-bin.tar.gz
mkdir -p /data/service
mv hbase-1.0.3/ /data/service/hbase
2. 修改hbase-env.sh的JAVA_HOME環境變量位置
cd /data/service/hbase/conf/
vi hbase-env.sh
在27行左右的位置,修改如下
export JAVA_HOME=/usr/java/jdk17
3.修改Hbase的配置信息
在結尾修改成如下,這里我們指定Hbase本地來存儲數據,生產環境將數據建議存入HDFS中。
4.啟動hbase
cd /data/service/hbase/bin
./start-hbase.sh
查看進程
jps
12075 Jps11784 HMaster
5.執行pinpoint提供的Hbase初始化語句,這時會初始化一會。
./hbase shell /home/pp_res/hbase-create.hbase
執行完了以后,進入Hbase./hbase shell
查看剛才初始化的表
hbase(main):001:0> list
TABLE? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ?
AgentEvent? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ?
AgentInfo? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ?
AgentLifeCycle? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ?
AgentStat? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ?
AgentStatV2? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ?
ApiMetaData? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ?
ApplicationIndex? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ?
ApplicationMapStatisticsCallee_Ver2? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ?
ApplicationMapStatisticsCaller_Ver2? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ?
ApplicationMapStatisticsSelf_Ver2? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ?
ApplicationTraceIndex? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ?
HostApplicationMap_Ver2? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ?
SqlMetaData_Ver2? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ?
StringMetaData? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ?
TraceV2? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ?
Traces?
也可以登錄web,來查看HBase的數據是否初始化成功
ip:16010
三.安裝pinpoint-collector
1.解壓tomcat包
cd /home/pp_res/
tar -zxvf apache-tomcat-8.0.36.tar.gz
mv apache-tomcat-8.0.36/ /data/service/pp-col
2.修改tomcat端口號
cd /data/service/pp-col/conf/
sed -i 's/port="8005"/port="18005"/g' server.xml
sed -i 's/port="8080"/port="18080"/g' server.xml
sed -i 's/port="8443"/port="18443"/g' server.xml
sed -i 's/port="8009"/port="18009"/g' server.xml
sed -i 's/redirectPort="8443"/redirectPort="18443"/g' server.xml
sed -i "s/localhost/`ifconfig eth0 | grep 'inet addr' | awk '{print $2}' | awk -F: '{print $2}'`/g" server.xml
3.部署pinpoint-collector.war包
cd /home/pp_res/
rm -rf /data/service/pp-col/webapps/*
unzip pinpoint-collector-1.5.2.war -d /data/service/pp-col/webapps/ROOT
4.啟動col
cd /data/service/pp-col/bin/
./startup.sh
tail -f ../logs/catalina.out
5.配置快速啟動(可省略 )
cd /home/pp_res
sed -i "s/JAVA_HOME=\/usr\/java\/default\//JAVA_HOME=\/usr\/java\/jdk17\//g" pp-collector.init
sed -i "s/CATALINA_HOME=\/data\/service\/pinpoint-collector\//CATALINA_HOME=\/data\/service\/pp-col\//g" pp-collector.init
sed -i "s/CATALINA_BASE=\/data\/service\/pinpoint-collector\//CATALINA_BASE=\/data\/service\/pp-col\//g" pp-collector.init
chmod 711 pp-collector.initmv pp-collector.init /etc/init.d/pp-col
.測試重啟
/etc/init.d/pp-col restart?
四. 安裝pinpoint-web
1.解壓tomcat包
cd /home/pp_res/
tar -zxvf apache-tomcat-8.0.36.tar.gz
mv apache-tomcat-8.0.36/ /data/service/pp-web
2.修改端口號,最后是將tomcat私有ip開放0.0.0.0也可以
cd /data/service/pp-web/conf/
sed -i 's/port="8005"/port="28005"/g' server.xml
sed -i 's/port="8080"/port="28080"/g' server.xml
sed -i 's/port="8443"/port="28443"/g' server.xml
sed -i 's/port="8009"/port="28009"/g' server.xml
sed -i 's/redirectPort="8443"/redirectPort="28443"/g' server.xml
sed -i "s/localhost/`ifconfig eth0 | grep 'inet addr' | awk '{print $2}' | awk -F: '{print $2}'`/g" server.xml
3.解壓war包
cd /home/pp_res/
rm -rf /data/service/pp-web/webapps/*
unzip pinpoint-web-1.5.2.war -d /data/service/pp-web/webapps/ROOT
ll /data/service/pp-web/webapps/ROOT/WEB-INF/classes/
hbase.properties 配置我們pp-web從哪個數據源獲取采集數據,這里我們只指定Hbase的zookeeper地址。
jdbc.properties pp-web連接自身Mysql數據庫的連接認證配置。
sql目錄 pp-web本身有些數據需要存放在MySQL數據庫中,這里需要初始化一下表結構。
pinpoint-web.properties 這里pp-web集群的配置文件,如果你需要pp-web集群的話。
applicationContext-* .xml 這些文件在后續的調優工作中會用到。
log4j.xml 日志相關配置。
4.啟動pp-web
cd /data/service/pp-web/bin/
./startup.sh
tail -f ../logs/catalina.out
5.訪問web ip:28080
6.配置快速啟動(可省略)
cd /home/pp_res
sed -i "s/JAVA_HOME=\/usr\/java\/default\//JAVA_HOME=\/usr\/java\/jdk17\//g" pp-web.init
sed -i "s/CATALINA_HOME=\/data\/service\/pinpoint-web\//CATALINA_HOME=\/data\/service\/pp-web\//g" pp-web.init
sed -i "s/CATALINA_BASE=\/data\/service\/pinpoint-web\//CATALINA_BASE=\/data\/service\/pp-web\//g" pp-web.init
chmod 711 pp-web.init
mv pp-web.init /etc/init.d/pp-web
/etc/init.d/pp-web restart
五.配置采集端
1.測試tomcat部署
mkdir -p /data/pp-test
cd /home/pp_res
tar -zxvf apache-tomcat-8.0.36.tar.gz??
mv??apache-tomcat-8.0.36/*? ? ?/data/pp-test
cd /data/pp-test/conf/
sed -i "s/localhost/`ifconfig eth0 | grep 'inet addr' | awk '{print $2}' | awk -F: '{print $2}'`/g" server.xml
解壓war包
cd /home/pp_test/
rm -rf /data/pp-test/webapps/*
unzip test.war -d /data/pp-test/webapps/ROOT
2.配置采集agent解壓
mkdir -p /data/pp-agent
cd /home/pp_res??
tar -zxvf pinpoint-agent-1.5.2.tar.gz
mv pinpoint-agent-1.5.2 /data/pp-agent
編輯配置文件
cd /data/pp-agent/
vi pinpoint.config
主要修改IP,只需要指定到安裝pp-col的IP就行了,安裝pp-col啟動后,自動就開啟了9994,9995,9996的端口了。這里就不需要操心了,如果有端口需求,要去pp-col的配置文件("pp-col/webapps/ROOT/WEB-INF/classes/pinpoint-collector.properties")中,修改這些端口
profiler.collector.ip=192.168.245.136
3.修改測試項目下的tomcat啟動文件"catalina.sh",修改這個只要是為了監控測試環境的Tomcat,增加探針
cd /data/pp-test/bin
vi catalina.sh
在20行增加如下字段
第一行是pp-agent的jar包位置
第二行是agent的ID,這個ID是唯一的,我是用pp + 今天的日期命名的,只要與其他的項目的ID不重復就好了
第三行是采集項目的名字,這個名字可以隨便取,只要各個項目不重復就好了
CATALINA_OPTS="$CATALINA_OPTS -javaagent:/data/pp-agent/pinpoint-bootstrap-1.5.2.jar"
CATALINA_OPTS="$CATALINA_OPTS -Dpinpoint.agentId=pp2018627"
CATALINA_OPTS="$CATALINA_OPTS -Dpinpoint.applicationName=MyTestPP
4.啟動測試應用
cd /data/pp-test/bin/
./startup.sh
訪問 ip:8080/test
5.訪問pp-web,可以發現它的下拉框中,多了一個app
ojbk
如果Hbase不是與pp-web, pp-col裝在一臺機器上,需要安裝zookeeper,只要安裝就好,確實2181端口啟動就好。
如果zookeeper安裝在獨立機器上,這里需要修改一下pp-colletor 和 pp-web的配置文件pinpoint-collector.properties,pinpoint-web.properties,不然會導致倆個模塊啟動失敗。
發現pinpoint還是有些缺陷,異步的操作監控不到,比如我寫了個多線程來發送HttpClient4的請求,但是pinpoint監控不到。但是它介紹又說可以監控到Httpclient4的請求。現在都是分布式系統,異步拿數據再常見不過來,如果監控不到異步的操作,就很雞肋了。看pp1.6會不會修復這個問題
在pp1.6部署,Hbase中的默認字段有增加,如果沒有加上默認字段,取得的數據就會變得相當少了。
https://www.cnblogs.com/yyhh/p/6106472.html