本文說明 Apigee Edge for Private Cloud 在內部部署支援的元件監控技術。
總覽
Edge 支援多種方式，可取得服務的詳細資料，以及檢查服務狀態。下表列出您可對每項符合資格的服務執行的檢查類型：
| 管理 API | |||||||
| 元件 | 記憶體用量 [JMX*] | 服務檢查 | 使用者/機構/ 部署狀態 | axstatus | 資料庫檢查 | apigee-service 狀態 |
apigee-monit** |
| 管理伺服器 | |||||||
| 訊息處理器 | |||||||
| 路由器 | |||||||
| Qpid | |||||||
| Postgres | |||||||
| 更多資訊 | 更多資訊 | 更多資訊 | 更多資訊 | 更多資訊 | 更多資訊 | 更多資訊 | |
|
* 您必須先按照啟用 JMX 一文所述的方式啟用 JMX。 ** |
|||||||
監控通訊埠和設定檔
每個元件都支援 Java Management Extensions (JMX)，並在不同通訊埠上監控 Management API 呼叫。下表列出每種伺服器類型的 JMX 和管理 API 通訊埠，以及設定檔位置：
| 元件 | JMX 連接埠 | Management API 連接埠 | 設定檔位置 |
|---|---|---|---|
| 管理伺服器 | 1099 | 8080 | $APIGEE_ROOT/customer/application/management-server.properties |
| 訊息處理器 | 1101 | 8082 | $APIGEE_ROOT/customer/application/message-processor.properties |
| 路由器 | 1100 | 8081 | $APIGEE_ROOT/customer/application/router.properties |
| Qpid | 1102 | 8083 | $APIGEE_ROOT/customer/application/qpid-server.properties |
| Postgres | 1103 | 8084 | $APIGEE_ROOT/customer/application/postgres-server.properties |
使用 JMX 監控元件
以下各節說明如何使用 JMX 監控 Edge 元件。
啟用 JMX
如要啟用不需驗證或以 SSL 為基礎的通訊的 JMX，請執行下列步驟。注意：在實際工作系統中，為確保安全性，應同時啟用加密驗證和 SSL。
- 編輯適當的設定檔 (請參閱「
設定檔參考資料」)。如果設定檔不存在，請建立設定檔。
conf_system_jmxremote_enable=true
- 儲存設定檔，並確認該檔案的擁有者為
apigee:apigee。 - 重新啟動適當的 Edge 元件
apigee-service edge-management-server restart
如要停用 JMX，請移除屬性 conf_system_jmxremote_enable 或將其值變更為 false。然後重新啟動適當的 Edge 元件。
JMX 中的驗證
Edge for Private Cloud 支援使用檔案中儲存的詳細資料進行密碼驗證。您可以將密碼儲存為雜湊，以提升安全性。
- 如要在 edge-* 元件中啟用 JMX 驗證，請編輯適當的設定檔 (請參閱「
設定檔參考資料」)。如果設定檔不存在，請建立設定檔：
conf_system_jmxremote_enable=true conf_system_jmxremote_authenticate=true conf_system_jmxremote_encrypted_auth=true conf_system_jmxremote_access_file=/opt/apigee/customer/application/management-server/jmxremote.access conf_system_jmxremote_password_file=/opt/apigee/customer/application/management-server/jmxremote.password
儲存設定檔，並確認檔案由apigee:apigee擁有。 - 建立密碼的 SHA256 雜湊：
echo -n '
' | openssl dgst -sha256 - 使用 JMX 使用者憑證建立
jmxremote.password檔案：- 將下列檔案從
$JAVA_HOME目錄複製到/opt/apigee/customer/application/<component>/目錄：cp ${JAVA_HOME}/lib/management/jmxremote.password.template $APIGEE_ROOT/customer/application/management-server/jmxremote.password - 編輯檔案，並使用以下語法新增 JMX 使用者名稱和密碼：
USERNAME <HASH-PASSWORD>
- 請確認檔案的擁有者是
apigee，且檔案模式為 400：chown apigee:apigee $APIGEE_ROOT/customer/application/management-server/jmxremote.password chmod 400 $APIGEE_ROOT/customer/application/management-server/jmxremote.password
- 將下列檔案從
- 建立具有 JMX 使用者權限的
jmxremote.access檔案：- 將下列檔案從 $JAVA_HOME 目錄中複製到
/opt/apigee/customer/application/<component>/cp ${JAVA_HOME}/lib/management/jmxremote.access$APIGEE_ROOT/customer/application/management-server/jmxremote.password/jmxremote.access - 編輯檔案，新增 JMX 使用者名稱，並在後方加上權限 (READONLY/READWRITE)
USERNAME READONLY
- 請確認檔案的擁有者是
apigee，且檔案模式為 400：chown apigee:apigee $APIGEE_ROOT/customer/application/management-server/jmxremote.password chmod 400 $APIGEE_ROOT/customer/application/management-server/jmxremote.access
- 將下列檔案從 $JAVA_HOME 目錄中複製到
- 重新啟動適當的 Edge 元件：
apigee-service edge-management-server restart
如要停用 JMX 驗證，請移除屬性 conf_system_jmxremote_authenticate 或將值變更為 false，並重新啟動適當的 Edge 元件。
JMX 中的 SSL
如何在 Edge-* 元件中啟用 SSL 型 JMX：
- 編輯適當的設定檔 (請參閱「
設定檔參考資料」)。如果設定檔不存在，請建立設定檔：
conf_system_jmxremote_enable=true conf_system_jmxremote_ssl=true conf_system_javax_net_ssl_keystore=/opt/apigee/customer/application/management-server/jmxremote.keystore conf_system_javax_net_ssl_keystorepassword=<keystore-password>
儲存設定檔，並確認檔案由apigee:apigee擁有。 - 準備包含伺服器金鑰的 KeyStore，並將其放在上述設定
conf_system_javax_net_ssl_keystore中提供的路徑中。請確認apigee:apigee可以讀取 KeyStore 檔案。 - 重新啟動適當的 Edge 元件：
apigee-service edge-management-server restart
如要停用以 SSL 為基礎的 JMX，請移除屬性 conf_system_jmxremote_ssl 或變更值為 false。重新啟動適當的 Edge 元件。
透過 Jconsole 監控
透過 jconsole 執行的監控操作說明，與 https://docs.apigee.com/private-cloud/v4.52.01/how-monitor#jconsole 所述相同。
您可以新增一行說明：「如果為 JMX 啟用 SSL，就必須使用信任存放區和信任存放區密碼啟動 jconsole。」參考資料：https://docs.oracle.com/javase/8/docs/technotes/guides/management/jconsole.html使用 JConsole 監控
使用 JConsole (符合 JMX 規範的工具) 管理及監控健康狀態檢查和處理統計資料。 透過 JConsole，您可以使用伺服器公開的 JMX 統計資料，並在圖形介面中顯示這些資料。詳情請參閱「使用 JConsole」。
如果為 JMX 啟用 SSL，您必須使用信任存放區和信任存放區密碼啟動 JConsole。請參閱「 使用 JConsole」。
JConsole 會使用下列服務網址，監控透過 JMX 提供的 JMX 屬性 (MBean)：
service:jmx:rmi:///jndi/rmi://IP_address:port_number/jmxrmi
在此情況下：
- IP_address 是您要監控的伺服器 IP 位址。
- port_number 是您要監控的伺服器的 JMX 通訊埠號碼。
舉例來說，如要監控管理伺服器，請發出以下指令 (假設伺服器的 IP 位址為 216.3.128.12)：
service:jmx:rmi:///jndi/rmi://216.3.128.12:1099/jmxrmi
請注意，這個範例指定的通訊埠為 1099，也就是管理伺服器的 JMX 通訊埠。如需其他通訊埠的相關資訊，請參閱「JMX 和 Management API 監控通訊埠」。
下表顯示一般 JMX 統計資料：
| JMX MBean | JMX 屬性 |
|---|---|
|
記憶體 |
HeapMemoryUsage |
|
NonHeapMemoryUsage |
|
|
用量 |
|
設定檔參考資料
下列各節將說明您可能需要針對 JMX 相關設定，對 Edge 元件設定檔進行的變更。詳情請參閱「監控通訊埠和設定檔」一文。
要新增至適當元件設定檔的 JMX 設定
- 在 Edge 元件上啟用 JMX 代理程式。預設為 False。
conf_system_jmxremote_enable=true
密碼驗證設定
- 啟用密碼驗證。預設為 False。
conf_system_jmxremote_authenticate=true
- 檔案存取路徑。僅限 Apigee 使用者擁有及讀取。
conf_system_jmxremote_access_file=/opt/apigee/customer/application/management-server/jmxremote.access
- 密碼檔案的路徑。需僅供 Apigee 使用者擁有及讀取。
conf_system_jmxremote_password_file=/opt/apigee/customer/application/management-server/jmxremote.password
- 啟用以加密格式儲存密碼的功能。預設為 False。
conf_system_jmxremote_encrypted_auth=true
以 SSL 為基礎的 JMX 設定
- 為 JMX 通訊啟用 SSL。預設為 False。
conf_system_jmxremote_ssl=true
- KeyStore 路徑。需僅供 Apigee 使用者擁有及讀取。
conf_system_javax_net_ssl_keystore=/opt/apigee/customer/application/management-server/jmxremote.keystore
- KeyStore 密碼：
conf_system_javax_net_ssl_keystorepassword=changeme
選用 JMX 設定
列出的值為預設值，可加以變更。
- JMX 通訊埠。下表列出預設值。
conf_system_jmxremote_port=
- JMX RMI 連接埠。根據預設，Java 程序會隨機挑選通訊埠。
conf_system_jmxremote_rmi_port=
- 遠端存根的 host name。localhost 的預設 IP 位址。
conf_system_java_rmi_server_hostname=
- 使用 SSL 保護 JMX 登錄檔。預設值為 false。只有在啟用 SSL 時才適用。
conf_system_jmxremote_registry_ssl=false
使用 Management API 進行監控
Edge 提供多個 API，可用於在伺服器上執行服務檢查，以及檢查使用者、機構和部署作業。本節將說明這些 API。
執行服務檢查
Management API 提供多個端點，可用於監控及診斷服務問題。這些端點包括：
| 端點 | 說明 |
|---|---|
/servers/self/up |
檢查服務是否正在執行。但不需要驗證。 如果服務正在執行，此端點會傳回下列回應： <ServerField> <Up>true</Up> </ServerField> 如果服務未在執行中，您會收到類似以下的回應 (取決於服務類型和檢查方式)： curl: Failed connect to localhost:port_number; Connection refused |
/servers/self |
傳回服務相關資訊，包括：
這個 API 呼叫需要用 Apigee 管理員憑證進行驗證。 |
如要使用這些端點，請透過使用下列語法的指令叫用公用程式 (例如 curl)：
curl http://host:port_number/v1/servers/self/up -H "Accept: [application/json|application/xml]"
curl http://host:port_number/v1/servers/self -u username:password -H "Accept: [application/json|application/xml]"
在此情況下：
- host 是您要檢查的伺服器 IP 位址。如果您已登入伺服器，可以使用「localhost」；否則，請指定伺服器的 IP 位址，以及使用者名稱和密碼。
- port_number 是您要檢查的伺服器的 Management API 通訊埠。這是每種元件類型的不同連接埠。例如，管理伺服器的管理 API 通訊埠為 8080。如要查看可用的 Management API 通訊埠號碼清單，請參閱 JMX 和 Management API 監控通訊埠
如要變更回應格式，您可以將 Accept 標頭指定為「application/json」或「application/xml」。
以下範例會取得 localhost (通訊埠 8081) 上的路由器狀態：
curl http://localhost:8081/v1/servers/self/up -H "Accept: application/xml"
以下範例會取得 216.3.128.12 (通訊埠 8082) 的訊息處理器相關資訊：
curl http://216.3.128.12:8082/v1/servers/self -u sysAdminEmail:password -H "Accept: application/xml"
監控使用者、機構和部署狀態
您可以使用 Management API，在管理伺服器和訊息處理器中，監控 Proxy 的使用者、機構及部署狀態，方法是執行下列指令：
curl http://host:port_number/v1/users -u sysAdminEmail:passwordcurl http://host:port_number/v1/organizations -u sysAdminEmail:passwordcurl http://host:port_number/v1/organizations/orgname/deployments -u sysAdminEmail:password
其中 port_number 是管理伺服器的 8080，或訊息處理器的 8082。
您必須使用系統管理員的使用者名稱和密碼進行驗證，才能執行這項呼叫。
伺服器應針對所有呼叫傳回「已部署」狀態。如果上述方法失敗，請執行以下操作：
- 查看伺服器記錄，瞭解是否有任何錯誤。記錄檔位於：
- 管理伺服器：
opt/apigee/var/log/edge-management-server - 訊息處理器：
opt/apigee/var/log/edge-message-processor
- 管理伺服器：
- 對伺服器發出呼叫，檢查該伺服器是否正常運作。
- 從 ELB 移除伺服器，然後重新啟動：
/opt/apigee/apigee-service/bin/apigee-service service_name restart
其中 service_name 為：
edge-management-serveredge-message-processor
使用 apigee-service 指令查看狀態
當您登入執行服務的伺服器時，可以使用 apigee-service 指令來排解 Edge 服務的問題。
如要使用 apigee-service 查看服務狀態，請按照下列步驟操作：
- 登入伺服器並執行下列指令：
/opt/apigee/apigee-service/bin/apigee-service service_name status
其中 service_name 是下列其中一個值：
- 管理伺服器：
edge-management-server - 訊息處理器：
edge-message-processor - Postgres：
edge-postgres-server - Qpid：
edge-qpid-server - 路由器：
edge-router
例如：
/opt/apigee/apigee-service/bin/apigee-service edge-message-processor status
- 管理伺服器：
- 如果服務未執行，請啟動服務：
/opt/apigee/apigee-service/bin/apigee-service service_name start
- 重新啟動服務後，請使用先前使用的
apigee-service status指令或「使用 Management API 監控」一文所述的 Management API，檢查服務是否正常運作。例如：
curl -v http://localhost:port_number/v1/servers/self/up
其中 port_number 是服務的 Management API 連接埠。
這個範例假設您已登入伺服器，並且可以使用「localhost」做為主機名稱。如要透過 Management API 遠端查看狀態，您必須指定伺服器的 IP 位址，並在 API 呼叫中加入系統管理員使用者名稱和密碼。
Postgres 監控
Postgres 支援多種公用程式，可用於檢查其狀態。我們會在後續章節中說明這些公用程式。
查看 Postgres 上的機構和環境
您可以發出下列 curl 指令，查看已登錄在 Postgres 伺服器上的機構和環境名稱：
curl -v http://postgres_IP:8084/v1/servers/self/organizations
系統應顯示機構和環境名稱。
確認數據分析狀態
您可以發出下列 curl 指令，驗證 Postgres 和 Qpid 分析伺服器的狀態：
curl -u userEmail:password http://host:port_number/v1/organizations/orgname/environments/envname/provisioning/axstatus
系統應會顯示所有數據分析伺服器的成功狀態，如以下範例所示：
{
"environments" : [ {
"components" : [ {
"message" : "success at Thu Feb 28 10:27:38 CET 2013",
"name" : "pg",
"status" : "SUCCESS",
"uuid" : "[c678d16c-7990-4a5a-ae19-a99f925fcb93]"
}, {
"message" : "success at Thu Feb 28 10:29:03 CET 2013",
"name" : "qs",
"status" : "SUCCESS",
"uuid" : "[ee9f0db7-a9d3-4d21-96c5-1a15b0bf0adf]"
} ],
"message" : "",
"name" : "prod"
} ],
"organization" : "acme",
"status" : "SUCCESS"
}
PostgreSQL 資料庫
本節說明您可以特別用於監控 Postgres 資料庫的技術。
使用 check_postgres.pl 指令碼
如要監控 PostgreSQL 資料庫，您可以使用標準監控指令碼 check_postgres.pl。詳情請參閱 http://bucardo.org/wiki/Check_postgres。
執行指令碼前：
- 您必須在每個 Postgres 節點上安裝 check_postgres.pl 指令碼。
- 確認您已安裝
perl-Time-HiRes.x86_64，這個 Perl 模組會實作高解析度鬧鐘、睡眠、gettimeofday 和間隔計時器。例如，您可以使用下列指令進行安裝：
yum install perl-Time-HiRes.x86_64
- CentOS 7：在 CentOS v7 上使用 check_postgres.pl 之前，請先安裝
perl-Data-Dumper.x86_64RPM。
check_postgres.pl 輸出
使用 check_postgres.pl 的 API 呼叫預設輸出內容與 Nagios 相容。安裝指令碼後，請進行下列檢查：
- 檢查資料庫大小：
check_postgres.pl -H 10.176.218.202 -db apigee -u apigee -dbpass postgres -include=apigee -action database_size --warning='800 GB' --critical='900 GB'
- 檢查資料庫的連入連線數量，並與允許的連線數量上限進行比較：
check_postgres.pl -H 10.176.218.202 -db apigee -u apigee -dbpass postgres -action backends
- 查看資料庫是否正在執行且可供使用：
check_postgres.pl -H 10.176.218.202 -db apigee -u apigee -dbpass postgres -action connection
- 檢查磁碟空間：
check_postgres.pl -H 10.176.218.202 -db apigee -u apigee -dbpass postgres -action disk_space --warning='80%' --critical='90%'
- 查看在 Postgres 節點中已導入的機構和環境數量：
check_postgres.pl -H 10.176.218.202 -db apigee -u apigee -dbpass postgres -action=custom_query --query="select count(*) as result from pg_tables where schemaname='analytics' and tablename like '%fact'" --warning='80' --critical='90' --valtype=integer
執行資料庫檢查
您可以驗證是否已在 PostgreSQL 資料庫中建立適當的資料表。使用下列指令登入 PostgreSQL 資料庫：
psql -h /opt/apigee/var/run/apigee-postgresql/ -U apigee -d apigee
接著執行：
\d analytics."org.env.fact"
檢查 postgres 程序的健康狀態
您可以叫用下列 curl 指令，在 Postgres 機器上執行 API 檢查：
curl -v http://postgres_IP:8084/v1/servers/self/health
當 postgres 程序處於活動狀態時，這個指令會傳回 ACTIVE 狀態。如果 Postgres 程序未啟動及執行，則會傳回 INACTIVE 狀態。
Postgres 資源
如要進一步瞭解如何監控 Postgres 服務，請參閱以下資訊：
- http://www.postgresql.org/docs/9.0/static/monitoring.html
- http://www.postgresql.org/docs/9.0/static/diskusage.html
- http://bucardo.org/check_postgres/check_postgres.pl.html
Apache Cassandra
根據預設，Cassandra 會啟用 JMX，遠端 JMX 存取 Cassandra 不需要密碼。
為 Cassandra 啟用 JMX 驗證
您可以為 Cassandra 啟用 JMX 驗證。完成後，您必須將使用者名稱和密碼傳遞至所有對 nodetool 公用程式呼叫。
如何為 Cassandra 啟用 JMX 驗證：
- 建立及編輯
cassandra.properties檔案：- 編輯
/opt/apigee/customer/application/cassandra.properties檔案。如果檔案不存在，請建立檔案。 - 在檔案中新增下列內容：
conf_cassandra_env_com.sun.management.jmxremote.authenticate=true conf_cassandra_env_com.sun.management.jmxremote.password.file=${APIGEE_ROOT}/customer/application/apigee-cassandra/jmxremote.password conf_cassandra_env_com.sun.management.jmxremote.access.file=${APIGEE_ROOT}/customer/application/apigee-cassandra/jmxremote.access - 儲存
cassandra.properties檔案。 - 將檔案擁有者變更為
apigee:apigee，如以下範例所示：chown apigee:apigee /opt/apigee/customer/application/cassandra.properties
如要進一步瞭解如何使用屬性檔案設定符記，請參閱「如何設定 Edge」。
- 編輯
- 建立及編輯
jmx_auth.sh：- 如果檔案不存在，請在以下位置建立檔案：
/opt/apigee/customer/application/jmx_auth.sh
- 在檔案中新增下列屬性：
export CASS_JMX_USERNAME=JMX_USERNAME export CASS_JMX_PASSWORD=JMX_PASSWORD
- 儲存
jmx_auth.sh檔案。 - 來源檔案：
source /opt/apigee/customer/application/jmx_auth.sh
- 如果檔案不存在，請在以下位置建立檔案：
- 複製並編輯
jmxremote.password檔案：- 將下列檔案從
$JAVA_HOME目錄複製到/opt/apigee/customer/application/apigee-cassandra/：cp ${JAVA_HOME}/lib/management/jmxremote.password.template $APIGEE_ROOT/customer/application/apigee-cassandra/jmxremote.password - 編輯
jmxremote.password檔案，並使用以下語法新增 JMX 使用者名稱和密碼：JMX_USERNAME JMX_PASSWORD
其中 JMX_USERNAME 和 JMX_PASSWORD 是您先前設定的 JMX 使用者名稱和密碼。
- 請確定檔案的擁有者為「apigee」，且檔案模式為 400：
chown apigee:apigee /opt/apigee/customer/application/apigee-cassandra/jmxremote.password
chmod 400 /opt/apigee/customer/application/apigee-cassandra/jmxremote.password
- 將下列檔案從
- 複製並編輯
jmxremote.access檔案：- 將下列檔案從
$JAVA_HOME目錄複製到/opt/apigee/customer/application/apigee-cassandra/：cp ${JAVA_HOME}/lib/management/jmxremote.access$APIGEE_ROOT/customer/application/apigee-cassandra/jmxremote.access - 編輯
jmxremote.access檔案，並新增下列角色：JMX_USERNAME readwrite
- 請確認檔案由「apigee」擁有，且檔案模式為 400：
chown apigee:apigee /opt/apigee/customer/application/apigee-cassandra/jmxremote.access
chmod 400 /opt/apigee/customer/application/apigee-cassandra/jmxremote.access
- 將下列檔案從
- 在 Cassandra 上執行
configure：/opt/apigee/apigee-service/bin/apigee-service apigee-cassandra configure
- 重新啟動 Cassandra：
/opt/apigee/apigee-service/bin/apigee-service apigee-cassandra restart
- 在所有其他 Cassandra 節點上重複執行這項程序。
啟用 JMX 密碼加密功能
如要啟用 JMX 密碼加密功能，請按照下列步驟操作：
- 開啟
source/conf/casssandra-env.sh檔案。 - 建立及編輯
cassandra.properties檔案：- 編輯
/opt/apigee/customer/application/cassandra.properties檔案。如果檔案不存在，請建立檔案。 - 在檔案中新增下列內容：
conf_cassandra_env_com.sun.management.jmxremote.encrypted.authenticate=true
- 儲存 cassandra.properties 檔案。
- 將檔案的擁有者變更為 apigee:apigee，如以下範例所示：
chown apigee:apigee /opt/apigee/customer/application/cassandra.properties
- 編輯
- 在指令列中輸入
echo -n 'Secret' | openssl dgst -sha1，產生所需密碼的 SHA1 雜湊 - 針對
$APIGEE_ROOT/customer/application/apigee-cassandra/jmxremote.password中的使用者名稱設定密碼 (在上一節中建立)。 - 在 Cassandra 上執行設定：
/opt/apigee/apigee-service/bin/apigee-service apigee-cassandra configure
- 重新啟動 Cassandra：
/opt/apigee/apigee-service/bin/apigee-service apigee-cassandra restart
- 在所有其他 Cassandra 節點上重複執行這項程序。
為 Cassandra 啟用具備 SSL 的 JMX
啟用 SSL 的 JMX 可為與 Cassandra 的 JMX 通訊提供額外的安全性和加密功能。如要啟用 SSL 的 JMX，您必須向 Cassandra 提供金鑰和憑證，以便接受以 SSL 為基礎的 JMX 連線。您也需要為 SSL 設定 nodetool (以及任何透過 JMX 與 Cassandra 通訊的其他工具)。
啟用 SSL 的 JMX 支援純文字和加密的 JMX 密碼。
如要為 Cassandra 啟用 SSL 的 JMX，請按照下列程序操作：
- 啟用 JMX。 必要時啟用密碼加密。
- 為 Cassandra 啟用 JMX 驗證。。請確認 nodetool 是否使用已設定的使用者名稱和密碼運作。
/opt/apigee/apigee-cassandra/bin/nodetool -u <JMX_USER> -pw <JMX_PASS> ring
準備 KeyStore 和 TrustStore。
Keystore 應包含金鑰和憑證，並用於設定 Cassandra 伺服器。如果金鑰庫包含多個金鑰組，Cassandra 會使用第一個金鑰組來啟用 SSL。
請注意，KeyStore 和金鑰的密碼必須相同 (使用 keytool 產生金鑰時的預設值)。
- Truststore 應只包含憑證，並由用戶端 (以 APIgee-service 為基礎的指令或 nodetool) 用於透過 JMX 連線。
確認上述規定後：
- 將 KeyStore 檔案放入
/opt/apigee/customer/application/apigee-cassandra/中。 - 請輸入
chown apigee:apigee /opt/apigee/customer/application/apigee-cassandra/keystore.node1
，確認只有 Apigee 使用者可讀取 KeyStore 檔案chmod 400 /opt/apigee/customer/application/apigee-cassandra/keystore.node1
- 如要為 JMX 設定 SSL 的 Cassandra，請按照下列步驟操作：
- 輸入
apigee-service apigee-cassandra stop
來停止 Cassandra 節點 - 開啟
/opt/apigee/customer/application/cassandra.properties檔案並新增下列幾行，即可在 Cassandra 中啟用 SSL：conf_cassandra_env_com.sun.management.jmxremote.ssl=true conf_cassandra_env_javax.net.ssl.keyStore=/opt/apigee/customer/application/apigee-cassandra/keystore.node1 conf_cassandra_env_javax.net.ssl.keyStorePassword=keystore-password ## On FIPS enabled systems, when you are using non standard keystore, set the following: ## These can be skipped otherwise ## Possible values are JKS, PKCS12, BCFKS conf_cassandra_env_javax.net.ssl.keyStoreType=PKCS12 conf_cassandra_env_javax.net.ssl.keyStoreAlias=cassjmx-tls-alias
- 將檔案的擁有者變更為 apigee:apigee，如以下範例所示：
chown apigee:apigee /opt/apigee/customer/application/cassandra.properties
- 在 Cassandra 上執行設定：
/opt/apigee/apigee-service/bin/apigee-service apigee-cassandra configure
- 重新啟動 Cassandra：
/opt/apigee/apigee-service/bin/apigee-service apigee-cassandra restart
- 對所有其他 Cassandra 節點重複這項程序。
- 輸入
apigee-service apigee-cassandra start
來啟動 Cassandra 節點
- 輸入
- 設定
apigee-serviceCassandra 指令。您需要在執行apigee-service指令時設定特定環境變數，包括下列變數：apigee-service apigee-cassandra stop apigee-service apigee-cassandra wait_for_ready apigee-service apigee-cassandra ring apigee-service apigee-cassandra backup
您可以透過多種方式為 JMX 驗證和 SSL 設定
apigee-service。請根據可用性和安全性做法選擇合適的選項。選項 1 (SSL 引數儲存在檔案中)
設定下列環境變數：
export CASS_JMX_USERNAME=ADMIN # Provide encrypted password here if you have setup JMX password encryption export CASS_JMX_PASSWORD=PASSWORD export CASS_JMX_SSL=Y
在 Apigee 使用者的家目錄 (
/opt/apigee) 中建立檔案。$HOME/.cassandra/nodetool-ssl.properties
編輯該檔案，並新增下列程式碼：
-Djavax.net.ssl.trustStore=
-Djavax.net.ssl.trustStorePassword= -Dcom.sun.management.jmxremote.registry.ssl=true ## If you are using a non standard truststore, set below, otherwise skip ## Possible values are JKS, PKCS12, BCFKS -Djavax.net.ssl.trustStoreType=PKCS12 請確認 Apigee 使用者可以讀取 trustore 檔案。
執行下列
apigee-service指令。 如果執行時沒有錯誤，表示設定正確無誤。apigee-service apigee-cassandra ring
選項 2 (儲存在環境變數中的 SSL 引數)
設定下列環境變數：
export CASS_JMX_USERNAME=ADMIN # Provide encrypted password here if you have setup JMX password encryption export CASS_JMX_PASSWORD=PASSWORD export CASS_JMX_SSL=Y # Ensure the truststore file is accessible by Apigee user. export CASS_JMX_TRUSTSTORE=
export CASS_JMX_TRUSTSTORE_PASSWORD= # If you are using a non standard truststore type, export truststore type as well # Possible values are JKS, PKCS12, BCFKS export CASS_JMX_TRUSTSTORE_TYPE=PKCS12 執行下列
apigee-service指令。如果執行時沒有錯誤，表示設定正確無誤。apigee-service apigee-cassandra ring
選項 3 (SSL 引數直接傳遞至
apigee-service)執行任何
apigee-service指令，例如下方指令。 您不需要設定任何環境變數。CASS_JMX_USERNAME=ADMIN CASS_JMX_PASSWORD=PASSWORD CASS_JMX_SSL=Y CASS_JMX_TRUSTSTORE=
CASS_JMX_TRUSTSTORE_PASSWORD= CASS_JMX_TRUSTSTORE_TYPE=PKCS12 /opt/apigee/apigee-service/bin/apigee-service apigee-cassandra ring 設定 nodetool。Nodetool 需要傳遞 JMX 參數。您可以透過下列兩種方式設定 Nodetool，在執行已啟用 SSL 的 JMX 時執行，如以下設定選項所述：
這些選項的差異在於 SSL 相關設定傳遞至 nodetool 的方式。在上述兩種情況下，執行 nodetool 的使用者應具備信任存放區檔案的「讀取」權限。請根據可用性和安全性做法選擇合適的選項。
如要進一步瞭解 nodetool 參數，請參閱 DataStax 說明文件。
設定選項 1
在執行 nodetool 的使用者主目錄中建立檔案。
$HOME/.cassandra/nodetool-ssl.properties
在檔案中新增下列幾行內容：
-Djavax.net.ssl.trustStore=
-Djavax.net.ssl.trustStorePassword= -Dcom.sun.management.jmxremote.registry.ssl=true ## If you are using a non standard truststore, set below, otherwise skip ## Possible values are JKS, PKCS12, BCFKS -Djavax.net.ssl.trustStoreType=PKCS12 任何執行 nodetool 的使用者都能存取上方指定的信任存放區路徑。
使用
--ssl選項執行nodetool。/opt/apigee/apigee-cassandra/bin/nodetool --ssl -u <jmx-user-name> -pw <jmx-user-password> -h localhost ring
設定選項 2
請將
nodetool當做單一指令執行，並使用下列額外參數。/opt/apigee/apigee-cassandra/bin/nodetool -Djavax.net.ssl.trustStore=
-Djavax.net.ssl.trustStorePassword= -Dcom.sun.management.jmxremote.registry.ssl=true -Djavax.net.ssl.trustStoreType=PKCS12 -Dssl.enable=true -u -pw -h localhost ring
還原 SSL 設定
如果您需要還原上述程序中所述的 SSL 設定，請執行下列步驟：
- 進入「
apigee-service apigee-cassandra stop
」即可停止apigee-cassandra - 從檔案
/opt/apigee/customer/application/cassandra.properties中移除conf_cassandra-env_com.sun.management.jmxremote.ssl=true行。 - 在
/opt/apigee/apigee-cassandra/source/conf/cassandra-env.sh中將下列行註解排除# JVM_OPTS="$JVM_OPTS -Djavax.net.ssl.keyStore=/opt/apigee/data/apigee-cassandra/keystore.node0" # JVM_OPTS="$JVM_OPTS -Djavax.net.ssl.keyStorePassword=keypass" # JVM_OPTS="$JVM_OPTS -Dcom.sun.management.jmxremote.registry.ssl=true”
- 輸入以下命令即可啟動
apigee-cassandra： - 移除已設定的環境變數
CASS_JMX_SSL。unset CASS_JMX_SSL
- 確認
apigee-service相關指令 (例如ring、stop、backup等) 是否正常運作。 - 停止搭配使用
--ssl切換器和 nodetool
apigee-service apigee-cassandra start
停用 Cassandra 的 JMX 驗證
如要為 Cassandra 停用 JMX 驗證：
- 編輯
/opt/apigee/customer/application/cassandra.properties。 - 從檔案中移除下列行：
conf_cassandra-env_com.sun.management.jmxremote.authenticate=true
- 在 Cassandra 上執行設定：
/opt/apigee/apigee-service/bin/apigee-service apigee-cassandra configure
- 重新啟動 Cassandra：
/opt/apigee/apigee-service/bin/apigee-service apigee-cassandra restart
- 在所有其他 Cassandra 節點上重複執行這項程序。
使用 JConsole：監控工作統計資料
使用 JConsole 和下列服務網址，監控透過 JMX 提供的 JMX 屬性 (MBean)：
service:jmx:rmi:///jndi/rmi://IP_address:7199/jmxrmi
其中 IP_address 是 Cassandra 伺服器的 IP。
Cassandra JMX 統計資料
| JMX MBeans | JMX 屬性 |
|---|---|
|
ColumnFamilies/apprepo/environments ColumnFamilies/apprepo/機構 ColumnFamilies/apprepo/apiproxy_revisions ColumnFamilies/apprepo/apiproxies ColumnFamilies/audit/audits ColumnFamilies/audit/audits_ref |
PendingTasks |
|
MemtableColumnsCount |
|
|
MemtableDataSize |
|
|
ReadCount |
|
|
RecentReadLatencyMicros |
|
|
TotalReadLatencyMicros |
|
|
WriteCount |
|
|
RecentWriteLatencyMicros |
|
|
TotalWriteLatencyMicros |
|
|
TotalDiskSpaceUsed |
|
|
LiveDiskSpaceUsed |
|
|
LiveSSTableCount |
|
|
BloomFilterFalsePositives |
|
|
RecentBloomFilterFalseRatio |
|
|
BloomFilterFalseRatio |
使用 nodetool 管理叢集節點
Nodetool 公用程式是 Cassandra 的指令列介面，可用於管理叢集節點。您可以在 /opt/apigee/apigee-cassandra/bin 找到這個公用程式。
可以對所有 Cassandra 叢集節點進行下列呼叫：
- 一般環狀資訊 (單一 Cassandra 節點也可能出現)：請找出所有節點的「Up」和「Normal」。
nodetool [-u username -pw password] -h localhost ring
只有在您為 Cassandra 啟用 JMX 驗證時，才需要傳送使用者名稱和密碼。
上述指令的輸出內容如下所示：
Datacenter: dc-1 ========== Address Rack Status State Load Owns Token 192.168.124.201 ra1 Up Normal 1.67 MB 33,33% 0 192.168.124.202 ra1 Up Normal 1.68 MB 33,33% 5671...5242 192.168.124.203 ra1 Up Normal 1.67 MB 33,33% 1134...0484
- 節點的一般資訊 (每個節點一個呼叫)
nodetool [-u username -pw password] -h localhost info
上述指令的輸出內容如下所示：
ID : e2e42793-4242-4e82-bcf0-oicu812 Gossip active : true Thrift active : true Native Transport active: true Load : 273.71 KB Generation No : 1234567890 Uptime (seconds) : 687194 Heap Memory (MB) : 314.62 / 3680.00 Off Heap Memory (MB) : 0.14 Data Center : dc-1 Rack : ra-1 Exceptions : 0 Key Cache : entries 150, size 13.52 KB, capacity 100 MB, 1520781 hits, 1520923 requests, 1.000 recent hit rate, 14400 save period in seconds Row Cache : entries 0, size 0 bytes, capacity 0 bytes, 0 hits, 0 requests, NaN recent hit rate, 0 save period in seconds Counter Cache : entries 0, size 0 bytes, capacity 50 MB, 0 hits, 0 requests, NaN recent hit rate, 7200 save period in seconds Token : 0
- 等待伺服器的狀態 (提供用戶端 API)
nodetool [-u username -pw password] -h localhost statusthrift
上述指令的輸出內容如下所示：
running
- 資料串流作業狀態：觀察 Cassandra 節點的流量：
nodetool [-u username -pw password] -h localhost netstats
上述指令的輸出內容如下所示：
Mode: NORMAL Not sending any streams. Read Repair Statistics: Attempted: 151612 Mismatch (Blocking): 0 Mismatch (Background): 0 Pool Name Active Pending Completed Dropped Commands n/a 0 0 0 Responses n/a 0 0 n/a
如要進一步瞭解 nodetool，請參閱「關於 nodetool 公用程式」。
Cassandra 資源
請參閱以下網址：http://www.datastax.com/docs/1.0/operations/monitoring。
監控 Apache Qpid Broker-J
您可以透過 Qpid 管理控制台監控 Qpid Broker-J。本節說明如何存取主控台，以及如何使用主控台執行基本監控功能。如要進一步瞭解如何使用管理主控台，請參閱 Apache Qpid 說明文件中的 網路管理主控台。
存取管理控制台
管理主控台的預設通訊埠為 8090。如要存取這個預設通訊埠的控制台，請將網路瀏覽器指向下列位置：
http://QPID_NODE_IP:8090
如要登入控制台，請使用 Apigee 設定的預設憑證，或是在 Edge 設定檔中設定的憑證。詳情請參閱Edge 設定檔參考資料。
監控佇列和訊息
在左側導覽面板中，依序前往「Java-Broker」>「virtualhosts」>「queues」。選取佇列，即可在 UI 的主要部分中查看詳細資料。詳細資料檢視畫面中會顯示「佇列屬性」和「統計資料」，包括已傳送訊息、已排入佇列、訊息率等資訊。
查看及下載記錄檔
在左側導覽面板中，依序前往「Java-Broker」>「brokerloggers」>「logfile」。您可以在主要 UI 詳細資料檢視畫面中查看記錄檔案詳細資料，以及下載記錄檔案。
使用 Qpid Management API
您可以使用 Apache Qpid Broker-J REST API 自動執行管理工作，並監控 Broker。詳情請參閱 Apache Qpid Broker REST API 說明文件。
您也可以使用指令列工具監控中介軟體。例如：
curl "QPID_NODE_IP":"8090"/api/latest/broker -u "USERNAME":"PASSWORD"
為 Qpid 啟用 SSL 監控
如要為監控和管理功能提供額外安全性，請在 Qpid 管理入口網站和 Qpid 管理 API 中啟用 SSL。請按照下列指南提供金鑰和憑證。
Qpid 提供檔案金鑰庫選項，可在 Apigee 中啟用。這個類型接受 Java 和 Java 工具 (例如 keytool) 瞭解的標準 JKS KeyStore 格式。
KeyStore 準備
除了使用 Keytool 外，您還需要直接提供憑證檔案，供 Qpidd 的用戶端使用。
如要產生 KeyStore，請參閱 Java Keytool 說明文件。
確認需求條件後
- 將 KeyStore 和憑證檔案放在
/opt/apigee/customer/application/apigee-qpidd中。 - 確保只有 Apigee 使用者能夠讀取 KeyStore 檔案：
chown apigee:apigee /opt/apigee/customer/application/apigee-qpidd/qpidd.keystore chmod 400 /opt/apigee/customer/application/apigee-qpidd/qpidd.keystore chown apigee:apigee /opt/apigee/customer/application/apigee-qpidd/qpidd-cert.pem chmod 400 /opt/apigee/customer/application/apigee-qpidd/qpidd-cert.pem
在 Qpid 中啟用 SSL
請一次在一個 Qpid 節點上執行下列步驟：
開啟 /opt/apigee/customer/application/qpidd.properties 檔案，並新增下列幾行內容：
conf_qpidd_qpid_management.https.enabled=true conf_qpidd_qpid.keystore.storeUrl=/opt/apigee/customer/application/apigee-qpidd/qpidd.keystore conf_qpidd_qpid.keystore.password=keystore-password conf_qpidd_qpid.keystore.certificateAlias=certificate-alias conf_qpidd_qpid.keystore.certificate=/opt/apigee/customer/application/apigee-qpidd/qpidd-cert.pem
- 將檔案擁有者變更為 apigee:apigee:
chown apigee:apigee /opt/apigee/customer/application/qpidd.properties
- 設定 Qpidd：
apigee-service apigee-qpidd configure
- 重新啟動 Qpidd：
apigee-service apigee-qpidd restart
- 使用 wait_for_ready 查看狀態：
apigee-service apigee-qpidd wait_for_ready
還原安全資料傳輸層 (SSL) 設定
從 /opt/apigee/customer/application/qpidd.properties 檔案中移除或註解屬性：
conf_qpidd_qpid_management.https.enabled=true conf_qpidd_qpid.keystore.storeUrl=/opt/apigee/customer/application/apigee-qpidd/keystore
- 設定 Qpidd：
apigee-service apigee-qpidd configure
- 重新啟動 Qpidd：
apigee-service apigee-qpidd restart
- 使用 wait_for_ready 查看狀態：
apigee-service apigee-qpidd wait_for_ready
Apache ZooKeeper
檢查 ZooKeeper 狀態
- 確認 ZooKeeper 程序正在執行。ZooKeeper 會將 PID 檔案寫入
opt/apigee/var/run/apigee-zookeeper/apigee-zookeeper.pid。 - 測試 ZooKeeper 通訊埠，確保您可以在每個 ZooKeeper 伺服器上建立與通訊埠 2181 和 3888 的 TCP 連線。
- 確認您可以從 ZooKeeper 資料庫讀取值。使用 ZooKeeper 用戶端程式庫 (或
/opt/apigee/apigee-zookeeper/bin/zkCli.sh) 建立連線，並從資料庫讀取值。 - 查看狀態：
/opt/apigee/apigee-service/bin/apigee-service apigee-zookeeper status
使用 ZooKeeper 四字單字
系統可以透過一組小型指令 (四字母字) 監控 ZooKeeper，這些指令會使用 netcat (nc) 或 telnet 傳送至通訊埠 2181。
如要進一步瞭解 ZooKeeper 指令，請參閱 Apache ZooKeeper 指令參考資料。
例如：
srvr：列出伺服器的完整詳細資料。stat：列出伺服器和已連線用戶端的簡要詳細資料。
您可以向 ZooKeeper 通訊埠發出下列指令：
- 執行四個字母的指令 ruok，測試伺服器是否處於非錯誤狀態。成功的回應會傳回「imok」。
echo ruok | nc host 2181
傳回：
imok
- 執行四個字母指令
stat，列出伺服器效能和已連線的用戶端統計資料：echo stat | nc host 2181
傳回：
Zookeeper version: 3.4.5-1392090, built on 09/30/2012 17:52 GMT Clients: /0:0:0:0:0:0:0:1:33467[0](queued=0,recved=1,sent=0) /192.168.124.201:42388[1](queued=0,recved=8433,sent=8433) /192.168.124.202:42185[1](queued=0,recved=1339,sent=1347) /192.168.124.204:39296[1](queued=0,recved=7688,sent=7692) Latency min/avg/max: 0/0/128 Received: 26144 Sent: 26160 Connections: 4 Outstanding: 0 Zxid: 0x2000002c2 Mode: follower Node count: 283
- 如果無法使用 netcat (nc)，您可以使用 Python 做為替代方案。建立名為
zookeeper.py的檔案，其中含有下列內容：import time, socket, sys c = socket.socket(socket.AF_INET, socket.SOCK_STREAM) c.connect((sys.argv[1], 2181)) c.send(sys.argv[2]) time.sleep(0.1) print c.recv(512)
現在執行下列 Python 程式碼：
python zookeeper.py 192.168.124.201 ruok
python zookeeper.py 192.168.124.201 stat
LDAP 層級測試
您可以監控 OpenLDAP，瞭解特定要求是否正確放送。換句話說，請檢查是否有特定搜尋可傳回正確的結果。
- 使用
ldapsearch(yum install openldap-clients) 查詢系統管理員的項目。這個項目用於驗證所有 API 呼叫。ldapsearch -b "uid=admin,ou=users,ou=global,dc=apigee,dc=com" -x -W -D "cn=manager,dc=apigee,dc=com" -H ldap://localhost:10389 -LLL
系統會提示您輸入 LDAP 管理員密碼：
Enter LDAP Password:
輸入密碼後，您會在表單中看到以下回應：
dn: uid=admin,ou=users,ou=global,dc=apigee,dc=com objectClass: organizationalPerson objectClass: person objectClass: inetOrgPerson objectClass: top uid: admin cn: admin sn: admin userPassword:: e1NTSEF9bS9xbS9RbVNXSFFtUWVsU1F0c3BGL3BQMkhObFp2eDFKUytmZVE9PQ= = mail: opdk@google.com
- 使用下列指令，檢查管理伺服器是否仍連線至 LDAP：
curl -u userEMail:password http://localhost:8080/v1/users/ADMIN
傳回：
{ "emailId" : ADMIN, "firstName" : "admin", "lastName" : "admin" }
您也可以監控 OpenLDAP 快取，這有助於減少磁碟存取次數，進而改善系統效能。在 OpenLDAP 伺服器中監控及調整快取大小，可能會對目錄伺服器的效能造成重大影響。您可以查看記錄檔 (opt/apigee/var/log)，取得快取相關資訊。