将设为首页浏览此站
开启辅助访问 天气与日历 收藏本站联系我们切换到窄版

易陆发现论坛

 找回密码
 开始注册
查看: 42|回复: 2
收起左侧

Error EINVAL: New host tp266-1 (tp266-1)ceph分布式存储报错

[复制链接]
发表于 2023-1-12 16:56:57 | 显示全部楼层 |阅读模式

马上注册,结交更多好友,享用更多功能,让你轻松玩转社区。

您需要 登录 才可以下载或查看,没有帐号?开始注册

x
Error EINVAL: New host tp266-1 (tp266-1) failed check: ['podman|docker (/bin/podman) is present', 'systemctl is present', 'lvcreate is present', "No time sync service is running; checked for ['chrony.service', 'chronyd.service', 'systemd-timesyncd.service', 'ntpd.service', 'ntp.service', 'ntpsec.service']", 'Hostname "tp266-1" matches what is expected.', 'ERROR: No time synchronization is active']
) \+ n9 l; B' V+ T3 o7 u[root@tp266-1 ~]#
! a9 z7 y- H& {% U6 J; x( \* M" S( ~
9 f% f+ T5 w4 ?3 [# Y
% T5 f+ i5 I1 K- L/ p
 楼主| 发表于 2023-1-12 19:52:38 | 显示全部楼层
启动chronyd服务,检查服务
8 M3 ^7 U" I, Z- F0 ~[root@tp266-1 ~]# ceph orch host add tp266-1
& Q7 o0 g; k, A1 WError EINVAL: New host tp266-1 (tp266-1) failed check: ['podman|docker (/bin/podman) is present', 'systemctl is present', 'lvcreate is present', "No time sync service is running; checked for ['chrony.service', 'chronyd.service', 'systemd-timesyncd.service', 'ntpd.service', 'ntp.service', 'ntpsec.service']", 'Hostname "tp266-1" matches what is expected.', 'ERROR: No time synchronization is active']
6 j" _6 P5 ]5 k[root@tp266-1 ~]# systemctl status chronyd.service 0 y4 p4 g# c4 `' Q# C; T( X% X
● chronyd.service - NTP client/server' W" }5 w8 y, c1 I4 n1 {
   Loaded: loaded (/usr/lib/systemd/system/chronyd.service; disabled; vendor preset: enabled)# J9 c: _- _- h* V
   Active: inactive (dead)  o* G7 Q! F8 M- J  W; I
     Docs: man:chronyd(8)0 }$ ?* ~' q1 P- H: m2 L
           man:chrony.conf(5)
1 ]2 W) Y* t( O! T% q[root@tp266-1 ~]# systemctl enable chronyd.service
; q( W9 l/ j/ yCreated symlink /etc/systemd/system/multi-user.target.wants/chronyd.service → /usr/lib/systemd/system/chronyd.service.
; e' z* Y$ l0 ]9 _0 F; N3 h! a[root@tp266-1 ~]# systemctl start chronyd.service
5 N: L' [- y+ I% i8 X( L[root@tp266-1 ~]# ceph orch host add tp266-1
2 C& m* v. ^  B+ y* zAdded host 'tp266-1'
% m0 C  `! {2 y( g# q4 O[root@tp266-1 ~]# ceph orch host ls& L! a( E3 y9 x6 I$ [
HOST     ADDR     LABELS       STATUS  # m4 ^9 N6 ~3 U/ R
gm268-1  gm268-1  mon mgr mds          3 }+ q2 r1 }, ~' t- R0 A* H7 k
gm268-2  gm268-2  mon mgr mds          0 M0 A% T( H7 S% l* a: i2 o
gm268-3  gm268-3  mon mgr mds          ) Z" X; I1 \; F- S0 ^
gm268-4  gm268-4                       
/ @2 `% O0 w2 G# q  ?4 H4 Hgm268-5  gm268-5                       , H; J8 D9 W8 U* s( p7 g" x' M; ]
tp266-1  tp266-1                       
% l. W, O; e4 G" F: s: |5 V[root@tp266-1 ~]# ceph osd tree & ?0 C6 y4 H# w6 N
ID   CLASS  WEIGHT     TYPE NAME         STATUS  REWEIGHT  PRI-AFF
( n& S* r* Z' F  Q4 _5 m2 v -1         494.79141  root default                              
; p7 d1 \" S1 H. `" Z -3         101.86882      host gm268-1                           # p# a, k' a! v6 ?( O) Z
  0    hdd   14.55269          osd.0         up   1.00000  1.00000
  }& T. E3 {1 T4 R  5    hdd   14.55269          osd.5         up   1.00000  1.00000! F) e" K9 p! K) E' b4 B$ ?. Y
  6    hdd   14.55269          osd.6         up   1.00000  1.00000- `4 V8 h& T' V! Y7 ~
  7    hdd   14.55269          osd.7         up   1.00000  1.00000
  `. [) c  |, M# G9 \  8    hdd   14.55269          osd.8         up   1.00000  1.00000
. [( A% O; q/ N7 M  9    hdd   14.55269          osd.9         up   1.00000  1.00000
; Y- o/ d1 N  Z$ H 30    hdd   14.55269          osd.30        up   1.00000  1.00000
4 j/ U/ |: y3 M  [7 { -5         101.86882      host gm268-2                           
9 C: g" v0 I" u- B* }% j9 `  1    hdd   14.55269          osd.1         up   1.00000  1.00000
2 q9 h% E3 P9 y3 e( F: x 10    hdd   14.55269          osd.10        up   1.00000  1.00000
9 Z9 L3 z! E0 b. Z  d 11    hdd   14.55269          osd.11        up   1.00000  1.00000
) B( Y( O2 ^' Y 12    hdd   14.55269          osd.12        up   1.00000  1.00000
: e: S1 W. a( q4 \ 13    hdd   14.55269          osd.13        up   1.00000  1.00000) O3 ^( Q7 g" v$ m, J: _
14    hdd   14.55269          osd.14        up   1.00000  1.00000
- F  d2 {5 p. t3 p9 j 31    hdd   14.55269          osd.31        up   1.00000  1.00000! D5 \0 ^. H3 d6 N3 ^' p4 w3 X
-7         101.86882      host gm268-3                           
) W4 O3 i0 p! [, q% h/ O  2    hdd   14.55269          osd.2         up   1.00000  1.00000
* S2 q6 ^( s7 Z. Q* X( f7 m 15    hdd   14.55269          osd.15        up   1.00000  1.00000
. `% G4 g. {5 U( l2 I2 P3 w 16    hdd   14.55269          osd.16        up   1.00000  1.00000+ s( W+ ^5 {" `6 i) m
17    hdd   14.55269          osd.17        up   1.00000  1.000005 F9 x) U& x/ T( i4 C
18    hdd   14.55269          osd.18        up   1.00000  1.00000
# V% ^" u( ?' M6 _% p 19    hdd   14.55269          osd.19        up   1.00000  1.00000
, |: K# u  p# D4 y3 i5 Z/ j 32    hdd   14.55269          osd.32        up   1.00000  1.00000
$ Y; l! u5 `& v  n -9         101.86882      host gm268-4                           
" z- o% I0 u! M2 k( v6 T+ c  3    hdd   14.55269          osd.3         up   1.00000  1.00000
0 I, j0 Q- ^) y* N 20    hdd   14.55269          osd.20        up   1.00000  1.00000( Y  R$ _1 Z9 V  y  w2 n! N
21    hdd   14.55269          osd.21        up   1.00000  1.00000
- k; ^5 A- E2 J) K3 J- ?8 x* I5 F" | 22    hdd   14.55269          osd.22        up   1.00000  1.00000
+ O  Q* ?" J4 @: H# c 23    hdd   14.55269          osd.23        up   1.00000  1.00000$ F7 l0 X1 g% U6 V& b
24    hdd   14.55269          osd.24        up   1.00000  1.00000
0 f6 v8 ^/ S9 [. x, Y 33    hdd   14.55269          osd.33        up   1.00000  1.00000
% w' K8 Z! r: h& a# d+ _) ^! o" v& K-11          87.31613      host gm268-5                           
: [' h" [" d0 X  4    hdd   14.55269          osd.4         up   1.00000  1.00000- M2 w5 q; e% [
25    hdd   14.55269          osd.25        up   1.00000  1.000009 Y0 q# o4 Y) b6 m
26    hdd   14.55269          osd.26        up   1.00000  1.000003 |2 J$ d' k% T, Q" `, S; C, u! v
27    hdd   14.55269          osd.27        up   1.00000  1.00000) \- X% m0 ^  r/ V* k
28    hdd   14.55269          osd.28        up   1.00000  1.00000; o/ \, J! e# h3 P, |
29    hdd   14.55269          osd.29        up   1.00000  1.000008 X% k& K; [, {9 x
[root@tp266-1 ~]# ceph orch device
+ c+ ?& {) j- S8 q1 tls   zap  
! r' U) ?3 Q- q6 m2 i; ~2 _[root@tp266-1 ~]# ceph orch device ls
/ E  O2 {4 Y. d# l0 HHostname  Path          Type  Serial           Size   Health   Ident  Fault  Available  3 ~( D" B' O% @" i# q: B: G5 Y
gm268-1   /dev/sdb      hdd   ZR57NZTL         16.0T  Unknown  N/A    N/A    No         8 i# k* u! O. j, R3 m! y; P
gm268-1   /dev/sdc      hdd   ZR5C2ZJH         16.0T  Unknown  N/A    N/A    No         
! K& f6 p" Z6 y4 k: _  tgm268-1   /dev/sdd      hdd   ZR60WPTL         16.0T  Unknown  N/A    N/A    No         9 o2 P% k& Z; _' y3 D0 m$ W6 [
gm268-1   /dev/sde      hdd   ZR70RHVC         16.0T  Unknown  N/A    N/A    No         
( [( }/ H3 e% n. z) x2 v  u+ Y0 k$ Lgm268-1   /dev/sdf      hdd   ZR5BZP22         16.0T  Unknown  N/A    N/A    No           o2 X; y3 G7 U5 v
gm268-1   /dev/sdg      hdd   ZR70S24Q         16.0T  Unknown  N/A    N/A    No         
$ T% G+ B% \: q9 }/ _gm268-1   /dev/sdh      hdd   ZR70SC6Z         16.0T  Unknown  N/A    N/A    No         
' G1 l' F1 G( i( y! u# hgm268-2   /dev/sdb      hdd   ZR60VY28         16.0T  Unknown  N/A    N/A    No         
. |  G9 k. Z2 S7 t0 c( Egm268-2   /dev/sdc      hdd   ZR60VMD7         16.0T  Unknown  N/A    N/A    No         
5 \9 J" `. g# l3 agm268-2   /dev/sdd      hdd   ZR60WP1Q         16.0T  Unknown  N/A    N/A    No         
$ C" U7 L/ y( ?( \8 {* v9 _* I% |gm268-2   /dev/sde      hdd   ZR5BV70V         16.0T  Unknown  N/A    N/A    No         
( Q& n+ T( K6 L2 Agm268-2   /dev/sdf      hdd   ZR70RD1H         16.0T  Unknown  N/A    N/A    No         
5 L2 {8 S- K3 q0 I' ]* |gm268-2   /dev/sdg      hdd   ZR56SX4N         16.0T  Unknown  N/A    N/A    No         2 i' U! \. a& ]' s+ e  W* j% f% w
gm268-2   /dev/sdh      hdd   ZR60WHVQ         16.0T  Unknown  N/A    N/A    No         
: M/ I' ]' b. l8 Jgm268-3   /dev/sdb      hdd   ZR70S1H2         16.0T  Unknown  N/A    N/A    No         5 T$ m3 t: u% O; A0 }( o
gm268-3   /dev/sdc      hdd   ZR5C05T9         16.0T  Unknown  N/A    N/A    No           G. v2 B; p& g8 R6 ]* h$ \
gm268-3   /dev/sdd      hdd   ZR60W0VD         16.0T  Unknown  N/A    N/A    No         . F& |6 D* h2 P! S5 P$ c: r
gm268-3   /dev/sde      hdd   ZR70S8ZB         16.0T  Unknown  N/A    N/A    No         
7 Q8 U( w2 l2 cgm268-3   /dev/sdf      hdd   ZR5BQ7DG         16.0T  Unknown  N/A    N/A    No         1 y9 T, Z5 o$ z. n  `
gm268-3   /dev/sdg      hdd   ZR60WAM3         16.0T  Unknown  N/A    N/A    No         
- w) t1 l/ ?3 D) w  O' ugm268-3   /dev/sdh      hdd   ZR5BVZ1L         16.0T  Unknown  N/A    N/A    No         
  C* b% p7 T6 `1 H9 E* {5 w2 Egm268-4   /dev/nvme0n1  ssd   S4EWNF0MB07783D  1000G  Unknown  N/A    N/A    No         $ l/ N& r# I7 e* r; ], }
gm268-4   /dev/sdb      hdd   ZR5BQAQ8         16.0T  Unknown  N/A    N/A    No         7 D# r, G, @; v
gm268-4   /dev/sdc      hdd   ZR60WSB1         16.0T  Unknown  N/A    N/A    No         
0 F7 f6 {5 K/ N8 O& Y4 dgm268-4   /dev/sdd      hdd   ZR60GAFJ         16.0T  Unknown  N/A    N/A    No         
$ T+ F# L/ u! H0 C$ S5 hgm268-4   /dev/sde      hdd   ZR70S2MC         16.0T  Unknown  N/A    N/A    No         
+ H4 b/ e9 d; p% @3 egm268-4   /dev/sdf      hdd   ZR70RR2Z         16.0T  Unknown  N/A    N/A    No         
& v: {& p* A" q3 Y6 `gm268-4   /dev/sdg      hdd   ZR70S9BA         16.0T  Unknown  N/A    N/A    No         % t9 x% f$ X4 o6 r4 M
gm268-4   /dev/sdh      hdd   ZR5C0BSJ         16.0T  Unknown  N/A    N/A    No         ) o. V6 o5 X8 H! g
gm268-5   /dev/sdb      hdd   ZR70SD4K         16.0T  Unknown  N/A    N/A    No         ! x4 t8 g6 W+ f; v& N2 K7 k( i
gm268-5   /dev/sdc      hdd   ZR5BSKHS         16.0T  Unknown  N/A    N/A    No         
$ U0 _. N+ h. C" @. `gm268-5   /dev/sdd      hdd   ZR5C3JGK         16.0T  Unknown  N/A    N/A    No         
2 D* X" D0 M' J6 E$ t! _gm268-5   /dev/sde      hdd   ZR70S1S0         16.0T  Unknown  N/A    N/A    No         0 i/ m+ F3 q2 \( X# F1 k. t
gm268-5   /dev/sdf      hdd   ZR70H12V         16.0T  Unknown  N/A    N/A    No         
: Y7 I7 w4 Q( q) B  kgm268-5   /dev/sdg      hdd   ZR70S3AV         16.0T  Unknown  N/A    N/A    No         
8 K" e( u# y9 I[root@tp266-1 ~]# ceph orch device ls
; G. u/ W, ?, t9 \; x) [Hostname  Path          Type  Serial           Size   Health   Ident  Fault  Available  ' G; v! P  |" h
gm268-1   /dev/sdb      hdd   ZR57NZTL         16.0T  Unknown  N/A    N/A    No         3 h3 e& L! M  d# J
gm268-1   /dev/sdc      hdd   ZR5C2ZJH         16.0T  Unknown  N/A    N/A    No         # X& ~# j* }& ^9 V& X- s
gm268-1   /dev/sdd      hdd   ZR60WPTL         16.0T  Unknown  N/A    N/A    No         
$ U& j$ E# [! c! Q! j" }  Ngm268-1   /dev/sde      hdd   ZR70RHVC         16.0T  Unknown  N/A    N/A    No         
  P- ^3 B& i" B1 mgm268-1   /dev/sdf      hdd   ZR5BZP22         16.0T  Unknown  N/A    N/A    No         
- o/ [( _. [2 _4 }  egm268-1   /dev/sdg      hdd   ZR70S24Q         16.0T  Unknown  N/A    N/A    No         
4 L/ p. B. W6 g4 b: a+ @: E: ogm268-1   /dev/sdh      hdd   ZR70SC6Z         16.0T  Unknown  N/A    N/A    No         
. ~+ _6 r' C9 H' @/ c/ c+ Q- igm268-2   /dev/sdb      hdd   ZR60VY28         16.0T  Unknown  N/A    N/A    No         
( d! b2 l  {- a7 ~7 q0 Sgm268-2   /dev/sdc      hdd   ZR60VMD7         16.0T  Unknown  N/A    N/A    No           ^. g! E: g, c* F
gm268-2   /dev/sdd      hdd   ZR60WP1Q         16.0T  Unknown  N/A    N/A    No         % ^5 o3 K9 M( B1 \, q4 G
gm268-2   /dev/sde      hdd   ZR5BV70V         16.0T  Unknown  N/A    N/A    No         6 K. |1 M) q- S. Y8 i" a# F+ p
gm268-2   /dev/sdf      hdd   ZR70RD1H         16.0T  Unknown  N/A    N/A    No         
  R' {) U2 a$ E  e) C8 ]0 lgm268-2   /dev/sdg      hdd   ZR56SX4N         16.0T  Unknown  N/A    N/A    No         ! b" k8 b# i5 v
gm268-2   /dev/sdh      hdd   ZR60WHVQ         16.0T  Unknown  N/A    N/A    No         
, ^/ b9 v7 u& ], R+ e' K' S5 qgm268-3   /dev/sdb      hdd   ZR70S1H2         16.0T  Unknown  N/A    N/A    No         8 J, F. R' ^& X; ]/ _/ `3 R
gm268-3   /dev/sdc      hdd   ZR5C05T9         16.0T  Unknown  N/A    N/A    No         
( w/ s* t1 |7 d+ [! m2 Ugm268-3   /dev/sdd      hdd   ZR60W0VD         16.0T  Unknown  N/A    N/A    No           k5 E1 Q% _0 x' D+ Z
gm268-3   /dev/sde      hdd   ZR70S8ZB         16.0T  Unknown  N/A    N/A    No         
- a0 t+ [& V) Q, o/ [gm268-3   /dev/sdf      hdd   ZR5BQ7DG         16.0T  Unknown  N/A    N/A    No         
! i1 Y- m0 t" t8 s9 V+ k: Fgm268-3   /dev/sdg      hdd   ZR60WAM3         16.0T  Unknown  N/A    N/A    No         * B0 ]" l# X  k+ F
gm268-3   /dev/sdh      hdd   ZR5BVZ1L         16.0T  Unknown  N/A    N/A    No         
! V" q8 v4 z% K. f: Lgm268-4   /dev/nvme0n1  ssd   S4EWNF0MB07783D  1000G  Unknown  N/A    N/A    No         7 }( q5 }; G9 d3 b6 m$ a
gm268-4   /dev/sdb      hdd   ZR5BQAQ8         16.0T  Unknown  N/A    N/A    No         
# X3 P5 H6 U8 N, t$ y1 n5 xgm268-4   /dev/sdc      hdd   ZR60WSB1         16.0T  Unknown  N/A    N/A    No         
7 r" M% L& o9 W& u# Ugm268-4   /dev/sdd      hdd   ZR60GAFJ         16.0T  Unknown  N/A    N/A    No         
. ^# r* y4 m+ _! g; ^+ Sgm268-4   /dev/sde      hdd   ZR70S2MC         16.0T  Unknown  N/A    N/A    No         
" ^- ^0 L; J: s: I2 r+ Q& @8 }$ Vgm268-4   /dev/sdf      hdd   ZR70RR2Z         16.0T  Unknown  N/A    N/A    No         
' h, `: x( f5 C& T3 k! \gm268-4   /dev/sdg      hdd   ZR70S9BA         16.0T  Unknown  N/A    N/A    No         3 q; `1 ^1 S& s! e
gm268-4   /dev/sdh      hdd   ZR5C0BSJ         16.0T  Unknown  N/A    N/A    No         
- m) p4 {0 m4 Mgm268-5   /dev/sdb      hdd   ZR70SD4K         16.0T  Unknown  N/A    N/A    No         
4 C) K) N$ l7 l! R" E4 t- ogm268-5   /dev/sdc      hdd   ZR5BSKHS         16.0T  Unknown  N/A    N/A    No         
" a$ ^7 b9 C: Y& T0 x7 I/ F! agm268-5   /dev/sdd      hdd   ZR5C3JGK         16.0T  Unknown  N/A    N/A    No         
9 l! V/ c/ L+ c( X( `6 K+ b! Ygm268-5   /dev/sde      hdd   ZR70S1S0         16.0T  Unknown  N/A    N/A    No         
# `' ]  d6 I( \. p' V; b& x4 ggm268-5   /dev/sdf      hdd   ZR70H12V         16.0T  Unknown  N/A    N/A    No         
6 |' w$ V' ~& p+ ^$ q" ~gm268-5   /dev/sdg      hdd   ZR70S3AV         16.0T  Unknown  N/A    N/A    No         
! g( q/ Z0 z  R1 H: s8 }[root@tp266-1 ~]# ceph orch device ls : g2 C1 N: i4 N
Hostname  Path          Type  Serial           Size   Health   Ident  Fault  Available  
# Z6 r/ [$ t6 e. ~! l5 igm268-1   /dev/sdb      hdd   ZR57NZTL         16.0T  Unknown  N/A    N/A    No         
7 X8 z* C# ~  p4 `gm268-1   /dev/sdc      hdd   ZR5C2ZJH         16.0T  Unknown  N/A    N/A    No         
+ W* f; W; K9 g- t) ~gm268-1   /dev/sdd      hdd   ZR60WPTL         16.0T  Unknown  N/A    N/A    No         
0 Y" k& X( D) F" d" V# Zgm268-1   /dev/sde      hdd   ZR70RHVC         16.0T  Unknown  N/A    N/A    No         1 `! L/ }( t  i3 s) U4 V5 V
gm268-1   /dev/sdf      hdd   ZR5BZP22         16.0T  Unknown  N/A    N/A    No         
% r/ b, a2 s% G0 s5 u. J1 b- f6 Ygm268-1   /dev/sdg      hdd   ZR70S24Q         16.0T  Unknown  N/A    N/A    No         
+ D: e/ R2 p- |0 P1 u+ n7 k% jgm268-1   /dev/sdh      hdd   ZR70SC6Z         16.0T  Unknown  N/A    N/A    No         
$ U& p: k; M6 L4 @+ A) a; Xgm268-2   /dev/sdb      hdd   ZR60VY28         16.0T  Unknown  N/A    N/A    No         
' B" `7 r! o5 s" ^- U& T0 cgm268-2   /dev/sdc      hdd   ZR60VMD7         16.0T  Unknown  N/A    N/A    No         
: @6 {/ F9 T5 h. R4 dgm268-2   /dev/sdd      hdd   ZR60WP1Q         16.0T  Unknown  N/A    N/A    No         
1 S; A4 M, j% Q& h% H! p% igm268-2   /dev/sde      hdd   ZR5BV70V         16.0T  Unknown  N/A    N/A    No         ; Z3 x/ i* C8 o2 ?5 y" F
gm268-2   /dev/sdf      hdd   ZR70RD1H         16.0T  Unknown  N/A    N/A    No         " R4 r, m! m6 Z% F5 G
gm268-2   /dev/sdg      hdd   ZR56SX4N         16.0T  Unknown  N/A    N/A    No         - V, p7 ?% _0 }/ P4 `/ r+ `
gm268-2   /dev/sdh      hdd   ZR60WHVQ         16.0T  Unknown  N/A    N/A    No         7 C. r* j5 J: W" G* v# P: ]
gm268-3   /dev/sdb      hdd   ZR70S1H2         16.0T  Unknown  N/A    N/A    No         ) H( v1 n$ Y- @( @- t) ?, K; {
gm268-3   /dev/sdc      hdd   ZR5C05T9         16.0T  Unknown  N/A    N/A    No         
+ m/ Q2 H9 B/ N+ rgm268-3   /dev/sdd      hdd   ZR60W0VD         16.0T  Unknown  N/A    N/A    No         
5 @3 d; o, g; q) w" jgm268-3   /dev/sde      hdd   ZR70S8ZB         16.0T  Unknown  N/A    N/A    No         
9 i/ Y1 d" m# J8 [gm268-3   /dev/sdf      hdd   ZR5BQ7DG         16.0T  Unknown  N/A    N/A    No         ( W! g/ k) H+ C- q$ ?
gm268-3   /dev/sdg      hdd   ZR60WAM3         16.0T  Unknown  N/A    N/A    No         
$ r4 ^: w: V8 M' c9 E) ggm268-3   /dev/sdh      hdd   ZR5BVZ1L         16.0T  Unknown  N/A    N/A    No         6 |) Y- ]+ `) D0 H
gm268-4   /dev/nvme0n1  ssd   S4EWNF0MB07783D  1000G  Unknown  N/A    N/A    No         4 B1 H" e' M' P! L
gm268-4   /dev/sdb      hdd   ZR5BQAQ8         16.0T  Unknown  N/A    N/A    No         
& i" L/ J( s  U# ^gm268-4   /dev/sdc      hdd   ZR60WSB1         16.0T  Unknown  N/A    N/A    No         
0 L8 Z  l( }3 {% X6 Y4 `- Qgm268-4   /dev/sdd      hdd   ZR60GAFJ         16.0T  Unknown  N/A    N/A    No         ( x8 B- p1 y, l5 c4 z' w
gm268-4   /dev/sde      hdd   ZR70S2MC         16.0T  Unknown  N/A    N/A    No         
; ^& I& v# M* j# sgm268-4   /dev/sdf      hdd   ZR70RR2Z         16.0T  Unknown  N/A    N/A    No         ; p  z: u, H  g; P( k9 f) R$ G
gm268-4   /dev/sdg      hdd   ZR70S9BA         16.0T  Unknown  N/A    N/A    No         
) z+ ?- S3 X6 Y2 j& z% C  a/ @gm268-4   /dev/sdh      hdd   ZR5C0BSJ         16.0T  Unknown  N/A    N/A    No         
( C& I$ s1 Y* S# Wgm268-5   /dev/sdb      hdd   ZR70SD4K         16.0T  Unknown  N/A    N/A    No         ; H% P! i( t$ [7 X
gm268-5   /dev/sdc      hdd   ZR5BSKHS         16.0T  Unknown  N/A    N/A    No         " y; O6 {- {: W% K
gm268-5   /dev/sdd      hdd   ZR5C3JGK         16.0T  Unknown  N/A    N/A    No         
" d* x/ E1 g7 z/ R$ a. ngm268-5   /dev/sde      hdd   ZR70S1S0         16.0T  Unknown  N/A    N/A    No         ; z* M# ^7 _0 P, ?3 V/ I9 D9 L+ m
gm268-5   /dev/sdf      hdd   ZR70H12V         16.0T  Unknown  N/A    N/A    No         
( S" X+ z. V. d! u8 o1 b7 H! `gm268-5   /dev/sdg      hdd   ZR70S3AV         16.0T  Unknown  N/A    N/A    No         
2 l" w! A) M% b[root@tp266-1 ~]# ceph orch device ls ( T4 l. M6 c# i
Hostname  Path          Type  Serial           Size   Health   Ident  Fault  Available    D9 e: ?0 Q3 ~0 F9 a- r
gm268-1   /dev/sdb      hdd   ZR57NZTL         16.0T  Unknown  N/A    N/A    No         
- v2 f# `6 q# n7 v: X# @; `7 jgm268-1   /dev/sdc      hdd   ZR5C2ZJH         16.0T  Unknown  N/A    N/A    No         3 v2 }  m$ R0 Y# e7 {7 w
gm268-1   /dev/sdd      hdd   ZR60WPTL         16.0T  Unknown  N/A    N/A    No         
. r& S1 j4 L4 K% D- ^, _gm268-1   /dev/sde      hdd   ZR70RHVC         16.0T  Unknown  N/A    N/A    No         & c" y0 v0 h6 G- O. p+ D
gm268-1   /dev/sdf      hdd   ZR5BZP22         16.0T  Unknown  N/A    N/A    No         
: u  p5 ?# L4 l- A& n! S/ u6 Tgm268-1   /dev/sdg      hdd   ZR70S24Q         16.0T  Unknown  N/A    N/A    No         % @$ _6 Z% w0 w7 }9 K
gm268-1   /dev/sdh      hdd   ZR70SC6Z         16.0T  Unknown  N/A    N/A    No         
: b2 r5 k  R/ z9 O* Rgm268-2   /dev/sdb      hdd   ZR60VY28         16.0T  Unknown  N/A    N/A    No         
2 p0 Y( o9 Y  Q! e& q) J* h0 r$ D/ J) Q: {gm268-2   /dev/sdc      hdd   ZR60VMD7         16.0T  Unknown  N/A    N/A    No         
; b. i0 f% H+ f% _gm268-2   /dev/sdd      hdd   ZR60WP1Q         16.0T  Unknown  N/A    N/A    No         8 g" H" ^* h$ m! r5 N
gm268-2   /dev/sde      hdd   ZR5BV70V         16.0T  Unknown  N/A    N/A    No         
+ e/ W$ X! v1 Z5 N$ fgm268-2   /dev/sdf      hdd   ZR70RD1H         16.0T  Unknown  N/A    N/A    No         ( M( m  ~& M9 W/ H% C
gm268-2   /dev/sdg      hdd   ZR56SX4N         16.0T  Unknown  N/A    N/A    No         : l$ [$ a1 L/ H$ q+ O/ V& |
gm268-2   /dev/sdh      hdd   ZR60WHVQ         16.0T  Unknown  N/A    N/A    No         9 s' o3 p2 b( L) z! c, T# t% V
gm268-3   /dev/sdb      hdd   ZR70S1H2         16.0T  Unknown  N/A    N/A    No         
& w3 L+ N; F* y! ygm268-3   /dev/sdc      hdd   ZR5C05T9         16.0T  Unknown  N/A    N/A    No         
2 C2 B  G3 _# vgm268-3   /dev/sdd      hdd   ZR60W0VD         16.0T  Unknown  N/A    N/A    No         
; O. Z0 M% ~: ggm268-3   /dev/sde      hdd   ZR70S8ZB         16.0T  Unknown  N/A    N/A    No         
$ z; `3 `: `: S+ T! E, M. Z9 |9 Cgm268-3   /dev/sdf      hdd   ZR5BQ7DG         16.0T  Unknown  N/A    N/A    No         : c3 ?7 A6 M4 }1 x) k. |2 ~+ }/ z1 f
gm268-3   /dev/sdg      hdd   ZR60WAM3         16.0T  Unknown  N/A    N/A    No         6 l! h8 G8 i# M# p% j* r1 i
gm268-3   /dev/sdh      hdd   ZR5BVZ1L         16.0T  Unknown  N/A    N/A    No         / o: ?+ w5 K; M; C! {" n; k
gm268-4   /dev/nvme0n1  ssd   S4EWNF0MB07783D  1000G  Unknown  N/A    N/A    No         4 g) {# q5 n+ j, g- ?. T
gm268-4   /dev/sdb      hdd   ZR5BQAQ8         16.0T  Unknown  N/A    N/A    No         ( Z; e1 R* M) k8 I
gm268-4   /dev/sdc      hdd   ZR60WSB1         16.0T  Unknown  N/A    N/A    No         9 j( V  j8 s4 P' Q8 T
gm268-4   /dev/sdd      hdd   ZR60GAFJ         16.0T  Unknown  N/A    N/A    No         & z: A" ^: @4 M) C
gm268-4   /dev/sde      hdd   ZR70S2MC         16.0T  Unknown  N/A    N/A    No         ' ^! Q7 I- l  l
gm268-4   /dev/sdf      hdd   ZR70RR2Z         16.0T  Unknown  N/A    N/A    No         9 l# @1 B$ y( A, r# x
gm268-4   /dev/sdg      hdd   ZR70S9BA         16.0T  Unknown  N/A    N/A    No         
+ q& B& c& ^4 u/ ]. s7 T7 Ngm268-4   /dev/sdh      hdd   ZR5C0BSJ         16.0T  Unknown  N/A    N/A    No         " @. d# Z+ I+ X8 X8 z4 K7 w
gm268-5   /dev/sdb      hdd   ZR70SD4K         16.0T  Unknown  N/A    N/A    No         6 n! |7 Q1 p( N8 e6 ]* b" [
gm268-5   /dev/sdc      hdd   ZR5BSKHS         16.0T  Unknown  N/A    N/A    No         
2 J: ^& X0 ^- O3 W+ }6 t( Ngm268-5   /dev/sdd      hdd   ZR5C3JGK         16.0T  Unknown  N/A    N/A    No         : K2 {' X+ d' t7 ]& ^% c
gm268-5   /dev/sde      hdd   ZR70S1S0         16.0T  Unknown  N/A    N/A    No         1 \3 z$ h/ b8 {- ^
gm268-5   /dev/sdf      hdd   ZR70H12V         16.0T  Unknown  N/A    N/A    No         
( ~. a1 b- X7 w) p( ]6 tgm268-5   /dev/sdg      hdd   ZR70S3AV         16.0T  Unknown  N/A    N/A    No         
" y. `: _- X/ X[root@tp266-1 ~]# ceph orch device ls
" r6 V* U8 C) {+ I' B; bHostname  Path          Type  Serial           Size   Health   Ident  Fault  Available  
' R. i/ Z. q9 T: K6 p: D, r) X) B1 ggm268-1   /dev/sdb      hdd   ZR57NZTL         16.0T  Unknown  N/A    N/A    No         
3 V  Q5 f- q/ }+ wgm268-1   /dev/sdc      hdd   ZR5C2ZJH         16.0T  Unknown  N/A    N/A    No           x3 e) d; o# f/ T0 G2 k! W
gm268-1   /dev/sdd      hdd   ZR60WPTL         16.0T  Unknown  N/A    N/A    No         1 W4 t" l7 E" i6 e5 n* x' i6 @
gm268-1   /dev/sde      hdd   ZR70RHVC         16.0T  Unknown  N/A    N/A    No         4 Y4 |8 [! U9 H/ J9 A) d1 [
gm268-1   /dev/sdf      hdd   ZR5BZP22         16.0T  Unknown  N/A    N/A    No         2 _2 l" e# u" |# w8 @$ }" |0 X2 _
gm268-1   /dev/sdg      hdd   ZR70S24Q         16.0T  Unknown  N/A    N/A    No         
4 Y* w: i" J# O8 kgm268-1   /dev/sdh      hdd   ZR70SC6Z         16.0T  Unknown  N/A    N/A    No         - E, I) b6 \& s9 K
gm268-2   /dev/sdb      hdd   ZR60VY28         16.0T  Unknown  N/A    N/A    No         : R* |% E* U) ?4 o
gm268-2   /dev/sdc      hdd   ZR60VMD7         16.0T  Unknown  N/A    N/A    No         
8 o5 R& z. b8 Q# O( dgm268-2   /dev/sdd      hdd   ZR60WP1Q         16.0T  Unknown  N/A    N/A    No         
: }$ j# q$ A" cgm268-2   /dev/sde      hdd   ZR5BV70V         16.0T  Unknown  N/A    N/A    No         
, K1 J, _% L0 N, g+ }gm268-2   /dev/sdf      hdd   ZR70RD1H         16.0T  Unknown  N/A    N/A    No         
4 J2 Z) m% c$ kgm268-2   /dev/sdg      hdd   ZR56SX4N         16.0T  Unknown  N/A    N/A    No         
8 U4 r. ]2 X. C) w4 rgm268-2   /dev/sdh      hdd   ZR60WHVQ         16.0T  Unknown  N/A    N/A    No         
7 N3 \7 s* D4 }" V" C" |gm268-3   /dev/sdb      hdd   ZR70S1H2         16.0T  Unknown  N/A    N/A    No         
' y+ L7 E! ^1 `6 M6 ]gm268-3   /dev/sdc      hdd   ZR5C05T9         16.0T  Unknown  N/A    N/A    No         
+ }# L1 Q3 W0 G; Agm268-3   /dev/sdd      hdd   ZR60W0VD         16.0T  Unknown  N/A    N/A    No         
4 ^* M, b6 |! x8 H2 k! u2 v* D0 k# egm268-3   /dev/sde      hdd   ZR70S8ZB         16.0T  Unknown  N/A    N/A    No         % }2 J! |% c, `% t. f# U# ~
gm268-3   /dev/sdf      hdd   ZR5BQ7DG         16.0T  Unknown  N/A    N/A    No         1 L# ~' H) V6 u1 q
gm268-3   /dev/sdg      hdd   ZR60WAM3         16.0T  Unknown  N/A    N/A    No         6 ]9 S& j8 c4 i+ F  B/ Z* K  c- K
gm268-3   /dev/sdh      hdd   ZR5BVZ1L         16.0T  Unknown  N/A    N/A    No         
" j" b& V; T% ]1 Y- A: Z* Kgm268-4   /dev/nvme0n1  ssd   S4EWNF0MB07783D  1000G  Unknown  N/A    N/A    No         
, _2 s# g( J$ f# L$ R1 Qgm268-4   /dev/sdb      hdd   ZR5BQAQ8         16.0T  Unknown  N/A    N/A    No         
( q6 Q: q7 \9 o0 ?5 h% `3 m3 wgm268-4   /dev/sdc      hdd   ZR60WSB1         16.0T  Unknown  N/A    N/A    No         . F% r. i0 p* e) s5 H4 w' f
gm268-4   /dev/sdd      hdd   ZR60GAFJ         16.0T  Unknown  N/A    N/A    No         ' f; |! K6 \% _& b1 c
gm268-4   /dev/sde      hdd   ZR70S2MC         16.0T  Unknown  N/A    N/A    No         
9 o: h2 f/ p4 a! @gm268-4   /dev/sdf      hdd   ZR70RR2Z         16.0T  Unknown  N/A    N/A    No         ) H6 a" s; N( S
gm268-4   /dev/sdg      hdd   ZR70S9BA         16.0T  Unknown  N/A    N/A    No           L8 i, L; o7 v( z! q: X9 F
gm268-4   /dev/sdh      hdd   ZR5C0BSJ         16.0T  Unknown  N/A    N/A    No         ' s, j; K5 [0 q% p# D
gm268-5   /dev/sdb      hdd   ZR70SD4K         16.0T  Unknown  N/A    N/A    No         $ [7 G: e( w* t0 g
gm268-5   /dev/sdc      hdd   ZR5BSKHS         16.0T  Unknown  N/A    N/A    No         ) o( Z" a- o. R- g
gm268-5   /dev/sdd      hdd   ZR5C3JGK         16.0T  Unknown  N/A    N/A    No         
$ c; y$ {; F& d2 ggm268-5   /dev/sde      hdd   ZR70S1S0         16.0T  Unknown  N/A    N/A    No         
, U: I+ Z, @. E2 m8 Tgm268-5   /dev/sdf      hdd   ZR70H12V         16.0T  Unknown  N/A    N/A    No         
/ ~; e2 ]5 [/ k" {+ J* Xgm268-5   /dev/sdg      hdd   ZR70S3AV         16.0T  Unknown  N/A    N/A    No         
: c0 l, q2 Z; W& u! {2 s[root@tp266-1 ~]# ceph orch  host  ls
$ i5 @* H* x; `0 [- z% C3 e: V+ cHOST     ADDR     LABELS       STATUS  + \8 u7 j3 J0 N  g, g! Q' r9 B$ |
gm268-1  gm268-1  mon mgr mds         
; \! e. ~$ [" V' P5 D# i8 Y/ Q. qgm268-2  gm268-2  mon mgr mds         
) D9 q" X& q% ?7 ~# y9 U' Pgm268-3  gm268-3  mon mgr mds         
8 x" k% k1 r, n8 kgm268-4  gm268-4                       0 N4 d1 g- |  N3 B* e; e$ g9 Z
gm268-5  gm268-5                       - W; z- y& {. R4 ~2 f7 O
tp266-1  tp266-1                       % Q. h) J2 b# P
[root@tp266-1 ~]# podman ps
- v6 s) {& m% J8 H$ ?CONTAINER ID  IMAGE   COMMAND  CREATED  STATUS  PORTS   NAMES# q% K7 x' D2 }* h8 E1 |
[root@tp266-1 ~]# ceph orch ls
# w1 R& \7 a. s' y. h. aNAME           RUNNING  REFRESHED  AGE  PLACEMENT    IMAGE NAME                                IMAGE ID      , B1 X) b( A$ c
alertmanager       1/1  72m ago    3d   count:1      quay.io/prometheus/alertmanager:v0.20.0   0881eb8f169f  
8 b  D: W6 @8 Y6 l* Tcrash              5/6  72m ago    3d   *            quay.io/ceph/ceph:v15                     93146564743f  : S8 u& `3 M3 I& h  @8 R" H2 ?
grafana            1/1  72m ago    3d   count:1      quay.io/ceph/ceph-grafana:6.7.4           557c83e11646  8 R) m- q. Y2 A2 L* h3 K' r+ d
mds.cephfs         3/3  72m ago    3d   label:mds    quay.io/ceph/ceph:v15                     93146564743f  
* ?$ L6 W3 {' u* q, M: ]0 amgr                3/3  72m ago    3d   label:mgr    quay.io/ceph/ceph:v15                     93146564743f  
1 [  X1 V4 O4 D. _9 I  q, ~- Amon                3/3  72m ago    3d   label:mon    quay.io/ceph/ceph:v15                     93146564743f  3 f$ G1 s4 d* X% w
node-exporter      5/6  72m ago    3d   *            quay.io/prometheus/node-exporter:v0.18.1  e5a616e4b9cf  
. ]+ X3 ?# |) o: e  q' @osd.None          34/0  72m ago    -    <unmanaged>  quay.io/ceph/ceph:v15                     93146564743f  ; y) n. C3 v. ?8 W/ V/ z6 d7 i& S
prometheus         1/1  72m ago    3d   count:1      quay.io/prometheus/prometheus:v2.18.1     de242295e225  
- t% ^) [% K. }8 z2 W3 a9 ]9 }[root@tp266-1 ~]# ceph
: M$ I0 K  H& ~1 L7 [$ yalerts             config-key         features           insights           mgr                osd                rbd                telegraf           versions" f2 g8 L# I7 i+ ~5 \( n6 M
auth               crash              fs                 iostat             mon                pg                 report             telemetry          zabbix
1 H4 X( F% {$ _2 m! m2 gbalancer           dashboard          fsid               k8sevents          nfs                progress           restful            tell               3 z9 T4 Z0 a0 A* M" ^9 Z
cephadm            device             health             log                node               prometheus         service            test_orchestrator  / E! Z* F8 L' }9 z' i- A( O
config             df                 influx             mds                orch               quorum_status      status             time-sync-status   
4 `& L& |, T9 M4 X! \; p[root@tp266-1 ~]# ceph
# o/ u. ~# w$ N: y' c  ialerts             config-key         features           insights           mgr                osd                rbd                telegraf           versions
. H6 U% E; r! S6 ~! [8 W( ]9 J3 w) r* mauth               crash              fs                 iostat             mon                pg                 report             telemetry          zabbix, m6 D5 \! x) A7 C. Z2 v
balancer           dashboard          fsid               k8sevents          nfs                progress           restful            tell               
2 E. u$ t/ x. y  _/ B- o) tcephadm            device             health             log                node               prometheus         service            test_orchestrator  
# n- ^7 q+ t4 @0 p1 E; hconfig             df                 influx             mds                orch               quorum_status      status             time-sync-status   ) s* Y6 p4 M% G+ n" d
[root@tp266-1 ~]# ceph orch host ls
# J. V+ W, r/ [* QHOST     ADDR     LABELS       STATUS  
$ [7 {4 I& J6 R% q& {gm268-1  gm268-1  mon mgr mds         
8 S% _" e* [6 Z6 f% V7 pgm268-2  gm268-2  mon mgr mds          / E* W- L: F. b1 U2 ^) q
gm268-3  gm268-3  mon mgr mds          # f/ m9 g: O% H5 @3 S9 G7 D
gm268-4  gm268-4                       , ?( z2 [1 n8 A& a; c1 l
gm268-5  gm268-5                       
. _, J! Q# M# _/ P; C6 b! O8 G$ utp266-1  tp266-1                       
4 U, n6 W* L% L- S6 \: Y[root@tp266-1 ~]# ceph orch device ls ( O( a! Q: J" U( U) S9 @% ?8 D
Hostname  Path          Type  Serial           Size   Health   Ident  Fault  Available  
# a* i: P7 i8 Egm268-1   /dev/sdb      hdd   ZR57NZTL         16.0T  Unknown  N/A    N/A    No         
. {' D. `! @0 ngm268-1   /dev/sdc      hdd   ZR5C2ZJH         16.0T  Unknown  N/A    N/A    No         6 d& k: D5 U5 }
gm268-1   /dev/sdd      hdd   ZR60WPTL         16.0T  Unknown  N/A    N/A    No         9 E4 w! ]* h8 H  n" g# H: c
gm268-1   /dev/sde      hdd   ZR70RHVC         16.0T  Unknown  N/A    N/A    No         
: f2 K4 U% Q9 {- Ugm268-1   /dev/sdf      hdd   ZR5BZP22         16.0T  Unknown  N/A    N/A    No         3 b5 t8 C! M, d7 ^2 S9 b3 x$ P
gm268-1   /dev/sdg      hdd   ZR70S24Q         16.0T  Unknown  N/A    N/A    No         ! o, O% R& \" R' d  q
gm268-1   /dev/sdh      hdd   ZR70SC6Z         16.0T  Unknown  N/A    N/A    No         
+ w% M/ G. u8 b" p& `gm268-2   /dev/sdb      hdd   ZR60VY28         16.0T  Unknown  N/A    N/A    No         5 j; w  b* K, o* J7 p& s
gm268-2   /dev/sdc      hdd   ZR60VMD7         16.0T  Unknown  N/A    N/A    No         / _" G/ j+ q  u6 o
gm268-2   /dev/sdd      hdd   ZR60WP1Q         16.0T  Unknown  N/A    N/A    No         
, o  S0 R4 N4 H  ~6 ]1 ~gm268-2   /dev/sde      hdd   ZR5BV70V         16.0T  Unknown  N/A    N/A    No         ! r3 Y5 W% _8 p8 a1 W/ M9 z% a! p
gm268-2   /dev/sdf      hdd   ZR70RD1H         16.0T  Unknown  N/A    N/A    No         
' A3 c! _7 |& l, M* A6 s3 Wgm268-2   /dev/sdg      hdd   ZR56SX4N         16.0T  Unknown  N/A    N/A    No         8 C; c7 `) x1 D+ V5 t
gm268-2   /dev/sdh      hdd   ZR60WHVQ         16.0T  Unknown  N/A    N/A    No           k0 ~7 _, E4 y# w
gm268-3   /dev/sdb      hdd   ZR70S1H2         16.0T  Unknown  N/A    N/A    No         
% G- g9 c8 c  v& L; H& R; Lgm268-3   /dev/sdc      hdd   ZR5C05T9         16.0T  Unknown  N/A    N/A    No         
, Q& j( j' W* `2 Z. O! H+ Agm268-3   /dev/sdd      hdd   ZR60W0VD         16.0T  Unknown  N/A    N/A    No         ( X6 i5 _' ?' x) g6 F0 J) K
gm268-3   /dev/sde      hdd   ZR70S8ZB         16.0T  Unknown  N/A    N/A    No         
0 x+ k; w9 `1 o& \; {& h+ \gm268-3   /dev/sdf      hdd   ZR5BQ7DG         16.0T  Unknown  N/A    N/A    No         : [% ~4 R& D0 n" @$ w) {+ n
gm268-3   /dev/sdg      hdd   ZR60WAM3         16.0T  Unknown  N/A    N/A    No         3 n+ ?( Y$ C. M! A9 Y& Z1 r( W
gm268-3   /dev/sdh      hdd   ZR5BVZ1L         16.0T  Unknown  N/A    N/A    No         
# W. J* q6 Q: J2 \. Ngm268-4   /dev/nvme0n1  ssd   S4EWNF0MB07783D  1000G  Unknown  N/A    N/A    No         
& l' ]6 t4 C! }; Mgm268-4   /dev/sdb      hdd   ZR5BQAQ8         16.0T  Unknown  N/A    N/A    No         + a5 t& R. B6 A3 W, R1 ~( M
gm268-4   /dev/sdc      hdd   ZR60WSB1         16.0T  Unknown  N/A    N/A    No         " b# c. ^9 ^" ]7 F  H( }; L
gm268-4   /dev/sdd      hdd   ZR60GAFJ         16.0T  Unknown  N/A    N/A    No         / R) T; T3 |( `# x
gm268-4   /dev/sde      hdd   ZR70S2MC         16.0T  Unknown  N/A    N/A    No         
, Q( j; d, E% m2 f+ o" L7 a( k# j9 o& dgm268-4   /dev/sdf      hdd   ZR70RR2Z         16.0T  Unknown  N/A    N/A    No         . A' F9 T7 j9 A. t# |. L8 K
gm268-4   /dev/sdg      hdd   ZR70S9BA         16.0T  Unknown  N/A    N/A    No         
) i4 |- L: h( y- @( Tgm268-4   /dev/sdh      hdd   ZR5C0BSJ         16.0T  Unknown  N/A    N/A    No         - W; F1 t. I0 p& }* s$ V
gm268-5   /dev/sdb      hdd   ZR70SD4K         16.0T  Unknown  N/A    N/A    No         " }" L3 G  T9 n$ \$ s$ h9 Z* l
gm268-5   /dev/sdc      hdd   ZR5BSKHS         16.0T  Unknown  N/A    N/A    No         
$ r& I1 O: x& l6 h. E) p4 ~gm268-5   /dev/sdd      hdd   ZR5C3JGK         16.0T  Unknown  N/A    N/A    No         " M8 E! }' P) p" x' V& i) B
gm268-5   /dev/sde      hdd   ZR70S1S0         16.0T  Unknown  N/A    N/A    No         , k, @: m* S) |, l/ U- K- `4 Q
gm268-5   /dev/sdf      hdd   ZR70H12V         16.0T  Unknown  N/A    N/A    No         5 T+ s8 P; J$ D8 ]+ J+ p9 @. @8 w2 q
gm268-5   /dev/sdg      hdd   ZR70S3AV         16.0T  Unknown  N/A    N/A    No         4 a1 c+ z8 c9 ^# b8 \
[root@tp266-1 ~]# ceph orch device ls  |grep tp266-1
: s1 w) e" G/ I3 O& Y. {+ e; x[root@tp266-1 ~]# ceph orch host ls' l  L9 ?7 c0 `
HOST     ADDR     LABELS       STATUS  6 k3 f" q. [+ v& o! ?
gm268-1  gm268-1  mon mgr mds          : {+ q" k' H" U+ l$ u
gm268-2  gm268-2  mon mgr mds         
1 t- F  P5 A& R: Y; \gm268-3  gm268-3  mon mgr mds          / p: R2 h* _1 f2 K9 Q
gm268-4  gm268-4                       
8 y9 F/ D7 S9 G6 c& s) M# K1 l0 M7 d2 Wgm268-5  gm268-5                       ' \% Y3 w/ n- O
tp266-1  tp266-1                       
  Z" ^1 h' G& X[root@tp266-1 ~]# ceph orch apply . n' z7 v6 u# @  ]; X
alertmanager   grafana        mds            mon            node-exporter  prometheus     rgw            4 g/ `8 K0 Z8 I% d  w5 x4 ~+ v
crash          iscsi          mgr            nfs            osd            rbd-mirror     ' m- {/ f' l: U5 i2 O% V+ ?
[root@tp266-1 ~]# ceph orch apply % q/ k# T8 T& ?' K4 f" `/ H" I/ b5 W' h
alertmanager   grafana        mds            mon            node-exporter  prometheus     rgw            9 w3 s& g" A2 R6 O/ |+ j( J
crash          iscsi          mgr            nfs            osd            rbd-mirror     0 ^" w( t2 d) N! P0 I
[root@tp266-1 ~]# ceph orch apply 4 q* a7 t7 F4 L- b7 w3 T
alertmanager   grafana        mds            mon            node-exporter  prometheus     rgw            ' O8 Q% k( N- L
crash          iscsi          mgr            nfs            osd            rbd-mirror     $ _/ K5 v; d" F* Y7 `
[root@tp266-1 ~]# ceph orch apply node-exporter 3 G$ U5 ~" U7 N% a7 ~# J! _1 y7 A0 `
                                                                        #Update the size or placement for a service or apply a large yaml spec( s4 h1 E6 v. e& t2 R5 c7 ~
[root@tp266-1 ~]# ceph orch apply node-exporter
" u; [' c1 U, {& Z- {- e5 [                                                                        #Update the size or placement for a service or apply a large yaml spec
: R9 C* a) b' ?[root@tp266-1 ~]# ceph orch apply node-exporter 8 G  c. x7 S2 `6 V3 P/ F( ^& Z- @
                                                                        #Update the size or placement for a service or apply a large yaml spec4 u# k5 {1 t' m5 x4 a
[root@tp266-1 ~]# ceph orch apply node-exporter tp266-15 w( i4 l$ x/ o* B
Scheduled node-exporter update...
. d! p2 L7 i& `+ @/ A5 v8 P3 J- s[root@tp266-1 ~]# ceph orch apply tp266-1 tp266-1# n( B* s- T- H$ }0 h! o) H
tp266-1 not valid:  tp266-1 not one of 'true', 'false'6 H7 O. Q* t0 p, _) l: x" y& M  s* [
Invalid command: unused arguments: ['tp266-1']& s; R2 T# s! l
orch apply [mon|mgr|rbd-mirror|crash|alertmanager|grafana|node-exporter|prometheus] [<placement>] [--dry-run] [plain|json|json-pretty|yaml] [--unmanaged] :  Update the size or placement for a service or apply a large yaml spec+ I- _' X( S: F+ W3 b5 Y
Error EINVAL: invalid command3 E( N3 r0 P7 E2 Q# T
[root@tp266-1 ~]# ceph orch apply crash tp266-1: k( \4 f2 r, n% u
Scheduled crash update...8 S* n8 d8 j5 @% E) b% H
[root@tp266-1 ~]# podman ps
+ l8 S3 w/ T6 z  V/ F5 ZCONTAINER ID  IMAGE   COMMAND  CREATED  STATUS  PORTS   NAMES
$ w3 ^) F  ]3 P4 R8 |6 |[root@tp266-1 ~]# podman ps: h1 b. J8 m8 P! j  C& h
CONTAINER ID  IMAGE   COMMAND  CREATED  STATUS  PORTS   NAMES
& k. C! H% }/ I[root@tp266-1 ~]# ceph orch host ls4 r5 k" Z9 t: R3 ~6 q# C
HOST     ADDR     LABELS       STATUS  
% ^$ V& K5 u5 d; t( F5 t+ V& ggm268-1  gm268-1  mon mgr mds          ; p7 Z8 l( O, T) c* i9 F: Q
gm268-2  gm268-2  mon mgr mds            Z4 x% ?( ]& W4 e( M* t
gm268-3  gm268-3  mon mgr mds          8 c* E7 `* W3 p1 y
gm268-4  gm268-4                       
% W/ z5 J( v9 W) f3 S' Ogm268-5  gm268-5                       
2 H' Y! s, B. g/ itp266-1  tp266-1                       ( x' a) `& x; p5 z, X6 P
[root@tp266-1 ~]# podman ps, o2 W% n- `: W4 P6 Y
Socket error Event: 32 Error: 10053.1 r% i2 N" d' B& b, s, l' L
Connection closing...Socket close.
9 S% @7 f& V- M/ i* a2 U
6 I2 N! Z" }3 L! U! OConnection closed by foreign host.
+ g: q( ~& F" W+ M' j. w; v. B$ D* v
0 R; }0 U8 d9 r" e5 |) MDisconnected from remote host(gm268-5 192.168.54.59) at 17:12:41.
' e- ~7 n: H$ I- r/ r
6 n* y! V6 S; {% U( U. ZType `help' to learn how to use Xshell prompt., i9 i, j  j' ~; F- {* q7 Y. Q
[C:\~]$
2 D+ s+ W7 T0 r2 d' h( z
) A5 E: P) f( v6 j5 e* hConnecting to 192.168.54.59:22685...
/ ^4 k; `; f# Z: M: N! X9 ?Connection established.
' C" G( l  y( G1 X3 A( JTo escape to local shell, press 'Ctrl+Alt+]'.
/ E- |" J8 g6 @8 u. o4 h  b+ v
7 b% k8 u2 g; B% _Activate the web console with: systemctl enable --now cockpit.socket
: h$ M" q& V; j* @. h
5 G$ C+ f+ l9 s$ |& u5 @Last login: Thu Jan 12 17:11:13 2023 from 192.168.42.71
6 p* A( q7 w- e[root@gm268-5 ~]# ssh tp266-1
, `6 N( _3 ?, p, i) M/ cActivate the web console with: systemctl enable --now cockpit.socket
0 [6 H2 i" |% k2 e# L
4 a% Z% H% P& t5 m1 |. H+ W) E/ zLast login: Thu Jan 12 17:04:20 2023 from 10.12.5.2/ q5 o4 N5 |  g2 P+ p" O+ {* A) g
[root@tp266-1 ~]# podman ps, {$ [; p' g4 s% m3 v" X: T9 e0 Q8 c2 c
CONTAINER ID  IMAGE   COMMAND  CREATED  STATUS  PORTS   NAMES9 ^2 ~" B( L) b7 O( l& ?8 F
[root@tp266-1 ~]#
/ Y, p0 F3 A1 j) x' Y! Q, F: V[root@tp266-1 ~]#
2 r1 X; w2 G! C[root@tp266-1 ~]# : p. U1 J: `0 y$ n$ J# B1 C
[root@tp266-1 ~]#
: T5 T* X7 v) x3 t3 v[root@tp266-1 ~]# podman ps3 s. N1 \7 {2 r2 T8 J
CONTAINER ID  IMAGE   COMMAND  CREATED  STATUS  PORTS   NAMES
( n& o/ y# Q* n0 T. y1 \' U7 `[root@tp266-1 ~]# ceph orch device ls . c" z1 R: L! Q5 o
Hostname  Path          Type  Serial           Size   Health   Ident  Fault  Available  4 K5 Y0 {; G9 O# [3 R
gm268-1   /dev/sdb      hdd   ZR57NZTL         16.0T  Unknown  N/A    N/A    No         
" ^; l, I. \- dgm268-1   /dev/sdc      hdd   ZR5C2ZJH         16.0T  Unknown  N/A    N/A    No         + W. Q( }# E# X1 G) K
gm268-1   /dev/sdd      hdd   ZR60WPTL         16.0T  Unknown  N/A    N/A    No         + |5 m9 F$ e1 l) `+ A+ R% P8 M
gm268-1   /dev/sde      hdd   ZR70RHVC         16.0T  Unknown  N/A    N/A    No         % U$ I; k% f2 r6 p0 F" [
gm268-1   /dev/sdf      hdd   ZR5BZP22         16.0T  Unknown  N/A    N/A    No         
  G) ~$ I( n* I( s* r/ \gm268-1   /dev/sdg      hdd   ZR70S24Q         16.0T  Unknown  N/A    N/A    No         ! S! N' {1 e9 \. v# B0 V3 g
gm268-1   /dev/sdh      hdd   ZR70SC6Z         16.0T  Unknown  N/A    N/A    No         , B  u+ b1 e1 K7 t4 z# I
gm268-2   /dev/sdb      hdd   ZR60VY28         16.0T  Unknown  N/A    N/A    No         4 Q8 B. ~" h7 O+ }4 M
gm268-2   /dev/sdc      hdd   ZR60VMD7         16.0T  Unknown  N/A    N/A    No         & Y: ^7 r+ ]# z. w
gm268-2   /dev/sdd      hdd   ZR60WP1Q         16.0T  Unknown  N/A    N/A    No         $ E/ a  g+ w% b
gm268-2   /dev/sde      hdd   ZR5BV70V         16.0T  Unknown  N/A    N/A    No         
2 Q3 j) V* P% lgm268-2   /dev/sdf      hdd   ZR70RD1H         16.0T  Unknown  N/A    N/A    No         7 v" Z8 U/ g* ]0 D  i9 T" i
gm268-2   /dev/sdg      hdd   ZR56SX4N         16.0T  Unknown  N/A    N/A    No         
7 c' g0 }6 U6 k1 k) M- j$ E1 ^gm268-2   /dev/sdh      hdd   ZR60WHVQ         16.0T  Unknown  N/A    N/A    No         
0 h; c1 n& ~# x; h4 Z+ c  Hgm268-3   /dev/sdb      hdd   ZR70S1H2         16.0T  Unknown  N/A    N/A    No         
3 r! w8 y- h0 ]% P' X& lgm268-3   /dev/sdc      hdd   ZR5C05T9         16.0T  Unknown  N/A    N/A    No         , @! B1 I0 Y- N, F# @, \
gm268-3   /dev/sdd      hdd   ZR60W0VD         16.0T  Unknown  N/A    N/A    No         4 {3 ?! G+ B* O% f: T9 b' S" I; Z
gm268-3   /dev/sde      hdd   ZR70S8ZB         16.0T  Unknown  N/A    N/A    No         
* c% X% g1 M& \2 d' }( W' r$ `gm268-3   /dev/sdf      hdd   ZR5BQ7DG         16.0T  Unknown  N/A    N/A    No         
" U9 _, p$ i! {6 Fgm268-3   /dev/sdg      hdd   ZR60WAM3         16.0T  Unknown  N/A    N/A    No         : k" x4 m4 I+ k" A
gm268-3   /dev/sdh      hdd   ZR5BVZ1L         16.0T  Unknown  N/A    N/A    No         
* d+ l4 ?( M) \  j  o4 Q$ vgm268-4   /dev/nvme0n1  ssd   S4EWNF0MB07783D  1000G  Unknown  N/A    N/A    No         
% A; `; t" P8 r% y5 egm268-4   /dev/sdb      hdd   ZR5BQAQ8         16.0T  Unknown  N/A    N/A    No         
4 Y9 F9 H2 }4 G6 f: @gm268-4   /dev/sdc      hdd   ZR60WSB1         16.0T  Unknown  N/A    N/A    No         ! V& W# m, |/ G* D0 O3 I2 N8 N: i
gm268-4   /dev/sdd      hdd   ZR60GAFJ         16.0T  Unknown  N/A    N/A    No         
2 w6 c: N: @  {2 B1 I+ fgm268-4   /dev/sde      hdd   ZR70S2MC         16.0T  Unknown  N/A    N/A    No         
8 V, y! e" U1 y/ N. l( Y& B1 K+ Y' Tgm268-4   /dev/sdf      hdd   ZR70RR2Z         16.0T  Unknown  N/A    N/A    No         : ^- l$ o) Q+ O/ k7 p2 ?
gm268-4   /dev/sdg      hdd   ZR70S9BA         16.0T  Unknown  N/A    N/A    No         
, W7 f* i+ h2 I) }& \9 X4 Zgm268-4   /dev/sdh      hdd   ZR5C0BSJ         16.0T  Unknown  N/A    N/A    No         
1 k9 ^- C  y" D  T0 M, ]1 _7 l/ L2 Agm268-5   /dev/sdb      hdd   ZR70SD4K         16.0T  Unknown  N/A    N/A    No         * W+ l. P; ^" U/ [+ A
gm268-5   /dev/sdc      hdd   ZR5BSKHS         16.0T  Unknown  N/A    N/A    No         
7 R3 F- G2 h+ Kgm268-5   /dev/sdd      hdd   ZR5C3JGK         16.0T  Unknown  N/A    N/A    No         
6 S& L  m2 S. o; B3 Ggm268-5   /dev/sde      hdd   ZR70S1S0         16.0T  Unknown  N/A    N/A    No         
) c8 s0 G9 w& U. {gm268-5   /dev/sdf      hdd   ZR70H12V         16.0T  Unknown  N/A    N/A    No         
7 A5 B: b" F, l4 S# h! pgm268-5   /dev/sdg      hdd   ZR70S3AV         16.0T  Unknown  N/A    N/A    No         9 a1 X; R3 x3 t  E6 Z( i
[root@tp266-1 ~]# ceph orch device ls 8 j% P5 U3 M$ y8 f/ H: N
Hostname  Path          Type  Serial           Size   Health   Ident  Fault  Available  
+ o. L  z$ m: Y2 ogm268-1   /dev/sdb      hdd   ZR57NZTL         16.0T  Unknown  N/A    N/A    No         
* u  c; B* i: ?6 \: @gm268-1   /dev/sdc      hdd   ZR5C2ZJH         16.0T  Unknown  N/A    N/A    No         ' J: A, P( m$ M: R. e  [
gm268-1   /dev/sdd      hdd   ZR60WPTL         16.0T  Unknown  N/A    N/A    No         
) p0 n. h7 w$ k6 t9 N( u* P1 Lgm268-1   /dev/sde      hdd   ZR70RHVC         16.0T  Unknown  N/A    N/A    No         # Q% D: x! u$ q
gm268-1   /dev/sdf      hdd   ZR5BZP22         16.0T  Unknown  N/A    N/A    No         
' l7 ^8 b' ^; ~* c. ggm268-1   /dev/sdg      hdd   ZR70S24Q         16.0T  Unknown  N/A    N/A    No         
# X- Z7 D7 J; [6 P  j8 T# Tgm268-1   /dev/sdh      hdd   ZR70SC6Z         16.0T  Unknown  N/A    N/A    No         
* i! s% P- s( I9 v% {gm268-2   /dev/sdb      hdd   ZR60VY28         16.0T  Unknown  N/A    N/A    No         
+ j7 i& W, S: v% X; Z$ ?/ w, wgm268-2   /dev/sdc      hdd   ZR60VMD7         16.0T  Unknown  N/A    N/A    No         , r0 o3 \+ T6 P$ N
gm268-2   /dev/sdd      hdd   ZR60WP1Q         16.0T  Unknown  N/A    N/A    No         
3 U" c$ L1 i8 y9 ~- o9 P; qgm268-2   /dev/sde      hdd   ZR5BV70V         16.0T  Unknown  N/A    N/A    No         ; C* H% b, }, n; z9 m
gm268-2   /dev/sdf      hdd   ZR70RD1H         16.0T  Unknown  N/A    N/A    No         ) Q9 X9 @" f2 Y+ n5 e  `% i
gm268-2   /dev/sdg      hdd   ZR56SX4N         16.0T  Unknown  N/A    N/A    No         , g8 l/ e6 n- d- E' ~% S& b- e* C" a# r
gm268-2   /dev/sdh      hdd   ZR60WHVQ         16.0T  Unknown  N/A    N/A    No         4 W- d  D) \* w) |
gm268-3   /dev/sdb      hdd   ZR70S1H2         16.0T  Unknown  N/A    N/A    No         
3 a4 W5 Q5 @$ v, L: J, qgm268-3   /dev/sdc      hdd   ZR5C05T9         16.0T  Unknown  N/A    N/A    No         
; M6 |* b6 i3 e( P; K$ Bgm268-3   /dev/sdd      hdd   ZR60W0VD         16.0T  Unknown  N/A    N/A    No         
/ R  }+ Y; o& v! g' p9 N* Y/ A( A* @gm268-3   /dev/sde      hdd   ZR70S8ZB         16.0T  Unknown  N/A    N/A    No         $ Q; {  {2 }* v# C" |+ I
gm268-3   /dev/sdf      hdd   ZR5BQ7DG         16.0T  Unknown  N/A    N/A    No         
: L  m( F1 o! O! V" b$ j& Ygm268-3   /dev/sdg      hdd   ZR60WAM3         16.0T  Unknown  N/A    N/A    No         % F& ~9 P  j5 _
gm268-3   /dev/sdh      hdd   ZR5BVZ1L         16.0T  Unknown  N/A    N/A    No         * \( j1 g) m; o8 @# x1 N- D0 J
gm268-4   /dev/nvme0n1  ssd   S4EWNF0MB07783D  1000G  Unknown  N/A    N/A    No         ) y! ]& w/ y, j3 K0 \, p7 K4 d
gm268-4   /dev/sdb      hdd   ZR5BQAQ8         16.0T  Unknown  N/A    N/A    No         
6 W3 B; ~, R, w9 hgm268-4   /dev/sdc      hdd   ZR60WSB1         16.0T  Unknown  N/A    N/A    No         
- p$ n4 z1 [) egm268-4   /dev/sdd      hdd   ZR60GAFJ         16.0T  Unknown  N/A    N/A    No         
/ D1 q! w  [0 Mgm268-4   /dev/sde      hdd   ZR70S2MC         16.0T  Unknown  N/A    N/A    No         . ?# r9 m! q, u7 K7 G  e( G
gm268-4   /dev/sdf      hdd   ZR70RR2Z         16.0T  Unknown  N/A    N/A    No         
. H1 o  v# c2 M- \* v1 ]9 Egm268-4   /dev/sdg      hdd   ZR70S9BA         16.0T  Unknown  N/A    N/A    No         
$ k( K& X% F5 k7 a  c' P) W0 H3 Cgm268-4   /dev/sdh      hdd   ZR5C0BSJ         16.0T  Unknown  N/A    N/A    No         ' v1 A& ]% @* g1 n
gm268-5   /dev/sdb      hdd   ZR70SD4K         16.0T  Unknown  N/A    N/A    No         $ T' J" u, I& `! [% Q
gm268-5   /dev/sdc      hdd   ZR5BSKHS         16.0T  Unknown  N/A    N/A    No         , a; q  ?# [& f8 v: m, S0 {& l
gm268-5   /dev/sdd      hdd   ZR5C3JGK         16.0T  Unknown  N/A    N/A    No         
3 Z" @4 p0 r$ H0 Fgm268-5   /dev/sde      hdd   ZR70S1S0         16.0T  Unknown  N/A    N/A    No         
1 B$ N4 M5 ~( }8 j! J% Vgm268-5   /dev/sdf      hdd   ZR70H12V         16.0T  Unknown  N/A    N/A    No         
- g: A1 P9 z5 D7 _) q& R' N8 sgm268-5   /dev/sdg      hdd   ZR70S3AV         16.0T  Unknown  N/A    N/A    No         
; e7 C  V0 f* e0 n5 h[root@tp266-1 ~]# ceph orch device ls 5 N7 C' A5 H8 \% a0 B8 \: z
Hostname  Path          Type  Serial           Size   Health   Ident  Fault  Available  
/ T, g7 Q9 Y  e1 R; K5 |5 v5 Cgm268-1   /dev/sdb      hdd   ZR57NZTL         16.0T  Unknown  N/A    N/A    No         
) ?, |: b, p6 p. X- R. o2 }gm268-1   /dev/sdc      hdd   ZR5C2ZJH         16.0T  Unknown  N/A    N/A    No         # t3 K0 Z7 G: Z$ d, y# C
gm268-1   /dev/sdd      hdd   ZR60WPTL         16.0T  Unknown  N/A    N/A    No         
! v; O( q8 J0 V. y1 L  _; igm268-1   /dev/sde      hdd   ZR70RHVC         16.0T  Unknown  N/A    N/A    No         - R4 y5 ~# Z9 h
gm268-1   /dev/sdf      hdd   ZR5BZP22         16.0T  Unknown  N/A    N/A    No         " {. l3 U$ h' |  `
gm268-1   /dev/sdg      hdd   ZR70S24Q         16.0T  Unknown  N/A    N/A    No         $ w. Q5 `) \. h6 ^7 r
gm268-1   /dev/sdh      hdd   ZR70SC6Z         16.0T  Unknown  N/A    N/A    No         # D; D3 |9 n; M
gm268-2   /dev/sdb      hdd   ZR60VY28         16.0T  Unknown  N/A    N/A    No         
7 k: X2 e) X9 X1 ogm268-2   /dev/sdc      hdd   ZR60VMD7         16.0T  Unknown  N/A    N/A    No         1 @, L6 E+ r8 ]0 @' Y
gm268-2   /dev/sdd      hdd   ZR60WP1Q         16.0T  Unknown  N/A    N/A    No         7 m. R; |; e8 D: `$ H/ l3 i' Z. P. O
gm268-2   /dev/sde      hdd   ZR5BV70V         16.0T  Unknown  N/A    N/A    No         
( x* o0 R0 o) L2 h; Q" Ngm268-2   /dev/sdf      hdd   ZR70RD1H         16.0T  Unknown  N/A    N/A    No           |2 }0 \( y- J$ D" A2 I0 {
gm268-2   /dev/sdg      hdd   ZR56SX4N         16.0T  Unknown  N/A    N/A    No         , m* E7 E4 {* O: O
gm268-2   /dev/sdh      hdd   ZR60WHVQ         16.0T  Unknown  N/A    N/A    No         " G( `4 W5 {/ p/ Y) N( B
gm268-3   /dev/sdb      hdd   ZR70S1H2         16.0T  Unknown  N/A    N/A    No         6 l! L7 O& ^4 S( u
gm268-3   /dev/sdc      hdd   ZR5C05T9         16.0T  Unknown  N/A    N/A    No         ( o  W8 V+ B' i( F6 e% h9 h" k
gm268-3   /dev/sdd      hdd   ZR60W0VD         16.0T  Unknown  N/A    N/A    No         
9 L  j% s# v; ~- hgm268-3   /dev/sde      hdd   ZR70S8ZB         16.0T  Unknown  N/A    N/A    No         
4 W/ ?$ x9 p  A$ |gm268-3   /dev/sdf      hdd   ZR5BQ7DG         16.0T  Unknown  N/A    N/A    No         2 Q* @, q* q  \
gm268-3   /dev/sdg      hdd   ZR60WAM3         16.0T  Unknown  N/A    N/A    No         
5 {7 W" w+ X: i0 C; d1 `$ E: wgm268-3   /dev/sdh      hdd   ZR5BVZ1L         16.0T  Unknown  N/A    N/A    No         
5 ?/ a! y' Q, u. L% Sgm268-4   /dev/nvme0n1  ssd   S4EWNF0MB07783D  1000G  Unknown  N/A    N/A    No         " `7 Z0 f1 ]! y0 {7 c7 `4 F
gm268-4   /dev/sdb      hdd   ZR5BQAQ8         16.0T  Unknown  N/A    N/A    No         
6 M" }3 i2 P9 r3 u- y; mgm268-4   /dev/sdc      hdd   ZR60WSB1         16.0T  Unknown  N/A    N/A    No         $ B6 K/ {& D# o1 D
gm268-4   /dev/sdd      hdd   ZR60GAFJ         16.0T  Unknown  N/A    N/A    No         
- l7 Z+ A. I: M* \; Tgm268-4   /dev/sde      hdd   ZR70S2MC         16.0T  Unknown  N/A    N/A    No         " W, w0 V" ~  n% x$ h0 q
gm268-4   /dev/sdf      hdd   ZR70RR2Z         16.0T  Unknown  N/A    N/A    No           V) k8 m, v! T8 o6 w- h  H9 k
gm268-4   /dev/sdg      hdd   ZR70S9BA         16.0T  Unknown  N/A    N/A    No         
0 N% z4 h% I  ~gm268-4   /dev/sdh      hdd   ZR5C0BSJ         16.0T  Unknown  N/A    N/A    No         / w! Q/ D3 Z& Y( o5 Q
gm268-5   /dev/sdb      hdd   ZR70SD4K         16.0T  Unknown  N/A    N/A    No         " q/ H6 B5 v* w, M# Y/ N9 |
gm268-5   /dev/sdc      hdd   ZR5BSKHS         16.0T  Unknown  N/A    N/A    No         " d4 b/ s: d4 R: U
gm268-5   /dev/sdd      hdd   ZR5C3JGK         16.0T  Unknown  N/A    N/A    No         
# r7 r+ O" m4 z6 ?! }gm268-5   /dev/sde      hdd   ZR70S1S0         16.0T  Unknown  N/A    N/A    No         9 E2 p1 |6 K1 f& y+ p7 ~
gm268-5   /dev/sdf      hdd   ZR70H12V         16.0T  Unknown  N/A    N/A    No         / e# a0 W. P! \
gm268-5   /dev/sdg      hdd   ZR70S3AV         16.0T  Unknown  N/A    N/A    No         . W- T, C! g/ U( H2 U0 ^4 p
[root@tp266-1 ~]# ceph orch host ls  0 X! v1 W! f3 \; k; y; {& i# h0 k
HOST     ADDR     LABELS       STATUS  ! G2 ?! I) Q- x$ k
gm268-1  gm268-1  mon mgr mds         
3 r$ M& Q* k) agm268-2  gm268-2  mon mgr mds          8 {+ m1 I% ~/ c% x- V
gm268-3  gm268-3  mon mgr mds          , w$ \& W, K4 B. ^- g" g4 V
gm268-4  gm268-4                       
( q( w7 e7 r4 _1 s+ X1 Igm268-5  gm268-5                       8 [( B4 d! O- I! F: s
tp266-1  tp266-1                       * c# B8 o+ T! V+ p5 c) Z+ h
[root@tp266-1 ~]# cephadm shell  l5 e6 J2 z4 x' b, c7 b+ @
Using recent ceph image quay.io/ceph/ceph@sha256:de7016bf6da2dcbb73796f66ef2776419b2c5a3ee1378835e8791a14c2c3e5b18 Y1 r: j$ W- H9 c) a6 H/ Z7 e& {
[ceph: root@tp266-1 /]# cephadm 0 E, @. s' a1 J
No command specified; pass -h or --help for usage4 S: s7 f: v0 N0 E6 ^. C+ L
[ceph: root@tp266-1 /]# exit
# ?3 Q9 i! S# F/ zexit
! C1 F- X( [, [- H( N) X. V[root@tp266-1 ~]# ceph orch host ls2 ?! E6 V$ ^7 ^, V0 a
HOST     ADDR     LABELS       STATUS  4 ?! v4 Q2 U' F, ]4 f6 H. o2 f0 x% u
gm268-1  gm268-1  mon mgr mds            I0 X+ F) w8 {3 F/ b' ?
gm268-2  gm268-2  mon mgr mds         
2 w" t* w3 x) F* x% Kgm268-3  gm268-3  mon mgr mds          6 C. G% N& @5 F% t
gm268-4  gm268-4                       7 l% ?' m8 E4 z# j; X5 Q; L  i( c
gm268-5  gm268-5                       / r) d6 _+ C: ]+ M, x
tp266-1  tp266-1                       
( e+ e' v! D3 V, ?7 y3 r! j# I[root@tp266-1 ~]# podman ps/ p& S* y) U4 K8 I' m. J  I  i
CONTAINER ID  IMAGE   COMMAND  CREATED  STATUS  PORTS   NAMES0 L4 R0 s; b) ?! q4 \/ m7 w
[root@tp266-1 ~]# exit
& z- m8 @' g8 c3 g- j' O) o9 `logout
7 K  m3 T8 z0 r6 i  }% I5 i1 zConnection to tp266-1 closed.
6 X7 H0 _0 m0 ?! t[root@gm268-5 ~]# podman
+ U; y5 f2 v0 F: N+ n/ p( e8 A2 Pattach       cp           export       image        inspect      logs         play         push         save         system       unshare      
0 L% `1 f: S: u$ |4 Lauto-update  create       generate     images       kill         manifest     pod          restart      search       tag          untag        4 g1 j# }" ~3 K$ t7 d4 p6 b
build        diff         healthcheck  import       load         mount        port         rm           start        top          version      : h1 i- R$ ^' J
commit       events       help         info         login        network      ps           rmi          stats        unmount      volume      
4 U1 T) ~8 V+ z: J# i2 [$ H% J/ pcontainer    exec         history      init         logout       pause        pull         run          stop         unpause      wait         3 K- i3 ^0 Y3 Z' r$ l  W) d
[root@gm268-5 ~]# podman ps 3 u$ B5 i3 Q% T) j, Y
CONTAINER ID  IMAGE                                     COMMAND               CREATED      STATUS          PORTS   NAMES: ?) X# W1 K! _  E# d
79ab1651e550  quay.io/ceph/ceph:v15                     inventory --forma...  2 hours ago  Up 2 hours ago          strange_kirch! B) w+ V7 Y* ^& K1 [9 y
a48e0b56a516  quay.io/ceph/ceph:v15                     -n osd.27 -f --se...  3 days ago   Up 3 days ago           ceph-ce68aab8-8f46-11ed-88c0-ac1f6b3a30b9-osd.27
0 k9 q" U9 K" n3 [. Ic16fff33a250  quay.io/ceph/ceph:v15                     -n osd.26 -f --se...  3 days ago   Up 3 days ago           ceph-ce68aab8-8f46-11ed-88c0-ac1f6b3a30b9-osd.26( p/ ]5 x* `! Z$ t7 j. F; N& N
6761927d89c6  quay.io/ceph/ceph:v15                     -n osd.25 -f --se...  3 days ago   Up 3 days ago           ceph-ce68aab8-8f46-11ed-88c0-ac1f6b3a30b9-osd.256 g0 ^; g+ P( o( H
3158677090f6  quay.io/ceph/ceph:v15                     -n osd.4 -f --set...  3 days ago   Up 3 days ago           ceph-ce68aab8-8f46-11ed-88c0-ac1f6b3a30b9-osd.4
. N+ P- e# H1 \% l7 u1a58b23cb4b2  quay.io/ceph/ceph:v15                     -n osd.29 -f --se...  3 days ago   Up 3 days ago           ceph-ce68aab8-8f46-11ed-88c0-ac1f6b3a30b9-osd.297 z; X6 A$ L) L: a" s# O, S
e800611062b1  quay.io/ceph/ceph:v15                     -n osd.28 -f --se...  3 days ago   Up 3 days ago           ceph-ce68aab8-8f46-11ed-88c0-ac1f6b3a30b9-osd.28" g8 f" r8 u6 S1 q7 Z# y
5c5454782321  quay.io/prometheus/node-exporter:v0.18.1  --no-collector.ti...  3 days ago   Up 3 days ago           ceph-ce68aab8-8f46-11ed-88c0-ac1f6b3a30b9-node-exporter.gm268-57 `* N' f9 [  J. t! R0 q
06f85b89a143  quay.io/ceph/ceph:v15                     -n client.crash.g...  3 days ago   Up 3 days ago           ceph-ce68aab8-8f46-11ed-88c0-ac1f6b3a30b9-crash.gm268-5/ k0 c, m, O; G" C
[root@gm268-5 ~]# df -Th4 A% _6 Y0 o6 P) W. I
 楼主| 发表于 2023-1-12 19:53:22 | 显示全部楼层
[root@tp266-1 ~]# ceph orch daemon add node-exporter
" R& F8 }# x/ A, K% U) F                #Add daemon(s)  
/ K, e2 v, `- X# z, M9 J9 V[root@tp266-1 ~]# ceph orch daemon add node-exporter
5 H3 P. Q9 u9 ~: R: Q1 e) Q                #Add daemon(s)  
2 k- H7 F4 i4 L% C[root@tp266-1 ~]# ceph orch daemon add node-exporter tp266-1( V) Y0 B9 |% K+ H5 R
Deployed node-exporter.tp266-1 on host 'tp266-1'
8 Z; [! v1 b" }/ Z6 X5 ?9 l: u4 h[root@tp266-1 ~]# ceph orch daemon add crash tp266-1
8 d9 ^8 n% }8 V& f* M9 c7 _4 c- iDeployed crash.tp266-1 on host 'tp266-1'
* d. F0 X3 S5 D[root@tp266-1 ~]#
) f* V3 E" y/ E3 q# pSocket error Event: 32 Error: 10053.: ]- Y& G7 N/ l. F: B, K
Connection closing...Socket close.
, V# [! {% R  n
. [4 C# P, C5 f, ZConnection closed by foreign host.
9 V- y( k. J4 X8 Y/ d1 j8 e. M, o! V, o+ A# c
Disconnected from remote host(gm268-5 192.168.54.59) at 19:44:13.
' }* r5 u) w, n$ u$ A7 N0 P$ I: x" }) j# f
Type `help' to learn how to use Xshell prompt.; S. f' l+ C$ B/ Z; p
[C:\~]$ $ d+ E& C7 q6 E/ L/ a" q8 Q' o" A; Z- x
- K# Z+ R: Z0 v5 w0 l6 \
Connecting to 192.168.54.59:22685...
! t. A0 G5 Q" c  IConnection established.* c2 ]8 o: b1 e" C' p. q0 m
To escape to local shell, press 'Ctrl+Alt+]'.. |. a, u" h# G. U9 g- e5 E
0 o' [1 f8 X& y1 \8 \) v
Activate the web console with: systemctl enable --now cockpit.socket3 |) l$ A  l) g" @  _5 D

2 x. ~; G3 W2 I% v. }Last login: Thu Jan 12 19:40:56 2023 from 192.168.42.71
8 m  g3 Q& L3 X0 C, g8 ^[root@gm268-5 ~]# ssh tp266-1 * d- j/ e; J! x6 `9 d
Activate the web console with: systemctl enable --now cockpit.socket
2 I7 S6 o# H- B- h# j) P, I9 A$ [  e* y5 \$ N+ g5 i- C/ N
Last login: Thu Jan 12 19:40:59 2023 from 10.12.5.21 R; z3 C! E" f  p5 Y
[root@tp266-1 ~]# ceph -s8 ]0 D1 U  f) q
  cluster:- `+ |7 ^( C# W9 O; k
    id:     ce68aab8-8f46-11ed-88c0-ac1f6b3a30b9
) G- @! c+ B( R4 M" k    health: HEALTH_OK" u# h. r( w( F# Z  p* j

; M9 f  T( C$ H  T* C  services:
/ T& h+ W% j0 v3 l) O+ g& t    mon: 3 daemons, quorum gm268-1,gm268-2,gm268-3 (age 4h)! I1 B/ Q- l& f4 l/ A7 q
    mgr: gm268-2.zttohs(active, since 4h), standbys: gm268-3.sjagqo, gm268-1.jgdvxs
7 M7 F( f; r( F  H, m    mds: cephfs:1 {0=cephfs.gm268-2.xdsdoz=up:active} 2 up:standby9 l0 ?0 R' n9 o; K; ]% K
    osd: 34 osds: 34 up (since 4h), 34 in (since 2d)
2 G$ Z2 S! @( `% ~% G  ^4 b
! S7 Y& [! e0 h& k  data:# f8 z4 t4 U) m' s  w5 ]: r
    pools:   3 pools, 9217 pgs
9 r( w, ~' G  v* A    objects: 6.46M objects, 4.4 TiB9 W* O! w  W/ T1 \) D
    usage:   9.4 TiB used, 485 TiB / 495 TiB avail4 a& R$ B1 k$ i7 O
    pgs:     9217 active+clean, h3 T: f: E5 X) z. t5 D7 C
5 E( E3 L! U& u
[root@tp266-1 ~]# podman ps
2 \! V8 Z/ e. g( F/ v% T% ~- }CONTAINER ID  IMAGE                                     COMMAND               CREATED        STATUS            PORTS   NAMES4 q5 G0 D  B/ \8 m: h. L
ce86dd30d942  quay.io/ceph/ceph:v15                     -n client.crash.t...  4 minutes ago  Up 4 minutes ago          ceph-ce68aab8-8f46-11ed-88c0-ac1f6b3a30b9-crash.tp266-1- i8 I% ?6 R- R* C" C" v" ]/ C5 \
e34141ee0f0f  quay.io/prometheus/node-exporter:v0.18.1  --no-collector.ti...  6 minutes ago  Up 6 minutes ago          ceph-ce68aab8-8f46-11ed-88c0-ac1f6b3a30b9-node-exporter.tp266-1
% p8 T3 z% a6 h) D[root@tp266-1 ~]# ceph orch device ls
/ V) V6 w6 a+ N/ ^# y6 w# l! [1 iHostname  Path          Type  Serial           Size   Health   Ident  Fault  Available  
* H3 B: _# y2 G- Xgm268-1   /dev/sdb      hdd   ZR57NZTL         16.0T  Unknown  N/A    N/A    No         / Q2 i4 P- f6 f/ @. ~( M! H
gm268-1   /dev/sdc      hdd   ZR5C2ZJH         16.0T  Unknown  N/A    N/A    No         
" @7 Q2 o0 p# x4 H3 B# t. Fgm268-1   /dev/sdd      hdd   ZR60WPTL         16.0T  Unknown  N/A    N/A    No         
% R2 z3 l) b* W  jgm268-1   /dev/sde      hdd   ZR70RHVC         16.0T  Unknown  N/A    N/A    No         
1 n4 z/ [6 a( g5 X3 M: Cgm268-1   /dev/sdf      hdd   ZR5BZP22         16.0T  Unknown  N/A    N/A    No         5 i! @+ G% {/ n
gm268-1   /dev/sdg      hdd   ZR70S24Q         16.0T  Unknown  N/A    N/A    No         
) ~: @' a, D* B/ {  T% s; }; ~gm268-1   /dev/sdh      hdd   ZR70SC6Z         16.0T  Unknown  N/A    N/A    No         ! Q" h+ T0 W6 I+ J
gm268-2   /dev/sdb      hdd   ZR60VY28         16.0T  Unknown  N/A    N/A    No         , V& N! @, {4 ]- S3 K, [
gm268-2   /dev/sdc      hdd   ZR60VMD7         16.0T  Unknown  N/A    N/A    No         
) w% {0 }. B3 @$ b4 igm268-2   /dev/sdd      hdd   ZR60WP1Q         16.0T  Unknown  N/A    N/A    No         9 ?; H: }9 y# t% d
gm268-2   /dev/sde      hdd   ZR5BV70V         16.0T  Unknown  N/A    N/A    No         , C! x" t3 I7 l$ f8 y$ U
gm268-2   /dev/sdf      hdd   ZR70RD1H         16.0T  Unknown  N/A    N/A    No         : Y( K- s. L% q4 V% Y' w1 l
gm268-2   /dev/sdg      hdd   ZR56SX4N         16.0T  Unknown  N/A    N/A    No         
% y- ^# D9 X3 P0 A, f2 \gm268-2   /dev/sdh      hdd   ZR60WHVQ         16.0T  Unknown  N/A    N/A    No         
# Q/ k) |7 b/ u) E  X7 Ngm268-3   /dev/sdb      hdd   ZR70S1H2         16.0T  Unknown  N/A    N/A    No         
, f7 r" D& u' n9 V/ t+ s8 I  c, M1 Xgm268-3   /dev/sdc      hdd   ZR5C05T9         16.0T  Unknown  N/A    N/A    No         2 C3 t) a9 o- H( Y% S( m$ a
gm268-3   /dev/sdd      hdd   ZR60W0VD         16.0T  Unknown  N/A    N/A    No         4 k0 X" w" l3 D
gm268-3   /dev/sde      hdd   ZR70S8ZB         16.0T  Unknown  N/A    N/A    No         
. Y6 [( T  m# b/ M: k2 V) xgm268-3   /dev/sdf      hdd   ZR5BQ7DG         16.0T  Unknown  N/A    N/A    No         2 l0 I3 u/ @" g& v- }- ]9 n
gm268-3   /dev/sdg      hdd   ZR60WAM3         16.0T  Unknown  N/A    N/A    No         $ l; |& y. J1 m  }) M9 i( r! t
gm268-3   /dev/sdh      hdd   ZR5BVZ1L         16.0T  Unknown  N/A    N/A    No         
0 F' V3 }5 `) ~  k5 Q9 ]2 igm268-4   /dev/nvme0n1  ssd   S4EWNF0MB07783D  1000G  Unknown  N/A    N/A    No         # W5 A0 I! l5 x4 N6 H' P% f
gm268-4   /dev/sdb      hdd   ZR5BQAQ8         16.0T  Unknown  N/A    N/A    No         
! M+ i; L7 o5 Egm268-4   /dev/sdc      hdd   ZR60WSB1         16.0T  Unknown  N/A    N/A    No         2 ^1 R$ U0 l4 [5 @) P! k
gm268-4   /dev/sdd      hdd   ZR60GAFJ         16.0T  Unknown  N/A    N/A    No         
2 j! u7 W: }5 X- h1 V8 |gm268-4   /dev/sde      hdd   ZR70S2MC         16.0T  Unknown  N/A    N/A    No         : k5 s; C5 T  |% N
gm268-4   /dev/sdf      hdd   ZR70RR2Z         16.0T  Unknown  N/A    N/A    No           Z* j" ]: X2 V" g# W
gm268-4   /dev/sdg      hdd   ZR70S9BA         16.0T  Unknown  N/A    N/A    No         " w; D1 P  Y/ s; W9 ]# x7 ]3 u
gm268-4   /dev/sdh      hdd   ZR5C0BSJ         16.0T  Unknown  N/A    N/A    No         
8 s! A% W; l2 N6 Q5 s1 q1 x. S: }6 ~gm268-5   /dev/sdb      hdd   ZR70SD4K         16.0T  Unknown  N/A    N/A    No         5 u* x. G8 D" |
gm268-5   /dev/sdc      hdd   ZR5BSKHS         16.0T  Unknown  N/A    N/A    No         # o: F  C6 d' X; j: _) P
gm268-5   /dev/sdd      hdd   ZR5C3JGK         16.0T  Unknown  N/A    N/A    No         " o5 D4 A; o0 H/ y% ^
gm268-5   /dev/sde      hdd   ZR70S1S0         16.0T  Unknown  N/A    N/A    No         
* Z2 w* _4 _2 ]' f% [gm268-5   /dev/sdf      hdd   ZR70H12V         16.0T  Unknown  N/A    N/A    No         
6 N4 K9 \7 m" _2 @" Cgm268-5   /dev/sdg      hdd   ZR70S3AV         16.0T  Unknown  N/A    N/A    No         
0 C6 b6 B! E* N0 Q[root@tp266-1 ~]# ceph7 Q* m3 L5 Z& K' a/ I/ ^# ~
ceph                    ceph-clsinfo            ceph-dencoder           cephfs-table-tool       ceph-mon                ceph-osdomap-tool       ceph-syn
2 q6 E  v; [. j  Hcephadm                 ceph-conf               ceph-erasure-code-tool  ceph-kvstore-tool       ceph-monstore-tool      ceph-post-file          ceph-volume
( {2 o; D3 G& y: e4 s4 tceph-authtool           ceph-crash              cephfs-data-scan        ceph-mds                ceph-objectstore-tool   ceph-rbdnamer           ceph-volume-systemd
. ~/ ]4 A- H9 s: {7 p% `8 Xceph-bluestore-tool     ceph-create-keys        cephfs-journal-tool     ceph-mgr                ceph-osd                ceph-run                9 y, C- r" f8 S7 M+ P
[root@tp266-1 ~]# ceph- M+ d$ x1 [- z+ S  A8 b! W
ceph                    ceph-clsinfo            ceph-dencoder           cephfs-table-tool       ceph-mon                ceph-osdomap-tool       ceph-syn2 F3 q6 N% b! p8 T
cephadm                 ceph-conf               ceph-erasure-code-tool  ceph-kvstore-tool       ceph-monstore-tool      ceph-post-file          ceph-volume6 C1 u: ^$ ^! u5 G9 p4 ~
ceph-authtool           ceph-crash              cephfs-data-scan        ceph-mds                ceph-objectstore-tool   ceph-rbdnamer           ceph-volume-systemd9 M+ C( @0 O5 U2 K8 Y
ceph-bluestore-tool     ceph-create-keys        cephfs-journal-tool     ceph-mgr                ceph-osd                ceph-run                " ?* i+ R  U# l+ E4 s
[root@tp266-1 ~]# ceph orch host ls " h/ @) v, N, P$ K
HOST     ADDR     LABELS       STATUS  ! N. Y, S0 {, d
gm268-1  gm268-1  mon mgr mds          , K: i) R! _  |9 O4 k
gm268-2  gm268-2  mon mgr mds         
& t7 V" O8 n0 H; E7 Dgm268-3  gm268-3  mon mgr mds         
0 r6 H* a) x3 m6 n" egm268-4  gm268-4                       
7 `- V5 c' e) t4 n: F9 R6 Vgm268-5  gm268-5                       7 U0 d' F5 ]6 L) @5 e
tp266-1  tp266-1                       
' N. i9 w# X9 Z  O[root@tp266-1 ~]# ceph orch daemon
$ z8 y* y2 W! W% j! L5 |4 ~* madd       reconfig  redeploy  restart   rm        start     stop      
- |0 M2 Y& a; p# W2 j/ S9 p- X[root@tp266-1 ~]# ceph orch daemon add # t- W7 a" I+ f* u/ n
alertmanager   grafana        mds            mon            node-exporter  prometheus     rgw            
' N0 Y! I2 V8 ucrash          iscsi          mgr            nfs            osd            rbd-mirror     * \7 a9 D! ?) S, I  a
[root@tp266-1 ~]# ceph orch daemon add " H# Y9 a# y2 V
alertmanager   grafana        mds            mon            node-exporter  prometheus     rgw            
' H  N& [4 z; |crash          iscsi          mgr            nfs            osd            rbd-mirror     
9 C( T0 g1 u$ V8 X: }+ \[root@tp266-1 ~]# ceph orch daemon add 3 X1 j! f4 y4 u
alertmanager   grafana        mds            mon            node-exporter  prometheus     rgw            
6 `( w# E2 K' @  Vcrash          iscsi          mgr            nfs            osd            rbd-mirror     
: J+ ?" T, p7 x" m9 ?[root@tp266-1 ~]# ceph orch daemon add osd tp266-1
2 Q% D$ V  g+ }4 t8 pError EINVAL: Invalid host:device spec: 'tp266-1'5 F4 A4 h4 U( k% |& M
Usage:$ ?9 Y! g* h) s  Y$ J$ ~* g
  ceph orch daemon add osd host:device1,device2,...
7 K# C) I( v/ e0 M4 w) V% E7 v! b
6 d8 D; T5 [$ ?[root@tp266-1 ~]# podman ps  
5 N1 g% u, n! W  aCONTAINER ID  IMAGE                                     COMMAND               CREATED        STATUS            PORTS   NAMES
" T1 H7 N' N1 [ce86dd30d942  quay.io/ceph/ceph:v15                     -n client.crash.t...  6 minutes ago  Up 6 minutes ago          ceph-ce68aab8-8f46-11ed-88c0-ac1f6b3a30b9-crash.tp266-16 y# \% `+ O7 S
e34141ee0f0f  quay.io/prometheus/node-exporter:v0.18.1  --no-collector.ti...  7 minutes ago  Up 7 minutes ago          ceph-ce68aab8-8f46-11ed-88c0-ac1f6b3a30b9-node-exporter.tp266-1
  b6 i+ ]6 k4 ~2 r. B( h, I3 ^[root@tp266-1 ~]# ceph orch
2 [0 n" b. g( b7 j+ @9 l1 u4 s% Bapply     daemon    host      osd       ps        redeploy  resume    set       status    upgrade   
9 Q. h+ H; j4 y; n- c) B, w* ucancel    device    ls        pause     reconfig  restart   rm        start     stop      
: }6 y1 P4 a( a; k& _2 |6 K6 W[root@tp266-1 ~]# ceph orch
1 w2 \. a  h" P* f# aapply     daemon    host      osd       ps        redeploy  resume    set       status    upgrade   6 X1 U: W. J# n6 T# |. C
cancel    device    ls        pause     reconfig  restart   rm        start     stop      
9 C/ j1 @* j" y[root@tp266-1 ~]# ceph orch host
6 ~" C' F5 s2 h0 B) R" z3 A  c- Dadd         label       ls          ok-to-stop  rm          set-addr   
" K2 |/ L7 e+ n8 L$ ~3 }0 q[root@tp266-1 ~]# ceph orch host . C, F6 i* H4 |% B# f
add         label       ls          ok-to-stop  rm          set-addr   
: @% n3 k3 k. o/ N' r1 p3 ^7 `[root@tp266-1 ~]# ceph orch host ls    R  E" [. E1 v$ M
HOST     ADDR     LABELS       STATUS  
7 E" k1 s  l: }. P% p1 Cgm268-1  gm268-1  mon mgr mds          ! ?) K/ y) d' E7 r+ p8 A
gm268-2  gm268-2  mon mgr mds          8 d) s& Q7 j( B- E6 Y# j: b
gm268-3  gm268-3  mon mgr mds          . A1 x- D" k0 ]- ]4 p* }& H, ]
gm268-4  gm268-4                       
* Z& ]' f" z9 p7 g$ k! T( qgm268-5  gm268-5                       0 |" `+ |9 H$ |$ |$ x! A
tp266-1  tp266-1                       
; Q4 R8 M7 ~+ {2 o7 H[root@tp266-1 ~]# 4 a8 T5 x! g- g1 `
Socket error Event: 32 Error: 10053.
  L& c( a0 z2 GConnection closing...Socket close.
9 e4 c/ s7 c2 l$ T
: b3 R* ~, E: y/ jConnection closed by foreign host.
# f0 R' J9 u1 m% @1 T. f+ A1 @, D. s  }6 [& @' r! ]4 d) z
Disconnected from remote host(gm268-5 192.168.54.59) at 19:52:24., \+ p8 m+ R0 l  L; b* E# M

) V4 F: G# }! L  R+ M2 pType `help' to learn how to use Xshell prompt." J& C" G6 _+ b- _+ j2 A' M% j8 y
您需要登录后才可以回帖 登录 | 开始注册

本版积分规则

关闭

站长推荐上一条 /4 下一条

如有购买积分卡请联系497906712

QQ|返回首页|Archiver|手机版|小黑屋|易陆发现 点击这里给我发消息

GMT+8, 2023-2-9 14:01 , Processed in 0.051753 second(s), 22 queries .

Powered by LR.LINUX.cloud bbs168x X3.2 Licensed

© 2012-2022 Comsenz Inc.

快速回复 返回顶部 返回列表