Làm chủ esxcli trên VMware ESXi: Cấu hình mạng, phần cứng và cứu hộ VM treo

Virtualization tutorial - IT technology blog
Virtualization tutorial - IT technology blog

Bối cảnh & Tại sao cần esxcli khi quản trị ESXi

Web UI hay vCenter rất tiện cho thao tác hằng ngày. Nhưng khi sự cố ập đến, giao diện đồ họa gần như tê liệt. Card mạng rớt làm web UI mất phản hồi, máy ảo lock file .vmx không tắt được, hay vCenter đứt liên lạc với ESXi host. Lúc đó, SSH thẳng vào host là lựa chọn duy nhất.

Ở nhà, mình dựng homelab Proxmox VE với 12 VM để test nhanh. Nhưng lên công ty, hạ tầng production lại đặt trên cụm 8 node Dell PowerEdge chạy VMware ESXi 7.0, gánh hơn 250 VM nghiệp vụ. Sau nhiều đêm trực chiến lúc 2 giờ sáng, esxcli đã kéo cả team thoát khỏi không ít ca downtime nhớ đời.

Không giống các lệnh Linux rời rạc, VMware thiết kế esxcli theo cấu trúc namespace rất chặt chẽ: esxcli <namespace> <object> <action>. Nắm vững cú pháp này, bạn can thiệp thẳng vào phần cứng, storage hay mạng ảo mà không phụ thuộc vCenter.

Cài đặt & Kích hoạt môi trường làm việc esxcli

Để bảo mật, ESXi mặc định tắt SSH. Muốn dùng terminal, bạn phải bật tính năng này qua Direct Console User Interface (DCUI) hoặc web client.

Bật SSH trực tiếp trên màn hình DCUI

Khi web client không vào được nữa, hãy cắm trực tiếp bàn phím/màn hình hoặc mở remote console qua iLO (HP) / iDRAC (Dell):

  1. Nhấn F2 và nhập mật khẩu root của ESXi.
  2. Di chuyển xuống mục Troubleshooting Options.
  3. Chọn Enable SSH rồi nhấn Enter.

Truy cập và cú pháp tổng quan của esxcli

Đăng nhập thành công với quyền root, bạn có thể gõ ngay:

esxcli --help

Bốn namespace bạn sẽ đụng tới thường xuyên nhất:

  • hardware: soi CPU, RAM, thông tin bo mạch và bus PCI.
  • network: chỉnh vSwitch, portgroup, IP VMkernel và card mạng vật lý.
  • storage: kiểm tra volume VMFS, LUN iSCSI/FC và ổ đĩa.
  • vm: truy vết và xử lý các tiến trình máy ảo bị treo.

Cấu hình chi tiết: Mạng VMkernel, phần cứng và cứu hộ VM

1. Quản lý phần cứng và card mạng vật lý (vmnic)

Đôi khi card 10GbE chỉ nhận link 1Gbps, hoặc switch nhận sai duplex khiến mạng chập chờn. Nhóm lệnh network nic sẽ giúp bạn bắt bệnh:

# Liệt kê tất cả card mạng vật lý (vmnic) và tốc độ link hiện tại
esxcli network nic list

# Xem chi tiết model, driver, firmware của card vmnic0
esxcli network nic get -n vmnic0

# Ép tốc độ 10Gbps Full Duplex khi switch đàm phán sai
esxcli network nic set -n vmnic0 --speed 10000 --duplex full --auto false

Khi cần Service Tag gửi hãng bảo hành hoặc kiểm tra quạt nguồn PSU:

# Lấy Serial number / Service Tag và model server vật lý
esxcli hardware platform get

# Đọc thông số cảm biến nhiệt độ, nguồn điện qua IPMI
esxcli hardware ipmi sensor list

2. Tạo và cấu hình cổng mạng VMkernel (vmk)

Cổng VMkernel gánh toàn bộ lưu lượng quan trọng: dải IP quản trị, vMotion, hoặc đường kết nối iSCSI/NFS. Giả sử ai đó lỡ tay xóa nhầm IP quản trị, hoặc dải mạng cũ bị cô lập, bạn có thể tạo khẩn cấp một portgroup cứu hộ trên vSwitch0:

# Tạo portgroup mới tên Rescue-Mgmt trên vSwitch0
esxcli network vswitch standard portgroup add --portgroup-name="Rescue-Mgmt" --vswitch-name="vSwitch0"

# Gán VLAN 10 vào portgroup vừa tạo
esxcli network vswitch standard portgroup set --portgroup-name="Rescue-Mgmt" --vlan-id=10

# Tạo VMkernel interface vmk1 gắn vào portgroup này
esxcli network ip interface add --interface-name=vmk1 --portgroup-name="Rescue-Mgmt"

# Đặt IP tĩnh 192.168.10.50/24 cho vmk1 để truy cập lại
esxcli network ip interface ipv4 set --interface-name=vmk1 --ipv4=192.168.10.50 --netmask=255.255.255.0 --type=static

3. Cứu hộ máy ảo bị treo cứng (Kill Unresponsive VM)

Tình huống hay gặp nhất: Một VM database cỡ 2TB dính sự cố I/O storage, hệ điều hành bên trong đứng im. Bấm Power Off trên vCenter chỉ nhận lại lỗi timed out sau 15 phút. Thay vì bấm nút restart cả host vật lý làm ảnh hưởng hàng chục VM khác, bạn hãy hạ gục tiến trình của riêng VM đó:

# Bước 1: Liệt kê danh sách VM đang chạy để lấy World ID
esxcli vm process list

# Bước 2: Tìm VM lỗi, ghi nhớ con số World ID (ví dụ: 1245678)
# Thử tắt nhẹ nhàng trước (Soft kill) để OS kịp đóng file nếu còn phản hồi
esxcli vm process kill --type=soft --world-id=1245678

# Bước 3: Sau khoảng 20-30 giây VM vẫn trơ ra, chuyển sang Hard kill
esxcli vm process kill --type=hard --world-id=1245678

# Bước 4: Giải pháp cuối cùng khi tiến trình kẹt sâu ở tầng kernel (Force)
esxcli vm process kill --type=force --world-id=1245678

Tùy chọn force sẽ giải phóng lock trên file .vmx và -flat.vmdk ngay lập tức. Nhờ đó, bạn bật lại máy ảo được luôn mà không phải reboot host vật lý.

Kiểm tra & Monitoring hệ thống từ dòng lệnh

Xử lý xong xuôi, bạn đừng vội đóng terminal. Hãy kiểm tra lại toàn bộ đường truyền.

Kiểm tra bảng định tuyến và kết nối mạng VMkernel

Lệnh ping mặc định sẽ đi theo bảng route chung. Muốn test chính xác từng card VMkernel cho vMotion hay NFS storage, bạn phải dùng vmkping với cờ -I:

# Ping gateway qua cổng vmk1
vmkping -I vmk1 192.168.10.1

# Kiểm tra gói Jumbo Frame (MTU 9000), cấm phân mảnh (-d) tới SAN Storage (8972 byte payload + 28 byte header)
vmkping -I vmk1 -d -s 8972 192.168.10.100

# Xem bảng định tuyến hiện tại của ESXi host
esxcli network ip route ipv4 list

Giám sát I/O và hiệu năng thời gian thực

Khi nghi ngờ máy ảo nào đó đang bóp nghẹt I/O hoặc chiếm dụng CPU bất thường, esxtop là màn hình theo dõi trực quan nhất:

# Mở bảng giám sát hiệu năng thời gian thực
esxtop

Ở giao diện esxtop, nhấn d để soi độ trễ đĩa cứng, n để xem lưu lượng mạng, hoặc m để kiểm tra RAM. Hãy chú ý hai chỉ số DAVG/cmd (độ trễ tầng thiết bị) và KAVG/cmd (độ trễ kernel ESXi). Nếu một trong hai con số này vượt ngưỡng 20ms liên tục, hệ thống lưu trữ của bạn chắc chắn đang tắc nghẽn.

Nắm chắc các cụm lệnh esxcli cơ bản này, bạn sẽ làm chủ host ESXi kể cả khi vCenter sập hoàn toàn. Đôi khi chỉ mất 2-3 phút gõ lệnh trên SSH là đủ kéo hệ thống sống lại, thay vì phải cắn răng reboot cả cụm server giữa đêm.

Share: