5 пунктов анкеты до начала траблшутинга Vmware и отправки вопросов
1. Обязательно заведите запрос в техподдержке Vmware.
Почему это обязательно надо сделать: Потому что они попросят собрать дамп, это сам о по себе часто помогает. Если же вы не можете завести запрос по причине того, что у вас нет лицензий и не куплена техподдержка, по абсолютно, без любых исключений, причинам, включая не зависящие от вас – значит, вашей организации на самом деле не нужно Vmware, а нужно имитировать какую-то деятельность и все пункты ниже не имеют особого смысла, кроме самообразования.

2. Прочитайте статью https://telegra.ph/Kak-zadavat-voprosy-v-vSAN-chate-01-16 и делайте, как в ней написано,
а именно:
Указывайте полное название того, с чем у вас проблемы.
В случае Vmware как минимум нужно указать И версию esxi на хостах и версию vCenter. Информацию можно посмотреть в GUI, в DCUI на хосте, и через SSH – команда для хоста. Указывайте полный билд.
vmware -v
vmware -vl
команда для vCenter
vpxd -v
Статья 1 Determining the build number of VMware ESX/ESXi and VMware vCenter Server (1022196)
https://kb.vmware.com/s/article/1022196
Статья 2 https://davidring.ie/2018/11/03/vmware-esxi-how-to-determine-build-number-via-cli/
Статья 3 - VMware VCSA – How to Determine Build Number
https://davidring.ie/2018/06/05/vmware-vcsa-how-to-determine-build-number/
Таблица в помощь: Build numbers and versions of VMware vCenter Server (2143838)
https://kb.vmware.com/s/article/2143838

3. Указывайте, с какого дистрибутива и какой именно образ вы развернули.
Команда
esxcli software profile get
Статья - Quick Tip - Listing Image Profiles From an ESXi Patch Using ESXCLI, раздел To check for the Image Profile you have installed on your ESXi host
https://williamlam.com/2013/06/quick-tip-listing-image-profiles-from.html

4. Обязательно указывайте сервер, на котором это все работает (HPE / Dell / Lenovo / Supermicro / иное), и обязательно указывайте ID проблемного оборудования (VID, DID & SVID) и версию микрокода.
Как это сделать:
esxcli network nic list
esxcli network nic get -n vmnic. #Command will give you firmware details and driver details
esxcli network nic stats get #Command will you give current statstics of the specified vmnic
vsish -e get /net/pNics/vmnic1/stats #Warning !! Unforgivable Curses !
Статьи:
Finding VID, DID & SVID from PCI devices in ESXi
https://communities.vmware.com/t5/VMware-PowerCLI-Discussions/Finding-VID-DID-SVID-from-PCI-devices-in-ESXi/td-p/2216011
How to retrieve the details of a NIC card on esxi using a command
https://communities.vmware.com/t5/ESXi-Discussions/How-to-retrieve-the-details-of-a-NIC-card-on-esxi-using-a/td-p/2832914
Determining Network/Storage firmware and driver version in ESXi (1027206)
https://kb.vmware.com/s/article/1027206
И обязательно пишите, какую версию драйверов вы используете, и сравнивали ли с тем сочетанием микрокода и драйвера, которые указаны a) на сайте VMware HCL b)таблицах рекомендаций вендора; Необходимое дополнение: в случае использование blade корзин и прочих систем автоматического управления конфигурациями сети и сетевых компонентов – обязательно проверьте фактические настройки конфигурации, профилей, vlan, etc.

5. Указывайте, что и зачем вы делали до возникновения проблемы. И что делали после.
Логи выкладывайте на Pastebin.com. Или указывайте, что вы делали вообще и какого результата хотите достичь. Логи лежат:
Location of ESXI 7.0 log files https://docs.vmware.com/en/VMware-vSphere/7.0/com.vmware.vsphere.monitoring.doc/GUID-832A2618-6B11-4A28-9672-93296DA931D0.html
Location of vCenter Server log files (1021804) https://kb.vmware.com/s/article/1021804
Location of log files for VMware products (1021806) https://kb.vmware.com/s/article/1021806

Еще раз про VMware, vswitch и LAG (Etherchannel, bonding)
Коллеги регулярно читают какие-то смутные переводы, а скорее пересказы концепции «два провода лучше одного» и собирают в Vmware Link aggregation (LAG / (Etherchannel)). Эта статья – попытка в очередной раз разобраться, нужен ли он для связи сервера esxi и физического коммутатора, и если нужен, то зачем.
( Read more... )

vCenter Performance Deep Dive
https://youtu.be/aLtJ_sC0FSU

Весь MS Exchange завязан на сертификаты, в связи с этим критически важно:
- не ставить на сам exchange - crypto pro , випнет и прочая во избежание:
Коллеги, моё вам предупреждение. Даже два.

1. ViPNet Client, будучи установленным на сервер Exchange (по крайней мере, 2019 CU7), вызывает периодические отказы в подключении к веб-сервисам. Выглядит так, как будто фаер то закрывает 443, то открывает. Возможно, это его недоIDS фолсит;

2. Самое главное: при сносе, он удаляет самоподписанные backend сертификаты для Exchange. Минус ECP, минус EMS, минус вообще всё. Было больно, до конца до сих пор не починился (самоподписанный серт новый сделал и назначил, ECP-EWS поднялись, но теперь после назначения внешнего сертификата чанга живёт до рестарта IIS, а далее начинает вести себя так, как будто backend сертов вновь нет; Autodiscover с точки зрения MCA настроен корректно, но на Outlook не отрабатывает и fallback'ится до GuessSmart, находящего IMAP, в общем, радости полные штаны).

Будьте осторожны.

- знать и любить
certutil.exe -verify -urlfetch
и иное https://www.sevecek.com/EnglishPages/Lists/Posts/Post.aspx?ID=13

Из переписки:
я бы допустил ошибку в фёрме, если бы не разные вендора, поверил бы в погрешность абортов и ретраев, если бы это было не 10% от общего количества, ну и самая печаль что счетчики Failed Blocks W/R (
vsish -e /storage/scsifw/devices/naa.XXX/stats
) так же растет несоразмерно допустимой погрешности

Dark Dark Evil Way:

vsish -e get /hardware/ipmiSupport
esxcli hardware ipmi sdr list
VSISH
VMkernel system information shell (known as vsish) is a great tool for troubleshooting network performance issue. vsish runs in the ESXi shell and let you look at in advanced system parameters and performance information of the ESXi host and associated objects like the VMs.
https://vmwareaddicted.blogspot.com/2017/01/network-troublshooting-using-esxcli-and.html

Старая статья одного малоизвестного блоггера
https://www.buldakov.ru/?p=3114
Managed Availability framework вырос из опыта мониторинга облачного решения Exchange Online средствами пакета управления для Exchange 2010 в OpsMgr. Опыт использования пакета управления показал, что он избыточен, из более чем тысячи алертов полезными в Exchange Online оказались только 150. Остальные были в итоге отключены.

Windows PKI Troubleshooting (CAPI2 Diagnostics)
https://social.technet.microsoft.com/wiki/contents/articles/242.windows-pki-troubleshooting-capi2-diagnostics.aspx

Logging Modes
CAPI2 Diagnostics utilizes Event Viewer features, such as use of error level and keywords, for filtering the data in the log. For example, if you want to look at path validation related errors, you can filter by an event level of "Error" (level 2) and the keywords "chain building," "chain validation," and "revocation." Events are marked level 2 when the API returns an error and level 4 if the API returns a success.
https://social.technet.microsoft.com/wiki/contents/articles/242.windows-pki-troubleshooting-capi2-diagnostics.aspx#Logging_Modes

Из переписки:

Котоны, если кто-то использует сеть на базе EVPN+VXLAN+BGP и балансеры с DSR (например в LogInsight ILB), то аккуратней… По умолчанию EVPN-MAC-IP timeout 20 минут. Ну вы поняли
Ну и multi-homing lag в таких сетях также днище, не делайте так
Этот щит попортил моей крови немного, стараюсь предостеречь комрадов
Прокси арп хорошо, но в реализации логинсайта и вышеозначенной архитектуры вендора, чье имя нельзя называть, это не работает. Классика dsr это чистые lo адреса, логинсайт на кой-то * вешает их еще и на eth0

Командная строка vmware дает гораздо больше возможностей, чем GUI.
Из переписки:
ls -la /vmfs/volumes
lsof | grep $uid
esxcfg-scsidevs -m | grep
vim-cmd hostsvc/advopt/view ScratchConfig.ConfiguredScratchLocation

и дает возможность найти разнообразные файлы вида
POST/PATCH https://your-shity-vcsa/rest/vcenter/vm/{vm}/hardware/disk

vmware vm migration faild .. failed to comunicate...

Troubleshooting vMotion
https://blogs.vmware.com/vsphere/2019/09/troubleshooting-vmotion.html