D365FO - Как определить, что потребляет наибольшее количество CPU и / или памяти внутри Microsoft Dynamics 365 для Operations - Batch Management Service?

[MarinaAX]

Всем - привет!

Могли бы вы посоветовать, как определить, что потребляет наибольшее количество CPU и / или памяти внутри Microsoft Dynamics 365 для Operations - Batch Management Service? Основываясь на описании, ета служба опрашивает и выполняет пакетные запросы операций (Operations batch requests.). Но как определить какие процессы и в каком количестве осуществляют загрузку процессора / памяти внутри Microsoft Dynamics 365 для Operations - Batch Management Service?



Окружение: облачная среда с областью 1611 Update 7: общедоступный сервер AOS, частный сервер AOS и сервер BI.

[MarinaAX]

Открыла System administration > Inquiries > Batch jobs > Batch job, но для всех batch job'ов для всех legal entities статус выполнения либо Withhold, либо Ended. Статуса Executing нет ни у какой работы.

[MikeR]

Можно еще увеличить интервалы работы заданий. Допустим не каждые две минуты, а полчаса или час.

[skuull]

А что со старым добрыйм трейс парсером?

[belugin]

Мне нравится PerfView - только его надо изучать

[Logger]

Цитата:

Сообщение от belugin

Мне нравится PerfView - только его надо изучать

Интересно, а в 2009/2012 версии его можно использовать, чтобы понять сколько памяти / проца съела пользовательская / пакетная сессия ?

P.S.
А то народ велосипеды изобретал.
По загрузке проца :
3.0 -
Мониторинг работы
https://blogs.msdn.microsoft.com/aer...006/12/25/124/

2009 -
Мониторинг работы

[MarinaAX]

Большое спасибо за ваши рекомендации:

Вот выдержка из журнала Process Monitor'а:
постоянно повторяется

00:56.8 Batch.exe 5672 RegQueryKey HKLM SUCCESS Query: HandleTags, HandleTags: 0x0
00:56.8 Batch.exe 5672 RegOpenKey HKLM\SOFTWARE\Microsoft\Windows NT\CurrentVersion\Perflib SUCCESS Desired Access: Read
00:56.8 Batch.exe 5672 RegCloseKey HKLM\SOFTWARE\Microsoft\Windows NT\CurrentVersion\Perflib SUCCESS
00:56.8 Batch.exe 5672 RegQueryKey HKLM SUCCESS Query: HandleTags, HandleTags: 0x0
00:56.8 Batch.exe 5672 RegOpenKey HKLM\SOFTWARE\Microsoft\Windows NT\CurrentVersion\Perflib SUCCESS Desired Access: Read
00:56.8 Batch.exe 5672 RegCloseKey HKLM\SOFTWARE\Microsoft\Windows NT\CurrentVersion\Perflib SUCCESS
00:56.8 Batch.exe 5672 RegQueryValue HKLM\SOFTWARE\Microsoft\Windows NT\CurrentVersion\Perflib\Disable Performance Counters NAME NOT FOUND Length: 20
00:56.8 Batch.exe 5672 Process Profiling SUCCESS User Time: 810507.4843750 seconds, Kernel Time: 34.3750000 seconds, Private Bytes: 910,376,960, Working Set: 1,083,416,576



Может быть кто-то включил performance counter'ы и не выключил? А можно их как-то выключить?

[belugin]

Цитата:

Сообщение от Logger

Интересно, а в 2009/2012 версии его можно использовать, чтобы понять сколько памяти / проца съела пользовательская / пакетная сессия ?

Я не пробовал, теоретически должно профилировать все что на .net

[MarinaAX]

Прошу прощения за то, что повторяюсь Так стоит мне что-либо делать с performance counter'ами или нет?

[MarinaAX]

VM с D365FO - находится в cloud-hosted окружениию Вот как выглядят работающие Performance Counters:

Можно ли их остановить, хотя бы ненадолго?

[fed]

Мне кажется, вы копаете в неправильную сторону. Внутри DAX (по крайней мере - внутри DAX2009 или DAX2012), есть нить, которая регулярно просыпается, проверяет флажки трассировки в регистре, потом засыпает (если флажек не изменился) или запускает/останавливает флажки трассировки уже в памяти самого процесса (если флажек изменился).
То есть - это в целом нормальный процессс, который не должен убивать производительность.
Я конечно в D365 в эту сторону не копал, но все равно - велика вероятность что вы смотрите в неправильном направлении.

[mazzy]

предположим.
а куда автору копать то?

давайте напомню всем участникам вопрос

Цитата:

Сообщение от MarinaAX

Могли бы вы посоветовать, как определить, что потребляет наибольшее количество CPU и / или памяти внутри Microsoft Dynamics 365 для Operations - Batch Management Service?

сразу скажу - лично я ответ не знаю. и мне тоже было бы интересно узнать ответ.

[fed]

Цитата:

Сообщение от mazzy

предположим.
а куда автору копать то?

давайте напомню всем участникам вопрос


сразу скажу - лично я ответ не знаю. и мне тоже было бы интересно узнать ответ.

Ну я лично начал бы с trace parser, а потом двинулся бы в сторону предложенной Belugin perfview. (Кстати - я читал как запускать трассировку в Production Instance, но как-то пока не осознал как это делать в One Box...)

[belugin]

1) Скачайте PerfView с сайта MS
2) Запустите PerfView (см также https://channel9.msdn.com/Series/PerfView-Tutorial)
3) File \ Set Symbol Path, Use MS Symbol server
4) Collect \ Collect
5) Circullar MB = 20000
6) Advanced \ No V.3 Symbols

Дальше запускаете процесс который вызывает использование CPU, если он работает, то просто жмете Start collection и ждете минуты 2.
Дальше Stop collection

Подождать пока закончит обработку трейса можо открывать, выбирать batch.exe и анализировать top down или bottom up (там надо еще группировку настроить под интересную задачу)

Например я сделал такую mpengine!{%}->mpe.$1;!=>Other

Так как у меня процессор жрал Defender (это значит, что сгруппировать все функции mpengine и токи входа во все остальное в группу Other ) на картинке видно, что ~20% процессора выедает движок регулярных выражений

Можно сделать mpengine!{%}->mpe.$1;!->Other - тогда "прочее" будет сгруппировано в один пункт и его можно размазать по тому, кто его потребляет (Правая кнопка и Fold \ Fold item) на картинке видно, что немного увеличился процент regex за счет того что в него вошло "прочее" которое из него вызывалось

[MarinaAX]

Трейсу с TraceParser'а взяла ещё в пятницу вечером, но пока посмотреть её негде, потому как нет разрешения от администратора SQL.
Кстати, вопрос: может кто подскажет, как смотреть её локально?

PerfView - тоже пробовала, но ничего не увидела. Попробую ещё...

Есть такая распечатка с Performance Monitor'а - жду разрешения на временную остановку двух пользовательских Data Collection Sets


И, да! Сообщу, что было не так, когда починим

[macklakov]

Цитата:

Сообщение от MarinaAX

Трейсу с TraceParser'а взяла ещё в пятницу вечером, но пока посмотреть её негде, потому как нет разрешения от администратора SQL.
Кстати, вопрос: может кто подскажет, как смотреть её локально?

Parser-у нужна база данных. Где она будет располагаться, все равно. Т.е. локально можно развернуть, при условии что у вас есть доступный SQL сервер, на котором есть права на создание новых баз.

[skuull]

Цитата:

Сообщение от MarinaAX

Кстати, вопрос: может кто подскажет, как смотреть её локально?

Почитали бы ссылку что я вам дал. Там же есть продолжение https://docs.microsoft.com/en-us/dyn...t/trace-parser
Почему нельзя использовать базу данных что уже есть на VM ?

[MarinaAX]

Всем - большое спасибо за помощь и рекомендации!!!

Перезагрузка сервера устранила проблему с высоким CPU, однако появилась 2 новых проблемы:

1. Пользователь, чей account был использован для администратора - опять стал деактивирован.
2. Вернулась назад настройка локальной политики:
   System cryptography: Use FIPS complaint algorithms for encryption, hashing, and signing = enabled
   Раньше она была disabled.
3. Открыла трейсу, но не знаю, что надо смотреть. Каких-то видимых ошибок нет. Скорее всего какая-то batch job зависла и потребляла CPU.