acct_gather.conf

Section: Slurm Configuration File (5)
Updated: Slurm Configuration File
Index

 

NAME

acct_gather.conf - Slurm configuration file for the acct_gather plugins

 

DESCRIPTION

acct_gather.conf is an ASCII file which defines parameters used by Slurm's acct_gather related plugins.
acct_gather.confは、Slurmのacct_gather関連プラグインによって使用されるパラメーターを定義するASCIIファイルです。
The file location can be modified at system build time using the DEFAULT_SLURM_CONF parameter or at execution time by setting the SLURM_CONF environment variable.
ファイルの場所は、システムのビルド時にDEFAULT_SLURM_CONFパラメーターを使用して変更することも、実行時にSLURM_CONF環境変数を設定することによって変更することもできます。
The file will always be located in the same directory as the slurm.conf file.
このファイルは常にslurm.confファイルと同じディレクトリにあります。

Parameter names are case insensitive.
パラメータ名では大文字と小文字は区別されません。
Any text following a "#" in the configuration file is treated as a comment through the end of that line.
構成ファイルの「#」に続くテキストは、その行の終わりまでコメントとして扱われます。
The size of each line in the file is limited to 1024 characters.
ファイルの各行のサイズは1024文字に制限されています。
Changes to the configuration file take effect upon restart of Slurm daemons, daemon receipt of the SIGHUP signal, or execution of the command "scontrol reconfigure" unless otherwise noted.
構成ファイルへの変更は、特に明記されていない限り、Slurmデーモンの再起動、デーモンによるSIGHUPシグナルの受信、またはコマンド「scontrolreconfigure」の実行時に有効になります。

The following acct_gather.conf parameters are defined to control the general behavior of various plugins in Slurm.
次のacct_gather.confパラメーターは、Slurmのさまざまなプラグインの一般的な動作を制御するために定義されています。

The acct_gather.conf file is different than other Slurm .conf files.
acct_gather.confファイルは、他のSlurm.confファイルとは異なります。
Each plugin defines which options are available.
各プラグインは、使用可能なオプションを定義します。
So if you do not load the respective plugin for an option that option will appear to be unknown by Slurm and could cause Slurm not to load.
したがって、オプションのそれぞれのプラグインをロードしない場合、そのオプションはSlurmによって不明であるように見え、Slurmがロードされない可能性があります。
If you decide to change plugin types you might also have to change the related options as well.
プラグインの種類を変更する場合は、関連するオプションも変更する必要があります。

EnergyIPMI
Options used for acct_gather_energy/ipmi are as follows:
acct_gather_energy / ipmiに使用されるオプションは次のとおりです。

EnergyIPMIFrequency=<number>
This parameter is the number of seconds between BMC access samples.
このパラメーターは、BMCアクセスサンプル間の秒数です。

EnergyIPMICalcAdjustment=<yes|no>
If set to "yes", the consumption between the last BMC access sample and a step consumption update is approximated to get more accurate task consumption.
「yes」に設定すると、最後のBMCアクセスサンプルとステップ消費量の更新の間の消費量が概算され、より正確なタスク消費量が得られます。
The adjustment is made at the step start and each time the consumption is updated, including the step end.
調整はステップ開始時、およびステップ終了を含む消費量が更新されるたびに行われます。
The approximations are not accumulated, only the first and last adjustments are used to calculated the consumption.
概算は累積されず、最初と最後の調整のみが消費量の計算に使用されます。
The default is "no".
デフォルトは「no」です。

EnergyIPMIPowerSensors=<key=values>
Optionally specify the ids of the sensors to used.
オプションで、使用するセンサーのIDを指定します。
Multiple <key=values> can be set with ";" separators.
複数の<key = values>は「;」で設定できます セパレータ。
The key "Node" is mandatory and is used to know the consumed energy for nodes (scontrol show node) and jobs (sacct).
キー「ノード」は必須であり、ノード(scontrol show node)およびジョブ(sacct)の消費エネルギーを知るために使用されます。
Other keys are optional and are named by administrator.
その他のキーはオプションであり、管理者によって名前が付けられます。
These keys are useful only when profile is activated for energy to store power (in watt) of each key.
これらのキーは、各キーの電力(ワット単位)を保存するためのエネルギーに対してプロファイルがアクティブ化されている場合にのみ役立ちます。
<values> are integers, multiple values can be set with "," separators.
<values>は整数であり、「、」区切り文字で複数の値を設定できます。
The sum of the listed sensors is used for each key.
リストされたセンサーの合計が各キーに使用されます。
EnergyIPMIPowerSensors is optional, default value is "Node=number" where "number" is the id of the first power sensor returned by ipmi-sensors.
EnergyIPMIPowerSensorsはオプションで、デフォルト値は「Node = number」です。「number」は、ipmi-sensorsによって返される最初のパワーセンサーのIDです。

i.e.
EnergyIPMIPowerSensors=Node=16,19,23,26;Socket0=16,23;Socket1=19,26;SSUP=23,26;KNC=16,19
EnergyIPMIPowerSensors=Node=29,32;SSUP0=29;SSUP1=32
EnergyIPMIPowerSensors=Node=1280

The following acct_gather.conf parameters are defined to control the IPMI config default values for libipmiconsole.
次のacct_gather.confパラメーターは、libipmiconsoleのIPMI構成のデフォルト値を制御するために定義されています。

EnergyIPMIUsername=USERNAME
Specify BMC Username.

EnergyIPMIPassword=PASSWORD
Specify BMC Password.

EnergyXCC
Options used for acct_gather_energy/xcc include only in-band communications with XClarity Controller, thus a reduced set of configurations is supported:
acct_gather_energy / xccに使用されるオプションには、XClarity Controllerとの帯域内通信のみが含まれるため、サポートされる構成のセットが少なくなります。

EnergyIPMIFrequency=<number>
This parameter is the number of seconds between XCC access samples.
このパラメーターは、XCCアクセスサンプル間の秒数です。
Default is 30 seconds.
デフォルトは30秒です。

EnergyIPMITimeout=<number>
Timeout, in seconds, for initializing the IPMI XCC context for a new gathering thread.
新しい収集スレッドのIPMIXCCコンテキストを初期化するためのタイムアウト(秒単位)。
Default is 10 seconds.
デフォルトは10秒です。

ProfileHDF5
Options used for acct_gather_profile/hdf5 are as follows:
acct_gather_profile / hdf5に使用されるオプションは次のとおりです。

ProfileHDF5Dir=<path>
This parameter is the path to the shared folder into which the acct_gather_profile plugin will write detailed data (usually as an HDF5 file).
このパラメーターは、acct_gather_profileプラグインが詳細データ(通常はHDF5ファイルとして)を書き込む共有フォルダーへのパスです。
The directory is assumed to be on a file system shared by the controller and all compute nodes.
ディレクトリは、コントローラとすべての計算ノードによって共有されるファイルシステム上にあると想定されています。
This is a required parameter.
これは必須パラメーターです。

ProfileHDF5Default
A comma delimited list of data types to be collected for each job submission.
ジョブの送信ごとに収集されるデータ型のコンマ区切りのリスト。
Allowed values are:
許可される値は次のとおりです。

All
All data types are collected.
すべてのデータ型が収集されます。
(Cannot be combined with other values.)
(他の値と組み合わせることはできません。)

None
No data types are collected.
データ型は収集されません。
This is the default.
これがデフォルトです。
(Cannot be combined with other values.)
(他の値と組み合わせることはできません。)

Energy
Energy data is collected.
エネルギーデータが収集されます。

Filesystem
File system (Lustre) data is collected.
ファイルシステム(Lustre)のデータが収集されます。

Network
Network (InfiniBand) data is collected.
ネットワーク(InfiniBand)データが収集されます。

Task
Task (I/O, Memory, ...) data is collected.
タスク(I / O、メモリなど)のデータが収集されます。

ProfileInfluxDB
Options used for acct_gather_profile/influxdb are as follows:
acct_gather_profile / influxdbに使用されるオプションは次のとおりです。

ProfileInfluxDBDatabase
InfluxDB database name where profiling information is to be written.
プロファイリング情報が書き込まれるInfluxDBデータベース名。

ProfileInfluxDBDefault
A comma delimited list of data types to be collected for each job submission.
ジョブの送信ごとに収集されるデータ型のコンマ区切りのリスト。
Allowed values are:
許可される値は次のとおりです。

All
All data types are collected.
すべてのデータ型が収集されます。
(Cannot be combined with other values.)
(他の値と組み合わせることはできません。)

None
No data types are collected.
データ型は収集されません。
This is the default.
これがデフォルトです。
(Cannot be combined with other values.)
(他の値と組み合わせることはできません。)

Energy
Energy data is collected.
エネルギーデータが収集されます。

Filesystem
File system (Lustre) data is collected.
ファイルシステム(Lustre)のデータが収集されます。

Network
Network (InfiniBand) data is collected.
ネットワーク(InfiniBand)データが収集されます。

Task
Task (I/O, Memory, ...) data is collected.
タスク(I / O、メモリなど)のデータが収集されます。

ProfileInfluxDBHost=<hostname>:<port>
The hostname of the machine where the influxd instance is executed and the port used by the HTTP API.
influxdインスタンスが実行されるマシンのホスト名とHTTPAPIによって使用されるポート。
The port used by the HTTP API is the one configured through the bind-address influxdb.conf option in the [http] section.
HTTP APIで使用されるポートは、[http]セクションのbind-addressinfluxdb.confオプションで構成されたポートです。
Example:

ProfileInfluxDBHost=myinfluxhost:8086

ProfileInfluxDBPass
Optional password for username configured in ProfileInfluxDBUser.
ProfileInfluxDBUserで構成されたユーザー名のオプションのパスワード。

ProfileInfluxDBRTPolicy
The InfluxDB retention policy name for the database configured in ProfileInfluxDBDatabase option.
ProfileInfluxDBDatabaseオプションで構成されたデータベースのInfluxDB保持ポリシー名。

ProfileInfluxDBUser
Optional InfluxDB username that should be used to gain access to the database configured in ProfileInfluxDBDatabase.
ProfileInfluxDBDatabaseで構成されたデータベースにアクセスするために使用する必要があるオプションのInfluxDBユーザー名。
This is only needed InfluxDB is configured with authentication enabled in the [http] config section and a user has been granted at least WRITE access to the database.
これが必要なのは、[http]構成セクションで認証が有効になっているInfluxDBが構成されており、ユーザーに少なくともデータベースへの書き込みアクセスが許可されている場合のみです。
See also ProfileInfluxDBPass.
ProfileInfluxDBPassも参照してください。

NOTE:
This plugin requires the libcurl development files to be installed.
このプラグインでは、libcurl開発ファイルをインストールする必要があります。
NOTE:
Information on how to install and configure InfluxDB and manage databases, retention policies and such is available on the official webpage.
InfluxDBをインストールおよび構成し、データベース、保持ポリシーなどを管理する方法に関する情報は、公式Webページで入手できます。
NOTE:
Collected information is written from every compute node where a job runs to the influxd instance listening on the ProfileInfluxDBHost.
収集された情報は、ジョブが実行されるすべての計算ノードから、ProfileInfluxDBHostをリッスンしているinfluxdインスタンスに書き込まれます。
In order to avoid overloading the influxd instance with incoming connection requests, the plugin uses an internal buffer which is filled with samples.
着信接続要求によるinfluxdインスタンスの過負荷を回避するために、プラグインはサンプルで満たされた内部バッファーを使用します。
Once the buffer is full, a HTTP API write request is performed and the buffer is emptied to hold subsequent samples.
バッファーがいっぱいになると、HTTP API書き込み要求が実行され、後続のサンプルを保持するためにバッファーが空になります。
A final request is also performed when a task ends even if the buffer isn't full.
バッファがいっぱいでなくても、タスクが終了すると、最終的な要求も実行されます。
NOTE:
Failed HTTP API write requests are discarded.
失敗したHTTPAPI書き込み要求は破棄されます。
This means that collected profile information in the plugin buffer is lost if it can't be written to the influxd database for any reason.
これは、何らかの理由でinfluxdデータベースに書き込めない場合、プラグインバッファーに収集されたプロファイル情報が失われることを意味します。
NOTE:
Plugin messages are logged along with the slurmstepd logs to SlurmdLogFile.
プラグインメッセージは、slurmstepdログとともにSlurmdLogFileに記録されます。
In order to troubleshoot any issues, it is recommended to temporarily increase the slurmd debug level to debug3 and add Profile to the debug flags.
問題のトラブルシューティングを行うには、slurmdデバッグレベルを一時的にdebug3に上げ、デバッグフラグにプロファイルを追加することをお勧めします。
This can be accomplished by setting the slurm.conf SlurmdDebug and DebugFlags respectively or dynamically through scontrol setdebug and setdebugflags.
これは、slurm.conf SlurmdDebugとDebugFlagsをそれぞれ設定するか、scontrolsetdebugとsetdebugflagsを介して動的に設定することで実現できます。
NOTE:
Perhaps it's a good idea to use a monitoring and analytics tool such as Grafana on top of InfluxDB.
おそらく、InfluxDBの上にGrafanaなどの監視および分析ツールを使用することをお勧めします。
This kind of tools permit one to create dashboards, tables, and other graphics using the stored time series.
この種のツールを使用すると、保存されている時系列を使用してダッシュボード、テーブル、その他のグラフィックを作成できます。
This way, it is easier to correlate resource usage peaks reported by other node monitoring tools such as Ganglia with specific job step tasks.
このようにして、Gangliaなどの他のノード監視ツールによって報告されたリソース使用量のピークを特定のジョブステップタスクと関連付けるのが簡単になります。

InfinibandOFED
Options used for acct_gather_interconnect/ofed are as follows:
acct_gather_interconnect / ofedに使用されるオプションは次のとおりです。

InfinibandOFEDPort=<number>
This parameter represents the port number of the local Infiniband card that we are willing to monitor.
このパラメーターは、監視するローカルInfinibandカードのポート番号を表します。
The default port is 1.
デフォルトのポートは1です。
 

EXAMPLE


###
# Slurm acct_gather configuration file
###
# Parameters for acct_gather_energy/impi plugin
EnergyIPMIFrequency=10
EnergyIPMICalcAdjustment=yes
#
# Parameters for acct_gather_profile/hdf5 plugin
ProfileHDF5Dir=/app/slurm/profile_data
# Parameters for acct_gather_interconnect/ofed plugin
InfinibandOFEDPort=1

 

COPYING

Copyright (C) 2012-2013 Bull. Produced at Bull (cf, DISCLAIMER).

This file is part of Slurm, a resource management program. For details, see <https://slurm.schedmd.com/>.

Slurm is free software; you can redistribute it and/or modify it under the terms of the GNU General Public License as published by the Free Software Foundation; either version 2 of the License, or (at your option) any later version.

Slurm is distributed in the hope that it will be useful, but WITHOUT ANY WARRANTY; without even the implied warranty of MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE. See the GNU General Public License for more details.

 

SEE ALSO

slurm.conf(5)


 

Index

NAME
DESCRIPTION
EXAMPLE
COPYING
SEE ALSO

This document was created by man2html using the manual pages.
Time: 20:44:46 GMT, May 21, 2020