メイン コンテンツをスキップする

推奨される設定

[Description] (説明)

ロケーション

設定プロパティ

デフォルト/最小値

推奨値

Quartz接続プールにあるデータベース接続数の最大値

Talend Administration Center設定ファイル

WEB-INF/classes/quartz.properties:

org.quartz.dataSource.QRTZ_DS.maxConnections

30

org.quartz.threadPool.threadCount + 3

Schedulerが処理する最大同時ジョブ数

Talend Administration Center設定ファイル

WEB-INF/classes/quartz.properties:

org.quartz.threadPool.threadCount

30

MAX_CONCURRENT_TASK_EXECUTIONS + MAX_CONCURRENT_PLAN_EXECUTIONS

(Quartzを除く)Talend Administration Centerの最大データベース接続数

Talend Administration Center設定ファイル

WEB-INF/classes/configuration.properties:

hibernate.c3p0.max_size

32

MAX_CONCURRENT_TASK_EXECUTIONS + MAX_CONCURRENT_PLAN_EXECUTIONS + MAX_CONCURRENT_LOGGED_USERS

各リモートジョブチェック間の期間を定義します

Talend Administration Centerデータベーステーブル 設定

scheduler.conf.taskStatusRefreshTime

1

  • MAX_CONCURRENT_TASK_EXECUTIONS < 20の場合: scheduler.conf.taskStatusRefreshTime = 1
  • MAX_CONCURRENT_TASK_EXECUTIONS > 20の場合: scheduler.conf.taskStatusRefreshTime = MAX_CONCURRENT_TASK_EXECUTIONS /20

起動時に最新の実行をチェックするスレッドプールのサイズを定義

Talend Administration Centerデータベーステーブル 設定

dashboard.conf.taskExecutionsHistory.threadPoolSize

10

( MAX_CONCURRENT_TASK_EXECUTIONS + MAX_CONCURRENT_PLAN_EXECUTIONS ) / 25

起動時に全タスクをチェックするスレッドプールのサイズを定義

Talend Administration Centerデータベーステーブル 設定

scheduler.conf.simultaneousThreadsForStatusRefresh

5

MAX_CONCURRENT_TASK_EXECUTIONS / 50

多数のジョブが同時に実行されている場合に、ジョブの実行時間を短縮できるようスレッド数を定義します。

Talend Administration Centerデータベーステーブル 設定

remoteDataRetriever.threadPool.size

30 同時に実行されるジョブ数のピーク値と同じ値。

詳細は、Improving Job execution timeセクションをご覧ください。

データベースプロセスの最大オープンファイル数を定義

データベースサーバーのホスト

最大オープンファイル:

LinuxであればMySQLの設定プロパティで"open_files_limit"を設定し、システムファイルの制限が右の式で>=であることを確認します

(オペレーティングシステムによって異なる)

( MAX_CONCURRENT_TASK_EXECUTIONS + MAX_CONCURRENT_PLAN_EXECUTIONS + MAX_CONCURRENT_LOGGED_USERS ) x 3

データベースに許可される最大接続数を定義

データベースサーバー

最大接続数:

たとえばMySQL設定プロパティを"max_connections = 10000"に設定します

(データベースベンダーによって異なる)

(org.quartz.dataSource.QRTZ_DS.maxConnections + hibernate.c3p0.max_size) x 1.2

JobServerによって受け入れられる同時接続の最大数を定義

JobServer設定ファイル

conf/TalendJobServer.properties:

org.talend.remote.server.MultiSocketServer.

MAX_CONCURRENT_CONNECTIONS

1000

MAX_CONCURRENT_JOBS_EXECUTIONS x 2

変数の定義
変数 [Description] (説明)

MAX_CONCURRENT_JOBS_EXECUTIONS

Talend JobServer側での最大予想同時実行ジョブ数

MAX_CONCURRENT_LOGGED_USERS

Talend Administration Center側の同時ログインユーザー数 ( Talend Administration Center + Talend Studio)の最大予想数

MAX_CONCURRENT_PLAN_EXECUTIONS

Talend Administration Center側での最大予想同時プラン実行数

MAX_CONCURRENT_TASK_EXECUTIONS

Talend Administration Center側での最大予想同時タスク実行数

プロパティが正しく設定されないと、パフォーマンス問題が発生することがあります。

以下のプロパティは、パフォーマンスおよびメモリ消費量に最大の影響を与えます。デフォルトで、これらの値は:

  • hibernate.c3p0.max_size=32
  • org.quartz.threadPool.threadCount = 30
  • org.quartz.dataSource.QRTZ_DS.maxConnections = 30

デフォルト値は、同時に実行中のタスクが10件以下ある場合に動作します。

タスクがそれ以上ある場合は、次の式を使って最適なorg.quartz.threadPool.threadCountを見つけることができます。

org.quartz.threadPool.threadCount = 3 x 同時に実行中のジョブの最大量

各スレッドがメモリを消費するため、冗長スレッドは多数ある必要はありません。

接続数は、Talend Administration Centerがデータベースサーバーとやり取りする速さと同時に実行中のジョブ数によります。

データベース接続の合計数 = org.quartz.threadPool.threadCount + hibernate.c3p0.max_size

データベース接続の合計数がサーバーで設定された数(たとえばMySQLでは150)を上回ることはできません。最適な数値は次の式で求めることもできます。

org.quartz.dataSource.QRTZ_DS.maxConnections = 3 x 同時に実行中のジョブの最大量

hibernate.c3p0.max_size= 3 x 同時に実行中のジョブの最大量

データベースへの接続に遅延がない場合は、次の式も使えます。

org.quartz.dataSource.QRTZ_DS.maxConnections = 2 x 同時実行中のジョブの最大量

hibernate.c3p0.max_size= 2 x 同時に実行中のジョブの最大量

このページは役に立ちましたか?

このページまたはコンテンツにタイポ、ステップの省略、技術的エラーなどの問題が見つかった場合はお知らせください。