跳到主要内容 跳到补充内容

配置 Talend Data Preparation、Streams Runner 和 Spark Job Server 之间的 HTTPS 连接

上次更新日期:2025/10/8

保护 Talend Data Preparation、Streams Runner 和 Spark Job Server 之间的连接需要编辑它们的对应配置文件。

Streams Runner 配置文件中的任何安全配置都应在该文件的末尾进行,即在 Append 部分之中,在 Include 部分之后,以避免被改写。

第一步是将 Spark Job Server 配置为 HTTPS 中的服务。然后,您将需要在运行于 HTTPS 中的 Streams Runner 和 Spark Job Server 之间启用 SSL 通信。之后,将 Streams Runner 配置为 HTTPS 中的服务;最后,在运行于 HTTPS 中的 Talend Data Preparation 和 Streams Runner 之间启用 SSL 通信。

开始之前

  • Talend Data Preparation 已配置为 HTTPS 中的服务。有关更多信息,请参阅为 Talend Data Preparation 配置 HTTPS 连接。
  • 您已为 Talend Data Preparation 生成证书并将其添加到 Web 浏览器信任库。
  • Spark Job Server 和 Streams Runner 已安装并正在运行。

步骤

  1. 要保护 HTTPS 中的 Spark Job Server 服务,请打开 <Spark_Job_Server_installation_path>/settings.sh 配置文件。
  2. 将 security_ssl_enabled 参数的值设为 on。
  3. 编辑 security_path_to_keystore 和 security_keystore_password 参数的值,以设置包含 Spark Job Server 证书的 keystore 文件的路径和密码。
    security_ssl_enabled=on
    # DO NOT CHANGE
    # SECURITY PATH TO KEYSTORE
    # Required : No
    # Env variable : SECURITY_PATH_TO_KEYSTORE
    security_path_to_keystore=<path_to_keystore>
    # DO NOT CHANGE
    # SECURITY KEYSTORE PASSWORD
    # Required : No
    # Env variable : SECURITY_KEYSTORE_PASSWORD
    security_keystore_password=<password>

    重新启动服务以后,Spark Job Server 将在 HTTPS 中运行。

  4. 要在运行于 HTTPS 中的 Streams Runner 和 Spark Job Server 之间启用 SSL 通信,您可以:
    • 将 JOBSERVER_TRANSPORT_PROTOCOL 环境变量与以下命令一同使用:export JOBSERVER_TRANSPORT_PROTOCOL=https。
    • 编辑 <Streams_Runner_installation_path>/conf/application.conf 配置文件,并将 app.svc.jobserver.protocol 参数的值设为 https。

    使用环境变量将改写 application.conf 配置。

  5. 要将 Spark Job Server 证书或其证书颁发机构添加到 Streams Runner 信任库,请根据用于您的信任库的文件格式将以下行添加到 <Streams_Runner_installation_path>/conf/application.conf 文件。
    • 对于 .pem 文件:
        play.ws.ssl {
          trustManager = {
            stores = [
              { type = "PEM", path = "/path/to/pem_file" }
            ]
          }
        }
    • 对于 .jks 文件:
        play.ws.ssl {
          trustManager = {
            stores = [
              { type="JKS", path="/path/to/truststore", password="<password>"}
            ]
          }
        }

    有关更多信息,请参阅《实战文档 (仅提供英文版本)》。

  6. 要保护 HTTPS 中的 Streams Runner 服务,请通过编辑 <Streams_Runner_installation_path>/conf/application.conf 文件的以下行来定义其证书的路径和密码:
    play.server.https.keyStore.path = <path_to_keystore>
    play.server.https.keyStore.password = <password>
  7. 编辑以下两行以设置 HTTPS 端口并禁用 HTTP 端口:
    https.port=9443
    http.port=disabled

    9443 是用于 HTTPS 连接的默认端口值。

    信息注释警告: 任何 play.server.http.port=<port> 配置都将与 http.port=disabled 配置冲突,并且该端口不会被禁用。

    重新启动服务以后,Streams Runner 将在 HTTPS 中运行。

  8. 要在运行于 HTTPS 中的 Talend Data Preparation 和 Streams Runner 之间启用 SSL 通信,请获取 Streams Runner 证书或其证书颁发机构,并使用以下命令将其添加到 Talend Data Preparation 信任库:
    keytool -import -trustcacerts -alias <cert-alias> -file <streams_runner_certificate.crt> -keystore <truststore.jks>
  9. 在 <Data_Preparation_Path>/config/application.properties 文件中,添加以下属性以设置信任库:
    tls.trust-store=/path/to/<truststore.jks>
    tls.trust-store-password=<trust-store_password>
    
    false to disable hostname verification
    tls.verify-hostname=true
  10. 重新启动 Talend Data Preparation。

结果

运行于 HTTPS 中的 Talend Data Preparation 实例现在可以与同样使用安全 HTTPS 连接运行的 Streams Runner 和 Spark Job Server 通信了。

本页面有帮助吗?

如果您发现此页面或其内容有任何问题 – 打字错误、遗漏步骤或技术错误 – 请告诉我们!