メイン コンテンツをスキップする 補完的コンテンツへスキップ

R2021-02の新機能

Big Data: 新機能

機能

説明

対象製品

SparkジョブにおけるローカルモードのSpark 3.0のサポート Talend StudioでのSparkジョブの実行で、ローカルモードのSpark 3.0がサポートされるようになりました。

情報メモ注: ただし次のエレメントの場合、ローカルモードのSpark 3.0はサポートされていません。
  • ADLS Gen2
  • tCassandraInputとtCassandraOutput
  • tElasticSearchInputとtElasticSearchOutput

Big Dataを伴うTalendの全製品

Availability-noteBeta
Spark 3.0コンポーネントを使ったDatabricks 7.3 LTSのサポート
AWSとAzureの両方でDatabricks 7.3 LTSディストリビューションでSpark 3.0を使い、対話型クラスターと一時クラスター用にSpark BatchジョブとSpark Streamingジョブを実行できるようになりました。以下のコンポーネントがサポートされています:
  • tAvroInputとtAvroOutput
  • tAzureFSConfiguration
  • tFileInputDelimitedとtFileOutputDelimited
  • tFileInputJSONとtFileOutputJSON
  • tFileInputParquetとtFileOutputParquet
  • tFileInputXMLとtFileOutputXML
  • tFixedFlowInput
  • tLogRow
  • tS3Configuration
情報メモ重要: ベータ版機能であるため、本番環境での使用には適していません。

Big Dataを伴うTalendの全製品

Databricksの一時クラスターで利用できる新しいオプション Sparkジョブの[Spark configuration] (Spark設定)ビューでDatabricksの一時クラスターを作成する際に、設定を微調整できるようになりました。次のプロパティを利用できるようになりました。
  • [Enable credentials passthrough] (認証情報のパススルーを有効化)
  • [Spot with fall back to On-demand] (オンデマンドへのフォールバックを伴うスポット)
  • 可用性ゾーン
  • [Max spot price] (最大スポット価格)
  • [EBS volume type] (ESBボリュームタイプ)
  • [Custom tags] (カスタムタグ)
  • [Init Scripts] (Initスクリプト)

Big Dataを伴うTalendの全製品

Spark BatchジョブのDynamoDBコンポーネントで利用できるAWSロールオプションから認証情報を継承 次のDynamoDBコンポーネントで、[Inherit credentials from AWS role] (AWSロールから認証情報を継承)という新しいオプションを使ってAmazon EC2インスタンスのメタデータからAWSのセキュリティ認証情報を取得する機能がサポートされるようになりました。
  • tDynamoDBInput
  • tDynamoDBOutput
  • tDynamoDBConfiguration

これによって、Talend Studioでアクセスキーやシークレットキーを指定する必要がなくなります。

Big Dataを伴うTalendの全製品

Data Integration: 新機能

機能

説明

対象製品

ライブラリーの共有がさらに向上

Talend Studio[Preferences] (環境設定)ダイアログボックスにある[Talend] > [Artifact Repository] (アーティファクトリポジトリー) > [Libraries] (ライブラリー)ビューで[Share libraries to artifact repository at startup] (起動時にアーティファクトリポジトリーにライブラリーを共有)チェックボックスを使うことで、起動時にコンポーネントライブラリーをローカルライブラリーリポジトリーに共有するかどうか設定できるようになりました。

Talend Studioを伴うTalendの全製品

Databricks Delta Lakeマッピングのサポート

Databricks Delta Lakeのマッピングのサポート対象となるコンポーネントは次のとおりです。

  • tELTInput、tELTOutput、tELTMap
  • tSQLTemplate, tSQLTemplateMerge、tSQLTemplateAggregate、tSQLTemplateCommit、tSQLTemplateRollback、tSQLTemplateFilterRows、tSQLTemplateFilterColumns

Talendの全製品(ただしTalend ESBを除く)

アップデート操作と削除操作で新しいオプションを追加

[Basic settings] (基本設定)ビューに、[Use WHERE conditions table] (WHERE条件テーブルを使用)オプションと[Where conditions table] (WHERE条件テーブル)フィールドが追加されました。これによって生産性が向上します。対象コンポーネント:

  • tELTGreenplumOutput、tELTMSSqlOutput、tELTMysqlOutput、tELTNetezzaOutput、tELTOracleOutput、tELTOutput、tELTPostgresqlOutput、 tELTSybaseOutput、tELTTeradataOutput、tELTVerticaOutput

Talend Studioを伴うTalendの全製品

tRedshiftBulkExec: 新しいファイルタイプのサポート

tRedshiftBulkExecコンポーネントがApache Parquetファイルに保存されているデータをロードできるようになりました。

Talend Studioを伴うTalendの全製品

tFileOutputExcel: Excel2007ファイル用の新しいオプション

tFileOutputExcelコンポーネントに追加された[Truncate characters exceeding max cell length] (最大セル長を超えた文字は切り詰め)オプションを使えば、Excel2007のセルに書き込まれた文字列のうち、最大セル長(32767文字)を超える文字が切り詰められるようになります。

Talend Studioを伴うTalendの全製品

tChangeFileEncoding: バッファーサイズがカスタマイズ可能に

tChangeFileEncodingコンポーネントに追加された[Buffer Size] (バッファーサイズ)フィールドを使えば、ファイルのエンコーディングを変更する際のバッファーサイズを指定できます。

Talend Studioを伴うTalendの全製品

tSalesforceBulkExecとtSalesforceOutputBulkExecで利用できる[Safety Switch] (安全スイッチ)オプション

tSalesforceBulkExecコンポーネントとtSalesforceOutputBulkExecコンポーネントの過剰なメモリ使用を防ぐため、[Safety Switch] (安全スイッチ)オプションが提供されました。データベースが100000文字以上のカラムを含んでいる場合は、このオプションを使わないでください。

Talend Studioを伴うTalendの全製品

Data Mapper: 新機能

機能

説明

対象製品

小数エレメントの新しいオプション CSV、フラット、JSON、マップ、XMLの表記プロパティに新しいオプションが2つ追加され、小数エレメントの処理と、暗黙の小数に関する問題の修正が行われました。
  • [Enforce zero scale on output decimals?] (出力された小数でゼロスケールを強制しますか?)オプションによって、[Decimal Places] (小数位)プロパティが0に設定された時に小数点以下を削除できるようになります。
  • [Decimal sign is implied on output] (出力に小数点記号を暗示)オプションを使えば、出力の小数点記号を削除できます。

TalendプラットフォームとData Fabricの全製品

Data Quality: 新機能

機能

説明

対象製品

ローカルモードのSpark 3.0のサポート SparkコンポーネントはローカルモードのApache Spark 3.0をサポートしています。ただし、tMatchIndex、tMatchIndexPredict、tNLPModel、tNLPPredict、tNLPPreprocessingを除きます。

TalendプラットフォームとData Fabricの全製品

このページは役に立ちましたか?

このページまたはコンテンツにタイポ、ステップの省略、技術的エラーなどの問題が見つかった場合はお知らせください。