Data Factory を使用して大規模な Office 365 データを Azure に統合する

2018年10月9日 [Integrate Office 365 data at scale into Azure by using Data Factory]粗訳

Microsoft Graph data connect のパブリック プレビューの一環として、Azure Data Factory によって新しい機能が追加されました。Azure で Office 365 データへの管理された安全かつスケーラブルなアクセスが可能になり、豊富な組織データに対してクラウドスケールの分析を適用できます。

詳細については、ブログ記事をご覧ください。

 

広告

Azure Data Factory の新しいコネクター: Oracle Service Cloud / Google AdWords

2018年9月11日 [New connectors in Azure Data Factory: Oracle Service Cloud and Google AdWords] 粗訳

Azure Data Factoryでは、Copy Activityを使用して、Oracle Service CloudおよびGoogle AdWordsからデータをコピーできるようになりました。 詳細は、Oracle Service CloudコネクターおよびGoogle AdWordsコネクターの記事を参照してください。

 

Azure Blob コネクタのサービスプリンシパルと MSI 認証をサポートする Data Factory

2018年8月22日 [Data Factory supports service principal and MSI authentication for Azure Blob connectors]粗訳

Azure Data Factory は、Shared Key と SAS トークンの認証に加え、Azure Blob Storage のサービスプリンシパルと管理サービスアイデンティティ(MSI)認証をサポートするようになりました。たとえば、Blob ストレージとの間でデータをコピーする場合、またはBlobストレージからメタデータを参照/取得する場合など、これらの新しい認証タイプを使用できます。 Azure Storage Azure Active Directory認証の概要Azure Data Factory の構成と前提条件(英語)から詳細を確認してください。

Data Factory では、これらの新機能をサポートする新しいリンクサービスタイプ “AzureBlobStorage” が導入されています。 “AzureStorage”タイプのリンクされたサービスを使用している場合はそのままサポートされます。新しい認証タイプを使用するか、新しいワークロードを開発するには、新しいタイプのリンクされたサービスを作成してください。データファクトリオーサリングUIは、新しい作成のための “AzureBlobStorage” タイプの生成を開始します。

自己ホスト統合ランタイムを使用するハイブリッド操作の場合、この機能はバージョン3.9(7月リリース)移行でサポートされています。

Azureデータファクトリ/ Azure Cosmos DBコネクタがUPSERTをサポートするようになりました

2018年8月3日 [Azure Data Factory/Azure Cosmos DB connector now supports UPSERT]粗訳

Azure Data Factory / Azure Cosmos DBコネクタは、Azure Cosmos DB一括実行ライブラリ(bulk executor library)と統合され、最高のパフォーマンスを提供します。

Data Factory は、INSERTに加えてUPSERTを使用してAzure Cosmos DBへの書き込みをサポートします。

パイプラインアクティビティオーサリングとデータコピーツールウィザードの両方で、データファクトリUIで設定を見つけることができます。 Azure Cosmos DBシンクの場合、アップサンプリングまたは挿入を選択できます。

詳細については、ドキュメント

ドキュメントを参照してください。自己ホスト統合ランタイムを使用したハイブリッドコピーの場合、この機能はバージョン3.9(7月リリース)からサポートされています。

Data Factory Lookup アクティビティは豊富なコネクタセットをサポートしています

2018年5月8日 [Data Factory Lookup activity supports a rich set of connectors]粗訳

Azure Data Factory Lookup アクティビティは、ADFでサポートされている70以上のデータ・ソースのいずれかからデータセットを取得する機能をサポートしました。オブジェクト名をハードコーディングするのではなく、後続のアクティビティーでどのオブジェクト(ファイル、テーブルなど)を操作するかを動的に決定するシナリオで使用することができます。

Lookupアクティビティは、構成ファイルの内容、構成表、または照会またはストアード・プロシージャーの実行結果を読み取り、返すことができます。 Lookupアクティビティの出力は、それがシングルトン値であれば、後続のコピーまたは変換アクティビティで使用できます。また、属性の配列の場合、ForEachアクティビティで使用することもできます。

詳細については、Lookup activity documentation(英語)を参照してください。

Data Factory GetMetadataアクティビティは、より多くのソースとメタデータオプションをサポートします。

2018年5月8日 [Data Factory GetMetadata activity supports more sources and metadata options]粗訳

Azure Data Factory の GetMetadataアクティビティは、次のオブジェクトから豊富なメタデータの取得をサポートするようになりました。任意のデータのメタデータ情報を検証するシナリオ、またはデータが準備されているときにパイプラインを起動するシナリオで使用できます。

 

  • ファイルストレージ内のファイルまたはフォルダのメタデータ:Azure BlobストレージAzureデータレイクストアAzureファイルファイルシステムFTP SFTP
  • アズールブロブストレージ
  • Azureデータレイクストア
  • Azureファイル
  • ファイルシステム
  • FTP
  • SFTP
  • データベースのテーブルメタデータ:Azure SQLデータベースAzure SQLデータウェアハウスSQL Server
  • Azure SQLデータベース
  • Azure SQLデータウェアハウス
  • SQLサーバー

 

各オブジェクトタイプの一連のメタデータオプションを含む詳細については、GetMetadata activity documentation(英語)を参照してください。

Azure Data Factoryで使用可能な新しいコネクタ

2018年5月7日 [New connectors available in Azure Data Factory]粗訳

Azure Data Factoryでは、コピー アクティビティを使用してSalesforce Marketing CloudおよびOracle Responsysからデータをコピーできるようになりました。

最新のデータウェアハウスソリューションやデータ駆動型SaaSアプリケーションを構築する場合、さまざまなデータソースからのデータを取り込むための接続オプションが増加し続けています。 サポートされるデータ ストアと形式からサポートされているコネクタの完全なリストを見つけることができます。

詳細については、Salesforce Marketing Cloud connector(英語)およびOracle Responsys connector(英語)の記事を参照してください。