.NETエンジニア・プログラマ向けの技術情報・業界ニュースをお届けします。

  1. FEnet.NETナビ
  2. .NETコラム
  3. クラウド
  4. Azure Data Factoryとは?作成方法を分かりやすく解説

Azure Data Factoryとは?作成方法を分かりやすく解説

  • クラウド
公開日時:   更新日時:
Azure Data Factoryとは?作成方法を分かりやすく解説
この記事でわかること
    基本情報技術者試験の試験対策はこちら>>
    最新情報や関心のある情報を毎日お届け。  FEnetメールマガジン    メルマガ登録はこちらから>>

    Factoryは日本語に訳すと「工場」という意味になります。Azureには原材料となるデータを加工して製品を生産する工場のような働きをするサービスがあります。それが「Azure Data Factory」です。データを収集し、すぐに使用できる情報に変換してくれるAzure Data Factoryは、今後ニーズが増えることが予想されるサービスです。ここでは、サービスの概要や作成方法を紹介するので、基本を確認していきましょう。

    システム
    エンジニア
    Azure Data Factoryは聞いたことがありませんでした。どのようなサービスなのでしょうか?
    プロジェクト
    マネージャー
    Azure Data Factoryを語る上で、まずキーワードとなる単語が、「ETL」と「ELT」です。このふたつの単語をベースにどのようなサービスなのかを解説していきます。

    Azure Data Factoryとは

    データを統合させる場合には、とても大事なプロセスがあります。それが、Extract(抽出)、Transform(変換・加工)、Load(格納)の3つです。頭文字をとって「ETL」と呼ばれています。

    かつてはE→T→Lの順に処理を行うことが一般的でしたが、現在は、E→L→Tの順に処理を行うことが主流になりつつあります。頭文字をとって「ELT」と呼ばれるこの手法では、データベースに格納後にデータの変換or加工を行うため、容量が必要となります。

    しかし、Azureのようなクラウドサービスでは、スケーリングを柔軟かつ手軽に行うことが可能です。ビッグデータの運用には最適な機能といえるでしょう。

    Azure Data Factoryでは、ETLはもちろんのこと、ELTの処理も視覚的な操作で実現可能です。データの格納、移動、準備、変換、処理を数回のマウスクリックで行える点は、エンジニアやエンドユーザーにとっても使い勝手が良いシステムだといえます。

    また、コードの生成とメンテナンスはマネージドApache Sparkによって行われます。オンプレミスとクラウドによるハイブリッドなデータ統合や、ビルドとデプロイを自動化するパイプラインを使うこともできるのが特徴として挙げられます。

    Azure Data Factoryの料金

    Azureサービスをすでに利用しているのであれば、初期費用はかかりません。Azureはサブスクリプションサービスであるため、システムが稼働した時間だけ課金されます。

    データパイプラインと統合した場合とSQL Serverと統合した場合では、料金プランが異なります。また、データパイプラインと統合する場合、Data Factoryのバージョン(V1・V2)によっても料金プランは異なるため、事前に確認しておきましょう。

    例えば、V2バージョンでデータパイプラインと統合する場合、「パイプラインのオーケストレーションと実行」、「データフローの実行とデバッグ」、「Data Factory の操作数」によって料金が変動します。
    詳細は料金ページをご確認ください。

    Azure Data Factoryの作成方法

    1. Azure portalにサインインし、[リソースの作成]→[統合]→[Data Factory]を選択します。

    “

    2. Data Factoryの作成を行います。[基本]の項目を入力していきます。

    “

    3. [Git configuration]の項目は後で設定することも可能です。

    “

    4. [作成]をクリックすることでData Factoryが作成されます。

    “

    5. デプロイ完了後、Data factoriesから作成したリソースを確認することができます。

    “

    システム
    エンジニア
    Azure Data Factoryを上手に使いこなせば、ビッグデータも効率的に処理できますね!Azureをもっと勉強して、経営に活かせるアドバイスができるエンジニアを目指します!
    プロジェクト
    マネージャー
    Azureエンジニアはこれからニーズ増えそうですから、目指す価値はありますね。Azure Data Factoryは本当に有効活用できれば、企業経営にとって強みになります。

    企業経営管理に活用できるAzure Data Factory

    企業には会計管理、勤怠管理、販売管理、顧客管理、物流システム、在庫管理など部門ごとに様々なデータが存在しています。こういった内部情報は、正しい経営判断を行うのであれば俯瞰して読み解く必要があります。そのためにはデータの統合が必要不可欠です。AzureにはAzure Data Factoryといったデータ統合機能が搭載されています。Azure に特化したエンジニアを目指して、企業ITのコンサルティングに活かしてみるのも良いのではないでしょうか。

    >>>Azureの案件を探すならFEnet .NET Navi

    FEnet.NETナビ・.NETコラムは株式会社オープンアップシステムが運営しています。
    株式会社オープンアップシステムロゴ

    株式会社オープンアップシステムはこんな会社です

    秋葉原オフィスには株式会社オープンアップシステムをはじめグループのIT企業が集結!
    数多くのエンジニアが集まります。

    秋葉原オフィスイメージ
    • スマホアプリから業務系システムまで

      スマホアプリから業務系システムまで

      スマホアプリから業務系システムまで開発案件多数。システムエンジニア・プログラマーとしての多彩なキャリアパスがあります。

    • 充実した研修制度

      充実した研修制度

      毎年、IT技術のトレンドや社員の要望に合わせて、カリキュラムを刷新し展開しています。社内講師の丁寧なサポートを受けながら、自分のペースで学ぶことができます。

    • 資格取得を応援

      資格取得を応援

      スキルアップしたい社員を応援するために資格取得一時金制度を設けています。受験料(実費)と合わせて資格レベルに合わせた最大10万円の一時金も支給しています。

    • 東証プライム上場企業グループ

      東証プライム上場企業グループ

      オープンアップシステムは東証プライム上場「株式会社夢真ビーネックスグループ」のグループ企業です。

      安定した経営基盤とグループ間のスムーズな連携でコロナ禍でも安定した雇用を実現させています。

    株式会社オープンアップシステムに興味を持った方へ

    株式会社オープンアップシステムでは、開発系エンジニア・プログラマを募集しています。

    年収をアップしたい!スキルアップしたい!大手の上流案件にチャレンジしたい!
    まずは話だけでも聞いてみたい場合もOK。お気軽にご登録ください。

    株式会社オープンアップシステムへのご応募はこちら↓
    株式会社オープンアップシステムへのご応募はこちら↓

    新着案件New Job