目次

タイトルおよび著作権情報

はじめに

• 対象読者
• ドキュメントのアクセシビリティについて
• 関連ドキュメント
• 表記規則

1 Oracle Big Data Connectorsを使用する前に

• Oracle Big Data Connectorsについて
• Oracle Direct Connector for Hadoop Distributed File Systemのインストール
  • 必要なソフトウェア
  • Oracle Direct Connectorのインストール
  • Oracle Direct Connectorに対するユーザー・アクセス権の付与
• Oracle Loader for Hadoop
  • 必要なソフトウェア
  • インストール手順
• Oracle Data Integrator Application Adapter for Hadoop
  • システム要件および動作要件
  • テクノロジ固有の要件
• Oracle R Connector for Hadoop
  • サーバー・ソフトウェアのインストール
  • クライアント・ソフトウェアのインストール

2 Oracle Direct Connector for Hadoop Distributed File System

• Oracle Direct Connectorについて
• HDFS用の外部表の作成
  • 外部表向けの基本的なSQL構文
  • 外部表のテスト
  • 外部表の例
• HDFSデータ・パスの公開
  • ExternalTableコマンド構文
  • 構成ファイルの作成
  • 構成プロパティ
    • プロパティの説明
• HDFS内のデータの問合せ

3 Oracle Loader for Hadoop

• Oracle Loader for Hadoopとは
• Oracle Loader for Hadoopの使用
  • InputFormatの実装
    • HiveToAvroInputFormat
    • DelimitedTextInputFormat
  • loaderMapドキュメントの作成
    • loaderMapドキュメントの例
  • 表のメタデータへのアクセス
    • OraLoaderMetadataユーティリティの実行
  • OraLoaderの起動
  • Oracle Databaseへのファイルのロード(オフライン・ロードのみ)
    • デリミタ付きテキスト・ファイルからOracle Databaseへのロード
• OraLoader起動時の出力モード
  • JDBC出力
  • Oracle OCIダイレクト・パス出力
  • デリミタ付きテキスト出力
  • Oracle Data Pump出力
• パーティション表へのデータのロード時の負荷分散
  • サンプリング機能の使用
  • 負荷分散とサンプリング動作のチューニング
    • 負荷分散をチューニングするプロパティ
    • サンプリング動作をチューニングするプロパティ
  • Oracle Loader for Hadoopは常にサンプラのパーティション化スキームを使用するのか
  • サンプリング機能のプロパティの値が無効な場合
• 負荷分散機能に関する主な構成プロパティ
• OraLoaderの構成プロパティ
• Oracle Loader for Hadoopの使用例
• ターゲット表の特性
  • サポートされるデータ型
  • サポートされるパーティション化方法
• ローダー・マップXMLスキーマ定義
• Hadoop用OraLoaderの構成プロパティ
• 同梱されているソフトウェアのサードパーティ・ライセンス
  • Apache Licensed Code
  • Apache Avro avro-1.5.4.jar
  • Apache Commons Mathematics Library 2.2
  • Jackon JSON Library 1.5.2

4 Oracle Data Integrator Application Adapter for Hadoop

• 概要
  • 概念
  • ナレッジ・モジュール
  • セキュリティ
• トポロジの設定
  • ファイル・データソースの設定
  • Hiveデータソースの設定
  • Hadoopジョブを実行するためのOracle Data Integratorエージェントの設定
  • ローカル・エージェントでHadoopジョブを実行するためのOracle Data Integrator Studioの構成
• 統合プロジェクトの設定
• HiveモデルのリバースエンジニアリングからのOracle Data Integratorモデルの作成
  • モデルの作成
  • Hive表のリバースエンジニアリング
• インタフェースの設計
  • ファイルからHiveへのデータのロード
  • Hive内のデータの検証と変換
    • IKM Hive Control Append
    • CKM Hive
    • IKM Hive Transform
  • HiveおよびHDFSからOracleへのロード

5 Oracle R Connector for Hadoop

• ビッグ・データに対するRのサポート
  • Oracle R Connector for Hadoopについて
  • Oracle R Enterpriseについて
• Oracle R Connector for Hadoopの使用
• セキュリティ上の注意
• アルファベット順の関数
• カテゴリ別の関数
  • 接続
  • データのコピー
  • ファイルの調査
  • スクリプトの実行
• hdfs.attach
• hdfs.download
• hdfs.exists
• hdfs.get
• hdfs.ls
• hdfs.parts
• hdfs.pull
• hdfs.push
• hdfs.put
• hdfs.pwd
• hdfs.rm
• hdfs.rmdir
• hdfs.sample
• hdfs.size
• hdfs.upload
• hadoop.exec
• hadoop.run
• orhc.connect
• orhc.disconnect
• orhc.reconnect
• orhc.which

索引