DNET_ApacheSparkTutorial

Apache Sparkチュートリアル

• 戻る

概要

はじめ、言語を.NETに染めようと思ったが、.NET for Apache Spark（Spark SQLの該当節を参照）で上手く動作しない点があり、
また、言語バインディング、入力元・出力先、バージョンが多様で、サンプルがバラバラだったので、
本項に各言語毎のチュートリアルに関するインデックスを纏めることにした。

詳細

• 基本的にJupyter Notebookを使用する。
• 必要に応じて、Azure Databricks（PySparkの該当節を参照）にステップアップする。

Scala

環境

Scalaは、jupyter/all-spark-notebookを使用して、
コチラ（PySparkの該当節を参照）と同様の手法で、動かすことが出来る。

...

未記載（元 Wiki も見出しのみ）。

その他

PySpark

• PySpark（Spark SQLの該当節を参照）
• PySpark

.NET for Apache Spark

• .NET for Apache Spark（Spark SQLの該当節を参照）

Azure Databricks

• Azure Databricksチュートリアル

参考

未記載（元 Wiki も見出しのみ）。

移行メモ

• 元 Wiki では見出しそのものが他ページへのリンクになっていた箇所 （「PySpark」「.NET for Apache Spark」「Azure Databricks」）は、 GitHub Wiki では見出しからアンカが生成されるため、 見出しをプレーン・テキストとし、リンクは直下の本文に置いた。
• PukiWiki のページ内アンカ（#xxxxxxxx）は GitHub Wiki では再現できないため、 他ページのアンカを指すリンクは「〜（ページ名 の該当節を参照）」の形に置き換えた。
• マイクロソフト系技術情報 Wiki（techinfoofmicrosofttech.osscons.jp）への URL リンクは、移行済みの Azure Databricksチュートリアル に張り替えた。
• 本文の無い見出しは、その旨を明示した。

---

Tags: 移行, Apache Spark, チュートリアル, Scala, PySpark, .NET for Apache Spark, Jupyter Notebook, Azure Databricks