🆕 新着Qiita記事をお知らせします。​

​『Intel MKLのようなネイティブな数学ライブラリでSpark機械学習アルゴリズムを加速する』
https://qiita.com/yechangyao/items/7064b04f0c0ca2f05c17 by @yechangyao @​Qiita

#spark_qiita #sparkmllib_qiita #hdp_qiita #mkl_qiita #svd_qiita

Intel MKLのようなネイティブな数学ライブラリでSpark機械学習アルゴリズムを加速する - Qiita

最近、仕事上でSpark MLlibのSVD(特異値分解)でMovieLensの推薦を実装するアプリの性能調査をしております。思った以上遅くて困っていました。SparkのDriver, Executorのメモリ、Executor数、O...

🆕 新着Qiita記事をお知らせします。​

​『HDP3 Hive Warehouse connectorを使ってSparkからHiveテーブルにアクセスする』
https://qiita.com/yechangyao/items/5526f074c2bba9a1eefb by @yechangyao @​Qiita

#spark_qiita #hive_qiita #hdp_qiita #hivewarehouseconnector_qiita

HDP3 Hive Warehouse connectorを使ってSparkからHiveテーブルにアクセスする - Qiita

HDP3の環境でSparkからHiveテーブルにアクセスする方法をご紹介します。 HDP以前のバージョンはSpark HiveContext/SparkSession を使ってHiveテーブルにアクセスしていますが、HDP3はHor...