SQLite + Pythonユーザ定義関数組込で進捗ダメじゃないですになりました - あんちべ！

テクノロジーカテゴリーの変更を依頼記事元:

antibayesian.hateblo.jp

107 usersがブックマークコメント

コメント

12

記事へのコメント12件

注目コメント
新着コメント

注目コメント算出アルゴリズムの一部にLINEヤフー株式会社の「建設的コメント順位付けモデルAPI」を使用しています

規約違反を報告

アプリのスクリーンショット

いまの話題をアプリでチェック！

バナー広告なし
ミュート機能あり
ダークモード搭載

アプリをダウンロード

関連記事

SQLite + Pythonユーザ定義関数組込で進捗ダメじゃないですになりました - あんちべ！

概要これまで﹁Hiveからデータ取得・簡単な加工→Pythonで加工・分析﹂という流れで作業していたのです... 概要これまで﹁Hiveからデータ取得・簡単な加工→Pythonで加工・分析﹂という流れで作業していたのですが、 Hive→SQLite→Pythonという流れにしたところ進捗が改善されたので、 SQLiteの簡単な使い方とPythonによるSQLユーザ定義関数の組込方法についてメモを残しておきます。特にユーザ定義関数の組込を自由に出来ると、分析する際、相当楽になるということに気付きました。 SQLite挟むことで何がどう改善されたの？ Hiveはデカいデータをゴリゴリ取ってくる分には SQLちょっと書くだけで済むので大変便利ですが、初動遅いためちょこちょこ小さいデータを何度も取ろうとするとストレス溜まります。そのため、これまではある程度のデータをまとめてHiveで落としてきて Pythonで加工してから分析するという流れを取っていました。ただ加工するために似たようなコード何

ブックマークしたユーザー

techtech05212023/11/11
ohnabe2017/07/26
akahana_12015/11/10
toshiyukino2015/02/24
xiangze2014/11/25
ma-aqua2014/07/24
habarhaba2014/04/24
pmc122014/02/07
czblue2014/01/29
ot2sy392014/01/29
jumitaka2014/01/29
techman9992014/01/02
ryskosn2014/01/01
delegate2013/12/31
yamitzky2013/12/30
mfham2013/12/27
hohoho_ho20052013/12/24
cocodrips2013/12/23

同じサイトの新着

同じサイトの新着をもっと読む

いま人気の記事

いま人気の記事をもっと読む

いま人気の記事 - テクノロジー

いま人気の記事 - テクノロジーをもっと読む

新着記事 - テクノロジー

新着記事 - テクノロジーをもっと読む

設定を変更しましたx