[B! db] cpwのブックマーク

DB に JSON を保存したいときに Protobuf を使うと便利 #LayerXテックアドカレ - LayerX エンジニアブログ

こんにちは。バクラク事業部 Enabling チームの @izumin5210 です。最近﹁HUNTER×HUNTER﹂の既刊を全部読みました。この記事はLayerXテックアドカレ2023の9日目の記事です。前回﹁1人目データアナリストとしてデータチームに異動しました﹂次回﹁Slack × Zapier × MiroでKPTでの振り返りをラクにする﹂ RDB や KVS などのデータ保存先において、データを正規化せずにそのまま保存したいと思うことはありませんか？8月にリリースされた﹁バクラク請求書発行﹂というプロダクトには﹁柔軟なレイアウトカスタマイズ﹂機能が搭載されています。リンク先の画面操作イメージを見ていただくと、この機能の雰囲気を理解していただけると思います。この機能が扱うレイアウトデータはまさに﹁関係の正規化をせずに保存したいデータ﹂でした。 bakuraku.jp こ

cpw 2023/11/17

JSONにしておけばSQL使える。それをしないのであれば、どう格納してもいいけどそもそもRDBに保存する必要あるんだっけ？というところから考え直した方がいい。あまり独自の考え方を入れないほうが良い思う。 ●db ●JSON ●設計 ●database ●データベース

リンク

SQLの実行計画の読み方 |

今回は、SQLを書く上で特にパフォーマンスに影響のあるSQLの実行計画の読み方について解説します。実行計画はデータベース製品によってさまざまに差異がありますが、ここでは比較的どのデータベース製品でも共通する内容について解説します。実行計画とは記述したSQLが実際にデータベースの内部でどのように処理されて結果を返すか、その処理方法を記述した情報です。 A5:SQL Mk-2では、SQLエディタで実行計画を見たい SQL の上にキャレットがある状態でメニューから [SQL(S)] – [SQLの実行計画(J)] または、Ctrl+E で表示できます。表示の仕方はデータベース製品ごとに異なりますが、多くのデータベース製品ではツリー状の情報として表現されます。︵このため A5:SQL Mk-2でもツリービューで実行計画を表示します。︶ツリーのリーフ︵端︶から処理が行われ、ルート︵根︶に向かっ

cpw 2023/05/06

これは重要

リンク

DB外の副作用をトランザクションから分離しよう / Isolate out-of-DB side effects from transactions

gotanda.rb#52@オンライン "DB外の副作用をトランザクションから分離しよう"

cpw 2023/04/21

DBにメールを送るレコードを書き込むのがいいよ。同一トランザクションで扱えるようになる。んで、実際の処理を別ジョブで実施。責任範囲が分離されるからプログラムが劇的に書きやすくなるよ。

db
設計

リンク

データモデルはドメインモデルに先行する - 設計者の発言

関わっているあるプロジェクトで、Javaでのコンポーネントベース開発を進めるためのクラス図が出来上がりつつある。DDD（ドメイン駆動設計）に関心を持つ技術者にとってお手本になるような端正なドメインモデルだ。それを眺めながら関係者がしみじみと感じていることがある。どんなに優秀なドメインエキスパートと組んだとしても、DDDにもとづいてこのモデルを「先に」生み出すことは不可能だっただろう。どういうことか。我々はまず、泥臭い分析と設計を重ね、あるべきデータモデルを完成させた。そのうえで実装方式の専門家の協力を仰ぎ、クラス図が出来上がった。つまり、データモデルからドメインモデルが導かれたのであって、その逆ではない。じっさい、ドメインモデルからデータモデルを導くことが不可能であったことは、両者を並べたら一目瞭然なのであった。これは重要な論点だ。データモデリングとドメインモデリングのどちらを先行させ

cpw 2022/07/03

最近はDBが軽視されることが多いように感じる。一番コアな部分なのにね。正直どんな言語でもFWでもDBがダメなら間違いなく最悪なシステムにしかならないのだからもっとDB設計を尊重すべき。 ●設計 ●言語 ●開発 ●db

リンク

PlanetScaleというサーバレスDBが凄く勢いのあるサービスらしいのでQuick Startやってみた - Qiita

PlanetScaleというサーバレスDBが凄く勢いのあるサービスと聞いて、公式にクイックスタートがあったのでやってみました。環境 PC: MacBook Pro (Intel Core 2016) OS: macOS Montery12.2.1 では概要から確認していきます。サーバーレスDBとはサーバがない、のではなく、サーバ管理や検討が不要 AWS Lambda(NoSQL)など PlanetScaleとは PlanetScale年表 2010年頃 YouTubeが急激に成長し、データベースが爆発しそうになっていたので、Sugu氏ともう一人のYouTubeのエンジニアがオープンソースプロジェクト﹁Vitess.io﹂︵ヴィテス︶を立ち上げる 2016年頃 MySQLでバイナリプロトコルを扱えるようにしたことで、VitessはYouTube以外の企業にとっても魅力的なシステムになり

cpw 2022/02/27

見てみるかなー

リンク

DBスキーマ変更管理ツール sqldef を試してみた - Qiita

1. sqldef とは sqldef は "The easiest idempotent MySQL/PostgreSQL/SQLite3/SQL Server schema management by SQL." と謳っているDBスキーマ変更管理ツールです。通常の開発において DDL 文を管理する場合、環境を1から作るように CREATE TABLE文など新規作成 DDL 文を準備すると共に、既に作成済みの環境でテーブルを変更するためにALTER TABLE文など差分適用 DDL 文を準備する必要があります。この2種類の DDL 文を二重管理しないといけないというのは DBAにとっては頭の悩ましい問題でした。︵差分適用 DDL 文のみ準備し、1から環境を作る場合も全ての変更を適用するという手もありますが…︶ sqldef を利用すると、変更適用先 DBの現在の状況と新規作成

cpw 2022/01/09

なんか怖いな。

db

リンク

よくあるオンプレOracleからRDSに移行したDBAの反省文 - ASMのきもち

この記事は JPOUG Advent Calendar 2021 - Adventar 17日目の記事です。昨日はShinodaさんの﹁Oracle Database からPostgreSQL への接続を試す - Qiita﹂でしたね。いやーOracle Database Gateway for ODBC全然使ったことがなかったので、これはぜひやってみよ…あれ、RDSでできるの？明日AWSサポートに早速連絡してみよう… 最近ブログを書く頻度がアドベントカレンダー以外書く頻度がない感じになってきております…コレハ、マズイ、ゾ！！笑さて弱気な内容はおいておいて…ここ最近、ろくに活動もできなかったのはこれをやっていたからなのです。そうよくある、(꜆꜄•ω•)꜆꜄꜆オンプレOracleからRDSに移行した話。今更感あるのですが、私と同じミスを減らすきっかけになれば。と思い、書いてみます

cpw 2021/12/17

性能試験って辛いよねー。今2回目のDB移行やってるけどすごい大変。特にネットワーク跨ぐと困る。

db

リンク

Aurora - クラウド時代のDBアーキテクチャ - 発明のための再発明

はじめに Amazon Auroraは、AWSを触る人ならほとんどの人が利用を検討したことがあるでしょう。 Amazon社内ではOracleを止めたというtweetもありました SHUTDOWN ABORT the last Oracle database running Amazon Fulfillment! pic.twitter.com/DorqTua2Lt— John Darrow (@jdarrow) 2019年3月29日そんなAuroraは、従来のRDBとは違いクラウド上で動くことを念頭に設計されています。また、ログが中心的な役割を持つことから﹁The log is the database﹂と表現されることもあります。そんなAuroraの仕組みについての論文を読んだので紹介します。読んだ論文は以下の2つです。 Amazon Aurora: Design Conside

cpw 2019/05/05

なるほどー。わかった木になる。

リンク

本番環境のデータをマスクしてステージング環境に同期する - 食べチョク開発者ブログ

こんにちは。エンジニアの西尾です。食べチョクのステージング環境では、本番環境のデータを日次で同期して利用しています。今回はステージング環境の役割と、どのようにデータ同期をしているのかについてご紹介いたします。ステージング環境食べチョクでは、手元のマシンでプログラムを修正しコードレビューを実施後、改修内容をステージング環境にデプロイしています。ステージングは、本番へのリリース前に修正箇所の動作確認・検証する環境です。この環境で動作や性能に問題がないかを確認後、本番環境へのデプロイを実施しています。ステージング環境には、本番と同等のデータが入っています。リリース当初は、ステージング環境と本番環境のデータは同期しておらず、テスト用のダミーデータで動作確認を行っていました。しかしダミーデータでの確認だと、ダミーばかりが並んだサイトと本番環境では見た目や印象が違っていて、UIが最適

cpw 2018/11/29

これやりたいなー

リンク

物理サーバを選定する際のポイント – Eureka Engineering – Medium

Eureka EngineeringLearn about Eureka’s engineering efforts, product developments and more.

cpw 2016/09/01

こういうのプログラムで書いた方が良いじゃんと思っていた時期もあったけど、求められるスピードが早すぎてプログラム書いてる暇ない。SQLでサクッと終わらせないと辛い。後プログラムはバグを入れ込みやすいかな

SQL
DB

リンク

1日に100万レコード増える場合のテーブル設計

MySQL︵マイエスキューエル︶は、TCX DataKonsultAB社などが開発するRDBMS︵リレーショナルデータベースの管理システム)です。世界で最も人気の高いシステムで、オープンソースで開発されています。MySQLデータベースサーバは、高速性と信頼性があり、Linux、UNIX、Windowsなどの複数のプラットフォームで動作することができます。 PHPは、Webサイト構築に特化して開発されたプログラミング言語です。大きな特徴のひとつは、HTMLに直接プログラムを埋め込むことができるという点です。PHPを用いることで、HTMLを動的コンテンツとして出力できます。HTMLがそのままブラウザに表示されるのに対し、PHPプログラムはサーバ側で実行された結果がブラウザに表示されるため、PHPスクリプトは﹁サーバサイドスクリプト﹂と呼ばれています。

cpw 2015/11/05

なにをしたいかによるけど、普通に考えればRDBMSに高値、安値、始値、終値だけ記録しといて細かい時系列データはファイルにでもすべきなのでは？全部RDBMSでやっちゃいかんでしょ。 ●DB

リンク

リレーショナルデータベースの仕組み (1/3) | POSTD

リレーショナルデータベースが話題に挙がるとき、私は何かが足りないと思わずにはいられません。データベースはあらゆるところで使われており、その種類も、小規模で便利なSQLiteからパワフルなTeradataまで様々です。しかし、それがどういう仕組みで機能しているかを説明したものとなると、その数はごくわずかではないでしょうか。例えば﹁リレーショナルデータベース仕組み﹂などで検索してみてください。ヒット数の少なさを実感できると思います。さらにそれらの記事は短いものがほとんどです。逆に、近年流行している技術︵ビッグデータ、NoSQL、JavaScriptなど︶を検索した場合、それらの機能を詳しく説明した記事はたくさん見つかると思います。リレーショナルデータベースは、もはや大学の授業や研究論文、専門書などでしか扱われないような古くて退屈な技術なのでしょうか？私は開発者として、理解していないものを

cpw 2015/09/16

リンク

トランザクション分離レベルについて極力分かりやすく解説してみた[SQL] - 明日になったら本気出せる

こっちに移動 qiita.com

cpw 2015/02/10

リンク

xRef - Database

$ sqlplus $ sqlplus myuser@myhost $ sqlplus myuser/xxxxx@myhost $ sqlplus myuser/xxxxx@myhost/xe

cpw 2015/01/02

リンク

Homepage - Flyway

Increase reliability of deployments by versioning your database Get Flyway for free Stay updated about Flyway Get all the latest guides, community news, product updates, and resources

cpw 2013/02/05

リンク

Rails で、Controller に定義されている action を一度に取得する方法はありますか？ - QA@IT

平素よりQA＠ITをご利用いただき、誠にありがとうございます。QA＠ITは﹁質問や回答を﹃共有﹄し﹃編集﹄していくことでベストなQAを蓄積できる、IT エンジニアのための問題解決コミュニティー﹂として約7年間運営をしてきました。これまでサービスを続けることができたのは、QA＠ITのコンセプトに共感をいただき、適切な質問や回答をお寄せいただいた皆さまのご支援があったからこそと考えております。重ねて御礼申し上げます。しかしながら、エンジニアの情報入手方法の多様化やQAサービス市場の状況、＠ITの今後のメディア運営方針などを検討した結果、2020年2月28日︵金︶15:00をもちましてQA＠ITのサービスを終了することにしました。これまでご利用をいただきました皆さまには残念なお知らせとなり、誠に心苦しく思っております。何とぞ、ご理解をいただけますと幸いです。QA＠ITの7年間で皆さまの知識

cpw 2012/09/13

リンク

削除フラグのはなし

Query Optimization with MySQL 5.7 and MariaDB 10: Even newer tricksJaime Crespo

cpw 2011/08/10

これはすごくためになる

リンク

NoSQLデータベースを40種類以上リストアップ、キーバリュー型にもいろいろある

Webスケールのデータを扱うためにさまざまなデータベースが登場してきている、ということを昨日のエントリ「データベースは目的別に使い分けるべし」で紹介しました。特にリレーショナルモデルをベースとしない、非SQL系（NoSQL）と呼ばれるさまざまな種類のデータベースが登場してきています。非SQL系のデータベースは以前からオブジェクトデータベースやドキュメントデータベース、階層型データベースなどが存在していましたが、最近注目されているのがキーバリュー型データストアと呼ばれるデータベース。ブログ「High Scalability」にポストされたエントリ「A Yes for a NoSQL Taxonomy」では、これら非SQL系のデータベースを詳細に9分類し、それぞれの分類に属するデータベースをリストアップしています（基になったのは「NoSQL is a Horseless Carriage」

cpw 2009/11/11

これはタイムリー

リンク

スキーマ不定のデータをRDBに永続化する方法の比較 — ありえるえりあ

Recent entries Apache2.4のリリース予定は来年(2011年)初め(あくまで予定) inoue 2010-12-23 Herokuの発音 inoue 2010-12-20 雑誌記事「ソフトウェア・テストPRESS Vol.9」の原稿公開 inoue 2010-12-18 IPA未踏のニュース inoue 2010-12-15 労基法とチキンゲーム inoue 2010-12-06 フロントエンドエンジニア inoue 2010-12-03 ASCII.techno logies誌にMapReduceの記事を書きました inoue 2010-11-25 技術評論社パーフェクトシリーズ絶賛発売中 inoue 2010-11-24 雑誌連載「Emacsのトラノマキ」の原稿(part8)公開 inoue 2010-11-22 RESTの当惑 inoue 2010-11-22 「プ

cpw 2009/10/06

リンク

ActiveRecord.js : Cross Browser, Cross Platform, JavaScript ORM

ActiveRecord.js makes it easy to begin working with databases in JavaScript on the client or server, with Google Gears & Chrome, Aptana Jaxer, Adobe AIR or any platform supporting the W3C HTML5 SQL Specification (currently Webkit and iPhone). Contributors ActiveRecord.js is the first released component of ActiveJS a JavaScript framework initiative sponsored by Aptana. This project is still in it's

cpw 2009/06/12

リンク

はてなブックマーク

タグ

関連タグで絞り込む (32)

dbに関するcpwのブックマーク (21)

お知らせ

今週のはてなブックマーク数ランキング（2024年7月第3週）

今週のはてなブックマーク数ランキング（2024年7月第2週）

はてなブックマーク透明性レポート（2024年 2月-2024年4月）

公式Twitter

キーボードショートカット一覧

はてなブックマーク

公式Twitter

はてなのサービス