[B! db] ledlizerdのブックマーク

ソシャゲエンジニアの自分が開発に必須だなと思った知識（MySQL編） - Qiita

この記事の目的自分は、とある会社様の元でソシャゲの API 開発をさせていただいています。ソシャゲは、リリース時やイベント時などに集中アクセスされやすく、負荷軽減の知識がない状態で開発を行ってしまうと、運用時に緊急メンテ祭りになりやすいジャンルかなと思っています。これまで培ってきた MySQL の知識ですが、脳内メモリ量の関係上、暗記できないのでメモしておこうというのが主目的です。ここ数年ほどソシャゲ開発しかしていないため、偏っている感がある内容ですのでご注意ください。概要ストレージエンジンは InnoDB。メインで扱っている MySQL バージョンは 5.6。記事の内容ですが、これらのキーワードを見て、おおよそ分かる方は読む必要はないかと思います。インデックス系クラスタインデックスカバリングインデックス EXPLAINで注意するべき値トランザクション系 MVCC

ledlizerd 2019/09/25

リンク

ユーザ情報を保存する時のテーブル設計 - そーだいなるらくがき帳

はじめに ※この発言は個人の見解であり、所属する組織の公式見解ではありません用法用量を守り、個人の責任で業務に投入してください参考資料 2024/02/14追記実際のテーブル設計の詳細はこちらを参考にどうぞ。 agilejourney.uzabase.com 要件 User情報を保存するときにどのようなテーブル設計を行うか今北産業で頼むテーブルに状態を持たせず状態毎のテーブルを作る状態が変わればレコードを消して別のtableに作るtableの普遍的な情報は別に持たせる僕の考えた最強のDB設計PostgreSQLをベースの雑なER図を作った。これを元に話を進める。table構成 users 親tableであり、すべてのユーザはここに属する。基本はINSERTのみでUPDATE、DELETEを考慮しない。 user_detail userに付随する詳細の情報がここに登録

ledlizerd 2018/05/02

リンク

「SQLアンチパターン」を避けるためのチェックリスト①（DB論理設計編） - log4ketancho

ずっと前から積ん読状態だった﹁SQLアンチパターン﹂を読みました。何年積んでたか分からないSQLアンチパターン読み終わったー。噂に違わずいい本ですねー。もっと早く読むべきだった。— @ketancho (@ketancho) 2018年3月6日噂通りとても良い本で、まさに﹁エンジニアとしての血肉本﹂と言えます。1, 2年目の頃に読んでおくべきだったなーと少し後悔しています。 SQLアンチパターン作者: Bill Karwin,和田卓人,和田省二,児島修出版社/メーカー: オライリージャパン発売日: 2013/01/26メディア: 大型本購入: 9人クリック: 698回この商品を含むブログ (46件) を見る読んで終わりだと身につかないと思うので、自分なりのチェックポイントを言語化しておこうと思います。長くなってしまったので、章ごとに4つに分けたいと思います。この記事はその第一弾と

ledlizerd 2018/03/19

リンク

Top 20+ MySQL Best Practices | Envato Tuts+

Database operations often tend to be the main bottleneck for most web applications today. It's not only the DBA's (database administrators) that have to worry about these performance issues. We as programmers need to do our part by structuring tables properly, writing optimized queries and better code. In this article, I'll list some MySQL optimization techniques for programmers. Before we start,

ledlizerd 2017/12/14

リンク

時系列データベースに関する基礎知識と時系列データの符号化方式について - クックパッド開発者ブログ

こんにちは。インフラストラクチャー部 SRE グループの吉川 ( @rrreeeyyy ) です。今期オススメのアニメはツインエンジェル BREAK です。普段の業務並びに趣味の一環として、サーバのモニタリング環境の調査や改善に取り組んでいます。そこで本稿では、モニタリングのコンポーネントの一つとして外すことが出来ない、時系列データベースの基礎知識に関して紹介します。そもそも時系列データ・時系列データベースとは？時系列データというのは、特定の時間ごとに何らかの値を取得した際の、取得した一連の値を指します。例えば、以下のようなフォーマットをしたデータなどは時系列データにあたるでしょう。 timestamp1,key,value1 timestamp2,key,value2 timestamp3,key,value3 : 時系列データベースとは、上記のような時系列データの保存・処理に

ledlizerd 2017/05/31

リンク

mysqlをdisる会 - Qiita

はじめにやあ︵´・ω・｀) ようこそ、バーボンハウスへ。このmysqlはサービスだから、まずsystemctl start mysqldして落ち着いて欲しい。うん、﹁また﹂なんだ。済まない。仏の顔もって言うしね、謝って許してもらおうとも思っていない。でも、このタイトルを見たとき、君は、きっと言葉では言い表せない﹁ときめき﹂みたいなものを感じてくれたと思う。殺伐とした世の中で、そういう気持ちを忘れないで欲しいそう思って、この記事をかいたんだじゃあ、注文を聞こうか。というわけでmysqlをdisります。disるだけなので内容はありません。いいね？ mysql には罠がいっぱいそうなんですよ罠がいっぱいなんですよ奥さん。いやこれはおそらくmysqlに限った話ではないんですけど例えばこういうの！ MySQLのチューニングなんてしたらパフォーマンス落ちるだけだし、デフォル

ledlizerd 2017/03/16

リンク

カーネギーメロンのDBに関する講義が面白いのでおすすめ - だいたいよくわからないブログ

ここに書くことによって途中でやめられなくするメソッドです。ハッカーニュースを眺めていたら以下のようなCS系講義動画のまとめリポジトリが流れていました。 GitHub - Developer-Y/cs-video-courses: List of Computer Science courseswith video lectures. へーっと思いながら何個かポチってみたところ以下に出くわしました。 15721.courses.cs.cmu.edu 英語が︵自分にとって︶聞き取りやすく、動画の品質︵画質やスライドがちゃんと見えるかどうかといった部分︶も良いものでかつ興味のある内容で出来ればスライドもおしゃれで・・・となるとなかなか少ないですが、これはかなり見やすいです。スライドも概念図が頻繁に登場したりして、これだけでも聞き取れなかった部分などをかなり補完できます。スケジュールページ

ledlizerd 2016/12/12

リンク

4ステップで作成する、DB論理設計の手順とチェックポイントまとめ - Qiita

はじめに﹁達人に学ぶDB設計﹂、﹁SQLアンチパターン﹂を読んだのでDB設計をする流れとその過程でのチェックポイントをまとめてみました。今回は本に載っているものの中でも特に重要そうな部分に絞ってみました。さらに詳しいことを知りたい方は本を購入してみてください。個人的には達人に学ぶDB設計徹底指南書のほうがおすすめです。こちらだけあれば十分だと思います。 DB設計には大きく分けて論理設計と物理設計の二つがありますが、今回はアプリケーション開発でメインとなる論理設計の部分に焦点をあてて説明をします。一番最後にチェックポイントだけをまとめた章を用意したので、チェックポイントだけ知りたい方は最後だけ見ていただければと思います。 DB論理設計の流れ DB論理設計は以下のようなステップで進めていきます。エンティティの抽出エンティティの定義正規化ER図の作成以下では各ステップごとに章を

ledlizerd 2016/11/01

リンク

SQLおじさん(自称)がBigQueryのStandard SQLを使ってみた

2016/10/22 GCPUG Fukuoka 4thで発表。 BigQueryのStandard SQLの機能やLegacySQLからの移行に関する注意点など。Read less

ledlizerd 2016/11/01

リンク

MySQL で utf8 と utf8mb4 の混在で起きること - tmtms のメモ

MySQL を UTF-8 で使おうと思ってハマりがちなのは charset utf8 を指定してしまうことです。 MySQL の UTF-8 には歴史的事情により utf8 と utf8mb4 の二つあります。 UTF-8 は1バイト〜4バイトで1文字が構成される文字コードですが、MySQL の utf8 は4バイト文字を扱うことができません。ハマりたくなければ utf8mb4 を使いましょう。 utf8 を使ってしまった場合に4バイト文字がどのように扱われるか、自分でもうろ覚えだったのでメモしておきます。登録接続が utf8mb4 でカラムが utf8mb4 あたりまえですが、そのまま登録されます。 mysql> insert into utf8mb4 (c) values ('美味しい🍣と🍺'); mysql> select * from utf8mb4; +--------

ledlizerd 2016/09/08

リンク

トランザクションの設計と進化

2016年7月27日 Database Lounge Tokyoで話した内容。タイトルは名ばかりでリカバリとIn-MemoryDBの話が主体Read less

ledlizerd 2016/07/29

あとで読む

リンク

UberのPostgresqlからNoSQL on MySQLへの移行を読んでざっくりまとめた

Uber-migrated-pg-to-mysql.md Why Uber Engineering Switched from Postgres to MySQL - Uber Engineering Blog のまとめ Posgresqlだと pgは追記型なので少しの更新でも多くのdiskへのwriteがおきるカラムを一つ更新しただけで多くのindexの書き換えが起こるよって、replicationはWALを送るので更新が多いとWALが大量に送られる repcliationでは物理的なdiskの変更を送る DC間でレプリするときつい bugがあってreplica間でMVCCの不整合が起きる masterとreplica同じdisk上のデータ構成を共有するのでupgradeがつらい cache readはsyscallとosのpage cache経由なので重い 1コネクション1プロセス

ledlizerd 2016/07/28

リンク

ゲームエンジニアのためのデータベース設計

DevLOVE X Day1 C-5のセッションです。 ITの活用範囲の広がりとともに、費用・品質よりもデリバリを優先するプロジェクトも増えてきました。しかし﹁しっかり考えるよりも、作ってリリースしちゃおうぜ、正解なんて誰にも分からないんだから﹂というマントラを唱えながら、返済見込みの立たない大量の技術的負債を抱える。それが最善の選択なのか、もう少しだけ立ち止まって考えてみませんか? YAGNIという言葉を便利に使いすぎてはいませんか?コードを書きなぐるのと、ちょっと考えて設計して作るのとで、そんなに開発スピードに違いがありますか?考えてみたいと思います。 This document discusses messaging queues and platforms. Itbegins with an introduction to messaging queues and their

ledlizerd 2016/05/30

リンク

ヤフー社内でやってるMySQLチューニングセミナー大公開

SQLアンチパターン 26章「とりあえず削除フラグ」 2015/08/31 @ GMO Yours #ronsakucasual https://atnd.org/events/68902

ledlizerd 2016/02/23

リンク

MySQL Spiderエンジンを使ってみた。〜データベースシャーディング(sharding)とは〜 - 気ままに書いてみました日記

もしかしたら使うかもしれないので調べてみた。 shard 日本語に訳すと(ガラスや貝殻の) ﹁破片﹂といったような意味データベースをshardに分解して複数のサーバに分散して運用するのがDB sharding データベースパーティショニングとも言えるのかしら？単一のサーバのDBテーブルを複数のファイルに分割するのをパーティショニングとも呼ぶが、﹁パーティショニング﹂という言葉を使ってDB shardingのことを言っているブログ等もちらほら見かけます。より突っ込んでみたい人は﹁shared nothing﹂でぐぐってネ。なぜデータベースを分散処理するのか横軸にはサービス運用開始からの時間経過を設定し、縦軸には﹁DBの応答時間﹂、﹁DBへの問い合わせ数﹂、﹁DBサイズ﹂の各数量をとります。サービスが順調に利用されていっているものとし、﹁DBサイズ﹂や﹁DBへの問い合わせ数﹂は時間経

ledlizerd 2016/01/05

リンク

ソーシャルゲーム案件におけるDB分割のPHP実装

ソーシャルゲーム案件におけるDB分割のPHP実装～とにかく分割ですよ。10回じゃ足りない。20回くらい分割。～株式会社インフィニットループ　佐々木亨基 2013/7/15にPHPMatsuri2013内で発表された講演のスライドRead less

ledlizerd 2015/12/22

リンク

Amazon Auroraを真に理解するための性能検証 | 外道父の匠

今回は、まだ全然底が見えていないAuroraのガチンコ検証となります。公式資料に、発表当初の簡単な検証数値もありますが、自分でやらないと理解できない部分が多くあるためです。既にAuroraにするだけで従来より速くなる説は有力ですが、なぜ速くなるのか、どのような点に注意を払って運用すべきなのか、といったことを理解するために、より局所的な検証をいくつか行って考察していきたいと思います。目次楽しい検証になって長くなりましたので、目次を置いておきます。はじめにクエリのレスポンスタイムクエリキャッシュ CPU利用率とIOPSの性質データ容量とストレージ性能の関係インスタンスタイプとストレージ性能の関係運用面の色々何がボトルネックになるかはじめにいくつか前提的なものを。ベンチマークは全て、sysbench を使ってテストデータ作成・ランダム参照／更新クエリを実行していますデ

ledlizerd 2015/11/05

リンク

1日に100万レコード増える場合のテーブル設計

MySQL︵マイエスキューエル︶は、TCX DataKonsultAB社などが開発するRDBMS︵リレーショナルデータベースの管理システム)です。世界で最も人気の高いシステムで、オープンソースで開発されています。MySQLデータベースサーバは、高速性と信頼性があり、Linux、UNIX、Windowsなどの複数のプラットフォームで動作することができます。 PHPは、Webサイト構築に特化して開発されたプログラミング言語です。大きな特徴のひとつは、HTMLに直接プログラムを埋め込むことができるという点です。PHPを用いることで、HTMLを動的コンテンツとして出力できます。HTMLがそのままブラウザに表示されるのに対し、PHPプログラムはサーバ側で実行された結果がブラウザに表示されるため、PHPスクリプトは﹁サーバサイドスクリプト﹂と呼ばれています。

ledlizerd 2015/11/05

リンク

DB高速化道場　DB管理者のための、ハードウエア能力最大化テクニック！最新ハードウェアとチューニングで激速データベース！

富士通｜Fujitsu_SPARC @Fujitsu_SPARC 本日開催！　＠IT DB高速化道場　DB管理者のための、ハードウエア能力最大化テクニック！　会場では、PRIMEFLEX for Oracle Database が、皆様のお越しをお待ちしております！　#fjsparc pic.twitter.com/lMZgf2vBWl

ledlizerd 2015/09/18

リンク

リレーショナルデータベースの仕組み (1/3) | POSTD

リレーショナルデータベースが話題に挙がるとき、私は何かが足りないと思わずにはいられません。データベースはあらゆるところで使われており、その種類も、小規模で便利なSQLiteからパワフルなTeradataまで様々です。しかし、それがどういう仕組みで機能しているかを説明したものとなると、その数はごくわずかではないでしょうか。例えば﹁リレーショナルデータベース仕組み﹂などで検索してみてください。ヒット数の少なさを実感できると思います。さらにそれらの記事は短いものがほとんどです。逆に、近年流行している技術︵ビッグデータ、NoSQL、JavaScriptなど︶を検索した場合、それらの機能を詳しく説明した記事はたくさん見つかると思います。リレーショナルデータベースは、もはや大学の授業や研究論文、専門書などでしか扱われないような古くて退屈な技術なのでしょうか？私は開発者として、理解していないものを

ledlizerd 2015/09/16

リンク

はてなブックマーク

タグ

関連タグで絞り込む (54)

dbに関するledlizerdのブックマーク (34)

お知らせ

今週のはてなブックマーク数ランキング（2024年7月第3週）

今週のはてなブックマーク数ランキング（2024年7月第2週）

はてなブックマーク透明性レポート（2024年 2月-2024年4月）

公式Twitter

キーボードショートカット一覧

はてなブックマーク

公式Twitter

はてなのサービス