[B! db] tyoro1210のブックマーク

ゲーム業界のデータベース事情。大量のシャーディングで複雑化する負荷分散、メンテナンスで止めないとスケールアップ・ダウンができないなどの課題。解決方法は？［PR］

ゲーム業界のデータベース事情。大量のシャーディングで複雑化する負荷分散、メンテナンスで止めないとスケールアップ・ダウンができないなどの課題。解決方法は？﹇PR﹈日常的に多数の同時アクセスが発生し、大量のデータが蓄積されるオンラインゲームのバックエンドは、データベースにとってもっとも過酷な環境の1つだといえます。このバックエンドデータベースとしてよく使われているのがMySQLデータベースです。しかしその使われ方は一般的なMySQLとは異なり、データベースを細かく分割して多数のサーバに負荷を分散するシャーディングと呼ばれる仕組みを構築するなど、複雑なシステム構築と運用が行われているのが現実です。そこで急速に注目度を高めているのが、MySQL互換でありつつ分散データベースの機能を備え、シンプルなクラスタ構成で高い負荷に耐える、いわゆる﹁NewSQL﹂と呼ばれる分野の代表的なデータベースの1

tyoro1210 2023/11/14

『現行のAuroraを分割するのと、TiDBに全部まとめるのは同程度』『金額的には同程度でも開発や運用面でのコストメリットがある』『移植しても動きますが、性能がそんなに出ないパターンがある』

リンク

顧客のコンテンツデータを消失させた話 - Qiita

簡単な自己紹介18日にポツンと空いていたので、枯れ木も山のなんとやら..で書かせて頂きます。エンジニアとしてもうすぐ7年目になります。専門はバックエンド(メイン‥Java/C#)です。しかし、少人数開発かつ安定していない現場が多かったため、足りないロールは巻き取って仕事をすることが多く、AWSの構築を一部やったり、アプリ(iOS/Android/ReactNative)の面倒を見たこともあります。最近1年で一番やって楽しかった仕事は、bitriseでリリースやstgアプリ環境構築したこと。一番嫌だった仕事は、超レガシーなReactNativeアプリをAndroid64bit対応でバージョンアップしたこと。(なお私はバックエンド担当...) もう完全にバックエンド関係ないですねやらかした案件概要エンジニアとして2年目の秋になります。とある、Webサイト構築屋さんにエンジニアと

tyoro1210 2019/12/18

『5. 問題が発生したら、DBの向き先を元に戻す』この手順あるなら既存DBあるはずだしデータ消失はしなさそうっと思ったらしてなかった。

Qiita
db

リンク

postgresのデータを盗まれた話 - のんびりやの日記

はじめにさっぶ。どうも、だーやまんです。この記事は、本番環境でやらかしちゃった人 Advent Calendar 2019 - Qiitaの11日目の記事です。これは、中途半端な知識でサービスを運用していた結果、タイトル通りの大失敗をしてしまったお話です。個人開発での出来事なので、業務で起きたことかと胃薬を握られていた方はご安心ください。語るのもすごい恥ずかしいレベルですが、戒めのために晒しておきます。この記事を読んでほしい人初めてインターネット上にサービスを公開しようとしている人喋太郎の利用者様(この場をお借りして、改めてお詫び申し上げます。本当に申し訳ございませんでした。) 背景とか Discord読み上げBot ﹁喋太郎﹂にてやらかしました www.dayaman.work 利用者が約10万人さくらのVPSにてAppサーバ2台、DBサーバ1台で運用各サーバの死活監視

tyoro1210 2019/12/11

『Portは5432』『postgresユーザがデフォルトパスワード』『サブネットマスクが0』味わい深い / なんかいい学習機会になったようで、ほっこりする話しでよかった。(サービス利用者の心中は置いといて

db

リンク

異世界召喚～私、能力はバックエンドって言ったよね！～ - Qiita

背景間違って入ってしまったSI企業での開発経験談です。入社前に「バックエンドの経験しかない」と伝えたがフロントもやる羽目に。入って知ったLAMP環境での開発。あと顧客の窓口もやる羽目に。私の担当するシステムは二期目で、引継ぎなし・ドキュメントなし・前任者なし、のトリプルコンボ。 PCは13インチのラップトップ、サーバはレンタルサーバ。 Gitなし、CIなし、規約なし、静的チェックなし（エディタはサクラ）。既存コードがPHPなのにオブジェクト指向じゃない。フレームワーク使えない。開発規模はだいたい20人月。期限は3か月。偉い人「OSSﾊｾｷｭﾘﾃｨｶﾞｰ」開発の流れローカル環境（MAMP）で実装。実装したファイルをFTPソフトでレンタルサーバのテスト環境にアップロード（上書き）。テストを行って（テスト仕様書なし）動けば本番環境にアップロードなお、開発環境を変える裁量は

tyoro1210 2019/12/10

会社選びを「やらかしちゃった」やつか

db
Qiita

リンク

なぜあなたは SHOW ENGINE INNODB STATUS を読まないのか - そーだいなるらくがき帳

この記事は、MySQL Casual Advent Calendar 2017の20日目の記事です。煽り気味のタイトルですがみなさん SHOW ENGINE INNODB STATUS 読んでますか？ SHOW ENGINE INNODB STATUS \G 見づらいのなんとかならんのか。— そーだい@初代ALF (@soudai1025) 2016年12月20日わかる。でもMySQLの振る舞いを知る中でSHOW ENGINE INNODB STATUSを読まざる得ない場面はそこそこあります。どんな時に必要になるのでしょうか？そこでSHOW ENGINE INNODB STATUSにまつわる話を書きます。 SHOW ENGINE INNODB STATUS をまず読みやすくするまず末尾に \G を付けましょう。これで3倍読みやすくなります。次に pager less -S を

tyoro1210 2018/06/27

mysql
db

リンク

SQLインジェクションゴルフ - なんと3文字で認証回避が可能に

昨日のエントリ﹁SQLインジェクションゴルフ - 認証回避の攻撃文字列はどこまで短くできるか?﹂にて、認証回避の攻撃文字列が5文字にできる︵﹁'OR'1﹂︶ことを示しましたが、@masa141421356さんと、やまざきさん︵お二人とも拙著のレビュアーです︶から、idとpwdにまたがった攻撃例を示していただきました。やまざきさんの例は、MySQL限定ながら、なんと3文字です。これはすごい。 @masa141421356さんの攻撃例 @masa141421356さんのツイートを引用します。 @ockeghem 大抵のDBでid=''OR' AND pwd='>' ' が通ると思います︵id側に﹁'OR﹂, pwd側に﹁>' ﹂で6文字︶。長さ0の文字列がNULL扱いされないDBなら最後のスペースを消して5文字です。 — masa141421356 (@masa141421356) June

tyoro1210 2013/06/25

リンク

MySQL :: MySQL 8.0 リファレンスマニュアル :: 13.3.6 LOCK TABLES および UNLOCK TABLES ステートメント

SAVEPOINT、ROLLBACK TO SAVEPOINT および RELEASE SAVEPOINT ステートメント

tyoro1210 2013/05/10

『LOCK TABLES を利用する時、ステートメントの中で利用する予定の全てのテーブルをロックしなければいけません。』

db
mysql

リンク

Amazon SimpleDB（可用性と柔軟性に優れた非リレーショナルデータベースサービス） | AWS

Amazon SimpleDB は、可用性と柔軟性に優れ、データベース管理の負担を軽減する、NoSQL データストアです。開発者は、データ項目の格納と照会をウェブサービスリクエスト経由で行うだけで、残りの処理は Amazon SimpleDB によって自動的に実行されます。リレーショナルデータベースの厳格な要件の制約を受けない Amazon SimpleDB は、高い可用性と柔軟性を実現するように最適化されていますが、管理の負担はほとんどありません。その裏で、Amazon SimpleDB は、地理的に分散した場所でユーザーのデータの複数のレプリカを作成、管理し、高可用性とデータの堅牢性を可能にしています。実際にデータを格納し、リクエストを処理することで消費したリソースのみにサービスの請求が発生します。オンザフライでデータモデルを変更することができ、ユーザーのためにデータが自動的にインデ

tyoro1210 2012/10/16

リンク

Big Sky :: VimでDBが操作できる vdbi-vim 作った。

DB操作ツール Emacs DBIを作ってみた - 技術日記＠kiwanami このツールの目的は、クロスプラットフォームで便利なDB操作環境を実現することです。 pgAdmin や MySQL Query Browser のようなGUIの良さをCUIで実現してみようとしてみました。すなわち、ぼくのかんがえたさいきょうのDBツールです。ちなみに、このツールにとってEmacsはただの実行環境です。Emacs使わない人でも使うと便利だと思います。 http://d.hatena.ne.jp/kiwanami/20120305/1330939440 VimもーVimもー！って事で作りました。 mattn/vdbi-vim - GitHub Database client for Vim https://github.com/mattn/vdbi-vim Emacs版はepcというRPCプロト

tyoro1210 2012/03/08

vim
db

リンク

GitHub - mattn/vdbi-vim: Database client for Vim

You signed in with another tab or window. Reload to refresh your session. You signed out in another tab or window. Reload to refresh your session. You switched accounts on another tab or window. Reload to refresh your session.

tyoro1210 2012/03/08

リンク

間違って10万人の顧客DB消しちまったｗｗｗｗｗｗｗｗ - MC)まとめこむ

1：以下、VIPがお送りします：2012/03/05(月) 23:05:21.43 ID:MYKH/EmU0 特定されない範囲で 30分前の話 2：以下、VIPがお送りします：2012/03/05(月) 23:06:04.91 ID:b77m7UZ00 ２ｃｈやってないでハードディスク復旧業者に頼め 13：以下、VIPがお送りします：2012/03/05(月) 23:08:29.71 ID:MYKH/EmU0 >>2 とりあえず今担当の人呼んでる（俺も担当なんだけどさｗｗｗ 3：以下、VIPがお送りします：2012/03/05(月) 23:06:05.57 ID:G+trElAB0 顧客DBって何？ 13：以下、VIPがお送りします：2012/03/05(月) 23:08:29.71 ID:MYKH/EmU0 >>3 顧客情報が詰まった大切な大切なデータベース 4：

tyoro1210 2012/03/06

『俺まで胃が痛くなってきた』

DB

リンク

LINQ to SQL: .NET Language-Integrated Query for Relational Data

This browser is no longer supported. Upgrade to Microsoft Edge to take advantage of the latest features, security updates, and technical support. Dinesh Kulkarni, Luca Bolognese, Matt Warren, Anders Hejlsberg, Kit George March 2007 Applies to: Visual Studio Code Name "Orcas" .Net Framework 3.5 Summary: LINQ to SQL provides a runtime infrastructure for managing relational data as objects without lo

tyoro1210 2011/09/17

wp7dev
db

リンク

リレーションシップを介したクエリの実行 - ADO.NET

他のオブジェクトまたは他のオブジェクトのコレクションをクラス定義内で参照することは、データベース内の外部キーリレーションシップに直接対応します。クエリを実行するときにこのリレーションシップを使用するには、ドット表記を使ってリレーションシッププロパティにアクセスし、オブジェクト間を移動します。これらのアクセス操作は、SQL で同等の複雑な結合または相関サブクエリとして変換されます。たとえば、次のクエリでは、ロンドン在住の顧客からの注文のみが結果として得られるように注文から顧客へと移動します。 Northwnd db = new Northwnd(@"northwnd.mdf"); IQueryable<Order> londonOrderQuery = from ord in db.Orders where ord.Customer.City == "London" select

tyoro1210 2011/09/13

wp7dev
db

リンク

Windows Phoneメモ002：ローカルデータベースの中身を見る – ｜ .dev()：クラスメソッド開発ブログ

こんにちは。くろの︵福田︶です。 Windows Phone向けアプリケーションを開発する際に、分離ストレージを使うことがあると思います。 Windows Phone 7.1からはSQL Server Compact Edition︵SQL Server CE︶が使えるようになりました。このSQL Server CEで作ったテーブルの中身を見る環境を準備したいと思います。その際、分離ストレージエクスプローラを使います。︵1︶コマンドラインで分離ストレージエクスプローラのディレクトリに移動する cd c:\Program Files (x86)\Microsoft SDKs\Windows Phone\v7.1\Tools\IsolatedStorageExplorerTool ※PATHに上記ディレクトリが追加されていた場合はこの手順はスキップ。 ※上記は64bit開発環境でのデフォル

tyoro1210 2011/09/12

wp7dev
db

リンク

Windows Phone のデータベースの中身を確認する方法 - ggった結果

Windows Phone OS 7.1 (Mango)から、分離ストレージを利用したローカルデータベースを使用することができます。この記事では、開発中にデータベースに格納した値を確認する手順を共有します。 Windows Phone では、SQL Server Compact Edition︵SQL Server CE︶を使用します。今回使うデータベースは、次のアプリを元におこなっています。 How to: Create a Basic Local Database Application for Windows Phone http://msdn.microsoft.com/en-us/library/hh202876 １．コマンドラインで分離ストレージに保存されているデータベースファイル︵.sdf︶を取得する(※1) まず、次のコマンドで分離ストレージエクスプローラのディレクトリ

tyoro1210 2011/09/12

wp7dev
db

リンク

neue cc - はぢめてのWindows Phone 7でのデータベース(Linq to Sql)

Windows Phone 7に新しいSDKが来ました！9月頃リリースという話のMangoアップデート(Windows Phone 7.1)対応SDK。まだベータですが色々触れます。そしてついにデータベースが搭載されました。というわけで軽く触ってみました。 Code First フツーだとSQLを書いてデータベースの定義を用意しなければならないところですが、WP7でのデータベースプログラミングにおいて、SQLは不要です。と、いうよりも、そもそも使えません。データベース本体(SQLCE)や、データベースにSQLを発行するクラス(ADO.NET)はMicrosoft.Phone.Data.Internalに格納されており、Internalという名のとおり、外から触ることは出来ません。ではどうするか、というと、WP7ではデータベースはLinq to Sqlを介して操作します。じゃあテーブル定義

tyoro1210 2011/09/11

wp7dev
db

リンク

はてなブログ | 無料ブログを作成しよう

オーベルジーヌ実食レポ食べ物の鼻塩塩(未だに通じるのかな) オーベルジーヌというカレーをご存知だろうか都内にあるデリバリー専門のカレー屋で、ロケ弁などで大人気の本格欧風カレーが楽しめるらしいいいな〜いいな〜オブザイヤー都内の奴らはこんな良いモン食ってんのか許せねえよ………

tyoro1210 2011/09/11

wp7dev
db

リンク

削除フラグのはなし

Query Optimization with MySQL 5.7 and MariaDB 10: Even newer tricksJaime Crespo

tyoro1210 2011/08/12

最近、待避テーブルに移行した。

db

リンク

Mongo DBを半年運用してみた

Mongo DBの簡単な概要と、Ameba PicoでMongo DBを半年運用した中で発生した障害など。

tyoro1210 2011/08/02

db

リンク

Using filesort

去年ソートに関する記事を書いたが、今日はその続きである。 MySQLでEXPLAIN SELECT...を実行するとExtraフィールドでよく見かける「Using filesort」という文字列。Filesortって一体なんだろう？と思ったことはないだろうか。単刀直入に言ってFilesortの正体はクイックソートである。クエリにORDER BYが含まれる場合、MySQLはある程度の大きさまでは全てメモリ内でクイックソートを処理する。ある程度の大きさとはsort_buffer_sizeであり、これはセッションごとに変更可能である。ソートに必要なメモリがsort_buffer_sizeより大きくなると、テンポラリファイル（テンポラリテーブルではない）が作成され、メモリとファイルを併用してクイックソートが実行される。 Filesortは全てのソート処理において実行されるわけではない。前回の記事

tyoro1210 2011/01/07

なんか美しくないしもっと整理できないかと思ったけど、サブクエリ内でlimitするしかねぇか。

リンク

はてなブックマーク

タグ

関連タグで絞り込む (37)

dbに関するtyoro1210のブックマーク (53)

お知らせ

今週のはてなブックマーク数ランキング（2024年6月第5週）

今週のはてなブックマーク数ランキング（2024年6月第4週）

今週のはてなブックマーク数ランキング（2024年6月第3週）

公式Twitter

キーボードショートカット一覧

はてなブックマーク

公式Twitter

はてなのサービス