自身の過去の成長過程と現在の環境を思い浮かべたときに、得やすいもの得づらいものの違いを強く感じ、良好な成長のために一考してみた次第です。 といっても既にある Tweet のセルフまとめに、思い出と昔話なポエムを追加したようなチラ裏回です。 時代の変遷によるステータス変化 要約すると、現代は技術力の向上に必要な環境と既定路線があって向上速度が早いのに対し、昔（2010年以前とか）は頭を悩ませまくって乗り越えるべき壁が大量にあったおかげで解決力は相当鍛えられたよねってところ。 個人的には誰であれ、今！自分が！解決しないと！詰んでしまう!! てかもう詰んでるだろコレ!!!! って状況でひたすら悩んでから、寝て起きたら解決したよぉ！みたいのを体験してほしいし、一度は死の淵まで行ってこいって思っている — 外道父 | Noko (@GedowFather) July 17, 2024 これについて、
今さらながらGoogleの「NotebookLM」を触ったら、インターネットサーフィンが普通にそのまま"仕事"になった話
今さらながらGoogleの「NotebookLM」を触ったら、インターネットサーフィンが普通にそのまま"仕事"になった話 6月頭くらい？ にGoogleがリリースして話題になっていた、自分専用のRAGが簡単に組めるLLMツール「NotebookLM」ですが、そのうち触ろうと思いつつも、「またRAGか」「どうせRAGでしょ？ 知ってます」みたいな気持ちでいたら腰が重くなってしまい、いつのまにか一ヶ月くらい経ってしまっていました。 そして今日、たまたまちょっと時間が空いたので触ってみたんですが、想像していたよりもずっと楽しくてすごかったので書き残したく思った次第です。ちなみにこれ↓ NotebookLMってファイルとかURLとかかなりの量放り込めて、放り込まれただけ参照できる(しかもかなり精度高い)っていうツールなんですが、これの何がすごいというと、インターネットサーフィンをしながらおもしろい
【技術選定/OSS編】LLMプロダクト開発にLangSmithを使って評価と実験を効率化した話 - Gaudiy Tech Blog
こんにちは。ファンと共に時代を進める、Web3スタートアップ Gaudiy の seya (@sekikazu01)と申します。 この度 Gaudiy では LangSmith を使った評価の体験をいい感じにするライブラリ、langsmith-evaluation-helper を公開しました。 github.com 大まかな機能としては次のように config と、詳細は後で載せますが、LLMを実行する関数 or プロンプトテンプレートと評価を実行する関数を書いて description: Testing evaluations prompt: entry_function: toxic_example_prompts providers: - id: TURBO config: temperature: 0.7 - id: GEMINI_PRO config: temperature:
新世代CPUアーキテクチャ「Zen 5」完全解説。Ryzen 9000シリーズはどのように進化したのか［西川善司の3DGE］
新世代CPUアーキテクチャ「Zen 5」完全解説。Ryzen 9000シリーズはどのように進化したのか［西川善司の3DGE］ ライター：西川善司 2017年の初登場以来，改良と進化を継続してきたAMDの「Zen」マイクロアーキテクチャ。その最新版となる「Zen 5」を採用するデスクトップPC向けCPU「Ryzen 9000」が，7月31日に発売となる（関連記事）。 当初のラインナップとして発表となったのは，以下に示す4製品だ。 2024年7月31日に発売予定のRyzen 9000シリーズのラインナップ AMDは，2022年に投入した「Zen 4」マイクロアーキテクチャ世代のRyzen 7000シリーズから，デスクトップPC向けCPUは「Socket AM5」（以下，AM5）プラットフォームに移行しているが，今回のRyzen 9000シリーズも，引き続きAM5向けとなっている。なお，AMDは
【開発プロセス/検証編】LLMプロダクト開発にLangSmithを使って評価と実験を効率化した話 - Gaudiy Tech Blog
こんにちは。ファンと共に時代を進める、Web3スタートアップ Gaudiy のエンジニアの Namiki ( @ruwatana ) です。 ここ1〜2年くらいで、生成AI / LLM界隈の盛り上がりは非常に加速してきており、それをいかに活用して新たな価値を提供するかということに集中している方も少なくないことかと思います。 弊社Gaudiyも比較的早期からこの分野に可能性を見出し、積極的に挑戦してきました。そんなLLMプロダクト開発を行なっていく中で、発生した課題に対して蓄積されたナレッジを活かして日々改善できるよう昇華しています。 今回はこの分野の開発に切っても切れないプロンプトチューニングの業務プロセスにフォーカスし、よく起こりうるであろう課題に対してどのように効率化・解消していっているのか、その一端をユースケースとともにご紹介できればと思います。 ※なお、本稿は「技術選定/OSS編」
XTCのアンディ・パートリッジ（Andy Partridge）は米SPIN誌のインタビューの中で、キャプテン・ビーフハート（Captain Beefheart）を初めて聴いた時のことを振り返っています。最初は「壁越しに聴いた」という。『Trout Mask Replica』は最初まったく理解できずに貸してくれた友人に「これは無理」と弱音を吐くが、友人に「いや、頑張れ」と励まされて6週間後に「ピンときた」という。 「僕が初めて聴いたビーフハートのレコードは正確に言えば、壁越しに聴いたんだ。 その頃の僕は、ちょうど子供として一段落して、女の子に興味を持ち始めた年頃で、放課後になると親友のデイヴィッドの家に遊びに行っていたんだ。彼は“新しいディンキートラック（※ミニカー）を買ったよ”とか言っていた。僕は“こういうおもちゃが好きなことに後ろめたさを感じる。そろそろ卒業しなきゃ”と思っていた。隣の寝
AMDはデスクトップ向けの「Ryzen 9000シリーズ」を（北米時間の）7月31日に発売する。これに先立ちAMDはロサンゼルスにて「AMD Tech Day」を開催。特に同社が力を入れる「Ryzen AI 300シリーズ」を含めた新技術への説明会を開催した。 本稿はそのTech Dayレポートの第3回目となる。第1回はRyzen 9000シリーズの発売日やスペック、新チップセットの話を、第2回はRyzen 9000シリーズに追加された新しいチューニング技法を解説した。 そして今回はいよいよZen 5アーキテクチャーの詳細に踏み込んでいく。AMDはCOMPUTEXにおいて、Zen 5はZen 4よりも同コア数＆同クロック設定で平均16％のIPC（クロックあたりの命令実行数）向上を果たしたと説明した。この数字はいったいどういう設計上の工夫や改善からもたらされたのか？ 簡単ではあるが解説してい
IT Leaders トップ ＞ テクノロジー一覧 ＞ AI ＞ 新製品・サービス ＞ エクサウィザーズ、生成AIの回答品質を自社の運用で継続的に改善する「RAGOps」 AI AI記事一覧へ [新製品・サービス] エクサウィザーズ、生成AIの回答品質を自社の運用で継続的に改善する「RAGOps」 2024年5月13日(月)日川 佳三（IT Leaders編集部） リスト エクサウィザーズは2024年5月13日、AIシステム開発ツール「exaBase Studio」のテンプレートとして、AIの回答品質を自社の運用で継続的に改善する「RAGOps」を同年5月から提供すると発表した。品質が高い回答をキャッシュする一方で、品質が低い回答についてはオペレーターが回答を行う仕組みを提供する。入力した回答はデータベースに蓄積され、以降の回答に利用する。回答の品質が求められる用途で活用できるとしている。
Ruby は String をメモリ上でどのように扱っているのか？ | IIJ Engineers Blog
電子メール、ネットワーク機器集中管理、異常検知、分散処理、クラウド基盤などのシステム開発に従事。古代Rubyist。 先日、 Ruby (CRuby) が String をメモリ上でどのように扱っているのか気になって調べていました。そこで String の構造体やメモリの扱いとその変遷が興味深いと思ったので、ちょっとまとめてみました。 Ruby のオブジェクトのデータ構造 まず前提知識として、そもそも Ruby が C の世界でオブジェクトをどのようなデータ構造で持っているかをざっくりおさらいします。 VALUE 型 Ruby の内部ではオブジェクトを VALUE 型という型の変数で取り扱っています。 // include/ruby/internal/value.h typedef unsigned long VALUE; 宣言の通り VALUE 型の実体は unsigned long で
気になる相手の気を上手く引く秘訣
LayerXにおけるLLM以降の業務自動化の世界とAi Workforce｜Matsumoto Yuki
ですので今回はLLMの先に何を見ているのか、LLMと業務自動化ということについて書いてみようと思います。 ちなみに本件に関連してイベントも開催しますので皆様のご参加お待ちしております。 非構造化データの変換世の中一般で扱われるデータ、特に今回のフォーカスである文書は、ソフトウェアが扱いやすいような形式のデータではありません。文字の羅列であって、「非構造化データ」であるといえます。LLM以前のソフトウェアにとっては、このデータは〇〇である、という意味が理解できないので、人間が意味のある「構造化データ」に変換する必要があります。 構造化データがあれば、例えば後段の業務で使うシステムにデータを連携したり、その後検索して別な業務でも活用するなどが実現しやすくなります。システムとシステムが繋がり、より効率的に業務が行えるようになります。例えばバクラクでは、構造化された請求データやクレカの支払データを
AI翻訳ツール「DeepL」を提供する独DeepLは7月18日（日本時間）、言語翻訳や文章校正の特化型大規模言語モデル（LLM）を実装したと発表した。同社が実施したブラインドテストに参加した言語専門家からは「ChatGPT（GPT-4）よりも1.7倍、Microsoft翻訳よりも2.3倍、DeepLの翻訳出力が好ましい」と回答を得られたという。 今回実装した特化型LLMは「特殊な調整を実施した言語に特化したもの」であり、このLLMを活用することで偽情報や誤情報を生成するリスクを下げているという。また、あらゆるユースケースで、これまで以上に人間らしい翻訳と文書作成が可能としている。データの学習には、文書作成と翻訳用にチューニングした7年分以上の独自データを活用した。 新たなLLMを搭載した翻訳サービスは、有料プラン「DeepL Pro」に契約することで利用できる。対応言語は英語と日本語、ドイ
こんにちは。メディア研究開発センターの山野です。私は普段は音声処理や自然言語処理やそれらの技術を使ったプロダクト開発などに従事しています。 さて今回は朝日新聞記事データを使ったニューラル仮名漢字変換について簡易な実験をしたのでその結果を共有します。 はじめに多くの問題を解くことができるLLMですが、ひらがな列Xをかな漢字混じり文Yへ変換する仮名漢字変換については、単語の読み方とその表記の関連性を学習する必要があり、現時点(2024年7月8日)ではLLMでもうまく解くことができません。 実はほとんど全てのオープンな日本語LLMはかな漢字変換が全く出来ません。 出典: https://zenn.dev/azookey/articles/ea15bacf81521e（ちなみに私はiPhoneのキーボードをazooKeyに変更してしばらく経ちますがとても使い勝手/心地が良いのでオススメです。） そ
アラート調査をはじめとした自社のセキュリティ業務の一部を外部に委託するマネージドセキュリティサービスに注目が集まっている。多様化・高度化するこのサービスから本当に自社に合うものを選定する際のコツは何か。 「ランサムウェアに感染して事業が停止した」「情報漏えい事件が発生して顧客への謝罪対応に追われた」――世の中でそんなインシデントが起こる度、これまでのセキュリティ対策を見直し、必要に応じて新たなツールを導入してきた企業は多いはずだ。 しかしセキュリティツールはただ導入するだけでは不十分で、アラートの内容を精査したり、ポリシーをチューニングしたりするなど日々の運用を適切に実施しなければ最大限の効果は見込めない。 ただし、この運用こそ多くのIT管理者やセキュリティ担当者の負荷を高める大きな要因になっている。セキュリティ人材不足が叫ばれる今、貴重なリソースを運用に割くのは困難という声もよく聞く。
RedashをEC2からECSに移行した話とデカクエリのレスポンス悪化対策 - Nealle Developer's Blog
@2357giです。Pixel7aを買った次の日にPixel8aが発表されて悲しいです。 先日EC2で長らく動いていたRedashをECSに載せ替える作業を行ったのですが、データ量が大きいクエリを実行するとタイムアウトしてしまう問題が発生しました。 （大きいクエリとは具体的には50万行ほど結果が返ってくるクエリなどです。160MBくらいです😇 ） 結論としては、EC2からECSへ移行した際に nginx を外してしまったのが原因でした。 ALB - ECS 構成なので、nginxは要らないよね〜といつも通りのクラウドネイティブ化作業をした結果、gzip圧縮されていないレスポンスを返してしまい、タイムアウトが発生していました。 最終的にgzip圧縮を行う設定を書いたnginxを挟むことにより無事解決することができたのですが、Redashというアプリケーションの性質やECS化のタイミングが重
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
エンジニアの成長における過去と現代の違い | 外道父の匠
AWS RDS/Auroraでモニタリング＆チューニングを始めるための資料11選
XTCのアンディ・パートリッジ、キャプテン・ビーフハートを初めて聴いた時のことを回想 - amass
猛獣Zen 5のIPCが16％向上したのは実行ユニットに餌を与え続けた成果 AMD Tech Dayレポート (1/2)
エクサウィザーズ、生成AIの回答品質を自社の運用で継続的に改善する「RAGOps」 | IT Leaders
「翻訳品質でGPT-4などを超えた」──DeepL、新たな大規模言語モデル実装 有料プラン向けに提供
Leitz Summarit 50mm f1.5 L39 Review作例 クセ玉Leica銘玉おすすめ神オールドレンズ
LLMを使ったかな漢字変換｜朝日新聞社 メディア研究開発センター
瞑想で魂の波動にチューニングする〜本当の自分につながるには - 前向き気づき日記
セッションもラボも！WWDC24参加レポート - ZOZO TECH BLOG
“金ドブセキュリティ外注”を避けるには 選定ポイント2選