[B! LLM] t_43zのブックマーク

Create - free-to-use AI app builder

Design and build apps like a pro Create lets you code using plain text and images

t_43z 2024/07/19

リンク

大規模言語モデルの開発

2024年度人工知能学会全国大会（第38回）チュートリアル講演１本講演では、大規模言語モデルの開発に必要な基礎および最新動向を概観する。その後、東京工業大学情報理工学院の岡崎…

t_43z 2024/07/11

LLM

リンク

万能系Artifacts登場。「Poe Previews」ならGeminiもGPT-4もClaudeもAI共同開発者にできる（CloseBox） | テクノエッジ TechnoEdge

このところプログラミングの楽しみを覚えて毎日Claude ArtifactsとChatGPT Artifactsで遊んでいる筆者ですが、またまた新しいツールに出会ってしまいました。それは、PoeのPreviewsという新機能。 Poeは、ChatGPT、Claude、Gemini、Mistralといった複数の最新LLM︵大規模言語モデル︶を呼び出して対話ができる総合窓口的AIエージェントサービスです。AIアグリゲーターという人もいます。似たようなサービスに、先ごろソフトバンクが利用者に1年間無料で提供し始めたPerplexityがありますね。個別のLLMと契約をしなくても、Poeと月額契約︵3000円から︶を結ぶと、それぞれの最新モデルが使えるというメリットもあります。そんなPoeが投入したPreviewsは、Claude 3.5 Sonnetで使えるようになったプログラミングコンパ

t_43z 2024/07/10

リンク

GitHub - karpathy/LLM101n: LLM101n: Let's build a Storyteller

What I cannot create, I do not understand. -Richard Feynman In this course we will build a Storyteller AI Large Language Model (LLM). Hand in hand, you'll be able create, refine and illustrate little stories with the AI. We are going to build everything end-to-end from basics to a functioning web app similar to ChatGPT, from scratch in Python, C and CUDA, and with minimal computer science prerequi

t_43z 2024/06/24

LLM
learn

リンク

Firecrawl

Crawl, Capture, CleanWe crawl all accessible subpages and give you clean markdown for each. No sit emap required. [ { "url": "https://www.mendable.ai/", "markdown": "## Welcome to Mendable Mendable empowers teams with AI-driven solutions - streamlining sales and support." }, { "url": "https://www.mendable.ai/features", "markdown": "## Features Discover how Mendable's cutting-edge features can trans

t_43z 2024/06/23

LLM
Clawler

リンク

「自称オープンソース生成AI」は本当に“オープン”なのか？　45種のAIモデルをオランダの研究者らが調査

このコーナーでは、2014年から先端テクノロジーの研究を論文単位で記事にしているWebメディア﹁Seamless﹂︵シームレス︶を主宰する山下裕毅氏が執筆。新規性の高いAI分野の科学論文を山下氏がピックアップし、解説する。X‥ ＠shiropen2 オランダのRadboud University Nijmegenに所属する研究者らが発表した論文﹁Rethinking open source generative AI: open-washing and the EU AIAct﹂は、オープンソースと主張する生成AIを対象に、どの程度オープンなのかを調査した研究報告である。近年、オープンであると主張する生成AIシステムが急増しているが、実際にはどの程度オープンなのかは疑問だ。﹁オープンソース﹂と謳いつつ、詳しく見てみると部分的にしか公開していないことはよくある。﹁オープンソース﹂は研究

t_43z 2024/06/10

LLM

リンク

ChatGPT - LLMシステム開発大全

ChatGPTとLLMシステム開発について纏めた187ページ資料です。 2024/04 名称を改め資料を大幅にアップデートしました！今後も随時更新していきます。データサイエンティスト協会での発表動画はこちら。 https://youtu.be/l9fpxtz22JU Build…

t_43z 2024/06/03

LLM

リンク

Mistral AI、コーディング用生成AIモデル「Codestral」リリース

米Microsoftが支援する仏Mistral AIは5月29日︵現地時間︶、同社としては初のコーディング向け生成AIモデル﹁Codestral﹂を発表した。コード生成タスクを明示的に設計されたオープンウェイト︵モデルの重みを公開している︶の生成AIモデルで、HuggingFaceからダウンロードし、MistralのAPIプラットフォームを通じて利用できる。 Python、Java、C、C++、JavaScript、Bashを含む80以上のプログラミング言語の多様なデータセットでトレーニングされている。また、SwiftやFortranでも﹁優れた性能を発揮する﹂という。3万2000トークンのコンテキストウィンドウを持つ220億パラメータモデル。コード生成の長期評価のRepoBenchでは、競合する米MetaのCode Llama︵4000／700億︶や中国DeepSeekのDeepSe

t_43z 2024/05/31

リンク

Dify.AI · 先進的なAIアプリケーションのためのイノベーションエンジン

Release v0.5.9 - あなたのアシスタントとしてAIエージェントを作成し、ツールをカスタマイズしてください。

t_43z 2024/05/29

LLM
RAG

リンク

「Amazon Q Business」正式リリース。MS365やS3などの社内の情報源と接続、会社の経営情報から有給休暇の残りまでチャットAIが答えてくれる

﹁Amazon Q Business﹂正式リリース。MS365やS3などの社内の情報源と接続、会社の経営情報から有給休暇の残りまでチャットAIが答えてくれる Amazon Web Servicesは、新たなAIサービス﹁Amazon Q Business﹂の正式リリースを発表しました。 Amazon Q Businessは企業向けのAIサービスで、Amazon S3やAmazon RDS、Amazon Auroraを始めとするAWSのサービスやMicrosoft 365、Salesforce、Dropbox、Google Drive、Gmailなどのさまざまな社内の情報源と接続可能です。サードパーティのアプリケーションにAPI経由で接続するカスタムプラグインの構築が可能になります。これにより、ユーザーは自然言語のプロンプトを使用して、Amazon Q BusinessからAPIを通じてサ

t_43z 2024/05/08

リンク

Snowflake Arctic - LLM for Enterprise AI

Building top-tier enterprise-grade intelligence using LLMs has traditionally been prohibitively expensive and resource-hungry, and often costs tens to hundreds of millions of dollars. As researchers, we have grappled with the constraints of efficiently training and inferencing LLMs for years. Members of the Snowflake AI Research team pioneered systems such as ZeRO and DeepSpeed, PagedAttention / v

t_43z 2024/04/25

LLM

リンク

【西川和久の不定期コラム】日本語にも対応したLLM「Cohere Command R(+)」の実力は？

t_43z 2024/04/10

LLM

リンク

👾 LM Studio - Discover and run local LLMs

LM Studio is an easy to use desktop app for experimenting with local and open-source Large Language Models (LLMs). The LM Studio cross platform desktop app allows you to download and run any ggml-compatible model from Hugging Face, and provides a simple yet powerful model configuration and inferencing UI. The app leverages your GPU when possible.

t_43z 2024/04/05

LLM

リンク

Devin を含むAIソフトウェアエンジニアと周辺技術のざっくり紹介 - Algomatic Tech Blog

こんにちは。LLM STUDIO 機械学習エンジニアの宮脇︵@catshun_︶です。本記事では最近注目を集めている AIソフトウェアエンジニアに関するプロダクトについてざっくりと紹介します。社内勉強会に向けたキャッチアップ資料として作成しており、加筆修正する可能性がありますが、本記事を読んだ方の議論のネタ程度になってくれれば幸いです。おことわり本記事では AIソフトウェアエンジニアに関する詳細な解説は含みません。 Devin を参考に AIソフトウェアエンジニアと呼称していますが、主語が大きく曖昧性の高い表現を使用しています。詳細については参照元をご確認ください。不十分また不適切な言及内容がございましたらご指摘いただけますと幸いです。プロダクト等の利用時は必ずライセンスや利用規約を参照して下さい。本記事の目次プログラム生成を伴う推論 Self-Refine (

t_43z 2024/04/05

リンク

NTT版LLM「tsuzumi」商用開始！ | NTT STORY | NTT

1) 3/25﹁tsuzumi﹂の商用サービス開始 NTTは3/25、NTT版大規模言語モデル︵LLM︶﹁tsuzumi﹂の商用サービス提供を、NTTコミュニケーションズ、NTTデータより開始することを発表しました。今後、NTT東日本、NTT西日本をはじめとするNTTグループ各社においても順次提供を開始します。軽量でありながら世界トップレベルの日本語処理性能を持つ﹁tsuzumi﹂の詳細については以下を参考ください。満を持してデビュー！大規模言語モデル(LLM)﹁tsuzumi﹂記者会見速報 https://group.ntt/jp/magazine/blog/tsuzumi/ NTT版大規模言語モデル﹁tsuzumi﹂ https://www.rd.ntt/research/LLM_tsuzumi.html2) さまざまな環境・業界で利用可能なトータルサービス﹁tsuzumi﹂は

t_43z 2024/03/27

LLM

リンク

【ChatGPT】とベクトルデータベースによる企業内データの活用(いわゆるRAG構成) - Qiita

本記事は日本オラクルが運営する下記Meetupで発表予定の内容になります。発表までに今後、内容は予告なく変更される可能性があることをあらかじめご了承ください。下記セッションでは、本記事の内容以外にデモンストレーションも実施する予定です。 ※セミナー実施済の動画に関しては以下をご参照ください。はじめに 2022年暮れ、ChatGPTの登場以降、あらゆる企業がDXの在り方を問われはじめ、大規模言語モデルの仕組みをどのように業務に取り入れるかを検討されていると思います。その検討の一つとして、﹁GPT(LLM)が学習していない企業内のデータや最新のデータも有効活用すべき﹂という点は非常に大きな論点なのではないでしょうか。ご存じの通り、LLMとはインターネット上に存在するドキュメントデータをクローリングにより大量に収集し、それを学習データとして機械学習にかけたモデルです。従って、至極当たり

t_43z 2024/03/21

LLM
rag

リンク

Sakana AI

概要 Sakana AIは進化や集合知などの自然界の原理を応用して基盤モデルを開発することを目指しています。私達の目標は、モデルを自ら訓練し開発することだけではありません。基盤モデルの開発を効率化、高度化、自動化するための新たな手法を生み出すことに挑戦しています。この目標に向けた第一歩として、私たちはプレプリント﹁Evolutionary Optimization of Model Merging Recipes ︵モデルマージの進化的最適化︶﹂を公開しました。このリリースの要点は以下の通りです。進化的モデルマージという手法を提案します。これは、多様な能力を持つ幅広いオープンソースモデルを融合︵マージ︶して新たな基盤モデルを構築するための方法を、進化的アルゴリズムを用いて発見する手法です。私たちの手法は、ユーザーが指定した能力に長けた新しい基盤モデルを自動的に作成することができます。既

t_43z 2024/03/21

LLM

リンク

RAGの実装戦略まとめ - Qiita

それでは以下、簡単なデモを含めながら個別に説明していきます。 1. ハイブリッドサーチこちらは、性質の異なる複数の検索方式（例えばベクトル検索とキーワード検索）を組み合わせて検索精度を向上させる手法になります。各検索方式単体の場合に比べ、性質の異なる検索方式を組み合わせ、ある種いいとこ取りをする事で、検索性能の向上が期待できます。今回はBM25でのキーワードベースの類似度検索と通常のベクトル検索を組み合わせていきます。 BM25について簡単に説明しておくと、文脈や文章構造は完全に無視した上で、文書内の単語を全てバラバラに分割し、文書内の各単語の出現頻度と文書間におけるレア度を加味した特徴量を算出します。つまり、特定の文書内の各単語の数をカウントしてヒストグラムを作れば、似たような文書には同じような単語がよく出るはずなので(同じようなヒストグラムの形になるので)、類似度が高くなる性質