[B! Python] richard_rawのブックマーク

シェルスクリプトとの対比で理解するPythonのsubprocess - 朝日ネット　技術者ブログ

はじめに開発部の ikasat です。皆さんはgit, ssh, rsync のような外部コマンドを呼び出すスクリプトを書きたくなったことはありますか？個人的にこの類のスクリプトは最初はシェルスクリプトとして書くのですが、改修を重ねるうちに肥大化して処理も複雑になり、後から Python のような汎用プログラミング言語で書き直すことがよくあります。外部コマンド呼び出しを書き直す際に、Git 操作のために pygit2、 SSH 接続のために paramiko のようなライブラリをわざわざ使うのは大がかりだったり、 rsync に相当するようなこなれたライブラリが存在しなかったりする場合があります。そのような時は標準ライブラリの subprocess モジュールを利用し、Python から外部コマンドを呼び出すことになるでしょう。しかしながら、Python のチュートリアルペ

richard_raw 2023/11/09

これは分かりやすい。でもsubprocessはたまにしか使わないのでその度に調べなおしています。

リンク

新卒向け「テストコード」の研修資料　Sansanが無料公開　Python上でのテスト方法を解説

Sansanは10月25日、テストコードについての研修資料を無料公開した。4月に実施した新卒の技術研修で使った資料の一部で、入社2年目の社員が作成。Pythonのテストフレームワーク「pytest」でのテストコードの書き方や、VSCodeでのテスト方法などを解説している。同社はテストコードの便利な点として「実行確認しやすい」「リファクタリングや修正後に実行結果や振る舞いが変わっていないことを確認できる」「コードの挙動が理解しやすい」を挙げる。テストコードの重要性を理解し、テストコードを活用できるようになることを目的に研修を行ったとしている。関連記事新卒向け「統計学の基礎」100ページ超　SaaS企業が無料で資料公開ブレインパッドが、新卒研修で使った統計学の学習資料を公開した。統計学の基礎を解説したもので、ページ数は100ページ超。スライド公開サービス「Speakerdeck」から無

richard_raw 2023/10/27

テストコード書いたことないのでやってみたいです。……環境準備どうしようか。

リンク

Pythonの罠10選 - Qiita

皆さんはプログラムを組んでいて、あれ？思った通りの出力結果にならないという経験はありますでしょうか。単純なエラーであればいいですが、文法の理解が食い違っている場合、中々ミスに気づかない場合もあります。今回はそんな知らないと沼にハマるかもしれないPythonの文法を10個ご紹介します。1つでも新しい知見があると幸いです。それではいってみましょう！ YouTube Pythonチュートリアル︵公式ドキュメント︶を使って基礎文法を解説しています。チャンネル登録いただけると励みになります。罠1‥アイテム1のタプルもカンマが必要タプルはカンマで区切られた値からなるので、アイテムが1つでもカンマが必要です。忘れるとstr型だったり、int型になり、意外と気づかないです。。。

richard_raw 2023/10/20

関数のデフォルト値は引っかかりそう……。あ、イミュータブルならいいのか。

リンク

ChatGPT、データも扱える新機能「Code Interpreter」

richard_raw 2023/07/14

“Code Interpreterは、ChatGPT上でPythonのコードを実行できる仕組み。” マジでインタープリターやったんか……。

リンク

【無料】データサイエンス入門:機械学習編全35回まとめと目次

こんにちは，米国データサイエンティストのかめ(@usdatascientist)です． (追記)動画版も公開しました！全38時間の3部作という超大作です︻日本一の高評価︼機械学習超入門講座(前編&後編)を公開しました!!︻ついに3部完結︼機械学習超入門講座の本番編を公開しました!!いやーついに長かったデータサイエンス入門機械学習編35回分の記事を書き終えました！！本記事はそのまとめです．目次として使ってください．目次線形回帰第1回: 機械学習とは？なにをしているのか？第2回: 線形回帰の損失関数をわかりやすく解説第3回: 最急降下法を図と数式で理解する(超重要) 第4回: 正規方程式を完全解説(導出あり) 第5回: scikit-learnを使って線形回帰モデルを構築する第6回: 線形回帰の係数の解釈の仕方(p値) 評価第7回: (超重要)過学習と汎化性能を理解する(

richard_raw 2023/06/29

G検定合格しても何も分かってないのでやろうかな（たぶんやらない）。

リンク

ChatGPT(3.5) に退屈事務作業を依頼したらtkinterでGUI付きインタラクティブ処理プログラムまでノーコードで作ってくれた件

「訳語のサジェストと吟味」「コンマによる桁区切り」「英語人名（書式「名; 姓」）をカタカナ表記（書式「名・姓」）に変換して出力する」「曜日付日付リストの事例を与えて任意の期間のリストを吐かせるpythonコードを作る」などをやっているうちに、もしかしてと思いGUI付で依頼してみた結果です。GPT4でなくても3.5で可能です。（※ただし、再現するためにはお使いのOS環境でPythonプログラムをコマンドラインで実行する程度の前提知識は必要となります。）

richard_raw 2023/03/28

3.5でもここまでできるのか……。

リンク

2022年度版Python環境構築徹底解説 - Qiita

各機能とツールについて、説明していきます。エディタ Visual Studio Code エディタやIDE(統合開発環境)は好きに選んでいただければ良いとは思いますが、特に希望がないならば、Visual Studio Codeを選んでおけば間違いないでしょう。 Pythonを含む幅広い言語に対応し、豊富な拡張機能を備えている非常にリッチなエディタです。とりわけPython プロジェクトについては、これさえ有れば、特にIDEなどは必要ないと思います。インストールは↓から。バージョン管理ソフト Python3系は日夜アップデートされていて、2022年12月現在の最新verは、3.11.1が提供されています。とはいえ、プロジェクトによっては、3.7.1までしか動作が担保されていないもの、3.9.0で現在開発中のもの...などがあります。最新のPythonが常に必要、というわけでは決してなく

richard_raw 2022/12/26

venvとpipでいいかなって。

リンク

ノードエディタ形式の画像処理ツール「Image-Processing-Node-Editor」 - Qiita

はじめに趣味でノードエディタ形式の画像処理ツール﹁Image-Processing-Node-Editor﹂を作りました。その紹介の記事です。中身にOpenCVガッツリ使っているからアドカレOKですよね。。。👀？ガッツリ使っているという意味では、GUI部分の DearPyGui のほうがガッツリ使っているかもしれませんが🤔 ﹁Image-Processing-Node-Editor﹂とは以下のように、ノードを接続していくことで、処理結果を可視化しながら画像処理が行えるツールです。以下のような特徴があります。主要な処理は全てPython ※ライブラリ部分除く各処理を可視化しながら画像処理が試せる自作ノードの追加が容易 (だと信じている) 記事書くために見直していましたが、イマイチ複雑ですわ、、、😇 OSS (Apache 2.0ライセンス) デフォルトでいくつかのAI機

richard_raw 2022/12/23

おお、OpenCVを触り始めた頃（何年前？）から欲しかったやつだ！

リンク

【Python】データ可視化ライブラリAltairハンズオン【基礎編】 - Qiita

Altairのようにインタラクティブなグラフを作成できる Python の可視化ライブラリとして、他には Bokeh や Plotly などがあります。それぞれ作成可能なグラフの種類やデザインが異なるため、好みに合わせて使い分けるとよいと思います。個人的な意見としては、三次元モデルの可視化が得意なのは Plotly で、二次元モデルの可視化が得意なのは Altairです。データ作成今回は架空の学校で行われた期末試験の得点をデモデータとして作成します。この学校には学生が30人在籍し、普通、特進、理数の3コースが存在します。期末試験の科目は国語、数学、理科、社会、英語で各教科 100 点満点とします。 import random import pandas as pd # パラメータ N = 30 # 学生の人数 mu, sigma = 60, 18 # 学力の平均と標準偏差

richard_raw 2022/12/05

こういうライブラリあったのかー。インタラクティブな表示は偶にやりたくなります。

リンク

【Python】Kindleの洋書1冊を1分で日本語PDFに変換するコードを書いた話 - Qiita

動機外資系のAmazonが展開している電子書籍 Kindleでは比較的洋書の取り扱いが多いです。 Kindle Unlimitedに登録されている書籍も多く、Springerなんかも含まれているので活用しない手はありません。そこでkindle-translatorをつくりました。 https://github.com/1plus1is3/kindle-translator これで一冊50万字あるKindleの洋書を1分で日本語PDFに変換できます。キーボードの矢印キーでページ送りができるならKindleに限らずあらゆる電子書籍リーダおよびPDFビューワで使え、DeepLが対応している言語であれば英語以外の言語でも翻訳できます(仏→日とか)。未経験からPython エンジニアになって3ヶ月(うち1ヶ月は研修)が経ち、色々作れるようになった時点でつくったツールなので、改良すべき点もまだまだ

richard_raw 2022/11/15

Kindleからテキスト抽出できるの？と思ったらスクショでした。Koboを買った頃、Androidタブレットの電子書籍アプリをページめくりしてスクショを撮るスクリプトを書いたことを思い出しました。

リンク

【Python / Pyxel】Webで遊べてSNSに共有できる，レトロゲームを作ってみた． - Qiita

はじめにはじめまして， 42tokyo Advent Calendar 2022の8日目を担当する、changです．今回は，Python向けのレトロゲームエンジンであるPyxelを使って，簡単なミニゲームを制作しました．Pyxelはゼロベースで学習しながらの制作でした．その際に学んだこと，役に立った知識や文献等を，時系列を追って簡単にまとめます．尚，今回はサウンドや効果音周りにまでは手を広げず，あくまでも最低限の基本要素のみとさせていただきます． Pyxelをゼロから始めてみたい方の参考になれば幸いです．目次 Pyxelとは制作したゲーム環境構築とマニュアルプログラムの基本構造サンプルコードから学ぶドット絵アニメーションを作成キャラクターを動かす画面遷移を実装する Web上でPyxelアプリを実行する SNSへの共有機能を実装する Pyxelとは Pyxel(ピクセル)

richard_raw 2022/11/07

“GitHub上にソースを置くだけで，Webブラウザからアプリを直接起動できる” そうだったのか。作ってみたくなりました。

リンク

VSCodeでPython書いてる人はとりあえずこれやっとけ〜 - Qiita

はじめに Pythonはコードが汚くなりがち︵個人的にそう思う︶そんなPythonくんを快適に書くための設定を紹介します。拡張機能編ここでは Pythonを書きやすくするための拡張機能を紹介していきます。 1. Error Lens before ﹁コード書いたけど、なんか波線出てるよ💦﹂記述に問題があった場合、デフォルトでは波線が表示されるだけ。。。 after Error Lensくんを入れることによって波線だけでなくエディタに直接表示される。はい、有能〜 2. indent-rainbow before Pythonくんはインデントでスコープを認識している。 for のfから下に線が伸びてるけど、ちょっと見にくいなぁ after 色が付いてちょっと見やすくなった！ 3. Trailing Space before 一見、普通に見えるコード after 末尾にある

richard_raw 2022/08/05

「Pythonはコードが汚くなりがち」なんですと。/Error Lensとflake8の相性はよさそうですね。

リンク

【Python・TensorFlow】あんたのそれ、エセ関西弁やで - Qiita

はじめに突然ですが、私︵たち︶は大阪生まれ、大阪育ちの純粋な大阪人です。現在は仕事のため東京に在住していますが、大阪の魂を捨てたわけではありません。先日不意に興味深い論文を見つけました。エセ大阪弁の音声学的特徴共通語話者が大阪弁話者に親しみを込めて大阪弁っぽく話したとしても、そのエセ大阪弁に対する大阪弁話者の拒否感、抵抗感、嫌悪感は根強い。共通語や東京弁は認めても、エセ大阪弁だけは許さないという気概すら感じる。草である。流石にそのような拒否感や嫌悪感を露わにするほどではありませんが、少なくとも大阪人であれば聞き慣れない関西弁を耳にした時、﹁ん？今のエセっぽいな？﹂と感じることは少なからずあるかと思います。決して嫌悪感を抱いているわけではないですが、この論文にあるようにアクセントの違いには敏感であるとは自覚していますし、大多数の大阪人の方々も同じくだと思います。 (例えば

richard_raw 2022/07/28

関西弁警察AI（「なんでやねん」専用）！

リンク

Python 3.15からデフォルトのエンコーディングがUTF-8になります - methaneのブログ

Pythonがファイルを開くときなどに使われるエンコーディングはロケール︵WindowsではANSIコードページ︶依存でした。 Unixの世界ではどんどんUTF-8ロケールが一般的になっている一方、WindowsのANSIコードページはなかなかUTF-8になりません。そのために、Unixユーザーが open(filepath) のようにエンコーディングを指定しないままUTF-8を仮定するコードを気軽に書いてしまって、Windowsユーザーがエラーで困るといった問題が発生します。また、Windowsでもメモ帳︵Notepad.exe︶やVSCodeはすでにUTF-8をデフォルトのエンコーディングで使用しています。ANSIコードページがUTF-8になるのを待っていたらどんどん周りの環境から置いていかれ、レガシー化してしまいます。 Pythonがデフォルトで利用するエンコーディングをWind

richard_raw 2022/04/27

大仕事だ。/CSV出力はBOM付きUTF-8だとなぜかExcelで開けなかったのでUTF-16でdialect=excel-tab︵つまり中身はカンマでなくタブ区切り︶にしています。私の環境だけかな……。 ●プログラミング ●Python ●windows ●clip

リンク

[python]EXCEL関係のライブラリｗin32comのエラー｜ゴンザレス｜note

EXCELファイルの.xlsxをpdfに変換するプログラム import win32com.client # win32comのインポート excel = win32com.client.Dispatch("Excel.Application") # Excelの起動 file = excel.Workbooks.Open(excelパス) # Excelファイルを開く file.WorkSheets(EXCELシート名).Select() # シート名を指定 file.ActiveSheet.ExportA sFixedFormat(0, pdfパス) file.Close() # 開いたエクセルを閉じる excel.Quit() # Excelを終了がある．これを実行すると pywintypes.com_error: (-2147352567, '例外が発生しました。', (0, 'Mi

richard_raw 2022/03/25

絶対パスじゃないとエラーになるとのこと。pipでインストールする際も "pip install pywin32" だったりややこしい。

リンク

きれいなPythonプログラミング（パイソニックなコードを書こう）を読んでみた - Qiita

はじめに日頃、Pythonを使う機会があるのですが、﹁もう一歩詳しくなり、中級者を目指したい！﹂という思いから、2022/2/15に発売された書籍﹁きれいなPythonプログラミング ~クリーンなコードを書くための最適な方法﹂を読みました。特に、第6章にある﹁パイソニックなコードを書こう﹂が非常に勉強になったので自分なりの解釈／調査結果を含めてメモを残しておきます。 ※解釈が誤っている箇所もあるかと思います。誤りがあればご指摘いただけると幸いです。誤用の多い構文 Python以外の言語を使ったことがある人は、その言語と同じ考え方／手法でコードを書くかもしれません。 Pythonにおける標準的なアプローチを学ぶことで時間と労力を削減することができます。ループ処理ではrange()ではなくenumerateを使う慣習的にrange(len())とインデックス番号でループを回すのは単純

richard_raw 2022/03/24

f-string便利そう。使ってみます。

リンク

%E5%86%86%E3%82%B0%E3%83%A9%E3%83%95

本ページでは、Python のグラフ作成パッケージ、Matplotlib を用いて円グラフ (pie chart) を描く方法について紹介します。 matplotlib.pyplot.pie の概要 matplotlib には円グラフを描画するメソッドとして、matplotlib.pyplot.pie が用意されています。 matplotlib.pyplot.pie の使い方

richard_raw 2022/03/09

100％積み上げ棒グラフは面倒くさそうなので円グラフにしよう（オイ

Python
clip

リンク

まだ CSV の文字化けで消耗してるの？（Excel で直接開いても文字化けしない CSVファイルを Python3 で作成するスマートな方法） - akiyoko blog

この投稿は﹁python Advent Calendar 2017 - Qiita﹂の9日目の記事です。こんにちは、akiyoko です。﹁Python Advent Calendar﹂は4年連続4度目の参加になります。　*1,　*2,　*3 はじめに皆さん、CSV は好きですよね？　Excel も大好きですね？じゃあ当然、CSVファイルは Excel で開きますよね。文字化けは？　・・もちろん嫌いですよね。でも CSVファイルを Excel で開こうとしたときに、こんな文字化け地獄を経験したことはありませんでしたか？　*4 ということで今回は、Excel で直接開いたときに文字化けしない CSV ファイルを Python3で作成する方法を紹介したいと思います。︵おまけで Python2でのやり方も書いておきますが、今時 Python2で消耗している人なんてい

richard_raw 2022/03/04

助かります。cp932だと円記号とかおかしくなる場合もあるし、やっぱりUTF-16が正解なのか……。/rowsの鍵括弧を一重にすると一文字ごとに区切られる。

リンク

[Python] ModuleNotFoundError解決方法 - Qiita

Pythonで別ディレクトリのモジュールをインポートしようとすると、ImportErrorやModuleNotFoundErrorが吐き出されることがあります。このエラーはインポートしようとしたモジュールが、検索対象のパス(sys.path)の中に含まれていないことが原因です。これを解決する方法を3つ書きます。デモ環境ディレクトリ構造は以下のように想定し、app/app.pyからlib/module.pyを読み込もうと思います。 $ pwd /home/test/ $ tree . ├── app │ └── app.py └── lib └── module.py

richard_raw 2022/02/16

“拡張子pthのファイル” Windowsでpyenvしたりしなかったりしていたらインポートが失敗するようになったので助かります。

Python
clip

リンク

はじめに — マンガと学ぶデータビジュアライゼーション

はじめに# データビジュアライゼーションとは，数値や文章などのデータに基づいた情報を，人間が理解しやすい形に視覚化する技術を指します．このサイトは，文化庁のメディア芸術データベース・ラボ︵MADB Lab︶で公開されている四大少年誌︵週刊少年サンデー，週刊少年ジャンプ，週刊少年チャンピオン，週刊少年マガジン︶のデータを用いて，データビジュアライゼーションの学習を手助けすることを目指しています．データビジュアライゼーション︵に限らずデータ分析全般︶の学習において重要なのは，分析対象のデータに興味を持てるかどうかです．本書では約47年の四大少年誌のマンガ作品データを採用しているため，モチベーションを保ちつつ学習を進めることが可能です．

richard_raw 2022/02/14

「マンガで」タイトルで引っかかるもののそのまんまの意味だった。/Plotly は→の記事で気になっていたけど触ってなかった。 https://zenn.dev/yag_ays/articles/1142050914d510

リンク

はてなブックマーク

タグ

関連タグで絞り込む (120)

Pythonに関するrichard_rawのブックマーク (346)

お知らせ

今週のはてなブックマーク数ランキング（2024年7月第2週）

はてなブックマーク透明性レポート（2024年 2月-2024年4月）

今週のはてなブックマーク数ランキング（2024年7月第1週）

公式Twitter

キーボードショートカット一覧

はてなブックマーク

公式Twitter

はてなのサービス