IT関連

スポンサーリンク
IT関連

【メモ】matplotlibで作成したアニメーションが保存できないときの対応

matplotlibのanimationを保存するときにハマった話 こんにちは、novです。 最近、業務で扱う深層学習についてもう少し理解を深めようと、ゼロから作るDeep Learning3(フレームワーク編)を、手を動かし...
IT関連

【メモ】AWS SageMakerでhorovodによる分散学習が動かない場合の対応とhorovodの仕組みについて

今回の記事では、AWSの機械学習マネージドサービスの一つであるsagemakerを用いて、分散学習を行う際にハマった部分をメモしていこうと思います。
IT関連

【Python】Stringデータを変数名(シンボル名)に変換する方法

Pythonの変数の実体、気になりませんか? 仕事や、kaggleでPythonを使っていると、csvファイルの処理でPandasを使うことが多いと思います。 Pandasを用いるということは、基本的にDataFram...
IT関連

【メモ】特徴量エンジニアリングについて:その1

この記事は、主に自分がkaggleをやるにあたって勉強した内容をまとめます。 今回は特徴量エンジニアリングについてです。
IT関連

VSCode + Markdown + Mathjax の設定で、LaTeX数式を含むWordPress用の記事作成を爆速にする話

この記事ではVSCode+Markdown+LaTeXで、Wordpressと互換性のある文書を作成できる環境を整えるにあたってやったことを備忘録を兼ねてまとめます。ネットに落ちている情報を組み合わせて構築しましたが、意外とまとまった情報のあるサイトがなかったので、同様の問題に苦しんでいる方には有益なんじゃないかなと思います。
IT関連

【IT/コンピュータ】プロセスとは何ぞや?

ITの勉強をしていると出てくる用語に「プロセス」や「スレッド」があります。コンピュータが認識する「プロセス」の実体とは何か?となると案外言葉にできないものではないでしょうか。この記事では、自分が「プロセス」というもののイメージを掴むにあたって調べたことなどを中心にまとめていきたいと思います。
IT関連

【Python/TensorFlow】tf.estimator.Estimatorを用いた学習のやり方(モデル作成 by Keras)

この記事では自作のモデル(と言ってもかなり単純なものにしますが)でこのEstimatorを使用するとどうなるかについてまとめていきます。
IT関連

【Python/Tensorflow】SequenceExampleを使用したSparseTensorのシリアライズ方法

Tensorflowの公式ドキュメントにて、「SparseFeature」よりも「SequenceExample」と「VarLenFeature」を用いた方が良いという記述があります。本当かどうか確かめていなかったので、そこについて調査し、その結果をまとめます。
IT関連

【Python/Tensorflow】SparseTensorを学習に用いる際の注意点

SparseTensorを使おうとするとあちこちに罠が仕掛けられていて、TFRecords形式に保存するのも学習を回すのもなかなかうまくいきません。しかも、日本語の情報が皆無なうえに、英語の情報もリッチとは言えません。更に公式ドキュメントもなかなか分かりづらいです。 という訳で、SparseTensorについて調べてるとそれなりの情報量になりました。結構困ったので、同じ轍を踏む方が一人でも少なくなるように、とこの記事を書こうと思った次第です。
IT関連

【Python/Tensorflow】TFRecordsから学習を行う方法

本記事では複数データのTFRecordsへの書き出し・書き出したファイルからの読み出し、実際に学習を行う際にはどうするのかというのを簡単な多層パーセプトロン(MLP)に適用して確認してみたいと思います。サンプルコードを載せているので、コピペすれば動作確認することが可能です。
スポンサーリンク
タイトルとURLをコピーしました