Desktop PCの起動時にファンが数秒毎に回る/止まるを繰り返す

タイトルのような状態になりpcが起動しなくなった。最終的に電源の交換により復旧したので調べたことをメモ。 問題発生 まず、上記のように起動しなくなる数ヶ月前からなんでもないところで突然再起動するという症状がたまに出ていた。そしてタイトルのよう…

一枚の画像に映る人物に対するSMPL上での部分的なtexture mapを取り出す

denseposeとsmplの組み合わせはよく見かけるので勉強がてら一つやってみる。 実装も上がっており、やっていることも最小限に見えるのでこちらの論文の前処理を題材とする。 論文: https://arxiv.org/abs/1904.08645 実装: https://github.com/thmoa/tex2shap…

pytorch3dのTextureUVでSMPLのmeshにtextureを貼る

3dの人体形状モデルとして有名なものにSMPLというのがあり、形状(shape)と姿勢(pose)を指定することで様々な人体形状のmeshを作り出せる。 https://smpl.is.tue.mpg.de/ SMPL自体はmeshを生成するものだが、対応するtexture mapも配布されていて、3d生成関連…

pytorchでのmulti gpu対応 (DP, DDP, DeepSpeed, Accelerate)

最近SEANというnvidiaが出しているGANのモデルを勉強がてら実装してみたが、その中でDataParallelを使った処理があった。 DataParallelについてpytorchのドキュメントを見てみると、DistributedDataParallelを使えと書いてある。このあたりについて今までち…

diffusionのコア部分をtoy datasetで実装

2022年はdiffusionを利用したtext-to-imageモデルによる画像生成が流行った。 2020年にDDPMの論文が出てから2年程度で実用的な意味でもSoTAな手法になったわけだが、transformerが出てきたときと同じような大きな流れである模様。 diffusionを改善・応用した…

deviation networkの実装とパッケージ化

テーブルデータの異常検知モデルとしてdeviation networkというのがある。 paper: https://arxiv.org/abs/1911.08623 repo: https://github.com/GuansongPang/deviation-network それまでの精度が高めなdeep learningを活用した異常検知モデルは2ステップに…

terraformでbrandのimport

terraformでbrand(同意画面の設定)をimportした際にエラーとなったのでメモ。 terraform import google_iap_brand.project_brand <brand_name> これでimportすると以下のエラー Error: Saw <brand_name> when the name is expected to have shape projects/{{project}}/brands/{{name</brand_name></brand_name>…

vpn用routing tableへのentry追加

vpnを繋いで特定のhostへアクセスしたい場合の設定をメモ やることとしてはvpn用routing tableへentry追加するだけ macを使ってる場合の手順はこちら ifconfigを実行 vpnに繋ぐ ifconfigを実行 新しく出てきたinterfaceがvpn用のもの(ipsec0とする) sudo rou…

gcpのloadbalancerにてパスの振り分けでcdnにアクセスした際に404

gcp

loadbalancerではurlに応じてbackendを振りわけることが可能で、例えば以下のような設定ができる。 https://example.com/app/* -> app serverとなるcloudrunのインスタンスへ https://example.com/web/* -> cloud storageへ 以下のurlにアクセスしたとき htt…

DllNotFoundException: Unable to load DLL

unityでタイトルのようなエラーが出たので調べた内容をメモ。 該当のファイルを確認すると確かに存在していたがファイルサイズが明らかに小さすぎる。なので中身を確認するとgit lfsのメタファイルになっていた。こういうやつ。 version https://git-lfs.git…

clangで#inclue <bits/stdc++.h>

c++で競プロ関連の調べ物をしていると、includeの手間を省くためにbits/stdc++.hをincludeする例が多い。 clangでもstdc++.hを使うための設定方法をメモしておく。 clang++のheaderファイルのsearch pathを確認 $ clang++ -x c++ -v -E /dev/null ... #inclu…

RSAではなくED25519

ssh keyを生成しようと参考にしたgithubのhelpページで以下のように鍵を生成するよう書かれていた。 ssh-keygen -t ed25519 -C "your_email@example.com" https://docs.github.com/ja/authentication/connecting-to-github-with-ssh/generating-a-new-ssh-ke…

macbookpro(late 2016) 15inchのホコリ取り

mac

去年から夏が近くなるとmacの挙動がおかしくなるということが増えた。かなり発熱していたのでとりあえず小さな卓上扇風機やらファン側を持ち上げておくための小さなスタンドを置いてみたりなどして、一旦は落ち着いたのでそのまま使っていた。 ちなみに小さ…

whileでハマってTLE

前回このような記事を書いたのでついでにTLEとなったしまった例をもう一つ備忘録としてメモ。 https://jsapachehtml.hatenablog.com/entry/2022/06/05/163223 以下のコードはMを超える最小の2の指数を求める処理。無限ループに陥る場合があるがどのようなケ…

atcoderのabc254_eでTLE

こちらの問題で実行時間制限を超えてしまったのだが、普段あまり意識していなかった部分で引っかかっていたのでメモ。 https://atcoder.jp/contests/abc254/tasks/abc254_e 問題の概要は以下 グラフが与えられる(頂点数N=1.5e5) クエリが与えられる(クエリ数…

pytorchでデータ数を増やすとやけに学習時間が増えるバグ

pytorchで学習する処理を書いた際、データセット内のデータ数の増加により学習時間が増えた。 データ数増加で学習時間が増えるのは当然だろうと思うかもしれないが、今回書いていた処理はデータセットのすべてを学習に使わないもので、指定したbatch数分だけ…

kedroで01_rawのディレクトリ構造に合わせて各フェーズのデータを出力する

以前kedroのドキュメントを見たときに推奨されるデータ管理用のディレクトリ構造が定義されているのを見つけた。 https://kedro.readthedocs.io/en/stable/12_faq/01_faq.html#what-is-data-engineering-convention 整理しやすそうだと思ったため自前のスク…

pandasインストール時にエラー(pip 1.20.1)

以下の実行時にnumpyのインストールでエラーとなった。 pip install pandas==1.3.4 1.3.4は別の環境にて最近インストールした記憶があり、そちらは普通に成功していたはずだったので違いを調べてみたところpipのversionが違った。 失敗したのはpip1.20.1で、…

アルファベット文字列Sよりも辞書順で小さい回文のパターン数計算

今年に入って基本的なアルゴリズムの勉強としてatcoderのコンテストにチャレンジしている。勉強ついでのアウトプットとしてこちらの問題についてメモ。 https://atcoder.jp/contests/abc242/tasks/abc242_e 問題自体は、アルファベットのみの文字列Sに対し特…

wslでのcuda toolkitのインストールでエラー

wsl上でcuda toolkitを入れたらnvidia-smiでエラーが出るようになったのでメモ こちらで環境に合わせたインストールコマンドがわかる CUDA Toolkit 11.1 Update 1 Downloads | NVIDIA Developer 入れる前に実行してあったnvidia-smiの結果 +----------------…

tmuxで保存したセッションを間違って上書きしてしまった場合

通常tmuxのwindowやpaneの内容はtmux serverをkillしてしまうと消えてしまう。そのためPCの再起動などかける場合は消えてしまうのだが、tmux-resurrectというプラグインを利用することでディスクに内容を保存しておいて復旧することができる。 さきほどPCを…

tmuxで保存したセッションを間違って上書きしてしまった場合

通常tmuxのwindowやpaneの内容はtmux serverをkillしてしまうと消えてしまう。そのためPCの再起動などかける場合は消えてしまうのだが、tmux-resurrectというプラグインを利用することでディスクに内容を保存しておいて復旧することができる。 さきほどPCを…

vim-quickrunで標準入力が受け取れない

コードの実行 -> 修正というサイクルを早めるのに便利なvim-quickrunだが、実行時に以下のようにすることで<input_file>の中身を標準入力として受け取ることができる。 :QuickRun -input <input file> https://github.com/thinca/vim-quickrun/blob/877c8d0/doc/quickrun.txt#L110 の</input_file>…

argparse-dataclassからhydraに移行する

argparse-dataclassを少し使っていたのだが、hydraに移行してみたのでメモ。 前回書いたこちらの話に関係するが、解決したもののやはりhydraを試してみるかと思ったため。 https://jsapachehtml.hatenablog.com/entry/2021/10/23/184058 題材としては今年始…

argparse-dataclass使用時に__future__.annotationsをimportするとエラーが出るので中身を調べてみた

argparse-dataclassはdataclassをargparseに合う形に変換して渡してくれるもの。 https://github.com/mivade/argparse_dataclass もともとargparseを使っていたのだが、以下の理由から引数を管理するクラスを作りたくなった。 package化して外から使える形に…

pythonのlinter&formatterを設定する

前回neovimに関連したpython環境を見直したが、ついでにlinterやformatterをちゃんと入れておくことにしたのでメモ linterの設定 vim-lspにて表示するための設定はこちらを参考にして以下のようになった。 https://qiita.com/tk0miya/items/5a5beb2586c63792…

neovimのpython環境についてメモ

vim-lspによる補完がうまく効かない状態になっていた。補完が効かない問題自体はvenvの環境そのものがおかしくなっていたようで新しく作り直したら問題なかったのだが、その際に調べたことをせっかくなのでメモしておく。 手元の環境はこんな感じ pyenvで入…

colaboratoryでapexのinstallに失敗する

タイトルの通りでapexのinstallに失敗したのでメモ。 実行したコマンドはこちら !git clone https://github.com/NVIDIA/apex.git !git checkout ebcd7f084bba96bdb0c3fdf396c3c6b02e745042 # 2021/09/18時点での最新 %cd apex !pip install -v --no-cache-di…

pytorchのdata load時に処理が止まる

dataloader経由でデータを取得する際に処理待ちのような状態になって動かなくなることがあったのでメモ。 具体的にやろうとしてたのはDETRを動かしてみることで、画像2枚だけの小さなデータセットを用意して実行したところ以下の部分以降に処理が進まなかっ…

coqui-ai/ttsでvocoderの学習

こちらの続きとしてvocoderの学習と、生成したmelspectrogramをvocoderに通して音声生成してみる https://jsapachehtml.hatenablog.com/entry/2021/06/16/094213 学習 前回書いた通りmultiband-melganを試してみる。データセットもJSUTで同じくLJSpeechと同…