OpenMythosのサンプルプログラムを動かしました

1.概要 前回、OpenMythosの環境構築まで実現したので、GitHubにあるサンプルプログラム(Usage)を動かしてみました。一部エラーが発生しましたが、結果出力部分なので修正をしました。その内容を記述します。 2.詳細 Usageに記載されているPythonプログラムをopenmythos_usage.pyとして作成します。 $ source ~/mypy/bin/activate (mypy) $ pythoh3 openmythos_usage.py 下記エラーとなります [MLA] Parameters: 1,538,626 [MLA] Logits shape: torch.Size([2, 16, 1000]) [MLA] Generated shape: torch.Size([2, 24]) Traceback (most recent call last):   File "/home/nakasima/openmythos/openmythos_usage.py", line 48, in <module>     rho = torch.linalg.eigvals(A).abs().max().item()           ^^^^^^^^^^^^^^^^^^^^^^^ RuntimeError: linalg.eig: The input tensor A must have at least 2 dimensions. コードの下記部分を修正します #rho = torch.linalg.eigvals(A).abs().max().item() rho = A.abs().max().item() $ source ~/mypy/bin/activate (mypy) $ pythoh3 openmythos_usage.py [MLA] Parameters: 1,538,626 [MLA] Logits shape: torch.Size([2, 16, 1000]) [MLA] Generated shape: torch.Size([2, 24]) [MLA] Spectral radius ρ(A) = 0.3679 (mus...

grepで大量の条件がある場合の対処方法

1.概要

grepで抽出処理を良く実行します。条件が1個や2個ならば良いのですが、大量の条件がある場合にどうやって実現すると良いか悩みました。forのループで処理できるのはわかるのですが、効率が悪いので方式を検討しました。その内容を記述します。

条件が1つの場合: grep 0001 test.file
条件が2つの場合: grep -e 0001 -e 0002 test.file

2.詳細

forのループを作成して、条件の文字列を作ります( cond.txt )。
条件文字列作成のforのループは文字列を検索しないので効率には影響しません。

-e 0001 -e 0002 -e 0003 -e 0004 -e 0005 ... -e 1000

調べたい対象ファイルをtest.fileとします。

COND=$(cat cond.txt)
grep ${COND} test.file

3.所見

CONDの長さに制限があると思ったので調べてみました。

getconf ARG_MAX
2097152

十分なサイズだと思いますが、実際に試験しようと思っています。

参考
[外部サイト参照]
コマンド引数の文字数制限 – Argument list too long

コメント

このブログの人気の投稿

miniPCのBMAXでWindows11のsecure boot設定漏れでトラブル発生

LinuxMint-22.3にWine 11.6をサクッと入れてみました

LinuxMint 21.3にWinBoat導入を試してみました