ラベル 技術文書 の投稿を表示しています。 すべての投稿を表示
ラベル 技術文書 の投稿を表示しています。 すべての投稿を表示

2022年10月23日日曜日

Visual Studio 2022 でリンクしないアセンブリを指定する

Xamarin.AndroidでAWSSDK.S3を使用している。Debugビルドの時は問題なく動作していたのだが、Releaseビルドだとエラーが出てしまう。
AndroidRuntime	android.runtime.JavaProxyThrowable: System.TypeInitializationException: The type initializer for 'Amazon.S3.AmazonS3Config' threw an exception. ---> System.TypeInitializationException: The type initializer for 'Amazon.Util.Internal.PlatformServices.ServiceFactory' threw an exception. ---> System.MissingMethodException: Default constructor not found for type Amazon.Util.Internal.PlatformServices.NetworkReachability
  at System.RuntimeType.CreateInstanceMono (System.Boolean nonPublic, System.Boolean wrapExceptions) [0x00076] in :0 
  at System.RuntimeType.CreateInstanceSlow (System.Boolean publicOnly, System.Boolean wrapExceptions, System.Boolean skipCheckThis, System.Boolean fillCache) [0x00009] in :0 
  at System.RuntimeType.CreateInstanceDefaultCtor (System.Boolean publicOnly, System.Boolean skipCheckThis, System.Boolean fillCache, System.Boolean wrapExceptions, System.Threading.StackCrawlMark& stackMark) [0x00027] in :0 
  at System.Activator.CreateInstance (System.Type type, System.Boolean nonPublic, System.Boolean wrapExceptions) [0x00020] in :0 
  at System.Activator.CreateInstance (System.Type type, System.Boolean nonPublic) [0x00000] in :0 
  at System.Activator.CreateInstance (System.Type type) [0x00000] in :0 
  at Amazon.Util.Internal.PlatformServices.ServiceFactory..ctor () [0x00091] in :0 
  at Amazon.Util.Internal.PlatformServices.ServiceFactory..cctor () [0x00082] in :0 
   --- End of inner exception stack trace ---
  at Amazon.S3.AmazonS3Config..cctor () [0x0000a] in :0 
   --- End of inner exception stack trace ---
  ・・・略・・・

リンクの問題らしい。Androidプロジェクトのプロパティを見てみると前者のビルドではリンク「なし」だが、後者のビルドでは「SDKおよびユーザーアセンブリ」だ。ここで消えているのだろう。
試しに「SDKアセンブリのみ」にしてみると確かに動作するようになる。このままでも良いのだが、無駄なものが入るのは避けたい。
今回の場合はアセンブリのリンクをスキップに「AWSSDK.Core;Amazon.Util.Internal.PlatformServices」を入れたところ、Releaseビルドでも動作するようになった。他のアセンブリで同様の作業を行いたい場合は「アセンブリ名;名前空間」を入力すればよい。
参考: Linking on Android#linkskip

2020年4月30日木曜日

azcopyのcopyコマンドでサブディレクトリ内にあるシンボリックリンクをアップロードする

azcopyツールでシンボリックリンクをアップロードの対象にするには、copyコマンドを使えば良いということは、azcopyのヘルプを見ればわかることだ。
しかしWindows系の場合、サブディレクトリ内にあるとアップロードできないバグがあることは周知されていない(ような気がする)。
2019年12月13日にバグ報告をしたのだが、一向に修正されないので、解決策を日本語で書いておこうと思う。

現在の作業ディレクトリを「Z:\」とし、以下のディレクトリをアップロードの対象とする場合、

Z:\directory
└─sub-directory
    ├─textfile1.txt (シンボリックリンク)
    └─textfile2.txt

仕様通りにアップロードしようとするなら、以下のコマンドを実行すればアップロードできるはず。

azcopy.exe copy "Z:\directory\" "https://host/blob/?$key" --follow-symlinks --recursive --from-to=LocalBlob

しかし、実際には以下のエラーが出てアップロードできない。

failed to perform copy command due to error: no transfers were scheduled because no files matched the specified criteria

そこで、ワイルドカードを使って明示的にファイルを指定してやる。

azcopy.exe copy "Z:\directory\*" "https://host/blob/?$key" --follow-symlinks --from-to=LocalBlob

ただし、「--recursive」機能が使えなくなるので、「sub-directory」内のディレクトリを対象にできなくなってしまう点には注意。
再帰的にシンボリックリンクを対象にしたい場合は、Get-ChildItemコマンドを併用する必要があるだろう。

2020年2月11日火曜日

「Xamarin.Forms.ImageSource.FromResource」メソッドをリリースビルドで使う場合の注意点

表題の関数を使ったアプリを起動すると、エラーコード「0x80040905」とともに強制終了してしまった。
AndroidとiOS では問題ないのにUWPで失敗するのはなぜなのか...と悩んで色々調べてみた結果、.Net Naitiveを使用する場合はアセンブリ情報を渡さないと実行できないとのこと。

39685 – ImageSource.FromResource doesn't work on UWP in release

4年も前からある問題のようだが、なぜドキュメントに載っていないのか...
この問題を解決するにはbugzillaで述べられているように、「Assembly.GetExecutingAssembly()」を第2引数に渡せばよい。

ImageSource.FromResource("Namespace1.Namespace2.image.png", Assembly.GetExecutingAssembly());


ちょっとだけ賢くなった。

2019年12月26日木曜日

ffmpegで動画にindexを付ける

動画によっては、index情報が付与されている位置がファイルの最後尾にあることがある。
この状態ではストリーミング再生が失敗し、ダウンロード後の再生になるため、サイズが大きいファイルだと再生まで時間がかかってしまう。
以下のコマンドを実行することで、index情報をファイルの先端に移動し、ストリーミング再生を可能にすることができる。

ffmpeg.exe -i 元のファイル名 -codec copy -movflags +faststart 保存先

ただし、この機能は「mov/mp4/ismv」にしか対応していない(4.18 mov, mp4, ismv)。
また、分割出力の場合にも対応していないらしい(試していないが、分割出力の場合はマニフェストファイルが存在するため、当然なような気もする)。

手元のAndroid端末では、index情報を付与しないと動画の再生すらできなかった。
同じ悩みを抱えている方は、この方法を試してみてはいかがだろうか。

2019年6月30日日曜日

ffmpegで変換時のメタ情報文字化けに対処する

ffmpegを使用してデータを処理する場合、メタ情報に日本語の情報が入っていることがある。最近のデータを変換する場合は文字化けすることなく変換できるのだが、昔生成されたデータを変換する場合は文字化けしてしまうことがあった。
対処方法としては、オプションを付ける、ソースコードを修正して文字化けしないようにするなど、色々あるようだが、自分の直面した問題では前者は効果がなかったし、後者は面倒である。
そこで、変換する際にメタ情報を自分で指定して処理するようにしたところ、上手く変換することができた。

メタ情報の指定には「-metadata」オプションを使う。

ffmpeg.exe -i 元のファイル名 -metadata [メタ情報名]="メタ情報" 保存先

メタ情報の名前は「ffprobe.exe」を使えば取得できる。

ffprobe.exe -show_format -show_streams ファイル名

コマンドを実行すると、大量の情報が出力される。「TAG:」がついている情報が、今回指定すべき「メタ情報名」である。最後の方に出力されているはず。
アーティスト名が文字化けしていれば「TAG:artist=fツ巻」という風に表示されているだろう。ffmpegで自分でアーティスト名を指定する場合は

ffmpeg.exe -i 元のファイル名 -metadata artist="アーティスト名" 保存先

とすればよい。メタ情報を複数指定する場合は

ffmpeg.exe -i 元のファイル名 -metadata artist="アーティスト名" -metadata album="アルバム名" -metadata title="題名" 保存先

のように書く。Windowsの環境であれば「ミュージック\アーティスト名\アルバム名\題名」の順番で音楽が保存されるので、スクリプトを使用すれば簡単にメタ情報を正確に書き換えられる。日本語の文字化けに悩んでる方はぜひ試してほしい。

2019年2月22日金曜日

パフォーマンスモニターを使って通信状況の統計をとる

パフォーマンスモニターを使うことで、システムの活動状況を確認することができる。
この記事では、パフォーマンスモニターを使って統計情報を作成する方法を説明する。
  1. 基本的な使い方
  2. リアルタイムの状況を確認する
  3. 長期的な状況を確認する

1.基本的な使い方

は省く。検索すれば大量に出てくる。

2.リアルタイムの状況を確認する

「パフォーマンス/モニターツール/パフォーマンスモニター」を開く。


初期状態では、過去100秒のCPU時間の使用率が表示される。
+記号を押して「カウンターの追加」窓を表示する。


「説明を表示する」にチェックを入れると各カウンターを選択したときに説明が表示される。
カウンターの一覧から「Network Interface」を探して開く。


今回は受信及び送信したバイトの情報が欲しいので、「Bytes Received/sec」と「Bytes Sent/sec」を選択して「追加」を押す。


ほかに欲しい情報があれば。同じ方式で追加していき、追加し終わったら最後に「OK」を押す。すると、CPU時間に加え、受信したバイト数と送信したバイト数がグラフに表示されるようになる。


図では、「Bytes Received/sec」と「Bytes Sent/sec」のスケールに0.0001が指定されている。これは実測値に0.0001の倍率がかかっていることを意味する。すなわち、10000バイトでグラフの1になる。
他に、プロパティから計測時間を変更したり、スケールを変更することができる。

3.長期的な状況を確認する

「2.リアルタイムの状況を確認する」ではリアルタイムで情報を確認する方法を述べた。
しかし、この方法では最大過去1000秒(厳密には「サンプリング間隔 × 期間 <= 1000」となるような範囲内)の情報しか参照することができず、あまり役に立たない。できれば、1日単位でほしいところだ。
そこで、データコレクターセットを利用する。まず、左枠のパフォーマンスモニターを選択した状態で、「操作→新規作成→データコレクターセット」を選択する。


適当に名前を入れて次に進む。


適当に保存場所を指定して次に進む。


「保存して閉じる」を選択して完了する。
なお、保存時に「データコレクターセットを作成しようとしたとき、次のシステムエラーが発生しました: アクセスが拒否されました。」のエラーメッセージが表示される場合はユーザーがAdministratorsグループに属していないため作成できない(殆どのサイトに「Perfromance Log Usersグループに属していないから」と書いてあるがそれは誤りで、Administratorsグループに属している必要がある)。作成以降の作業はAdministratorsグループに属していなくても行うことができる。


「 パフォーマンス/データコレクターセット/ユーザー定義」配下に先ほど指定した名前で作成される。以降、新規作成したデータコレクターセットの名前を「New Data Collector Set」とする。


「 パフォーマンス/データコレクターセット/ユーザー定義/New Data Collector Set」を選択した状態で「操作→プロパティ」を選択する。
「ディレクトリ」タブを選択し、「サブディレクトリ名のフォーマット」に「yyyyMMdd」を指定する。これにより、毎日「年月日」の形式でディレクトリが作成され、そのディレクトリに統計情報が保存されるようになる。

「ディレクトリの例」の枠に、作成されるディレクトリ名が表示される。

「スケジュール」タブを選択し、「追加」を押す。適当に各枠を埋めた後、「OK」を押す。以下の図のように指定した場合、毎日0時0分に情報の収集を開始する。


「スケジュール」タブを選択し、「制限値」の「制限に達したらデータコレクターセットを再開する」を有効にする。続けて、「制限値」の「期間」に1日を指定する。これで設定が終わったので、最後に「OK」を押す。


これで、毎日0時0分に設定したディレクトリに「システム モニター ログ.blg」が自動的に作成され、1日の通信状況が格納される。情報を確認したい場合は、単純にファイルを開けばよい。1日分の情報量だと開くのに数秒かかる。


これらの情報はサーバーを運用している場合は特に有用な情報源となるはず。 大手のクラウドサービスでは監視を自動で行ってくれるため必要ないかもしれないが、他のVPSサービスでは存在しない、あるいは有料の場合もあるだろう。是非とも利用していただきたい。

2018年8月31日金曜日

CentOS7のApache2.4.6でpythonを動かしていたら日本語ディレクトリを取得して表示するときにエラーが出た

題名に割と問題点を詰め込んだ感じになったが、さらなる詳細は以下の通り。
問題点と関係なさそうな情報は面倒なので割愛。

---
@実行環境
CentOS Linux release 7.5.1804 (Core)
Server version: Apache/2.4.6 (CentOS)
Python 3.6.5

@実行内容
Pythonで書かれたindex.cgiにFirefoxで接続。

@予期された動作
取得した日本語のディレクトリ名が表示される。

@結果
/var/log/httpd/error_logに以下のエラーが出力され、表示されない。
UnicodeEncodeError: 'utf-8' codec can't encode characters in position 69-80: surrogates not allowed
---

因みに、このファイルはWindows10上のIISで動かしていた時は問題なく動作していた。
エンコーディング系のエラーだと一目でわかるので、早速以下の関数を実行して結果を見た。

---
print(sys.stdout.encoding)
print(sys.getdefaultencoding())
print(sys.getfilesystemencoding())
print(locale.getlocale())
---

結果はこう。

---
utf-8 utf-8 ascii (None, None)
---

sys.getfilesystemencodingの結果がascii に、locale.getlocaleの結果が(None, None)になっている。しかし、これをコマンドライン上で実行するとこうなる。

---
utf-8
utf-8
utf-8
('en_US', 'UTF-8')
---

つまり、Apacheの問題であることがわかる...ので、色々設定をいじってみたがどうもうまくいかない。
「https://itekblog.com/ascii-codec-cant-encode-characters-in-position/」を参考にしたところ、LC_ALLが問題解決の糸口になりそうだ。しかし、LC_ALL=en_US.UTF-8にしても全く変化がない。スクリプト上でlocaleに「en_US.UTF-8」を設定してもasciiのままだ。
「/etc/sysconfig/httpd」で設定するようにしてもやっぱり変わらない。
Apacheのドキュメントをよくよく読むと、SetEnvを使えとある。早速「SetEnv LC_ALL en_US.UTF-8」を追加すると...。

---
utf-8 utf-8 utf-8 ('en_US', 'UTF-8')
---

日本語ディレクトリが使えるようになった。
Apacheはファイルシステムの情報取得にはasciiを標準で使うらしい(ソースのURLは忘れた)。でも、日本人してはやっぱり日本語のファイル・ディレクトリも取得できるようにしたいよね。

2018年8月4日土曜日

Visual Studio 2017でJavaScriptのimport機能を使ってたらエラーが出た

題名のまま。こんなエラーが出る。
Severity Code Description Project File Line Suppression State
Warning TS1148 (JS) Cannot use imports, exports, or module augmentations when '--module' is 'none'. Miscellaneous ...\OpenInPopup\options\options.js 14 Active
しかし、Mozillaのページを見ると構文は正しいようだ。Optionsを見ていたら、こんな項目を見つけた。
Text Editor→JavaScript/TypeScript→Project→General→
ECMAScript version for files that are not part of a project

importは「ECMAScript 6」から定義されているので、「ECMAScript 6」を選択するのが正しい。
実際に「ECMAScript 6」を選択したところ、エラーが表示されなくなった。