高橋かずひとのプログラミング、その他、備忘録。

日々調べてたことや、作ってみたものをメモしているブログ。 お決まりの断り文句ですが、このブログに書かれている内容は個人の見解であり、所属する組織の公式見解ではありません。チラ裏。

オーディオスペクトラムとか波形をOpenCVで描画してみる👀

まあタイトルの通りのお遊びで道楽です🦔

 

 


Image-Processing-Node-Editorで360度画像を表示するサンプル🦔

この前作った360度画像のやつをImage-Processing-Node-Editorのノードにしました。

基礎的な機能は増えずにニッチな機能ばかり増えていく👻

 

OpenCVで360度画像を表示するサンプル🦔

リコーの初代THETAが出てから結構な年月が経って、

YouTubeとかVR界隈での利用もあったりで、

360度画像は、かなり身近なものになった気がします👀

 

こんな感じの画像を、、、

 

こんな感じに変換したくてOpenCVのremap()で変換かけてみました。

 

行列計算とか解釈があっているか結構不安なのですが、、、

以下にソースコードをコミットしています🦔


動画で試した例は以下です。

 

Image-Processing-Node-Editor v0.2.0リリース🦔

Image-Processing-Node-Editor v0.2.0 をリリースしました👀

リリースと共にWindows向けの実行ファイルも用意しています。

 

リリース内容は以下です。

 

BRISQUEノード追加。

 

QRコード検出追加。

 

Simple Filter(Filter2D 3×3)追加。※からあげさんからのPR

 

RTSP入力追加。

 

YouTube入力追加。※別途インストール必要。Windows向け実行ファイルにはインストール済み。

 

いくつかのバグ修正。

 


 

また、からあげさんのはてブにてImage-Processing-Node-Editorを紹介いただきました。

ありがとうございます🦔

karaage.hatenadiary.jp

PINTO_model_zoo:画像捏造検出(309_ImageForensicsOSN)デモ追加

ImageForensicsOSN味見しています🦔

分かりやすい感じのやつじゃないとうまく行かないですね。

 

デモコードは以下にコミットしています。

github.com

PINTO_model_zoo:物体検出(308_FastestDet)デモ追加

FastestDetに興味があるためチョイチョイ試しています👀

 

確かに速度の割に精度は高いのですが、

色々試してフレーム毎の処理結果を追ってみると、

何でもないところで検出落としていたりするので、若干悩ましい🦔

 

あくまで個人的な感想ですが、ちょっと速度にステ振りしすぎていて、

バランス悪いなーって感じもします。

レーニングとかパラメータ変更を別途試すので、最終的な評価はその時に👀

 


 

PINTOさんのModel zooにデモを追加しておきました👻

 

Image-Processing-Node-Editor の 次のリリースタイミングいつにしよう👀 + WeDX

僕が作ったリポジトリの中で、継続的にメンテナンスしているものは少数派です。

パッと思いつく範囲でも以下の3つぐらい👀

 

→MediaPipeのマイナーバージョンリリース毎くらいに更新

 →更新内容によってはパッチバージョン更新でも追従

 

→「これだ!」と思った物体検出モデルが発表される毎に更新

 ※結構ロングスパンになっていて「MobileNetV2 SSDLite」「EfficientDet」「YOLOX」と更新してきています。次はYOLOv7同等以上の性能でMITライセンスかApache 2.0ライセンスのものが登場したら更新すると思う🦔

 

 

→仕事で使っていて、仕事で必要な機能が発生するたびに更新

 ※最近は必要機能もほぼ実装したから更新は鈍化

 

みたいな感じです。

2個目、3個目は継続的と呼ぶかは、若干微妙ですが👀

 

で、この前作った「Image-Processing-Node-Editor」

ちょいちょいプルリク貰ったり、ちょいちょいノード追加したりしているのですが、、、

リリースタイミングどーしよーかなーって考え中です。

 

明確なトリガーがあると良いのですが、

定期リリースするほど積極的には作ってないし、

新しいノード追加するたびリリースするのも何か僕の気分的に微妙だし👀

 

とは言え、前回のv0.1.1から、ぼちぼち修正内容増えてきたので、

そろそろ1回リリース切っとくのも良いか🦔

バグフィックス6~7件

・BRISQUEを用いた画質評価ノード追加

QRコード検出ノード追加

・Simple Filterノード追加(からあげさんからのPR)

 


 

Image-Processing-Node-Editorを参考にWeDXと言うソフトウェアが開発されました👀