dragonflyをraspberypiで動かしてみる

dragonflyをraspberrypi 4上で動かしてみようというモチベーション。

docker run --network=host --ulimit memlock=-1 docker.dragonflydb.io/dragonflydb/dragonfly
docker ps | grep dragonfly

うんともすんとも言わない。entrypoint.shで終了しているようなので、実行してみる。

docker ps -a | grep dragonfly
sudo docker commit -m “exited” xxxxxx
docker images
sudo docker run --rm -it yyyyy bash

コンテナを起動

root@xxxxx:/data# bash -x entrypoint.sh -v -i -t
+ ulimit -l 65000
+ set -e
+ ‘[’ v ‘!=’ -v ‘]’
+ set – dragonfly --logtostderr -v -i -t
++ id -u
+ ‘[’ dragonfly = dragonfly -a 0 = 0 ‘]’
+ exec su-exec dfly entrypoint.sh dragonfly --logtostderr -v -i -t
Illegal instruction (core dumped)

起動時にコアダンプしているっぽい。
strace をしてみたら、mmap直後でcoredumpしているため、ソースコードからビルドして問題点の確認が必要そう。

iceoryx(nter-process-communication middleware )

 iceoryx というのがちょっと気になったので調べてみた。

気になった理由
Eclipse Foundationの動画のhttps://youtu.be/FEaI5oKlYbc
でROS、Adaptiveに関連する説明があったので、気になり調べてみようと。

日本語の解説サイト
publickey以外見当たらない。
ゼロコピーで瞬時にプロセス間の大規模データ通信を可能にする「Eclipse iceoryx」ミドルウェア、Eclipse Foundationが公開

iceoryxのゴールとしては

• プロセス間通信をゼロコピーで実現し、高速化
• ROS2、APの通信パターン互換
• Automotive-grade SW Quality
• Modern C++
• マルチプラットフォーム

とのこと。Rustもiceoryx-rsで開発中とのこと。

Where is Eclipse iceoryx used?　でどこで使われているかが記載されている。

使う機会があるかどうか不明だが、helloworldくらいは動かしてみようかと思う。

標準入力をファイル入力にする

まぁあるあるの実装かもしれないけど、とりあえずログとして残しておく。

#include <stdio.h>
  
int main(){
        int ret = 0;
        FILE* tmpstd = stdin;
        stdin = fopen("test.txt" , "rb");
        ret =getchar();
        printf("getchar ret= %d/n",ret);

        // 
        stdin = tmpstd;
        ret =getchar();
        printf("getchar ret= %d/n",ret);

        return 0;
}

ファイルがない場合EOFを返すので注意する。

環境依存する実装のため、必ずすべて動作するとは限らない。

 

goを２日だけ勉強してみた

2日ちょいですが、goの勉強をした内容をまとめてみました。

環境構築

install script を作ってみた。
goをインストールしただけでREPLは使えない。
最小構成を提供し、必要に応じてインストールというのは正しい。

Hello World

当たり前だが、golangのプロジェクトレイアウトに沿って構築。

Makefileを使ってビルドするのが慣例らしい。

Module

Redmine REST Clientのモジュールを作ってみた。rest.go
コマンドライン引数解析、JSON解析

ローカルで開発したモジュールは相対パスで記述しない。
go.modのreplacce directiveを使って相対パスに置き換える仕組みを使うのが一般的らしい。

手こずったところ

• Naming Rule
• publicの関数が先頭大文字
• JSONの構造体も先頭大文字

Test

go test を実行するだけで簡単にテストが実行できる。
しかも、カバレッジ計測も簡単にできるのが嬉しい。
まだ、テストユーティリティが使いこなせていない。

> go test -v  ponta027.dip.jp/rest -coverprofile = covert.out
> go tool cover -html= cover.out -o cover.html

これだけでカバレッジ結果がHTML出力される。

使ってみた感想

• 動かすだけであれば学習コストが低い。
• 言語仕様をまだ調べきれていないので。
• コンパイラが未使用変数、importがあるとエラーとなるため、クリーンなコードがかける。
• NamingRuleは慣れるまで大変。
• 周辺ツールが結構充実している。
• クロスコンパイルが簡単にできる
• 環境変数を設定するだけで実現

全然知らないことが多いので、これからもう少し勉強してみようかと思う。

Apache mesos調査_paper_abstract

 諸々経緯があってApache Mesosを調べてみることに。

論文があったので、読んで理解を深める。

Mesos:  A Platform for Fine-Grained Resource Shareing in the Data Center

Abstract

Mesosはcomodity clusterを共有するplatform
対象はHadoop , MPI(Message Passing Interface)などclustering computing framework間

• framework毎のdata replicationを排除
• fine-Grained mannerでresourceを共有

各machineにstoreされたdataを順番にreadすることにより、frameworkにdata localityを実現。Mesosはdistributed two-level- scheduling(resource offers)を導入
各frameworkにどれくらいのresourceがofferできるか決める。

frameworkはどのresourceをacceptできるかとどの計算が実行できるか決める。
Mesosがframework間でclusterを共有するときに、ほぼ最適なdata localityを実現できる。

以降、一章ずつまとめていくかな。

AWS lambdaの簡単な環境構築_CLI

ほとんどAWSのサイトに書いてあるので、リンクだけまとめます。

AWSの登録、IAMの設定は省略。

AWS CLIの環境構築
https://docs.aws.amazon.com/ja_jp/cli/latest/userguide/cli-chap-welcome.html

Lambdaの操作方法
https://docs.aws.amazon.com/ja_jp/lambda/latest/dg/gettingstarted-awscli.html

ケアレスミスで躓いたこと。

$ aws lambda list-functions --max-items 10

Could not connect to the endpoint URL: "https://lambda.us-east2.amazonaws.com/2015-03-31/functions/"

regionの設定をミスってしまったため、コマンド発行が失敗しました。

補足：上記リンクにはupdate-function-codeがなかったので、以下のように更新します。

 aws lambda update-function-code --function-name hello-world  --zip-file fileb://function.zip

nodejsでmidi作成

TonejsのMidiを調査
https://github.com/Tonejs/Midi

Midiプロジェクトの説明は

Convert MIDI into Tone.js-friendly JSON

Tone.js親和性のJSONにMidiを変換する。

実際はMidiのパースしてJSONに変換も可能。



Midiのパース、Midi書き出し自体は、midi-fileで実現している。
https://github.com/carter-thaxton/midi-file


JSONフォーマットは下記

https://github.com/Tonejs/Midi#format


1からMidiを作成する場合
https://github.com/Tonejs/Midi#encoding-midi


JSONフォーマットのサンプル
https://github.com/Tonejs/Midi/tree/master/test/midi/bach



ちなみに3つissueがあがってる。
https://github.com/Tonejs/Midi/issues