/var/www/yatta47.log

/var/www/yatta47.log

やったのログ置場です。スクラップみたいな短編が多いかと。

2020-01-01から1年間の記事一覧

Python3で仮想環境(venv)を使う

Ubuntu18.04でPythonの仮想環境を作成する。 大まかな手順は ディレクトリを作る ディレクトリに移動 仮想環境を有効にする です。 venvが入っていない場合は以下でインストールします。 sudo apt-get install python3-venv まずはディレクトリを作成する。 …

dockerでいらないコンテナを一括で削除する

dockerを使っているとHDDをいつの間にかかなり使っている場合がある。 その場合、不要なコンテナを削除していたのですが、実はpruneで一括削除できるとのこと。知らなったので覚書。 どんな状況か こんな状況。 $ docker ps -a CONTAINER ID IMAGE COMMAND C…

mitamaeを動かしてみた

mitamaeというのをAnsibleの代わりに使っていきたいと思って調べてみた。 とりあえずUsageの通りにやってみた。 vagrant@kafka-server:~$ ./mitamae local recipe.rb INFO : Starting mitamae... INFO : Recipe: /home/vagrant/recipe.rb INFO : package[ngi…

Githubのリポジトリを整理

git

いつの間にかGithubはPrivateリポジトリも作れるようになっていますよね。(結構前) ってことで、リポジトリを少し整理した。 Dockerファイルでよく使うファイルを置いたり、Vagrantファイルを置いたり。 考え方的に、「Githubで公開できるところまで整理す…

ConsumerのMessage受信時のシーケンス

Consumerのメッセージ受信時のシーケンスを起こしてみた。 Fetch Requestが0.1秒ごとに行われていて、そしてPUSH,ACKが複数送られているのかがわからない。 もうちょっとシーケンス見ていかないと理解できないですね。 [asin:B07H8D6CL9:detail]

Consumer接続時のシーケンス

KafkaのConsumer接続時のシーケンスもキャプチャから起こしてみた。結果は以下。 ちなみにProducer接続時のシーケンスはこちら。 フーム。Producerのシーケンスとほぼ全く一緒。broker自身はとくにコネクション貼る時はProducerなのかConsumerは意識しないの…

Amazon LinuxにGraphvizをインストール

VSCodeでPlantUMLを使いたくて、Amazon LinuxにGraphvizをインストールした。 $ sudo yum install graphviz graphviz-gd PlantUMLをVSCodeで使うために入れた。それ以外にもVSCodeのExtensionでMarkdown Preview EnhancedとPlantUMLを突っ込んだらとりあえず…

Producerからメッセージ送信時のシーケンス

今度はメッセージ送信時のキャプチャを起こしてみた。こんな感じだった。 ふむ。シンプル。 Apache Kafka 分散メッセージングシステムの構築と活用作者:株式会社NTTデータ,佐々木 徹,岩崎 正剛,猿田 浩輔,都築 正宜,吉田 耕陽翔泳社Amazon

Producer接続時のシーケンス

KafkaのProducer起動時のシーケンスをキャプチャ取って起こしてみた。こんな感じになっていた。 PlantUML、Chromeの拡張機能を使ってみたけどもっと簡単に書けないものだろうか。 Apache Kafka 分散メッセージングシステムの構築と活用作者:株式会社NTTデー…

WiresharkでKafkaのパケットをフィルタリング

KafkaのキャプチャをWiresharkで見る方法。 編集→設定をクリック ProtocolからKafkaを選んで、Kafkaの通信をしているポート(大抵は9092)が指定してあるのを確認して、チェックボックスにチェックを入れる。 以上で終了。 以下の設定をしなくても見れたりす…

kafkacatインストール方法

KafkaのProducer/Consumerのクライアントとして便利なkafkacatのインストール方法。 環境はUbuntu18.04です。 $ sudo apt-get install kafkacat 以上。ちゃんと入りました。 $ kafkacat -V kafkacat - Apache Kafka producer and consumer tool https://gith…

Producer/Consumerの設定ポイント

本を読んでいるときに気になったProducer/Consumerに関してのメモ。 Producerの設定/考慮ポイント データ送信成功の判定(acks) acks=0、acks=1、acks=allの3パターンがある。デフォルトはacks=1。 送信リトライ 再送設定。リトライ可能な例外が発生した場…

topicの削除

sample-topicという名前のtopicを削除する。 root@cli:/# kafka-topics --delete --zookeeper zookeeper:32181 --topic sample-topic Topic sample-topic is marked for deletion. Note: This will have no impact if delete.topic.enable is not set to tru…

topicの作成/確認

topic作成 topicの作成。パーティションを3つ、レプリケーションを1つの設定。brokerが一つしかない場合はレプリカはひとつしか設定できない。 kafka-topics --bootstrap-server broker:9092 --create --topic sample-topic --partitions 3 replication-fact…

error: error loading config file "/etc/rancher/k3s/k3s.yaml": open /etc/rancher/k3s/k3s.yaml: permission denied を解消する

k3sをインストールして、起動はするものの、kubectlコマンドなりを打った時にpermissio deniedが出る。 権限を追加してあげればいいのかと思いつつも、どこまで権限追加すればいいのかわからなかったので調べました。 環境 vagrant上のUbunutu18.04 vagrant@…

Ubuntu18.04にDockerをインストールする

最近よく使うDockerのインストール方法を覚書として残しておこうと思います。 Dockerのインストール 基本的には公式HPに書いてある通りです。 docs.docker.com パッケージをアップデートして、重複しそうなパッケージを削除する。 $ sudo apt-get update $ s…

Ubuntuにk3sをインストール

Kubernetesの勉強をすることになって、かといってk8sをインストールするのはクラウド環境とかでないと難しそうだったので、k3sを試してみました。 環境 ローカルのVagrantにUbuntu18.04をインストールして、その上にk3sを入れてみました。 インストール コマ…

docker-composeでNginxを立ち上げる

Nginxの環境・・・というか、Webサーバの環境が欲しくなって、Nginxでもいれるかーと思ったけどdocker-composeで立ち上げることにしてみました。 出来上がったものはこれ。 https://github.com/yatta47/docker-compose-nginxgithub.com Nginxのイメージをそ…

あけましておめでとうございます

2020年になりましたね。 あけましておめでとうございます。今年もよろしくお願いします。 お正月はいかがお過ごしでしょうか。自分は毎年恒例の格付けチェックを見ておりますw 今年の抱負 毎年言っている気がしますが、複数の収入源を作るというのをあきら…