KafkaのProducer起動時のシーケンスをキャプチャ取って起こしてみた。こんな感じになっていた。 PlantUML、Chromeの拡張機能を使ってみたけどもっと簡単に書けないものだろうか。 Apache Kafka 分散メッセージングシステムの構築と活用作者:株式会社NTTデー…
KafkaのキャプチャをWiresharkで見る方法。 編集→設定をクリック ProtocolからKafkaを選んで、Kafkaの通信をしているポート（大抵は9092）が指定してあるのを確認して、チェックボックスにチェックを入れる。 以上で終了。 以下の設定をしなくても見れたりす…
KafkaのProducer/Consumerのクライアントとして便利なkafkacatのインストール方法。 環境はUbuntu18.04です。 $ sudo apt-get install kafkacat 以上。ちゃんと入りました。 $ kafkacat -V kafkacat - Apache Kafka producer and consumer tool https://gith…
本を読んでいるときに気になったProducer/Consumerに関してのメモ。 Producerの設定/考慮ポイント データ送信成功の判定（acks） acks=0、acks=1、acks=allの3パターンがある。デフォルトはacks=1。 送信リトライ 再送設定。リトライ可能な例外が発生した場…
sample-topicという名前のtopicを削除する。 root@cli:/# kafka-topics --delete --zookeeper zookeeper:32181 --topic sample-topic Topic sample-topic is marked for deletion. Note: This will have no impact if delete.topic.enable is not set to tru…
topic作成 topicの作成。パーティションを3つ、レプリケーションを1つの設定。brokerが一つしかない場合はレプリカはひとつしか設定できない。 kafka-topics --bootstrap-server broker:9092 --create --topic sample-topic --partitions 3 replication-fact…
k3sをインストールして、起動はするものの、kubectlコマンドなりを打った時にpermissio deniedが出る。 権限を追加してあげればいいのかと思いつつも、どこまで権限追加すればいいのかわからなかったので調べました。 環境 vagrant上のUbunutu18.04 vagrant@…
最近よく使うDockerのインストール方法を覚書として残しておこうと思います。 Dockerのインストール 基本的には公式HPに書いてある通りです。 docs.docker.com パッケージをアップデートして、重複しそうなパッケージを削除する。 $ sudo apt-get update $ s…
Kubernetesの勉強をすることになって、かといってk8sをインストールするのはクラウド環境とかでないと難しそうだったので、k3sを試してみました。 環境 ローカルのVagrantにUbuntu18.04をインストールして、その上にk3sを入れてみました。 インストール コマ…
Nginxの環境・・・というか、Webサーバの環境が欲しくなって、Nginxでもいれるかーと思ったけどdocker-composeで立ち上げることにしてみました。 出来上がったものはこれ。 https://github.com/yatta47/docker-compose-nginxgithub.com Nginxのイメージをそ…
2020年になりましたね。 あけましておめでとうございます。今年もよろしくお願いします。 お正月はいかがお過ごしでしょうか。自分は毎年恒例の格付けチェックを見ておりますｗ 今年の抱負 毎年言っている気がしますが、複数の収入源を作るというのをあきら…
久しぶりにブログ書きますね。 大みそかの節目なのでそんなに大した内容じゃないけれど記録として書いておこうと思います。 今年あったこと 今年は色々な変化がありました。 プライベートなところでも仕事的なところでも。 プライベート面 生きていれば必ず…
RDBMSとかオブジェクトストレージとか調べてて、似たようなものがあると思うんだけどそういえば違いは何なんだろうというのが気になって、調べるだけ調べた。 まとめはしていない。ってことでこれは完全に覚書ということで。 RDBMSとNoSQLの違い https://aca…
前回の記事でPocketの未読のRSSを確認したので、それをGASで取得してみようと思います。 コード コードは以下。pocketUrlのところを自分のURLに変えてください。 /** * Pocketのunreadを取得する **/ function pocket2hatebu() { var pocketUrl = 'https://g…
Pocketという後で読むサービスをよく使っているのですが、はてぶも使っていて、どっちに入れたっけ？というのがわからなくなる時があります。 なので、Pocketの未読をはてぶの後で読むに追加できないかなーと思って、Pocketの未読のRSSフィードがないかどう…
はてなブログの記事一覧URLを取得します。 調べるとPythonを使ってAPIたたいたり、GoogleAppScriptでスクレイピングしたりする方法が多いですが、Linuxのコマンドで実施します。 URLのもとは、エクスポートしたファイルを利用します。 ファイルの中身を確認 …
個人で使っているAzureの管理ポータルにログインしたところ、何かが変わったようで、メニューが英語になっていました。 何もしていないのに・・・・(´・ω・｀) ってことで、英語メニューを日本語に変更やり方。 やり方 管理ポータルの設定画面で可能です。以…
前回の記事で、パブリックネットワークとプライベートネットワークを両方設定してうまくいきましたが、途中で変更するとうまくいかない場合がありました。 BOXを自分で作って配布するときにも必要な作業になりますので、覚えておいたほうがいい内容だと思う…
前回、VagrantでAmazonLinuxのBoxを使ってOSを立ち上げました。 本当にやりたかったのは 外部からVagrant上に立ち上げたBoxに対してアクセスがしたい でした。 今回はそれをやってみようと思います。 そもそもなぜこのようなことを？ 先ほど書いた通り、LAN…
昔、AmazonLinuxのボックスを使っていて、最近また使うことになって調べてみたら新しいBoxが出ていたので備忘録。 公式サイト Vagrant box hbsmith/awslinux - Vagrant Cloud ここにあるBox使っています。 バージョン的にはv2018.03になりますね。 コマンド…
先日、Amazon Prime Dayがありましたね。 そこで「波に乗るしかない」ということで買物しちゃいました。 ということで今日は買ったものの記録。 買ったもの WD デスクトップHDD 4TB USB3.0 WD Elements Desktop 外付けハードディスク / WDBBKG0040HBK-JESN 2…
先日、こんなツイートを見ました。 「私営業だから技術の話わかりません」って言うヤツがいるんだけどさっさと会社辞めてほしい。自動車販売店の営業が車のことよく分かりませんって言ったらそいつから買うか？価値提案に必要なレベルの基礎情報も持たずに何…
ふっと思い返して、「これってAnsibleが使える状況じゃね？」って思い立って、一度くじけたAnsibleをもう一度やってみようという気になったのでやってみました。 っといっても、とりあえずは下準備のAnsibleインストールから。 環境 Ubuntu 18.04.2 LTS 公式…
SPAとかSSRとかその辺を知りたくて、Nuxt.jsをやり始めてみました。 以前かっておいた本をもとに勉強開始したので、その本の感想を書いておこうと思います。 読んだ本 Hello!! Nuxt.js Hello!!Vue&Nuxtシリーズ (技術の泉シリーズ（NextPublishing）)作者:那…
今日も今日とてGASネタです。 前回の記事ではAtom形式のRSSをパースしたけれど、今回ははてなブックマークのRSSをGoogleAppsScriptでパースします。 はてなブックマークのRSSは、ちょっと特殊で独自のNamespaceが入ってたりします。 このへん。Namespaceが入…
昨日、夜中にRSSを見ていたらこのような記事を見ました。 qiita.com すっごく和んだので、そのまま以下のようにはてぶに投稿 運用・保守 インフラエンジニアの時によく使ってたLinuxコマンド - Qiitaこういうの見ると和む。2019/06/17 01:38 こういうの見る…
久しぶりにRSSを読み取る必要が出てきたのでその覚書。 やりたいこと Atom形式のRSSをGASでパースする。 コード function parseRss(){ var feedURL = "[RSSのURL]"; var response = UrlFetchApp.fetch(feedURL); var xml = Xml.parse(response.getContentTex…
PythonからPostgreSQLサーバをいじりたくて、調べたメモ。PythonからPostgreSQLを操作するにはpsycopg2というのを使えばいいらしい。 ってことで早速実験。 環境 vagrant@vagrant:/vagrant$ cat /etc/os-release NAME="Ubuntu" VERSION="18.04.2 LTS (Bionic…
GW、いかがお過ごしでしょうか。皆さん楽しく過ごしていますかね。 天気が良かったり悪かったり、気温差にちょっとやられてきているやったです。 で、ちょっとまとまった時間が取れたので、前々から気になっていた映画を見ていました。 個人的感想と評価を書…
家でツールとして使っているLinuxOS。PCのOSはWindowsだけど、Linuxはやっぱり切り離せません。 Linux関連はVirtualBoxに入れていて、そこからNASにアクセスするための情報を覚書。 ってか何回も間違えては検索しているので、自分用に検索できるように記事に…
