アルゴリズムとかオーダーとか

仕事で勉強したことなどをまとめてます

go-ethereumのGraphQLを利用する

前回の記事から引き続きgo-ethereumから大量データを取得するために、今回はGraphQLを用いる方法について試したことをまとめる。

なお、前回の記事は以下を参照。
y-nakajo.hatenablog.com

  • go-ethereumのGraphQLについて
  • go-ethereumのGraphQLサーバを起動する
  • GraphQLを使ってみる
  • 最後に
続きを読む

go-ethereumのLevelDBを直接読む

ethereumのデータを分析する場合、大量のBlockHeaderやTransaction、Receiptを取得する必要がある。これらの膨大なデータをHTTPを介してJSON-RPCで取得しようとするとかなりの時間を要することとなる。
そのため、今回は大量データ処理をするために直接go-ethereumのLevelDBから値を読みだす方法を調べたのでその内容をまとめる。

  • 試した環境
  • go-ethereumのLevelDBをopenする
  • 最新のblock headerを読みだす
  • block headerをまとめて読みだす
  • block headerのパース
  • ancient DBについて
続きを読む

go-ethereumのpruningを試してみた

今回は、go-ethereumのv1.10から追加されたコマンドである、`go-ethereum snapshot prune-state`を試してみたのでその結果を共有する記事となる。
このコマンドは、go-ethereumのfull nodeを維持すると溜まっていってしまうstate trieのゴミデータを削除(枝切り)するためのコマンドである。つまり、言い換えるとgo-ethereumで肥大化していくストレージの容量を削減することができる。

より詳細な情報については公式ブログを参照。
blog.ethereum.org

  • state trieのゴミデータ
  • 今までpruningが実装されなかった理由
  • v1.10からpruningが実装された理由
  • 実際に試してみた
    • 環境
    • 実行前情報
    • 実行後情報
    • 実行時間
続きを読む

gethのsyncingについてのソース解析メモ その3

今回はgethのsyncingの全体的な処理の流れについてまとめる。

前回のまでの記事はこちら。

  • syncの開始
  • remote peerのhandshakeとpeerSetへの登録
  • fetching処理
  • fetchHeadersについて
  • idle peerとtask queueとprocessHeaders
    • peerの取得
    • requestの取得
  • まとめ
続きを読む

gethのsyncingについてのソース解析メモ その2

前回の続きとして、今回は特にReceiptsの取得処理周りを見ていく。Receiptの取得処理はfast syncの時に呼ばれ、full syncでは呼ばれないというコメントがあるが、そこの動きがよくわかっていないので、該当コードがどうなっているかを解析する。

  • ReceiptsPacket パケット受け取ってから
  • func (d *Downloader) fetchParts について
  • Receipts要求メッセージを送っている部分
  • func (d *Downloader) fetchParts のfetchReceipts処理
  • ReserveReceiptsの実態
  • q.receiptTaskQueueにitemをpushしている箇所
  • まとめ
続きを読む

gethのsyncingについてのソース解析メモ その1

Ethereumのfull/fast/snap syncの違いについてより詳しく調べいたと思い、gethのソースを読み始めた。
が、なかなかにボリュームがあるのと、同期処理についてかなり複雑だったので、頭の整理のために解析中の内容をメモとして残しておく。

  • full/fast syncのプロセスについて
  • Block headerのrequest部分
  • response受け取り部分
続きを読む

Apollo Client(React)のGetting Startedを動かすまで

つい最近、社内ハッカソンでGraphQLのライブラリである、ApolloApollo Client(React版)を触ってみた。その時に、公式のGetting Startedを動かすのに少し手間取ったので、ここに手順をまとめておく。
最後に、GraphQLを触ってみたときの所感を簡単にまとめる。

公式のGetting Startedの記事は以下を参照。
www.apollographql.com

  • 環境
  • 1. Reactのインストール
  • 2. graphqlとApollo Clientのインストール
  • 3. コンソール上で実行するClientの作成
  • 4. Apollo ClientをReact Appに組み込む
  • 5. まとめ
続きを読む