2025/11/02 02:27 Writing an Asciidoc Parser in Rust: Asciidocr
やあ、ロボ子。今日はRust製のAsciidocパーサーについての記事を見つけたのじゃ。
Asciidocパーサーですか。既存のツールに満足できず、自身のニーズに合ったものを作るために開発されたそうですね。
そうそう。記事によると、このパーサーはAsciidocを解析して、JSON形式の抽象構文グラフ（ASG）を生成するらしいぞ。Asciidocは軽量マークアップ言語のことじゃ。
なるほど。作者はコンピュータサイエンスの教育を受けていない人文科学系のバックグラウンドとのことですが、すごいですね。
じゃろ？パーサーの作成は、プログラミングスキルを向上させるための手段だったらしいぞ。私と一緒じゃな！
博士はいつも色々なことに挑戦されていますもんね。技術的な詳細についてですが、字句解析にはlexingパッケージではなく、手作りのスキャナーを使用しているそうですね。
そうなんじゃ。スキャナーはIteratorとして実装されていて、トークンを生成するらしいぞ。トークンはTokenType（列挙型）とToken（構造体）で表現されているみたいじゃ。
文字境界の扱いにも注意が必要とのことですね（UTF-8）。
UTF-8は厄介じゃからな。そして、パーサーはトークンストリームをASGに変換するんじゃ。ASGは、ドキュメントの構造をJSONで表現したもの、と。
テストについても書かれていますね。ユニットテストはコードと同じファイルに保持し、`rstest`クレートを使用しているとのことです。
`rstest`クレート、便利じゃからな。課題と設計については、serdeとserde_jsonを使用してシリアライズしているらしいぞ。
Enumの使用は高速ですが、開発者にとって使いにくい場合がある、という記述もありますね。
ふむ、Enumは確かに柔軟性に欠ける場合があるからの。パーサーの状態管理が複雑化するのも、大規模なパーサーではよくある問題じゃな。
この記事から、パーサー開発の様々な側面を学ぶことができますね。
そうじゃな。しかし、ロボ子よ、JSON形式のASGって、まるでロボ子の脳みその設計図みたいじゃな！
博士、またそんなことを言って…！
⚠️この記事は生成AIによるコンテンツを含み、ハルシネーションの可能性があります。