先日開催されたOTFSG Osaka Meetup #2で登壇しました。発表タイトルは「Apache Hive: そしてCloud Native Lakehouseへ」です。
発表動画はYouTubeにも公開されています。会場に来られなかった方も、ぜひご視聴ください。よろしければ、いいねとチャンネル登録もお願いします！
続きを読む「Apache Hive: そしてCloud Native Lakehouseへ」OTFSG Osaka Meetup登壇レポート #otfsg_tokyo
第5回Apache Iceberg Meetup Japanで発表してきました #iceberg_jp
先日開催されたApache Iceberg Meetup Japan #5で登壇させていただきました。発表タイトルは「Hive Metastoreを通して学ぶIceberg REST Catalog ― 仕様から実装まで」です。
続きを読むHive MetastoreとPyIcebergではじめるIceberg REST Catalog最速入門
Iceberg REST Catalogは、Apache Icebergのカタログ操作をHTTP APIとして標準化したものです。現在ではさまざまなOSS実装やクラウドサービスで採用が進んでおり、Icebergエコシステムの重要なインターフェースになりつつあります。
とはいえ、Iceberg REST Catalogを含む検証環境を一から用意するのは意外と大変です。そのため、名前は聞いたことがあっても、実際に手を動かして試したことのある方はまだ多くないのではないでしょうか。
本記事では、Hive Metastore組み込みのIceberg REST Catalog APIをDockerで起動し、PyIcebergから接続して動作確認する手順をチュートリアル形式で紹介します。詳しい仕様には深入りせず、まずはローカルでIceberg REST CatalogとApache Icebergを手軽に体験することを目的とします。
English version: Iceberg REST Catalog in No Time: A Quickstart with Hive Metastore and PyIceberg
続きを読むOTF Talk第36回出演 | HiveとIcebergの現在地とこれからを語りました #OTFTalk
「Apache Hive からみた Open Table Format (OTF) (#36)」にゲスト出演させていただきました。OTF TalkはApache IcebergやApache Hudi、Delta LakeのようなOpen Table Formatについてホストの下佐粉さんと対談するPodcastです。今回はApache Hive PMCメンバーとして、HiveそのものやIcebergの関係性、Iceberg関連の新機能についてお話しさせていただきました。
続きを読むOpen Table Format (OTF) の Podcast、 #OTFTalk 第36回を公開しました。Apache Hive PMCメンバーのおくみんさん @okumin をゲストに「Apache HiveからみたOTF」についてお話を伺いました host: @simosako https://t.co/8sgPlK6ALi
— OTF Talk (@OTFTalk) March 24, 2026
Apache Hive PMCメンバーになりました
先日XやLinkedInでご報告した通り、2025年12月8日にApache HiveのPMCメンバーに就任しました。
続きを読むI’m honored to announce my appointment as an @ApacheHive PMC (Project Management Committee) member. It is an exciting opportunity to help shape the future of Apache Hive in this new role.
— おくみん (@okumin) December 8, 2025
A huge thank you to everyone who has supported me!https://t.co/Z6LGGNcBVi#ApacheHive
お手伝いさせていただいた『Apache Iceberg活用入門』が発売されました
先日『Apache Iceberg活用入門 オープンテーブルフォーマットによるデータレイク＆データレイクハウス』が発売されました。これはオライリーから出版されている『Apache Iceberg: The Definitive Guide』を翻訳したものです。昨年蛯原さんからお誘いをいただき、私自身も年末年始にかけて日本語訳のレビューに参加していました。原著である『Apache Iceberg: The Definitive Guide』は紛れもない名著であり、その翻訳にレビュアーとして関わることができたことを光栄に思います。
『Apache Iceberg活用入門』届きました！蛯原さん( @ebyhr )、佐野さん( @IQ_Bocchi )、インプレス様、献本ありがとうございます。
— おくみん (@okumin) November 7, 2025
私も翻訳レビューを行い、また日本語限定コンテンツ「Apache Hive SQLクエリエンジン」の章を佐野さんと共著・寄稿させていただきました。
興味ある方はぜひ！ https://t.co/ehpHwQTZ2l pic.twitter.com/ApfBcTzkyE
また原著にはない章「Apache Hive SQLクエリエンジン」の執筆にも携わりました。これはApache Hiveをコンピュートエンジンやストレージエンジンとして使用するための機能群やその使い方をまとめたものです。原著では従来のデータレイクを構築するためによく使用されたHiveテーブルや、IcebergカタログとしてのHive Metastoreを説明するために「Hive」という固有名詞が50回以上登場しています。一方でクエリエンジンとしてのHiveはほぼ言及されていません。Hiveはいまや最も多くのIceberg関連機能を実装しているクエリエンジンの一つ*1です。せっかくなのでそれらを日本語版で紹介させてもらえないか提案してみたところ快諾していただき、佐野さんと協力して執筆・寄稿し、無事特別コンテンツとしてお届けすることができました。
『Apache Iceberg活用入門』はデータウェアハウスとデータレイクの違いといった歴史的な洞察から始まり、Icebergの設計や機能、各種カタログの違いやハンズオン、本番利用時に考慮すべき運用上・セキュリティ上のポイントを幅広く紹介しています。またTrinoやHiveからIcebergテーブルを操作する方法やPyIcebergやIceberg Rustライブラリの使用方法、LINEヤフーでの活用事例といった日本語版限定コンテンツも充実しています。原著である「Apache Iceberg: The Definitive Guide」を読んだことのある方もない方も楽しめる内容となっているので、興味ある方はぜひ手に取ってみてください。
最後にこのような機会を与えてくださった蛯原さん佐野さん、サンプルを献本してくれたインプレス様、普段から仲良くしていただいているIceberg・OTFコミュニティの皆さまに感謝を申し上げます。ありがとうございました！
関連記事
オープンで洗練されたデータ基盤を構築したいなら『実践Apache Iceberg』
先日発売された『実践Apache Iceberg —— 高効率・高生産性を実現するオープンなデータ基盤の構築と運用』を献本していただいておりました。微力ながら宣伝に協力させていただきたいと思い、この記事を書いています。
『実践Apache Iceberg』が取り扱う内容は幅広く、データレイクアーキテクチャの説明やその課題、Apache Icebergの内部構造や機能の解説、Apache Spark、Apache Flink、Trino、Apache HiveからIcebergテーブルへアクセスする方法、PythonベースのCLIツールであるPyIceberg、現実に即したユースケースや運用方法の紹介、高度な最適化機能の解説を含みます。付録としてハンズオン用のDocker Compose設定ファイルも提供されており、サンドボックス環境で実際にコマンドを実行しながら学ぶことができます。現時点でのIceberg習熟度にかかわらず、誰にとっても読みどころのある一冊だと思います。個人的には第8章PyIceberg、第12章パフォーマンス最適化を興味深く読むことができました。
素晴らしい本を執筆し、またサンプルを送付してくれた田中さんとべりんぐ氏、技術評論社様に改めて感謝を申し上げます！
