Podcast thumbnail for OTF Talk

by Akira Shimosako

36 episodes
Updated Weekly
Accepts GuestsHas SponsorsLocation 🇯🇵

Podcast Overview

OTF Talk は、OTF = Open Table Format の技術的な解説や最新トピック等を、ゲストをむかえてお話をうかがうPodcastです。 (host: @simosako) https://www.otftalk.com/

Language

🇯🇵

Publishing Since

7/30/2024

1 verified contact email on file for OTF Talk

Pitch yourself as a guest, propose sponsorships, or reach out directly to the host.

Recent Episodes

Episode thumbnail for #36 Apache HiveからみたOpen Table Format (OTF)

March 24, 2026

#36 Apache HiveからみたOpen Table Format (OTF)

<p>OTF Talk 第36回は、Apache Hive PMCメンバーのおくみんさんに「Apache HiveからみたOTF」についてお話をうかがいました。</p><p><br></p><p>Apache Hiveとは何か/Apache Hiveへの貢献とPMC/HiveとOpen Table Format/Apache Iceberg対応/Apache Hiveコミュニティ</p><p><br></p><p>OTF Talk は、OTF = Open Table Format の技術的な解説や最新トピック等を、ゲストをむかえてお話をうかがうPodcastです。 </p><p>https://www.otftalk.com/</p><p><br></p><p>guest: guest:@okumin おくみん Apache Hive PMC メンバー / Treasure Data ソフトウェアエンジニア</p><p>host: @simosako 下佐粉 昭 AWSのソリューションアーキテクト。 専門はデータレイク 、データウェアハウス</p><p><br></p><p>※感想は #OTFTalk でポストいただけると励みになります。</p><p>※発言は各個人のものであり、所属組織を代表するものではありません。</p><p><br></p><p>--------------------</p><p><br></p><p>参考)</p><p>おくみんさん Xアカウント - https://x.com/okumin</p><p><br></p><p>Apache Iceberg活用入門 オープンテーブルフォーマットによるデータレイク&データレイクハウス (書籍) https://book.impress.co.jp/books/1124101072</p><p><br></p><p>Apache HiveとIceberg: 2025年春 (おくみんさんによる、HiveのIceberg関連プロジェクト解説) https://blog.okumin.com/entry/2025/05/30/110000</p><p><br></p><p>--------------------</p><p>※AI生成の目次です。ご参考までに。</p><p><br></p><p>[00:00] ゲスト紹介とHive PMCとしての活動</p><p><br></p><p>ゲストのおくみんさん(トレジャーデータ)は、約10年のビッグデータ歴を持ち、Apache HiveのPMCメンバーとして開発を主導している。</p><p><br></p><p>共著(寄稿)した書籍『Apache Iceberg活用入門』の話題。</p><p><br></p><p>[05:22] Apache Hiveとは何か? モダンな構成への変化</p><p><br></p><p>Hiveは「メタストア」と「SQLクエリエンジン」の2つの主要コンポーネントで構成される。</p><p><br></p><p>実行エンジンはMapReduceからApache TezやLLAPへ移行し、高速化を実現している。</p><p><br></p><p>[11:13] Open Table Format(OTF)とHiveの親和性</p><p><br></p><p>HiveはApache Icebergを強力にサポートしており、Sparkに次ぐ機能網羅性を誇る。</p><p><br></p><p>カタログ機能だけでなく、データのコンパクション(最適化)やクリーンアップなどのメンテナンス機能もHive単体で完結できる「Best of Suite」としての利点。</p><p><br></p><p>[16:47] 最新の開発トピック:KubernetesとIceberg v3</p><p><br></p><p>HelmチャートによるKubernetesへのデプロイ対応が進んでおり、インフラ管理が容易になりつつある。</p><p><br></p><p>Iceberg v3スペックへの対応や、複数テーブルを跨ぐトランザクション機能の実装が進んでいる。</p><p><br></p><p>[25:31] Hiveコミュニティの熱量と今後の展望</p><p><br></p><p>100名以上のコミッターが在籍し、AI時代やデータレイクハウスの進展に合わせて今なお熱意を持って進化し続けている。</p>

Episode thumbnail for #35 ハイトラフィックな更新処理が必要な環境でのApache Iceberg検証

December 16, 2025

#35 ハイトラフィックな更新処理が必要な環境でのApache Iceberg検証

<p>OTF Talk 第35回は、Repro チーフアーキテクトの joker1007さんに「ハイトラフィックな更新処理が必要な環境でのApache Iceberg検証」についてお話をうかがいました。</p><p><br></p><p>既存環境の課題/Icebergでデータとコンピュートを分離する/データ更新と参照ラグ/コンパクションの課題と工夫/今後の展望</p><p><br></p><p>OTF Talk は、OTF = Open Table Format の技術的な解説や最新トピック等を、ゲストをむかえてお話をうかがうPodcastです。 </p><p>https://www.otftalk.com/</p><p><br></p><p>guest: guest:@joker1007 Repro チーフアーキテクト </p><p>host: @simosako 下佐粉 昭 AWSのソリューションアーキテクト。 専門はデータレイク 、データウェアハウス。</p><p><br></p><p>※感想は #OTFTalk でポストいただけると励みになります。</p><p>※発言は各個人のものであり、所属組織を代表するものではありません。</p><p><br></p><p>--------------------</p><p><br></p><p>参考)</p><p>joker1007さんXアカウント - https://x.com/joker1007</p><p><br></p><p>ReproでのApache Icebergの技術検証結果 https://tech.repro.io/entry/2025/11/13/161646</p><p>前回のOTF Talkでのご出演 - Hudiの話 (#19, #20) https://www.otftalk.com/2024/11/ep9.html</p><p>前回検証結果のブログ https://tech.repro.io/entry/2024/10/28/170721</p>

Episode thumbnail for #34 Apache Kafka と Open Table Format

October 28, 2025

#34 Apache Kafka と Open Table Format

<p>OTF Talk 第34回はConfluent 清水 亮夫 さんに、「Apache Kafka と Open Table Format」についてお話をうかがいました。</p><p><br></p><p>リアルタイム処理とOTF/Kafkaの特徴/Kafkaと他システムとの連携/Kafka Connector/Iceberg Sink Connectorの機能と注意点</p><p><br></p><p>OTF Talk は、OTF = Open Table Format の技術的な解説や最新トピック等を、ゲストをむかえてお話をうかがうPodcastです。</p><p>https://www.otftalk.com/</p><p><br></p><p>guest: Confluent ソリューションエンジニアの清水 亮夫 さん</p><p><br></p><p>host: @simosako 下佐粉 昭</p><p>AWSのソリューションアーキテクト。 専門はデータレイク 、データウェアハウス。</p><p><br></p><p>※感想は #OTFTalk でポストいただけると励みになります。</p><p>※発言は各個人のものであり、所属組織を代表するものではありません。</p><p><br></p><p>参考)</p><p>清水さん X https://x.com/shmza</p><p>Apache Iceberg Meetup Japan #3 https://iceberg.connpass.com/event/364492/</p><p>発表資料 https://speakerdeck.com/shmza/kafkawoli-yong-sitaiceberghenodetasutorimingu</p><p><br></p><p>Apache Kafka https://kafka.apache.org/ </p><p>Kafka connectors https://docs.confluent.io/platform/current/connect/kafka_connectors.html</p><p>Apache Iceberg Sink Connector https://github.com/apache/iceberg/tree/main/kafka-connect</p><p>Kafka-delta-ingest https://github.com/delta-io/kafka-delta-ingest</p><p><br></p>

36 total episodes available

Deep-dive analytics for OTF Talk

Frequently asked questions

Have a different question and can't find the answer you're looking for? Reach out to our support team by sending us an email and we'll get back to you as soon as we can.

What is OTF Talk?

OTF Talk は、OTF = Open Table Format の技術的な解説や最新トピック等を、ゲストをむかえてお話をうかがうPodcastです。 (host: @simosako) https://www.otftalk.com/

How often does this podcast release new episodes?

This podcast updates weekly.

Where can I listen to this podcast?

This podcast is available on 7 platforms including Apple Podcasts, Spotify, and more. You can also use the RSS feed directly.

Does this podcast accept guests?

Information about guest appearances is not available.

Legal Disclaimer

Pod Engine is not affiliated with, endorsed by, or officially connected with any of the podcasts displayed on this platform. We operate independently as a podcast discovery and analytics service.

All podcast artwork, thumbnails, and content displayed on this page are the property of their respective owners and are protected by applicable copyright laws. This includes, but is not limited to, podcast cover art, episode artwork, show descriptions, episode titles, transcripts, audio snippets, and any other content originating from the podcast creators or their licensors.

We display this content under fair use principles and/or implied license for the purpose of podcast discovery, information, and commentary. We make no claim of ownership over any podcast content, artwork, or related materials shown on this platform. All trademarks, service marks, and trade names are the property of their respective owners.

While we strive to ensure all content usage is properly authorized, if you are a rights holder and believe your content is being used inappropriately or without proper authorization, please contact us immediately at hey@podengine.ai for prompt review and appropriate action, which may include content removal or proper attribution.

By accessing and using this platform, you acknowledge and agree to respect all applicable copyright laws and intellectual property rights of content owners. Any unauthorized reproduction, distribution, or commercial use of the content displayed on this platform is strictly prohibited.