ニュースイミー

データベース

メタデータがなくても、AI と Dataplex Universal Catalog があれば OK

cloud.google.com

この記事は、メタデータがないデータセットでも、AIとDataplex Universal Catalogを活用することで、データの可視性とガバナンスを向上させる方法を紹介しています。 BigQueryにおける自動メタデータ生成の利点、Virgin Media O2の事例を通じて、その効果を具体的に説明しています。 データエンジニア、アナリスト、データガバナンスチームといったデータに関わる全ての人々を対象としています。

グーグル・クラウド・ジャパン合同会社 <name>Chandu Bhuman</name><title>Head of Data Strategy, Cloud & Engineering, Virgin Media O2</title><department></department><company></company>
データベース

PostgreSQLのRLSが有効時3分 vs RLS無効時1.7秒のSQL実行時間差はなぜ生まれるの?をパフォーマンス改善内部探訪編

zenn.dev

PostgreSQLのRLS有効/無効時のSQL実行時間差に着目し、そのパフォーマンス改善について解説しています。 マルチテナント環境における情報漏洩リスクを防ぐためのRLS運用の背景と、具体的なパフォーマンスチューニングの内部探訪に迫ります。 データベースエンジニアやインフラエンジニア、バックエンドエンジニア、PostgreSQLに興味のある方を対象としています。

データベース

Kafka開発元のConfluentをIBMが買収。AI向けデータプラットフォームを強化へ

www.publickey1.jp

Apache Kafka開発元のConfluentをIBMが買収。エンタープライズ向けデータプラットフォームを強化。 買収額は110億ドルで、IBMのデータプラットフォーム戦略における重要な動き。 プラットフォームエンジニア、バックエンドエンジニア、データベースエンジニア、インフラエンジニアなど、データ基盤に関心のあるエンジニア向けのニュースです。

Publickey jniino
データベース

AI時代に自分の勉強を加速するにはどうすればいいか

qiita.com

AI時代における学習加速方法を解説した記事です。 具体的なアクションや、集中力を維持するための工夫を紹介しています。 IT業界への転職や、AI時代に合わせた学習方法に関心のある人向けです。

データベース

【TiDB移行】sync-diff-inspector使ってみる

zenn.dev

この記事は、MySQLからTiDBへのデータ移行における差分チェックをsync-diff-inspectorを用いて行う方法を紹介しています。 ツール概要と導入のきっかけ、そしてRDSからTiDBへの移行におけるデータ比較の重要性について触れています。 データベースエンジニアや、TiDBへの移行を検討しているエンジニアの方々を対象としています。

データベース

MackerelでSelf-hosted dbt Fusion(preview)の監視をやってみる

techblog.kayac.com

dbt FusionをSelf-hostedで運用する際に、MackerelのAPM機能を使ってパイプラインの監視を行う方法を紹介しています。 OpenTelemetryとMackerelを連携し、dbt Fusionの実行状況を可視化する方法を解説しています。 データ基盤の構築や運用に携わるエンジニア、データサイエンティスト向けの技術情報です。

株式会社カヤック ikeda-masashi
データベース

文系50代・団塊ジュニア・非エンジニアの私がGeminiと「パチンコ打法」でSQLを操るようになるまで

qiita.com

この記事は、50代の非エンジニアがGeminiと「パチンコ打法」を駆使してSQLを習得するまでの過程を描いています。 ワープロ世代だった著者が、なぜ今になってコードを書くようになったのか、その背景に迫ります。 SQL学習への取り組み方と、その過程での気づきが語られています。

株式会社Voicy sotaro_ishizu
データベース

パーサを書いて Parquet の Repetition Level と Definition Level を理解する

zenn.dev

ParquetのRepetition LevelとDefinition Levelを理解するためのパーサ作成に関する記事です。 Parquetの仕組みを理解したい人向けです。 Parquetのファイルフォーマットの概要を理解していると、より理解が深まります。

データベース

2025 年度 Gartner® Magic Quadrant for Cloud Database Management Systems で Google がリーダーに

cloud.google.com

この記事は、2025年度のGartner® Magic QuadrantでGoogleがクラウドデータベース管理システム部門のリーダーに選出されたことについて解説しています。 GoogleのAIネイティブデータクラウドが、エージェントAI時代の企業のデータ戦略をどのように支援するのか、そのメリットと最新のイノベーションを紹介しています。 データとAIを活用したビジネス戦略に関心のある方、特にデータエンジニア、データサイエンティスト、AIエンジニア、または経営層の方々にとって有益な情報です。

グーグル・クラウド・ジャパン合同会社 <name>Yasmeen Ahmad</name><title>Managing Director, Data Cloud, Google Cloud</title><department></department><company></company>
データベース

今、MySQLのバックアップを作り直すとしたら何がどう良いのかを考える旅 〜YAPC::Fukuoka 2025レポート〜

knowledge.sakura.ad.jp

MySQLのバックアップに関するトークセッションのレポートです。 YAPC::Fukuoka 2025での田中翼氏の講演内容をまとめたものです。 データベースエンジニアやインフラエンジニア向けの技術情報です。

データベース

Zeotap: BigQuery ML とベクトル検索が自社の AI モデル構築にどのように役立つか

cloud.google.com

ZeotapがBigQuery MLとベクトル検索を用いて、顧客インテリジェンスプラットフォームで類似オーディエンスを拡張する方法を解説しています。 BigQuery MLを活用し、ジャカード類似度を用いて顧客セグメンテーションを効率化しています。 この記事は、機械学習エンジニア、データサイエンティスト、Google Cloudを利用しているマーケター、データベースエンジニアを対象としています。

グーグル・クラウド・ジャパン合同会社 <name>Sathish KS</name><title>Chief Technology Officer, Zeotap</title><department></department><company></company>
データベース

BigQuery AI: データと AI の融合が実現

cloud.google.com

BigQuery AI の導入により、データとAIの連携が強化され、マルチモーダルデータからの分析、MLライフサイクルの簡素化、ワークフローの加速化が実現。 SQL関数による生成AIの適用、エンベディングとベクトル検索による情報検索の高度化、データエンジニア、データサイエンティスト、ビジネスユーザー向けのAIエージェントの提供。 データとAIを統合し、より高度な分析とワークフローの自動化を目指す、データサイエンティストやデータアナリスト、ビジネスユーザー向けの技術記事。

グーグル・クラウド・ジャパン合同会社 <name>Vaibhav Sethi</name><title>Senior Product Manager</title><department></department><company></company>
データベース

数十万件以上の大規模データ移行バッチ設計・実装・運用ガイド

qiita.com

この記事は、数十万件以上の大規模データ移行バッチ処理について、設計から運用までの流れで重要だったポイントを解説します。 SmartHR社のエンジニアの実践的な経験に基づいた内容です。 大規模データ移行に関わるエンジニアの方々にとって役立つ情報を提供します。

データベース

AWS、マネージドデータベースを最大35%安く使える「Database Savings Plans for AWS Databases」発表

www.publickey1.jp

AWSがマネージドデータベースサービスの価格を最大35%割引する新プランを発表しました。 Database Savings Plans for AWS Databasesにより、一定以上の利用を約束することで割引が適用されます。 インフラエンジニア、データベースエンジニア、AWSユーザーにとってコスト削減のチャンスです。

Publickey jniino
データベース

How do I check whether the user has permission to create files in a directory?

devblogs.microsoft.com

この記事では、ユーザーがディレクトリにファイルを作成する権限を持っているかどうかをチェックする方法について解説しています。 セキュリティ属性を使用して、ファイルやディレクトリへのアクセス権限を検証する方法を説明しています。 対象読者は、ファイル操作の権限チェックを必要とする開発者です。

データベース

データ基盤の「意味」をテストする。AIエージェントを“最初の利用者”にするデータモデリング検証

qiita.com

この記事は、データ基盤における「意味」をテストするためのデータモデリング検証について解説しています。 AIエージェントを最初の利用者にすることで、データモデルの有効性を検証する取り組みを紹介しています。 @cosmeなどのサービスにおけるデータ分析に関心のある方、データモデリングに興味のある方におすすめです。

データベース

組織図リソースと Temporal Data Model の相性についての考察!

zenn.dev

組織図リソースと Temporal Data Model について考察する記事です。 過去の記事への言及と、組織図に関連する話題を提供しています。 バックエンドエンジニア、データベースエンジニア、プロジェクトマネージャーなど、組織図に関心のある人々に役立つ内容です。

データベース

新しいコネクタや機能で拡張する BigQuery Data Transfer Service

cloud.google.com

BigQuery Data Transfer Serviceの新しいコネクタと機能拡張に関する記事です。 様々なデータソースからBigQueryへのデータ取り込みを自動化し、効率化します。 データエンジニア、マーケター、データアナリストなど、データ活用に関心のある人向けの記事です。

グーグル・クラウド・ジャパン合同会社 <name>Artur Pop</name><title>Engineering Manager, Google</title><department></department><company></company>
データベース

BigQuery の EDIT_DISTANCE と AI.GENERATE を組み合わせて病名の名寄せ処理を効率化する

zenn.dev

BigQueryのEDIT_DISTANCEとAI.GENERATEを組み合わせることで、病名の名寄せ処理を効率化する方法について解説しています。 医療データの処理に関わるエンジニアやデータサイエンティストにとって役立つ内容です。 BigQueryを活用したデータ処理の効率化に興味がある方におすすめです。

データベース

Cloud SQL の無料トライアル インスタンスを発表: フルマネージド データベースのパワーを体験してください

cloud.google.com

Cloud SQLの無料トライアルインスタンスの発表に関する記事です。 フルマネージドデータベースの機能を30日間無料で試せる機会を提供しています。 既存のGoogle Cloudユーザーや、これから利用を検討しているユーザーが対象です。

グーグル・クラウド・ジャパン合同会社 <name>Subra Chandramouli</name><title>Sr. Product Manager - Google Cloud Database</title><department></department><company></company>
データベース

dbt×Snowflakeで構築するマルチカタログなIceberg Materializationの実装🧊

developers.cyberagent.co.jp

dbtとSnowflakeを用いたIceberg Materializationの実装方法を紹介する記事です。 マルチカタログなIceberg Materializationを構築するための具体的な手順を解説します。 プラットフォームエンジニアやデータエンジニアなど、データ基盤構築に携わる方を主な対象としています。

データベース

AWS、AIエージェントでレガシーなWindowsアプリをコードもDBもモダンな「.NET+Aurora PostgreSQL」に自動変換。AWS Transformリリース

www.publickey1.jp

AWSが、レガシーなWindowsアプリを.NETとAurora PostgreSQLに自動変換するAIエージェント機能をリリース。 モダンな.NETとAurora PostgreSQLにコードとデータベースを移行します。 インフラエンジニア、バックエンドエンジニア、データベースエンジニア向けの記事です。

Publickey jniino
データベース

モダンデータ基盤の最前線:現場から学ぶ実践と挑戦

aeon.connpass.com

モダンデータ基盤に関するイベントの案内です。 データ基盤の構築や高度化に関心のある方、現場での課題解決のヒントを探している方に向けて、企業の実践事例や課題、今後の展望を紹介します。 Snowflake、Databricks、dbt、BigQueryなどのモダンデータスタックに興味のあるデータエンジニアやデータ基盤構築に携わる方におすすめです。

データベース

AI Meets Semantic Layers:Time to Insightを数週間から1時間に短縮するデータモデリング / gcdasummit_25f

speakerdeck.com

データモデリングによって、インサイトを得るまでの時間を大幅に短縮する方法についての記事です。 Data & AI Summit '25 Fallというイベントの紹介と、発表者、関連情報へのリンクが記載されています。 データ分析やAIに関心のある方、データモデリングに携わる方々におすすめです。

データベース

爆破解体予定だったレガシーサーバーの転生

techblog.kayac.com

Redmineサーバーの爆破解体予定からの復活劇を解説した記事 レガシーシステムを最新技術で再構築し、コスト削減と運用効率の向上を実現 インフラエンジニアやSRE、バックエンドエンジニア、データベースエンジニア向けの技術情報

データベース

🏗️「あなたの仕事って100年残る?」と妻に聞かれて気づいたテーブル名の恐ろしい真実

qiita.com

この記事は、ある企業のCMを見て、奥様から「あなたの仕事は100年残る?」と聞かれた著者が、自身の仕事であるテーブル名について考えさせられた内容です。 ソフトウェア開発におけるテーブル名の重要性と、その永続性について考察しています。 主にエンジニアに向けた内容です。

データベース

Upgrade MSVC, improve C++ build performance, and refactor C++ code with GitHub Copilot

devblogs.microsoft.com

この記事は、Visual Studio 2026のGitHub CopilotによるC++開発支援に関するものです。 C++コードのリファクタリング、ビルドパフォーマンスの向上、MSVC Build Toolsのアップグレードを支援する新機能が紹介されています。 C++開発者や、Visual Studio 2026を使用している開発者向けのものです。