Azure Synapse Analyticsのパイプライン実行で”CREATE EXTERNAL TABLE AS SELECT statement failed as the path name…”エラーが発生する
こんにちは。今回はAzure Synapse Analyticsのトラブルシューティングメモです。 問題 Synapase Analyticsで、パイプラインを実行したところ以下のエラーがでて失敗した。 パイプラインで、...
Synapse AnalyticsSynapse AnalyticsPowerPlatformPower Virtual Agentsで一瞬でチャットボットを作成してTeamsに公開する
Power Virtual Agentsとは？ Microsoftが提供するチャットボット作成サービス 2019年のIgniteで発表された 特徴は以下。 ノーコードで誰でも簡単にチャットボットを作成できる Teamsや...
Azure SQL Database【３分で流し読み】SQL Serverの拡張イベントログを理解する
こんばんは。今日は、SQL Serverの拡張イベントログについてちょっと調べてみたので、分かったことをまとめておきたいと思います。 ネットを探してもあまり記事をみつけられなかったので、同じ情報を探している方の参考になり...
Azure SQL DatabaseSQL Server / Azure SQL Databaseの監査機能まとめ
こんばんは。今日最後の記事はSQL Serverの監査の話になります。 SQL Serverの監査機能にはどんな機能があるのかを整理しつつ、Azure SQL Databaseでの監査機能との違いについても調べておきたい...
Azure SQL Database【３分で流し読み】SQL Server / Azure SQLの高速データベース復旧（ADR）でできることを理解する
こんばんは。今日は、SQL Serverの高速データベース復旧機能について少し勉強をしたので、分かったことなどを簡単にまとめておきたいと思います。 高速データベース復旧とは？ 高速データベース復旧 – SQL...
SQL ServerSQL Serverのトランザクションログに関するあれこれ
こんばんは。今日はSQL Serverのトランザクションログについてあれこれ調べて分かったことをまとめておきます。 データベースの復旧方法について調べていたらこのトランザクションログだのLSNだののしくみをちゃんと理解し...
Azure SQL Database【５分で流し読み】SQL Server / Azure SQL Databaseのテンポラルテーブルでできることを理解する
こんにちは。今日は、SQL Server / Azure SQL Databaseのテンポラルテーブルという機能を触ってみましたので、どういったことができるのか、何が嬉しいのか、分かったことを簡単にまとめておきたいと思い...
Azure SQL Database【５分で流し読み】SQL Server / Azure SQL DatabaseのAlways Encrypted機能でできることを理解する
こんにちは。今日はSQL ServerのAlways Encrypted機能について勉強しましたので、分かったことなぞ簡単にまとめておきたいと思います。 Always Encryptedとは？ データの暗号化と復号をクラ...
Grafana【３分で流し読み】Azure Managed Grafanaでできることを理解する
こんにちは。今日は、最近プレビューで登場したAzure Managed Grafanaを触ってみましたので、調べて分かったことと一緒に概要をまとめておこうと思います。 それではまいります。 Azure Managed G...
SQL Server【５分で流し読み】SQL Serverのデータベースチューニングアドバイザ（DTA）でできることを理解する
こんにちは。最近は、仕事でSQL Serverを扱う機会が増えており、いまさらながらSQL Serverの勉強をはじめております。というわけで、基本的な内容の記事が続きますが、ご容赦ください。 今日は、データベースチュー...
Azure SQL Database【３分で流し読み】SQL Server / Azure SQL Databaseの自動チューニング機能でできることを理解する
自動チューニング機能とは 概要 https://docs.microsoft.com/ja-jp/sql/relational-databases/automatic-tuning/automatic-tuning?vi...
Azure Monitor【５分で流し読み】Azure MonitorのWorkbookでできることを理解する
こんばんは。今日はAzure MonitorのWorkbookを使ってみたので、分かったことをまとめておきたいと思います。 それではまいります。 Azure MonitorのWorkbookとは https://docs...
Azure Data Factory【５分で流し読み】Azure Data Factoryのマネージド仮想ネットワーク/マネージドプライベートエンドポイント機能を理解する
おはようございます。 今日は、Azure Data Factoryのマネージド仮想ネットワーク/マネージドプライベートエンドポイント機能について勉強したので、分かったことをまとめておきたいと思います。 マネージド仮想ネッ...
Azure StoragePythonのDataframeをCSVでAzure Blob Storageに出力する方法
おはようございます。PythonとAzure絡みの小ネタですが、備忘メモです。 やりたいこと PythonのDataframeをCSVでAzure Blob Storageに出力したい。 実現方法 Blob Storag...
Azure SQL DatabaseAzure SQL DatabaseにBULK INSERTしたら日本語が文字化けした
こんばんは。今回はAzure SQL Databaseでちょっとつまづいたことがあったので対処法をメモっておきます。 問題 Azure SQL Databaseに、CSVファイルをBULK INSERTしたところ日本語が...
Azure Data FactoryAzure Data Factoryのセルフホステッド統合ランタイム（SHIR）とは？実際に構成してみた
こんにちは。今日は、Azure Data Factoryのセルフホステッド統合ランタイムを構成してみる機会があったので、手順を簡単にメモしておきたいと思います。 （手順面倒くさいんじゃないかとちょっと身構えていたのですが...
Cosmos DBAzure CosmosDB (MongoDB API)上のデータをSortしようとすると”The index path corresponding to the specified order-by item is excluded”エラーが発生する
問題 こちらはPythonで書かれたコードですが、こんな感じでCosmosDBのコレクション上のデータにソート（以下例では”id”でソート）をかけようとしたときに、エラーがでてしまいました。 ロー...
BI【Power BI】レポートのサイズを変更する方法
こんにちは、今回はPower BIの小ネタですが、つまづいたところのメモを残しておきます。 Power BIのレポートはデフォルトだと16:9のサイズになっていますが、ビジュアルを数個入れたらいっぱいになってしまって使い...
Azure MigrateAWS LightSail / EC2からAzure VMに移行する方法【うまくいけば１時間でできる】
こんにちは。先週このブログをAWS LightSailからAzure VMに移行しましたので、その手順をこちらに整理しておきたいと思います。 なお、AWS LightSailからAzure VMへの直接移行は行えなさそう...
MicrosoftAzureこのブログはこうやってうごいています
こんばんは。この週末は、このブログサービスの裏側をごっそり変える改修を行っていました・・。（思った10倍骨が折れた・・）ので、この機会に、このブログサービスのつくりを記事にまとめておきたいと思います。 それではまいります...
SQL ServerSQL Serverで特定テーブルのインデックスの一覧を確認する方法
こんばんは。今回は超初歩的なSQL Serverのプチネタですが、SQL Serverでインデックスの一覧を確認する方法について解説します。 それではまいります。 特定テーブルのインデックスの一覧を確認する方法 結論、以...
Web技術一般【３分で流し読み】gRPCってなに？RPCやRESTと何が違う？
こんばんは。今日は、最近よく耳にして気になっていたgRPCという技術について調べてみたので、分かったことをここにまとめました。 それではまいります。 gRPCとは Googleが作ったRemote Procedure C...
Azure SQL DatabaseAzure SQL Databaseに.bakファイル形式のデータをインポートする方法
こんにちは。Azure SQL Databaseに.bakファイルをインポートする方法を試したので、簡単ですが手順を残しておきます。 Azure SQL DatabaseではBACPACファイル形式しかサポートされていな...
データ分析【３分で流し読み】メダリオンアーキテクチャを理解する
こんばんは。今日はメダリオンアーキテクチャという言葉を初めて耳にしたのでちょっと調べてみました。 それではさっそく参ります。 メダリオンアーキテクチャとは データレイク・データウェアハウスの設計パターンとして最近注目され...
Microsoft Purview高度なデータガバナンスを実現するMicrosoft Purviewを徹底解説
こんにちは。今日は兼ねてから気になっていたAzure Purview改めMicrosoft Purviewを触ってみましたので、調べて分かったことなどを記事に残しておこうと思います。 それではまいります。 Microso...
Azure Data FactoryAzure Data Factoryってどんなサービス？何ができるの？
こんばんは。今回は、Azure DataFactoryについて調べてみたことをこの記事にまとめていきたいと思います。 それではまいります。 Azure DataFactoryとは？ 一言でいうと、AzureのETL &a...
機械学習機械学習の技術的負債について学んでみた【機械学習 論文100本ノック（2/100）】
こんにちは。機械学習論文100本ノック2本目です。 早速まいります。 論文100本ノックの目的と進め方 目的 この分野の研究の関心の動向を掴みたい。 普段使っている技術の登場背景や詳細の理解を深めたい。 進め方 最低限A...
SQL Server【Part2:AG構成編】Azure VM上のSQL ServerにAlways On可用性グループを構成してみた
こんにちは。「Azure VM上のSQL ServerにAlwaysOn可用性グループを構成してみた」第二部 AG構成編です。 それではさっそくまいります。 前回の記事：事前準備編 今回の記事は、以下の記事で実施した事前...
SQL Server【Part1:環境準備編】Azure VM上のSQL ServerにAlways On可用性グループを構成してみた
こんにちは。GWを挟んでしばらく更新がストップしていましたが、また再開していきたいと思います。今日は、SQL ServerのAlwaysOn可用性グループをちゃんと理解したいなぁと思い、実際に構築してみましたので、備忘も...
機械学習機械学習モデルの公平性について学んでみた【機械学習 論文100本ノック（1/100）】
こんにちは。今日から、今年ずっとやろうやろうと思っていた機械学習の論文100本ノックについに乗り出してみたいと思います笑 100本読んだ結果見える景色が何がどんなふうに変わるかわかりませんが、この分野の研究の関心動向や、...
Profile
初めまして。
東京で働くデータ分析屋兼アプリケーションエンジニアです。旅行とカメラと江戸時代が趣味です。日々勉強したこと、趣味のことについて、自分の記録も兼ねて。
もともとは旅行記残そうと思って始めたブログですが、いつのまにか技術の話ばっかりに・・
＊記事はすべて個人の見解で、かつ記載時点の情報に基づいています。
