2019.11.20 インフラ（Azure） debonki

Azure pipeline – Build anaimage –

Docker周りの知識がまだまだ甘々なので、「英語のドキュメントを読んでみたシリーズ」の第一弾はデプロイ編とします。原文　読了までの所要時間: 4 分 Azure Pipelines Azure Pipelines can be used to build images for any repository containing a Dockerfile. Building of both Linux and Windows containers is possible based on the agent platform used for the build. AzurePipelinesはDockerfileを含んだリポジトリのビルドを行うために利用することができます。 LinuxやWindowsコンテナのビルドは、agent platformによってのみ可能となる。 Get the code Fork the following repository containing a sample application and a Dockerfile:…

2019.11.20 備忘録 debonki

Google for Jobのトップページを読んでみた

Google for Jobs: Everything you need to know to optimize for better ranking 今日は、求人情報を横断的に検索できるサービスである「Google for Job」の公式トップページを読んでいきます。修飾詞な部分は訳さなくても、意味が取れるため、読みやすいようにカッコ付をしていきます。 This tool gives in-house SEOs an edge to rank organically with job ads (in a fiercely competitive recruiting market). このツールは、（競争の激しい人材紹介市場において）組織的なSEO対策を提供します。 Looking for a new job can be a stressful experience. Even taking away the emotional part of the…

2019.11.19 インフラ（Azure） debonki

Azure PowerShellを導入してみた。

業務にて、Docker ContainerをAzure上にデプロイする必要があったのですが、Azure Powershellの存在を知ったのが今日だったこともあり、時間内に作業が終わらせられませんでした。今日やろうとした作業：「チュートリアル:Azure Container Registry タスクを使用して、クラウドでコンテナーイメージをビルドしてデプロイする」 Azure Cloud Shellが使えれば楽勝なんだろうけど、権限の問題で使えなかった。仕方なくAzure PowerShellでやる方法も模索するも上手くいかず… エンジニアであるからにはコマンドラインから、クラウドを華麗に扱えるようになりたいですね！！ということで、今日はAzure PowerShellのドキュメントを読んでいこうと思います。まずは、コマンドでAzure Power Shellを入れていきます。Macユーザーはお馴染みのbrewコマンドで、WindowsユーザーはChocolateyを使いましょう。

[debonki] % brew cask install powershell

1	[debonki] % brew cask install powershell

インストールを確認します。記事を書いている時のバージョンは6.2.3でした。

PS /Users/debonki>  $PSVersionTable

Name                           Value
----                           -----
PSVersion                      6.2.3
PSEdition                      Core
GitCommitId                    6.2.3
OS                             Darwin 19.0.0 Darwin Kernel Version 19.0.0: Thu…
Platform                       Unix
PSCompatibleVersions           {1.0, 2.0, 3.0, 4.0…}
PSRemotingProtocolVersion      2.3
SerializationVersion           1.1.0.1
WSManStackVersion              3.0

PS /Users/debonki> $PSVersionTable

OS Darwin 19.0.0 Darwin Kernel Version 19.0.0: Thu…

Platform Unix

PSCompatibleVersions {1.0, 2.0, 3.0, 4.0…}

PSRemotingProtocolVersion 2.3

SerializationVersion 1.1.0.1

WSManStackVersion 3.0

モジュールをインストール。 cross-plattformを目指すために、必要な機能をモジュールで提供しているみたいです。詳しくはDocumentへGo

# これだけでOKかも
PS /Users/debonki> Install-Module -Name Az -AllowClobber
###################################################
PS /Users/debonki> Install-Module -Name Az -AllowClobber -Scope CurrentUser
PS /Users/debonki> Install-Module -Name Az -AllowClobber -Scope AllUsers

PS /Users/debonki> Install-Module -Name Az -AllowClobber

###################################################

PS /Users/debonki> Install-Module -Name Az -AllowClobber -Scope CurrentUser

PS /Users/debonki> Install-Module -Name Az -AllowClobber -Scope AllUsers

赤線部のURLをブラウザで叩き、赤線部のコードを打ち込んで、Azure PowerShell経由でAzure Portalにログインすることができました。 MacやLinuxをよりもWindowsのPowerShellに慣れているという方は、Azure CLIではなくて、Azure PowerShellを使うのもアリかもしれません。参考：YES YOU CAN! USE POWERSHELL IN MACOS TO CONNECT TO MICROSOFT AZURE 公式：Install the Azure PowerShell module

2019.11.18 インフラ（Azure） debonki

Azure DevOps 無料枠を使ってみた

Azuer DevOpsは五人までなら無料でプロジェクトを作成することができます。今回は、Azure DevOpsを試しに使ってみました。まず、Azure DevOpsで何ができるかというとプライベートリポジトリの作成・管理 CI / CD ツールを使ったビルド、デプロイ、テスト、の自動化（一個の並列ジョブまでなら無料）チーム内でのWikiの共有 Docker統合といった、自分のような新参者から見ても、とても魅力的な機能が備わっています。これが無料で試せるというヤバさですよ。まだ試せていないのですが、他にも「Azure Test Plans」といったテストツールや「Azure Artifacts」といったパッケージ管理ツールがあることに加え、Marketplaceから拡張機能を追加することもできます。それでは、簡単に、プロジェクト作成から、リポジトリの作成までの流れを見ていきましょう。プライベートリポジトリの利用 Azure DevOpsのUIはとても見やすく、手順書とか必要ないんじゃないかという感じで、Azureを触ったことがないという人も、この記事を流し読みすれば、Azure Gitは雰囲気で使えるようになるんじゃないかと思います。まず、URLからクローンするためにプライベートリポジトリーのURLをコピーします。一応、パブリックリポジトリも最初に選択できます。 SourceTreeでクローンすると、パスワードが求められるので、上図の「Generate Git Credential」からパスワードをコピーし、貼り付けます。ローカルにクローンできたら、ローカルリポジトリに変更を加えてプッシュすると、リモートリポジトリに変更が反映されます。これがあるだけで、チーム開発時のコードレビューがやりやすくなり、開発が楽しくなると思います。次回は、、業務で使うことになりそうなので、CI/CDツールの記事を描こうと思います。 Azure Pipelinesを使ってみた

2019.11.17 .NET Core debonki

Azure Functionチュートリアルをやってみた

.NET Core2.2でAzure Functionのプロジェクトを作成できるチュートリアルがあったのでやってみました。 Link：関数の作成 – C# (公式ドキュメント) Azure Functionはサーバーレスなサービスで、料金もあまりかからないところも魅力です。 Functionの価格設定は、毎月の関数の実行回数から算出されており、100万回アクセスまでは、無料（参考）となっているため、個人利用であればほぼ使い放題です。今回は、このAzure Functionを試していきます。プロジェクトの作成選択するのはマーカーで印がつけられた部分 Function ランタイム：.NET Core2.2 関数テンプレート : HTTPトリガー → HTTP要求がトリガーとなって関数が呼ばれます。ストレージアカウント : ストレージアカウントエミュレーター承認レベル : Anonymous →Anonymousとすると、全てのクライアントからトリガーできます。チュートリアルのなので、とりあえずAnonymousとしました。作成ボタンをクリックすると、プロジェクトが作成されます。関数だけなので、かなりシンプルな構成ですね。

[FunctionName("Function1")]

1	[FunctionName("Function1")]

の部分が、関数名になります。試しに「F5」キーを押して実行してみましょう。 Azure Function Core Toolsと呼ばれるコンソールが表示され、アプリケーションの動作が確認できます。 Visual Studioさん流石ですコンソール画面の出力から、赤線部のURLをコピーし、ブラウザーでの応答を確認します。 http://localhost:7071/api/Function1?name=debobonetとURLをたたいたら、Hello, debobonetという出力が返ってくることが確認できます。これで、ローカル環境での開発は終わりです。簡単ですね Azureにデプロイ次はAzureにプロジェクトを発行していきます。本来であれば、コマンドを叩いたりなどの操作が必要だったりすることが多いのですが、Visual Studioにはデプロイの機能も備わっています。「ソリューションエクスプローラー」から、プロジェクトを右クリックし、「発行」を選択すると以下の画面へと遷移します。 Visual Studio Proのライセンスを持っていると、5000円分のAzureクレジットも付いてくるため、Visual Studio Professionalというサブスクリプションが選択できます。…

2019.11.16 ブログ運営 debonki

Syntax Highlighterプラグインでhtml特殊文字がエスケープされてしまう。(文字化け)

気合を入れてWordpressでブログを運営してみようと思いノリノリでSyntax Highlighterプラグインを入れてみたのですが、理想通りのものにならず、悔しい思いをしたのでその時の備忘録。 2019年11月16日時点でSyntax HighLighterはPrismaticというプラグインを使っていたのですが、html特殊文字の扱いに苦労したため、Crayon syntax highlighterに乗り換えました。自分が使っているテーマはアルバトロスです。現状左側がマークダウンの状態で、矢印のように変換されるはずなのですが… 実際のところ「>」が特殊文字として判定され、変換されてしまいます😭Prismの配色がとても気に入っていただけに本当に残念いろいろと調べたのですが、結局Crayon syntax highlighterに乗り換えました。 Crayon syntax highlighterの場合、設定にて赤四角のようにチェックを入れるとhtmlタグが不用意にエンコードされなくなります。ただ見た目に関してはprismの方を圧倒的に気に入っていたので、できればもう一度prismに乗り換えたいなぁ WordPressのシンタックスハイライトをprismjsに乗り換えた 2020年５月4日追記 https://curio-shiki.com/blog/webpage/gutenberg-crayon-syntax-highlighter グーテンベルグでCrayon Syntax Highlighterを使う方法に変えた。

2019.11.15 C# debonki

LINQの書き方（C#）

LINQとは LINQについて、Webサイトで調べると、"LINQはプログラミング言語（C#やVB）に統合されたクエリ用言語です。通常データベースアクセスに使用するSQLが、C#やVBのプログラム内では文字列として扱われるのに対し、LINQはそれ自体が言語に統合されたクエリとして認識されます。( 参考 )などと書かれていたりしますが、書籍管理アプリでLINQを使う場合のサンプルがあったほうが、わかりやすいかと思いますので、サンプルを貼っていきます。基本的な考え方ここでは、蔵書テーブルに対するやり取りのサンプルコードを使用しますクエリ文の宣言

var Books = from m in _context.BookCollection select m;

1	var Books = from m in _context.BookCollection select m;

条件を加える

// 廃棄フラグが0の場合という条件を加える
 Books = Books.Where(s => s.FlgDisposal == "0");

1 2	// 廃棄フラグが0の場合という条件を加える Books = Books.Where(s => s.FlgDisposal == "0");

リストとして実体化する

// ここでは、非同期でクエリ文を実行して、BookListにテーブルのデータをリストにして格納しています。
var BookList = await Books.ToListAsync();

1 2	// ここでは、非同期でクエリ文を実行して、BookListにテーブルのデータをリストにして格納しています。 var BookList = await Books.ToListAsync();

１～３までの処理を一行にまとめる

var BookList = await _context.BookCollection.Where(s => s.FlgDisposal == "0").ToListAsync();

1	var BookList = await _context.BookCollection.Where(s => s.FlgDisposal == "0").ToListAsync();

処理を一行でまとめるとシンプルなコードが書けるのですが、クエリ文を作成するところと、実体化する部分を分けることによって、検索やソートの処理を簡単に実装することができます。以下は参考です。 Microsoft Document→ ASP.NET Core の Razor Pages と EF Core – 並べ替え、フィルター、ページングやりがちなミス演習を進めていくと、貸し出しテーブルの「ステータス」と書籍マスタの書籍名を一つのページに表示させたいという場面があるかと思います。その時に、以下のようにLINQを書くと、上手くいきません。

// BooksにBookCollectionテーブルとBorrowBooks、Booksテーブルの内容を格納したい
var Books = await _context.BookCollection.Include(x => x.BorrowBooks).Include(x => x.IsbnNavigation).ToListAsync();
//                                          　       ↑この部分がおかしい。 モデルのコードを見ればわかるのですが、
//                                              　   ICollection<BorrowBooks>で宣言されています。

// BooksにBookCollectionテーブルとBorrowBooks、Booksテーブルの内容を格納したい

var Books = await _context.BookCollection.Include(x => x.BorrowBooks).Include(x => x.IsbnNavigation).ToListAsync();

// 　 ↑この部分がおかしい。モデルのコードを見ればわかるのですが、

// 　 ICollection<BorrowBooks>で宣言されています。

理由としては、上の図を見てもらえば分かると思うのですが、テーブルの設計上、BorrowBooksテーブルからしか、Booksテーブルの内容を参照できないことが原因になります。他のテーブルのデータを取ってきたい場合は、青い矢印でたどっていくように、以下のようにコードを書くと上手くいくと思います。

var Books = _context.BorrowBooks
                   .Include(x => x.IdBookNavigation.IsbnNavigation)
                   .Include(x => x.IdBookNavigation.IsbnNavigation).ToListAsync();

1

2

3

var Books = _context.BorrowBooks

.Include(x => x.IdBookNavigation.IsbnNavigation)

.Include(x => x.IdBookNavigation.IsbnNavigation).ToListAsync();

2019.11.14 Python debonki

Pythonでデータ加工（スクレイピング編）

# python環境
import requests # file操作のため
from bs4 import BeautifulSoup # htmlファイルをごっそりとってくる

import requests # file操作のため

from bs4 import BeautifulSoup # htmlファイルをごっそりとってくる

BeautifulSoupというライブラリを使うと、簡単にスクレイピングができるので、そのことについてメモ

# encoding は取得したページの文字コードを選択
# htmlファイルは同じディレクトリ内にあるものとする
filepath = "ファイル名.html"
with open(filepath , encoding='utf-8') as f:
    html = f.read()

soup = BeautifulSoup(html, 'html.parser')
# htmlファイルの中身が出力される
print(soup)

# encoding は取得したページの文字コードを選択

# htmlファイルは同じディレクトリ内にあるものとする

filepath = "ファイル名.html"

with open(filepath , encoding='utf-8') as f:

html = f.read()

soup = BeautifulSoup(html, 'html.parser')

# htmlファイルの中身が出力される

print(soup)

soup変数に格納された文字列を加工することが以下のように簡単にできます。

/* h1タグを取ってくる */
soup.find_all('h1')
# <h1>Hello World!</h1>
# ↑こんな感じの出力が得られる

# spanタグの中身だけを出力
for text_line in soup.find_all('span'):
    print(text_line.get_text())

# <h1>Hello World!</h1>

# ↑こんな感じの出力が得られる

# spanタグの中身だけを出力

for text_line in soup.find_all('span'):

print(text_line.get_text())

2019.11.09 C# debonki

.NET Framework3.5を有効化する時に、「エラー: 0x800f0954」でハマった

前提 2019年11月8日時点会社用PC Windows 10 →多分セキュリティ的な何かで上手く行かなかったと思われる。開発中のアプリケーションでIE7に対応して欲しいとのことだったので、 .NET Framework4.7から.NET Framework3.5へと移行する必要があった。解決策普通にGoogle検索しても解決できなかったが、 Qiitaで調べたら一発だった。【参考】1803を適用後のWindows 10で.NET Framework 3.5を有効にする上記のサイトで手順７まで進んだら、コントロールパネルから.NET Framework3.5を有効化する。【参考】Windows 8、Windows 8.1、および Windows 10 への .NET Framework 3.5 のインストール

2019.11.09 Linux debonki

ディレクトリ構成図を作る

Qiitaの記事とかによくある

.
├── Desktop
├── Documents
├── Downloads
├── Library
├── Movies
├── Music
├── Pictures
└── Public
    └── Drop\ Box

的なディレクトリ構成図がtreeコマンドを打つだけで、表示できるみたいなので備忘録として。 MACの人はHomebrewでインストールできる【参考】：こういうディレクトリの構成図、ツリー表示の簡単な書き方を今知った

MacBook-Air:centos kouki$ brew install tree

〜省略〜

==> Downloading https://homebrew.bintray.com/bottles/tree-1.8.0.catalina.bottle.tar.gz
######################################################################## 100.0%
==> Pouring tree-1.8.0.catalina.bottle.tar.gz
🍺  /usr/local/Cellar/tree/1.8.0: 8 files, 121.1KB
==> `brew cleanup` has not been run in 30 days, running now...

MacBook-Air:centos kouki$ brew install tree

〜省略〜

==> Downloading https://homebrew.bintray.com/bottles/tree-1.8.0.catalina.bottle.tar.gz