正月休み、帰省した実家で娘たちがかるた遊びにハマり、
ほぼ毎日祖母やいとこと遊んでいた。
楽しそうだし、瞬発力やら記憶力やらが鍛えられそうで大変良い。
大変良いのだけど、
かるた遊びの困ったところは、プレイヤー以外に読み手が必要だというところで、
その際はだいたい近くでダラダラしている人間（私）が呼ばれて参加させられる。
最初はこちらも娘達に相手をしてもらえるのが嬉しいので喜んで参加するのだけど、
毎回同じ内容を読み上げるので、何回かやっているとげんなりしてくる。
しかしダラダラしている手前、断るのも難しい。
そこで、「繰り返し作業は自動化や！」と
「テキスト読み上げ」でググったら出てきたWeb Speech Synthesis API を使って、
かるた自動読み上げツールを作ってみた。
続きを読む
YouTubeでお気に入りに入れた動画のタイトルを一覧化して見たくなったので、
YouTube Data API経由でデータを取得して表示するNode.jsスクリプトを作ってみた。
APIへのアクセス自体はサクッとできたのだけど、
複数ページデータを非同期で取得するフローのコントロールで苦労した。
Node.jsスクリプトを書く時は毎回このフローコントロールでつまづくのだけど、
慣れの問題なのだろうか。
今回はcaolan/asyncライブラリのおかげで何とか解決できた感じ。
作成したスクリプトの内容を紹介しつつ、
非同期処理を不特定回数実行する際のパターンについて考えてみよう。
続きを読む
例えば商品のランキングを手動で管理する場合、
商品データに並び順のようなものをつけてその順序で表示すると思うのだけど、
並び順を設定するUIをどのように作るのが良いか。
近いうちに作る機会がありそうなので、考えてみる。
ReactやVue.jsを使う機会はなさそうなので、jQueryベースで。
続きを読むPythonを堪能したのでJavascriptに戻ってきた。
JavascriptでPythonのジェネレータみたいな機能はないのかな、
と調べてみると、ES6(ES2015)で追加され、Node.jsはES6対応済みらしい。
そういえばES5もES6もよく調べたことないな、と思って
調べてみると、便利機能が山ほど追加されててびっくり。
Javascript好き、と言いながら大分遅れたコードを書いてたようだ。
とりあえず今後絶対使おう！と決めた要素を練習がてらまとめておく！
続きを読むサーバが重いけどどこを直せばよいか分からないから調査してくれー、と
Tomcatのでかいアクセスログファイルを渡されたので、
とりあえずデータベースに入れて調査してみるべ、と
ログファイルの内容ををデータベースに取り込むスクリプトを書いてみた。
Node.jsのStreamを全然理解してなかったので、よい勉強になった。
続きを読むJavascriptライブラリの中でも、
Underscore.jsが大変気に入っている。
each、filter、map、reduce等
リスト操作、マップ操作関連の関数が
100以上含まれたユーティリティライブラリで、
他の言語にあってJavascriptにもあったらいいのにな、
と思うようなものをいい具合に用意してくれている。
作業効率化のための一括処理には欠かせないライブラリだ。
今回はUnderscore.jsに含まれるcountBy関数を使って
文字別出現回数取得関数を作ってみる。
続きを読む
特定のWebサイトを定期的にチェックして特定のキーワードが含まれていたら
通知してくれる仕組みを1つ覚えておくと色々重宝する。
例えば
会社に社員用Webサイトがあるなら、
（そしてそのサイトがRSSもメール通知も提供してないなら）
そこに「重要」とか「人事」とかのキーワードを含む記事が投稿された時に
通知を受け取れるようにしておけば、
いちいちサイトをチェックしにいかなくても
逃さず確認できる。
また、Webスクレイピングする方法を覚えておけば、
通知を受け取る以外にも、
画面キャプチャの撮影や画像やテキストの収集を
自動化したり、作成したWebシステムの画面テストを行う、
等の応用もしやすくなる。
今回は Node.js + Grunt + cheerio-httpcli を使用して
手軽にWebサイトのデータをチェックする方法を紹介する。
続きを読む
どうせ自動化するなら完全自動化したいよね、
ということで今回は作成したGruntスクリプトを
Windowsの起動時や毎日の決まった時間に実行できるように
タスクスケジューラに登録する方法を紹介する。
この記事はGruntを実行する環境が整っていることを前提としているので、
未インストールの方は下記の記事を参考にしていただきたい：
続きを読む
コミュニケーションというのはなかなか難しいもので、
「急いで確認したいから資料ができたら共有フォルダに入れて、すぐ連絡してよ」
と強めに伝えても、
資料はとっくにできてるのに
やれ後で連絡するつもりだっただの、
もうちょっと確認してから連絡するつもりだっただの、
今メール書いてただので、
一本内線をくれるだけで良いのになかなか連絡がもらえないことがある。
そんなストレスフルな行き違いは
「このやろう！」と毎回怒りを爆発させるよりも
ツールを使って解決の仕組みを用意してしまうに限る。
ということで今回は指定したフォルダを監視して、
ファイルが追加されたり更新されたりしたら
自動で通知してくれるスクリプトをつくってみたい。
続きを読む文字列を検索したりマッチしたものを置換したり、という作業は
技術者が制作・開発する時だけでなく、例えばExcelやWordで文書を編集する際や
Webページ内で目的の文章を探したりする場合にも行うもので、
「作業の効率化」という点では欠かせないものだ。
今回扱う「正規表現」を使った検索・置換については、
標準の機能として備えているツールやテキストエディタも多いが、
プログラマ以外には馴染みの薄いものかもしれない。
(少なくとも私に面倒な変換作業を依頼してくる人たちは間違いなく知らないと思う)
「正規表現」を全く知らない人は、
このつまらなそうな言葉を見ただけでスルーしてしまいそうだが、
使いこなせば大変強力なものであり
プログラマ以外の
パソコンを使用して何かしらの仕事をしている人にとっても
作業効率が劇的に上がること間違いなしの技術なので、
ここで紹介しておきたい。
続きを読む前回書いたNode.js入門記事の続き。
前回から引き続き、
いかにプログラムの勉強無しで自動化できることを増やすか、
もとい、
いかに他部署のノンプログラマに自動化ツールを使わせて自分への作業依頼を減らすか、
をマイテーマに少しずつ情報をまとめていく。
Node.jsを紹介しただけでは、「Javascript…難しそう。いつかやるわ。」
となりそうなので、
今回はプログラミング要素最小限で使えるGruntを紹介する！
続きを読むこれまでいくつかの記事でNode.jsを使ったスクリプトを載せてきたが、
自動化のためのスクリプトを書いて動かす環境として
Node.jsは手軽だし速いし色々ライブラリは揃ってきているし
なかなか良い環境だと感じている。
Web系の仕事をしていればJavascriptはある程度親しみのある言語だろうし、
GruntやGulpのようなWeb関連作業を自動化する
機能満載のタスクランナーまで用意されている。
実行環境もインストーラをダウンロードしてインストールすれば
パッケージ管理ツール付きで入手することができるので、
すぐに開発を始めることができる。
非同期処理が得意なサーバアプリケーションを作るための環境として
紹介されることが多いけど、この手軽に導入できて
Javascriptでサクッとアプリが作れるところだけでも十分に価値があると思う。
ノンプログラマが仕事を効率化するためにプログラミングを始めるなら、
とりあえずNode.jsから始めてみたらいいんじゃないだろうか。
今回はこのブログで紹介しているNode.jsのサンプルを試していただけるよう、
Node.js実行環境のインストールから
簡単なサンプルプログラムを作って実行するところまでを紹介したい。
自分でプログラムを作成するところまでいかなくても、
入手したプログラムを実行できるようになれば自動化作業も捗るのではないかと思う。
続きを読む仕事でチーム間のコミュニケーションツールとして使い始めたチャットワークだが、
最近は「いろんなサービスやスクリプトからの通知を集めるツール」としての利用がメインになってきている。
以前記事にした、
「Subversionのコミット情報にメンバーがすぐに気づけるように通知するスクリプト」
を書いたのがきっかけで、
この仕組みを流用すればメールを汚さずにいろんな通知を一元管理できるのでは？
と思いついて色々チャットワークに自動通知するスクリプトを書き始めた。
ただ通知するだけなのだけど、ボットが
「ブログのはてブが増えたよ！」とか
「AmazonにKindle本が追加されたよ！」とか
発言してくれることでチェックの手間が減るのが楽しい。
そんな時に、「IFTTTにMakerチャンネルができた」という話を聞いて、
これを使えば自動通知がさらに捗りそうだ、ということで試してみた、というのが今回の本題だ。
EvernoteやTwitter等様々なアプリやWebサービス(チャンネルと呼ばれる)の更新を監視して、
更新が発生するとをあらかじめ登録しておいたアクションを実行してくれるというサービスで、
これを使えばプログラムを自作しなくても手軽に連携の仕組みが作れるという、
自動化心をくすぐられるサービスだ。
IFTTTは便利なサービスなのだが、以前はチャンネルが用意されていないサービス間の連携がしにくい、という欠点があった。
チャットワークもチャンネルが用意されていない。
それが、Makerチャンネルが使えるようになったことで多少やりやすくなった。
Makerチャンネルは簡単に言うと「他のチャンネルとWebアプリを連携できる」チャンネルだ。
自作のWebアプリをトリガーとしてMakerチャンネル経由で他のチャンネルを呼び出したり、
特定のチャンネルで更新が発生したら指定したURLにリクエストを飛ばすようなことができる。
これを使えば、何かしらのサービスで更新が発生した時に自作のWebアプリを経由してチャットワークにメッセージを保存する、みたいなこともできるわけだ。
試しに、Node.jsで作成したWebアプリ経由で「Date&Timeチャンネルをトリガーに、定時になったらチャットワークに通知するレシピ」を作ってみた。
まずはIFTTTからアクセス可能なWebアプリを用意する。
ここがややハードルの高いところ。
今回は「http://自分のサーバのドメイン:3000/ifttt/notify_workend」というURLを用意し、
POSTリクエストで「time:時間」「message:メッセージテキスト」をJSON形式で渡すとその内容をチャットワークに送れるようにした。
下記はnode.js + Express4のサンプルソース:
(Webアプリでパラメータを受け取れたら環境は問わないので、Apache + PHP環境とかでも可)
REST API Sample For IFTTT Maker Channel.
こういうものを1つ用意しておけば、URLを追加していくだけでいろんなチャンネルと連携できるようになる。
次はITFFF側で用意したURLを呼び出すレシピを作成する。
トリガーとなるチャンネルの選択後、Makerをアクションとして選択して新しいレシピを作成する。
アクションの設定を行って、
作成したWebアプリのURLとパラメータを定義する。
「Content Type」を「application/json」にしておき、BodyでJSONを渡すようにしている。
この内容で登録しておくと、平日の17:30になったら、「Time to leave work」というメッセージが
用意したURLに飛び、そこを経由してチャットルームにメッセージが投稿される。
とりあえず仕組みが作ってみたが、まだまだ活用法は模索中。
また良い通知レシピを思いついたら試してみたい。
実践Node.jsプログラミング Programmer's SELECTION
ブログを書いていると、
自分が書いた記事にどれくらいブックマークがついているかが
気になるものである。
はてなブログでブログを管理している場合は、
ブログ管理画面や「はてなのお知らせ」というChrome拡張で
ブックマークされたことを知ることができる。
Wordpress等でブログを管理している場合は、
はてなブックマークのトップページの検索欄にブログのURLを入力すると
記事ごとのブックマーク数を表示してくれる。
このブログなら下記のページ:
まあ確認するにはこれで十分なのだけど、
「もっとサクッとブックマークの総数が知りたいんや！」
という人向けに(かどうかは知らないが)
はてなブックマークのAPIに、
「指定したドメインの合計はてブ件数を取得できるAPI」
というものがちゃんと用意されている。
下記サイトの「被ブックマーク合計数取得API」のところだ。
はてなブックマーク件数取得API - Hatena Developer Center
XMLRPC経由ではてブ合計件数が知りたいドメインを渡すと、
その件数を返してくれる。
このAPIを使えば、
例えばブックマーク件数が増えた時に通知する、みたいなこともできそうだ。
このAPIを呼び出すスクリプトを作成して、
前回の件数と異なる件数が返ってきたらメールなりチャットなりに通知するような
内容にしておけば、即座に知ることができるだろう。
今回はXMLRPC経由で件数を取得するだけのスクリプトを作成してみよう。
練習も兼ねてNode.jsで作成してみた。
sample_hatebu.jsを実行するとはてブ件数が表示される。
Hatebu.getHatebuCountに渡しているURLを変更すれば
好きなドメインのはてブ数を表示することができる。
XMLRPCには下記のライブラリを使用している:
Node.js実行環境のインストール方法やスクリプトの実行方法については
入門記事を作成したので、下記を参照いただきたい:
モチベーションアップに繋がるので、
こういったポジティブな情報の取得はどんどん自動化して
目に入るようにしておきたいものだ。
ある開発プロジェクトで、
非技術系のメンバーにも進捗を知っておいてもらいたいものの、
「お前らSubversion入れろ」とか「リポジトリログを見ろ」といっても見そうになく、
いちいち伝えるのも面倒大変そうだったので、
Subversionにコミットがあったらメッセージ内容がリアルタイムで
チャットワークに流れる仕組みを作ってやった。
チャットワークはチーム間でのやりとりに使っていたので、ここに流してやろうというわけだ。
チャットワークはプレビュー版ながらAPIを公開してくれているので、
API経由でメッセージ投稿を行うスクリプトと、
Subversionのフック機能を組み合わせることで実現することができた。
今回はNode.jsでスクリプトを作成した。
手軽に環境が作れて、速くて、一通りライブラリが揃っているので気に入っている。
スクリプトの内容としては、
コマンドラインからリポジトリパスとリビジョン番号を受け取って、
svnlookコマンドでリビジョンをコミットしたユーザー名、メッセージログを取得して、
メッセージを組み立てて、
チャットワークのAPI経由で投稿している。
Subversionが動いているサーバにnode.js環境をインストールして、このスクリプトを配置する。
svn2chatwork.js
var execSync = require('child_process').execSync; var _ = require('underscore'); var request = require('request'); if (process.argv.length < 4) { return; } var repo = process.argv[2]; var rev = process.argv[3]; var cwApiKey = '<ChatworkのAPIキー>'; var endpointBase = 'https://api.chatwork.com/v1/'; var svnRootPath = '/var/www/svn'; //Subversionのリポジトリルートパス var targetRepos = {}; // このtargetReposにリポジトリパスを追加したら複数のリポジトリに対応可能 targetRepos[svnRootPath + '/<SVNリポジトリパス>'] = {'roomId': '<投稿先ChatworkのルームID>'}; var post2Chatwork = function (roomId, message, callback) { var options = { url: endpointBase + 'rooms/' + roomId + '/messages', headers: { 'X-ChatWorkToken': cwApiKey }, form: { body: message }, json: true }; request.post(options, function (error, response, body) { if (!error && response.statusCode == 200) { callback(body); } }); } if (_.has(targetRepos, repo)) { var repoInfo = targetRepos[repo]; var message = 'New Commit\n'; var result = '' + execSync('svnlook author ' + repo + ' -r ' + rev); message += 'User:' + result; result = '' + execSync('svnlook log ' + repo + ' -r ' + rev); message += result; // 下記のコメントを外すと更新ファイル一覧もメッセージに追加できる(大量にファイルが更新されると結構うざい) // result = '' + execSync('svnlook changed ' + repo + ' -r ' + rev); // message += 'Files Updated：\n'; // message += result; post2Chatwork(repoInfo.roomId, message, function (body) {}); }
Subversionのリポジトリを作成すると、その中にhooksフォルダが作成され、
そこに置いたフックスクリプトを各種タイミングで実行してくれる。
今回はコミット後に上で作成したスクリプトを実行してもらいたいので、
「post-commit」という名前で下記のような内容のファイルを作成する。
作成したスクリプトにパラメータとしてリポジトリパスとリビジョン番号を渡し、nodeコマンドで実行するコマンドを書いてる。
最初のexport文を書かないと、日本語が文字化けしてしまうので注意。
あと、node.jsのバージョンとか、どこにsvn2chatwork.jsを置いたかでパスが変わるので注意。
post-commit
export LANG=ja_JP.UTF-8 REPOS='$1' REV='$2' # <nodeコマンドへのパス> <svn2chatwork.jsへのパス> $REPOS $REV /usr/local/node-v0.12.7/bin/node /home/test/svn2chatwork/svn2chatwork.js $REPOS $REV
編集後、post-commitに実行権限をつけたら以降のコミットがチャットワークに通知されるはず。
ソースを整理したり、リポジトリとルームの関連付けを外部化したりしたものをGitHubに置いている。
よかったら参考にしていただきたい。
今時Subversionなんか使わねーよ！と言われるかもしれないが。
Subversion実践入門:達人プログラマに学ぶバージョン管理(第2版)
