zsh 実験メモ:文字列変数の中から空白文字の位置を探したい時…
ふと迷ったのでメモ。ツッコミ希望です。
foo='key foo bar baz...'
のような文字列変数が有るとして、これを key
と
"foo bar baz..."
の2つに分割したい。
要するに perl の split " ", $foo, 2
がしたい。
一旦配列変数に展開してから、2つ目以後を取り出して join し直す、だと、途中に複数のスペースや改行があっても 一文字にされてしまうので、いつでも使えるとは限らないなあと。
ary=($=foo) print $ary[2,-1]
文字列の中から、特定の文字の位置を探すのは、 subscript の (r) や (i) フラグを使えばいける、
けど、スペースを subscript に書くとパースエラーになる。 \
や " "
だとマッチしないし。
% foo='key foo bar baz...' % print $#foo 22 % print $foo[(i) ] zsh: invalid subscript % print $foo[(i)\ ] 23 % print $foo[(i)" "] 23 % print $foo[(i)' '] 23 %
一時変数を作ってそこにスペース文字を入れれば行ける、けど、凄く負けた感が有る。
% k=' ';print $foo[(i)$k] 4
自分が思いついた解決策
${:-文字列式}
を使う。ベストかどうか、分かりませんが。
% print $foo[(i)${:- }] 4 % print $foo[(r)${:- },-1] foo bar baz... % pos=$foo[(i)${:- }] % print key=$foo[1,pos-1] value=$foo[pos+1,-1] key=key value=foo bar baz... % % print key=${(qq)foo[1,pos-1]} value=${(qq)foo[pos+1,-1]} key='key' value='foo bar baz...' %
(key 側に off by one が有ったので訂正)
追記:上記を位置パラメータに使うには ${...} が必要…
% set -- --define 'dist .fc22.hk1' % print $2[(i)${:- }] zsh: no matches found: dist .fc22.hk1[(i) ] % print ${2[(i)${:- }]} 5 % typeset -A defines % p=${2[(i)${:- }]} % defines[${2[1,p-1]}]=${2[p+1,-1]} % print ${(kvqq)defines} 'dist' '.fc22.hk1' %
(zsh) ある日のインフラ業 - bind の入れ替えを例に
雑に記録だけ。
大体、こんな感じだった。(Fedora22 の場合です. P3 の src.rpm はここから download. YMMV)
fn=bind-9.10.2-4.P3.fc22.src.rpm rpm -ivh $fn cp ~/rpmbuild/SPECS/bind.spec . # gpg --keyserver pgpkeys.mit.edu --recv-key 911A4C02 # gpg --edit-key codesign@isc.org trust # gpg bind-9.10.2-P4.tar.gz.sha512.asc fn=bind-9.10.2-P4.tar.gz cp $fn ~/rpmbuild/SOURCES sed -i -e 's/\(^%global PATCHVER\) P3/\1 P4/' bind.spec LANG=C rpmbuild -ba --define 'dist .hk2' bind.spec |& tee build.log sed -n 's/^Wrote: //p' build.log > bind-rpm.files typeset -A rpmdict rpmdict=($(for fn in $(grep /RPMS/ bind-rpm.files); rpm -qp --qf "%{NAME}\t$fn\n" $fn)) rpmnames=($(rpm -qa --qf '%{NAME}\n'| grep '^bind'|grep -v bind99|sort)) pkgs=() for n in $rpmnames; do pkgs+=($rpmdict[$n]) done sudo dnf upgrade $pkgs sudo systemctl restart named-chroot
最後の YAPC::Asia 2015 、ボランティアで参加してみました
(今の形の) yapcasia は最後と聞いたので、最後くらいは少しでも恩返し出来ないかと、サポートスタッフのボランティアに参加してきました。
— hkoba (@hkoba) August 20, 2015
前日準備と前夜祭
ノベルティグッズの袋詰め作業(千人分以上?)は、事前の打ち合わせの時に牧さんが一番つらいと言っていたので、 私もかなり覚悟して行きました。でも実際にやってみると、(確かに肉体的には辛いものの) 意外に楽しめる面もありました(私にとっては。他の人にとって楽しめたかどうか…それは聞いてみないと分からない)。 記憶では、牧さんの予想時間より2時間?ほど早く作業を終えられた!とか。(11時集合で、14時頃にほぼ終わってたので…)
早く終わった理由を振り返ると、少し思い当たるのが、作業する自分たちを、並列プログラミングにおける『ワーカー・プロセス』に例える人が多かったこと、のように思います。並列度の大小に気を配り、ボトルネックを探し、思いついた改善を自ら即座に実行に移す人が多かったことと、それに誰もとがめず違和感ももたず自然に追試し良ければ即広める。でもそれが効果を発揮しない段階が来たらさっさと捨てて、また次なるアイディアの出し合いを楽しむ…そんな雰囲気が、うっすらですが、あったこと、でしょうか。
私の視点で振り返ると、
- 最初の Tシャツたたみで、例の YouTube で話題になった2秒でたたむやり方を、自分の手で上手く出来るまでやってみたことで、改善意識に火が付いた。
- 次に向かったノベルティグッズ詰めでも、工程の改善が見る間に進んでいった。
- 当初は『チラシ重ね』『袋入れ』『グッズ入れ』『シール入れ』の四段流れ作業を4並列、だったかな?
- チラシ重ねは、上に重ねるより下に重ねるほうが速いと気づく人が出て皆真似る→速度上がる
- 速度が上がるとバッファがたまる→工程を減員して、別の工程に進んでもらう
- 改善→移動を繰り返すうちに、全員が全工程に慣れる。
- 今いる工程のパイプラインが詰まったら、自発的に別の工程に移動し始める
- ムダに気づける余地が更に生まれる。
- 『袋入れ』工程をグッズ入れ側で受持つように。
- シールを一枚一枚、山から取ってトートバッグに直接入れるのは効率悪いと気づく人が出て、 シールだけまとめる人と、それ以外の工程の人へと分業
- シールまとめの作業が狭苦しい感じだったので机を移動させる。ついでに移動距離も最適化
単調作業のストレスと肉体的大変さは有ったけど、こういった諸々の改善プロセスが、時間の経つのを忘れさせる面白さにもなったのかも?。勿論、仕事の工場とかだと、あんなふうに工程間を自在に行き来することは許されないでしょうけれど。
あの時、我々は、我々自身をプログラムしていたんじゃないかな…並列処理が当たり前の時代のプログラマーは、 ああいう作業の効率改善にも向いてるのかもしれない、な〜んて。
SICP初版の出だしはこうだった。
「教師、将軍、栄養士、親はプログラムをする。
軍隊、学生、社会はプログラムをされる。」
さて、我々はそろそろ社会をどうプログラムするかにも、関心を向けても良い頃なのかも…
なーんて。にゃーん。 pic.twitter.com/EEjl4ncSRh
— hkoba (@hkoba) August 18, 2015
前夜祭
私は受付チームに配属されて、企業スポンサーさんとスピーカーさんの受付を @kaihar4 さんと一緒に受け持ちました。
開始早々、渡されてたリストが去年のだった!w なんてトラブルも有りましたが、 そこでスタックせずに『名刺だけもらって対応』路線にさっと切り替えを指示してくれた、 コアスタッフの女性陣、その後も随所に発揮してくれた柔軟性、臨機応変な対応力と適切な指示出しは、 非常に頼もしかったです。優秀な人は魅力的ですね!
英語圏のスピーカーさんの受付は、ちょっと緊張しましたが、牧さんに『お名前を伺ってもよろしいですか?』を何ていいますか?と聞いて『Can I have your name, please?』だと言ってもらえたので、よしこれ一本槍だ!と押し通しました。
一日目
やっぱり早起きが辛かった(^^
お昼までは、ひたすら受付してました。有名な方々が目の前に来るという点では凄く美味しいポジションだったのですが、 とにかく粗相をしないようにするのが精一杯、みたいな感じ。リストからお名前探すの遅くてごめんなさい!みたいな。『アメちゃんもどうぞ』で笑ってくれた方がそこそこ居てよかった…。
午後になって少し落ち着いたので、一件だけトークを聞きに行かせてもらいました。 個人的に興味が有ってどうしても聞きたかった WebAudio のトーク です。 WebAudio の全体像の説明がとても良くまとまっていたのと、 ScriptProcessorNode が Deprecated! みたいな最新の話題も 聞けて、更にそう来るか!みたいなビックリ応用の話もあって、大満足でした。
.oO(あの Canvas のオシロスコープとか、github に置いてあるんでしょうかね…見てみたいな〜って…)
懇親会
color sync のお陰で、入場誘導が非常に楽でした。 (参加側だった去年までは、ごにょごにょって感じがあったので(><)。これは劇的な改善だったと思います)
いくつかの営業さんとお話出来たのは、もしかしたら今の仕事や将来に役立つかもしれないので、この御縁は大事にしたいなぁ、とか。
あと、大昔の O'Reilly の第一回 The Perl Conference Japan のトーク応募に私を誘って下さった、 前田 薫 さんが私に気付いてくださったのが、とても嬉しかったです。
@hkoba マクスウェルの悪魔のパラドクス解消の仕組みと、関数プログラミングにおける GC の働きが似てるってお話しが、すごく刺激的だった。
— hkoba (@hkoba) August 21, 2015
るーるーるーだけの蛍の光で追い出し、楽しかった。(俺だけ?)
二日目
やっぱり早起きが(ry
(前の週のコミケ参加から続く)肉体的疲労もピーク! ですが、一日目に比べると遥かに暇で、まったりした感じでした。 ですので、交代で少しトークを聞くことが出来ました。
私は Jonathan Worthington の Perl6 の並列処理・非同期処理・並行処理のトークを聞きに行きました。 yapcasia.org
(同時通訳ではなく、英語だけで聞いたのですが)、彼の英語は、英語の耳さえ出来ていれば意味が追えるレベルのスピード・明瞭さだったので、内容に集中できました。
トーク後半の、Perl6 のメタプログラミング機能を使って書かれた OO::Monitors
, OO::Actors
の紹介の下りや、
"Concurrency is about competition to access and mutate" という概念把握は、非常に面白く聞かせてもらえました。
折角なので質問もしてみました。『メタプログラミングを使って実現しているとのことですが、 OO::Monitors や OO::Actors の複雑さはどれくらいか?例えば何行くらいか?』と(日本語で^^; 同時通訳さん、ありがとうございます) 尋ねた所、そんなに難しくないよ、monitor は 50(15?)行くらいじゃないかな?みたいな返事だったように思います。 ほんまかいな!と思ってググったら
oo-monitors/Monitors.pm at master · jnthn/oo-monitors · GitHub
今は 93 行だったけど、それでも凄いよ!
…それにしても、こういう技術的な質問を即席で英語で質問するのは今の私には非常に困難ですが、 日本語で質問して良いなら、かなり楽になりますね。やはり今回の通訳さんは、とても優秀な方だったのだと思います。
最後に, RJBS にバグの話を出来たこと
個人的に今回の yapcasia で、自分が達成できた一番大きなことは、 私が以前 RT に報告した perl5 のバグの問題を、 perl5 の開発まとめ役である @rjbs に話せたこと、 重大性を認識してもらえたこと、ではないかと思います。
warnings FATAL と DESTROY {undef} がメモリーを食いつぶす件、RT に登録した。>
https://t.co/p3rO8G0Q9l
— hkoba (@hkoba) June 16, 2015
↑このバグ自体の説明は省きます。詳しくは RT 参照、手元で動かせば重大さは理解できるはずです。
本当は懇親会の時に話しかければ良かったのですがボランティア業で頭が一杯で気づかず…
二日目の終わるギリギリに気付いて、でも rjbs は最後のトークを聞きに行ってる状況で。 でも諦めきれず、トーク会場に入ってこっそり彼の姿を10分ほど探すと、彼らしき人を発見。 トークに熱中してたら悪いな〜と思って遠くから様子をうかがうと、何やら手元に光る二画面の液晶が… DS じゃん!
なら迷惑にはならないか…と意を決して、彼に mention を飛ばした所、しばらくして、返事をくれました。
@hkoba yes of course! Stop me when you see me!
— Ricardo SIGNES (@rjbs) August 22, 2015
彼に私の服装(狂った紫の帽子!)を伝えて、 クロージングの後の、出口の所で待っていると、ちゃんと見つけてくれました。(今私のツイ見ると不定冠詞が落ちてるw)
後は、カタコトの英語でバックポートのお願いをした所、彼から今朝、RC に入ってるよ!って返事をもらえました。
@hkoba The 5.20.3 release engineer informs me that the fix for 123398 fixes 125421, and is in 5.20.3-RC1!
— Ricardo SIGNES (@rjbs) August 22, 2015
これなら、少なくとも 5.20 以後は救われそうです。 Perl を主なプログラミング言語として使う者の一人として、この数カ月一番気をもんでいたことなので、 胸のつかえが取れた感じです。
Email での議論と違って、対面の英語は、身振り手振りを交えて英文自体の難度は相当下げることが出来るし、 相手の表情を確認しながら話せるので失礼がないか過度に心配する必要も無くなるので、 相手の英語を聞き取ることさえ出来れば かえって楽なのかもしれません。
中津燎子の英語未来塾で英語の発音改善に取り組んだ成果が出ているようで、 ちょっと自信がつきました。
まとめ
#yapcasia ボランティア、大変だったけど楽しかった! pic.twitter.com/75BU8TNHlm
— hkoba (@hkoba) August 22, 2015
(IT)技術者がまともに尊敬される世の中に変わるために、何が必要か…久野先生との対話と反論
久野先生と、以下のような対話が有りました。(直接の面識があるわけではありません、念のため。 先生の著作 は好きですよ、ふふふ…)
ニコ生でIT学んでもIT土方になるだけだからというコメント流れてたけどまさに。 だから初等中等でプログラミングや情報科学に接してもらうことの目的は、技術者がまともに尊敬される世の中に変わるためだと思っています。 #ipsjsss
— 久野 靖 (@ykuno) 2015, 8月 18
うーん、たとえ情報科学に親しんだ人が増えても、それで IT 技術者が尊敬される世界を作れるかは、私は懐疑的です…
今より上手に、こき使われる未来も、同じくらいあり得るのでは?と。教育だけでは「尊敬される未来」には届かない気が…>
https://t.co/jZHvvR0hYC
— hkoba (@hkoba) 2015, 8月 18
少なくとも今のまま「技術なんか知らん、金払えばいんだろ」はダメです。 まずは皆が知るようになって欲しい。その先さらに何か必要なことがあると判明するかも知れない、それはそれでその時に考えようよ。 https://t.co/XaIPRu4ABB
— 久野 靖 (@ykuno) 2015, 8月 18
私の反論が長くなりそうだったので、一旦こちらにまとめてみます。
私の考え
IT 技術者 以外 の、世の中の普通の人たちにも、プログラミングや情報科学の知識を広めることが、 世の中を良くするだろうこと は、勿論私も同意です。
『技術なんか知らん、金さえ払えば良いんだろ?』という(ビジネス側の)人間を、教育によって、生まれる前に消し去りたい…その気持ちも分かります。
ただ、IT 土方と呼ばれるような 奴隷っぽい扱い を本当に無くしたいなら、 最も大事なことは、 IT技術者側が、皆揃って、理不尽な扱いに抗い、拒否すること ではないか、 と私は考えるのです。そうして IT技術者を雑に扱う企業が淘汰されていく社会 を作っていく方が、 もっと直接的で効果的なのではないか、と。
そして、そのために鍵となるのは、
IT 技術者も、非技術側の人間に頼らずにビジネス社会を生き延びられるだけの、複式簿記など商いの知識と、 お金の関わる交渉事をこなす胆力を身につけること
IT 技術者自身が、起業したり社長になって、 IT技術者を大事にする企業を作り、 技術者が幸せになれる商取引の形を交渉して勝ち取っていくこと(ex. 「納品のない受託開発」、フリーランスな私の場合 - hkoba blog)、 技術者を使い捨てる会社を淘汰するべく戦うこと…
ではないか、そう私は考えています。
『技術の価値を知ってもらえれば、扱いが変わる』?
他人が自分たちをどう扱うかは、結局の所、他人の自由意思ですので…
@hkoba 社会の全員がお人好しの善人である事を前提に未来を描くのは、好みじゃないなぁ、みたいな。
ちゃんとずる賢い人が沢山いて皆が利己的に振る舞う前提で、そこそこ悲惨にならない未来を描く、くらいが好み…
— hkoba (@hkoba) 2015, 8月 18
『世の中の IT 知識の底上げ』は、勿論大事なのですが、 知識はあくまで中立な力でしかないので、 それをパワー・ハラスメントの道具に使う人間だって出るでしょう。
もっと言えば、 技術しか興味のない人間 (人間社会とガチンコで対峙し日銭を稼いで生き抜くことから、逃げた人間)は、 ビジネス層にとって、尊敬できる存在ではない、ように、私は想像します。むしろ、 カモにしても心の傷まない くらいの存在ではないかと。
そんなわけで、繰り返しになりますが、 もしゴールを『(IT)技術者がまともに尊敬される世の中』と設定するなら、 もっと直接的に『IT技術者を尊敬しない、大事にしない企業から、 技術者がどんどん流出して、淘汰されていく社会』を 志向した方が効果的ではないか?。
つまり、IT技術者自身が、理不尽な仕事を突っ込まれた時に、 ちゃんと No を言えること、 Win-Win or No-Deal を実践できること…
それが大事なんじゃないかな〜、と思っています。
備忘録:SQLite で timestamp と iso8601 を相互変換する定型句
忘れがちなので。ツッコミ歓迎です。 より詳しくはSQLite のマニュアルへ
timestamp(unixepoch) から iso8601 へ(現地時間で)
-- ts に timestamp が入っているとして。 select datetime(ts, 'unixepoch', 'localtime'); select datetime(0, 'unixepoch', 'localtime'); -- ex. 1970-01-01 09:00:00 -- datetime と等価な strftime select strftime('%Y-%m-%d %H:%M:%S', ts, 'unixepoch', 'localtime');
utc で良い時は 'localtime'
は省略できる
iso8601 から timestamp へ
-- timezone まで書いてあった場合 select strftime('%s', '1970-01-01 09:00:00 +09:00'); -- 0 -- timezone 書いてない時に、utc に戻すには select strftime('%s', '1970-01-01 09:00:00', 'utc'); -- 0
roundtrip
% sqlite3 :memory: "select datetime(strftime('%s', '2015-07-31 16:11:02', 'utc') , 'unixepoch', 'localtime')" 2015-07-31 16:11:02 %
オマケ。現在時刻の扱い。
-- iso8601 で. (timezone 抜き) select datetime('now'); -- timestamp として select strftime('%s', 'now');
謹賀新年/2015目標
あけましておめでとうございます。
旧年中、リアル・SNS あわせて交流して下さった皆様、 仲良くして下さりありがとうございました。
また本年もよろしくお願いいたします。
昨年の反省点
- ライフワークの研究開発にかける時間が、(特に昨年後半)一層減ったこと
- 本が増えすぎて生活スペース自体が圧迫され始めたこと
- 体が疲れやすくなっている、ぽいこと
- 本の整理が思ったほど進まず、むしろ増えてしまったこと
昨年の良かった点
- 職場の新体制が、まずは順当に進みだしたこと
YATT::Lite に関して
- 何より、議論を交わせる相手を得たこと。ありがたや…
- テンプレートエンジンNightで発表できたこと 仕事の手離れを良くする手段としての、静的検査のあるテンプレートエンジン (YATT::Lite talk at 2014 テンプレートエンジンNight) from Hiroaki KOBAYASHIwww.slideshare.net
未来塾のお手伝いで、多少はお役に立てたっぽいこと
今年の目標
Fedora20 を UEFI な HP製 notepc にインストールする時のパーティション設定について
.oO(老害っぽいインストールメモ記事ですよ、と…)
年初に Fedora20 を HP の notepc (HP Envy TouchSmart) にインストールした時にメモを残してなかったせいで、先日買った HP elitebook 840 G1 でも同じ試行錯誤をするはめになってしまいました。Fedora20 で UEFI な notepc をカスタムパーティション構成でインストールするのは結構ハマり沼っぽいので、今度こそ記録を残しておこうと思います。(UEFI のブート設定周りは、また別の記事で書きます)
試す場合は自己責任でよろしくお願いします。間違っても HP さんに問い合わせたりしませぬよう…
(自分メモなので、途中で口調が変わりますが、面倒なので放置します)
前提
- あくまで Fedora Linux を常用する人のための内容です。(Dualboot にするとは限らない)
- Fedora は暗号化 lvm の上にインストールします(vg 全体を暗号化する。 lv 毎の暗号化は行わない)
インストール CD/DVD で起動
CD/DVD が優先されない時は、起動直後に ESC を押してしばらく待ち、BIOS に降りて 設定をいじる
Windows領域を縮める
(書き終わってから気づいたですが、コマンド行に降りなくても ntfs パーティションの縮小が出来るっぽいですね…)
コマンド行に降りてパーティション構成を調べる
fdisk -l /dev/sda
- 私の個体は sda1..6 の5つに分けられていた(はず。少しアヤフヤ) 一番大きい sda4 に Windows 本体が入っており、続く sda5, 6 がリカバリー関連だった。
- EFI システムパーテイションは sda2
まず windows 領域 sda4 の中の ntfs を縮める。今回は 128GiB
にする。
ntfsresize -s $[128*1024*1024*1024] /dev/sda4
(-s 128G
だと 128*1000*1000*1000 になるので注意)
続けて fdisk /dev/sda
で
d
コマンドで一旦 6, 5, 4 までを delete するn
コマンドで sda4 を目標サイズで確保し直す。- (最近の fdisk はサイズ指定で +128G など書けるので、それに頼る)
t
でパーティションタイプを6 Microsoft basic data
に戻す
GUI に戻って、インストール先の選択に進む
この時点でディスクの空きが 300GB ほど出来ているはず。
そんなわけで、自動
-> 戻って -> 手動
でパーティションを切る。具体的には:
インストール先の選択
画面で、自動パーティショニング(デフォルト)を選んだ状態で、-
データを暗号化する。パスフレーズは後で設定する
もチェックして進む- パスフレーズを聞かれるので入力
- するとトップメニューに戻るので、ここから再び手動パーティショニングに切り替える
- 今度は
インストール先の選択
画面で、続行する前にまずディスクパーティションの確認または修正を行う
を選ぶ
- これで無事に EFI システムパーティションが /boot/efi へとマウントされることになっている、ことを確認する。(そうでないと、 「stage1 のインストール先が無い」というエラーが出てインストールの続行を拒否される)
- 左下の
+
で/boot
だけは ext4 で作成. (これが sda5) 固定容量で 1GB もあれば十分 /
を 12G で確保。- この時点では デフォルトでは luks-fedora-00 のような lv 名が付くが、このままだと lv 単位の暗号化になってしまう。
- そこで
Volume Group
リスト右側の変更
ボタンを押して、vg 設定の画面で暗号化
をチェックする。サイズポリシーはできるだけ大きく
か、固定容量で余裕をもって割りつける。(lvm を使う以上は、サイズを随時増やしていくことが前提なので。)
- lv の画面に戻ったら、そちらの
暗号化
チェックは外す。これで変更
を押すと、lv の名前からluks-...
という接頭辞が消えるはず。
- vg の名前は、私はサルベージ時の vg 名の衝突が嫌なので vg${INITIAL}${YY} みたいな名前をよく使う。INITIAL は自分のイニシャル。
- 残りのパーティションはこんな感じ
/var
8G/home
1G. これは運用中に lvresize で拡張するswap
8G
- 左上の
完了
を押すと変更の概要
ダイアログが出るので、本当に設定が望み通りになっているか確認する。この構成では下記のようになっているはず(順番は前後しうる)- sda5 は再フォーマット
- sda6 を確保して LUKS でフォーマットして luks-sda6 を作る
- luks-sda6 上に pv 作成
- 上記 pv 上に vg 作成
- root, var, home, swap の lv 作成
後は通常通り。