This is the changeset for this hack.
]]>具体的には、シニア、アドバンスド・シニア、という2つの役職が設けられ、以下のような待遇となっています。
実運用に入るのはまだこれからなのですが、今までペパボでは技術者がステップアップしていく道がなかったので、これはペパボの技術者にとって、とても大きな一歩です。
で、本題。
新しい技術者の評価制度をベースに、今までペパボにはなかったポジションの技術者を、東京と福岡、両方で募集しています。
「技術基盤整備エンジニア」という言葉でピンと来る方もいるかと思いますが、クックパッド さんの開発基盤グループが、役割として近いと思い、名前を拝借させていただきました。
職務内容としては、
と書かれていますが、これだけに留まらず、これは絶対にやるべき、という技術的課題があれば、どんどんお任せしたいと考えています。
待遇は新評価制度の元での、アドバンスド・シニア待遇となります。（年俸600万円はあくまでも最低ラインなので、応相談です。）
また、自分が就いてる役職はテクニカル・マネージャーなのですが、この役職は人数制限があるわけではないので、場合によってはテクニカル・マネージャー待遇も検討させて頂きます。（特に福岡の場合。）
興味のある方、もっと具体的な話が聞いてみたい、という方は、twitter や facebook などで、お気軽にお声掛けください。
他にも、東京、京都、福岡で様々な職種で人材募集中です。
]]>
This is the changeset for this hack.
]]>This project includes the script to convert web sites into ebook format(currently mobipocket only) data from given JSON data and gathering the JSON data for web sites.
Currently, you can generate mobipocket format data with the URI of JSON data like this:
$ webiblo.pl http://mizzy.org/webiblo/data/Getting_Real.json
Or with JSON data through STDIN.
$ cat data.json | webiblo.pl
This script needs KindleGen.
JSON data is like this:
{
"title" : "Structure and Interpretation of Computer Programs",
"authors" : [
"Harold Abelson",
"Gerald Jay Sussman",
"Julie Sussman"
],
"cover_image" : "http://mitpress.mit.edu/sicp/full-text/book/cover.jpg",
"content_xpath" : "//div[@class=\"content\"]", # Optional
"exclude_xpath" : "//div[@class=\"navigation\"]", # Optional
"chapters" : [
{
"title" : "Foreword",
"uri" : "http://mitpress.mit.edu/sicp/full-text/book/book-Z-H-5.html#%_chap_Temp_2"
},
{
"title" : "1 Building Abstractions with Procedures",
"uri" : "http://mitpress.mit.edu/sicp/full-text/book/book-Z-H-9.html#%_chap_1",
"sections" : [
"title" : "1.1 The Elements of Programming",
"uri" : "http://mitpress.mit.edu/sicp/full-text/book/book-Z-H-10.html#%_sec_1.1"
"subsections" : [
{
"title" : "1.1.1 Expressions",
"uri" : "http://mitpress.mit.edu/sicp/full-text/book/book-Z-H-10.html#%_sec_1.1.1"
},
]
]
}
]
}
Overview of the JSON data is following:
There are two JSON data for Getting Real and SICP on [my web site(http://mizzy.org/webiblo/) .
JSON data are put on the gh-pages branch.Pull requests are welcome.
]]>Web-to-mobi を焼き直して、Webiblo というプロジェクトを立ち上げてみました。
基本的には GitHub の README に書いてある通りなんですが、ウェブサイトについて記述された JSON を喰わせることによって、Kindle で読める mobipocket フォーマットの電子書籍データを作ろう、また、様々なサイト対応の JSON データを集めたい、というのがこのプロジェクトの趣旨です。
現在は、
$ webiblo.pl http://mizzy.org/webiblo/data/Getting_Real.json
といった感じで、JSON が記述された URL を指定するか、
$ cat data.json | webiblo.pl
といった形で JSON を標準入力から渡してやれば、与えられたデータにしたがって、mobipocket 形式のデータを生成します。（KindleGen が必要です。）
JSON データは以下のようになっています。
{
"title" : "Structure and Interpretation of Computer Programs",
"authors" : [
"Harold Abelson",
"Gerald Jay Sussman",
"Julie Sussman"
],
"cover_image" : "http://mitpress.mit.edu/sicp/full-text/book/cover.jpg",
"content_xpath" : "//div[@class=\"content\"]", # Optional
"exclude_xpath" : "//div[@class=\"navigation\"]", # Optional
"chapters" : [
{
"title" : "Foreword",
"uri" : "http://mitpress.mit.edu/sicp/full-text/book/book-Z-H-5.html#%_chap_Temp_2"
},
{
"title" : "1 Building Abstractions with Procedures",
"uri" : "http://mitpress.mit.edu/sicp/full-text/book/book-Z-H-9.html#%_chap_1",
"sections" : [
"title" : "1.1 The Elements of Programming",
"uri" : "http://mitpress.mit.edu/sicp/full-text/book/book-Z-H-10.html#%_sec_1.1"
"subsections" : [
{
"title" : "1.1.1 Expressions",
"uri" : "http://mitpress.mit.edu/sicp/full-text/book/book-Z-H-10.html#%_sec_1.1.1"
},
]
]
}
]
}
ざっくり構造としては、以下のようになっています。
JSON データは現在のところ、Getting Real 用のものと SICP 用のものを こちら で公開しています。
JSON データは GitHub リポジトリの gh-pages ブランチに置いてあるので、独自の JSON データを作成した方は pull request 送ってもらえるとうれしいです。
webiblo で生成したデータを Kindle Previewer で見ると、こういった感じになります。
元々は、単に Getting Real 英語版のデータを mobipocket 形式に変換したかっただけなんですが、Facebook での otsune さんのアドバイスにより、こういった形で、書籍固有のデータを分離する形でつくってみました。
また、@hotchpotch さんから、Autopagerize の SITEINFO を活用したアプローチ もあるよ、と教えて頂き、うおー、これはエレガントだ、と思ったんですが、こちらは目次ページを作成する機能がなさそうだったので、とりあえず当初の JSON を利用するというコンセプトのまま開発を進めました。
今後の TODO としては、以下のものを考えてます。
But the kindle edition of Getting Real is sold at amazon.com, publishing this script may be illegal.
So I’ve re-written this script like this following the advice from @otsune-san.
This script gets JSON data about a web site from STDIN and converts web data to mobipcoket format.
JSON data format is like this.
{
"title" : "Getting Real",
"author" : "37signals",
"chapters" : [
{
"title" : "Introduction",
"sections" : [
{
"title" : "What is Getting Real?",
"uri" : "http://gettingreal.37signals.com/ch01_What_is_Getting_Real.php"
},
{
"title" : "About 37signals",
"uri" : "http://gettingreal.37signals.com/ch01_About_37signals.php"
},
]
}
],
"content_xpath" : "//div[@class=\"content\"]",
"exclude_xpath" : "//div[@class=\"next\"]"
}
This is the image of showing the converted file on Kindle Previewer.
This script is based on notifo_notify.py.
This is the image of pushing notification to iPhone by this script.
This script is hosted on GitHub.Pull requests are welcome.
]]>
Three red stars.(Moon, Betelgeuse and Aldebaran)
This is the composite picture from the penumbral eclipse to the beginning of the total eclipse.
A red bright star on left side is Aldebaran of Taurus and dense small stars on center are Pleiades.
It was so cold but looking at stars and shooting stars were so fun.It would never be boring for me.
]]>I appreciate @kentaro-san and Hatena staffs.I had a very good time to talking with you and drinking Dr Peppers :-)
Maglica is a simple internal cloud tool I made.I don’t like complicated and blackboxed tools.It seems for me that existing internal cloud tools are so complicated and overengineered for my use case.So I made the simple one.
“Tenjin” font is embedded in this slide using CSS Fonts Module. @chocolatina made this cool font.
]]>
Black Hole Sun - Astronomic Landscape and Milky Way TimeLapse from Christoph Malin on Vimeo.
1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24 25 26 27 28 29 30 31 32 33 34 35 36 37 38 39 40 41 42 43 44 45 | |
For this purpose I made this tiny script.
If you call this plugin in a post like this:
{% twan 3003406 %}
The image shows up like this.
]]>メールの方は Google Apps に移行したんですが、ブログはどうしようかなー、できれば GitHub でファイル管理したいなー、と思ってたところに、@mattn_jp さんのタイムリーなエントリ が。
とても良さそうなので、しばらくこれで運用してみます。
過去エントリについては、Trac に入ってた分ぐらいは移行しようかな、と考えてます。
]]>mailto: gosukenator at gmail.com
]]>
SSL証明書がまともなものでないと接続時にエラーが出るのですが、ロリポップなんかだと
このエラーを無視するように公式ドキュメントに書いてあるので、かなり悪質です。
と書かれていますので、これについて説明させて頂きます。
この方が指摘されているのは、Win FileZillaの設定 / ホームページ / マニュアル - ロリポップ！ (FileZilla非推奨のため現在は削除されています)の中の、
証明書の確認を行います。『今後もこの証明書を常に信用する(A)』にチェックを入れて、『OK』をクリックします。
という部分だと思われるのですが、確かに、無条件で信用するにチェックを入れるようお客様に指示するのは大変良くないですね。
ロリポップでは DigiCert Inc社 によって発行されている証明書を利用しているのですが、Filezillaでは警告が出てしまうようです。
調べてみたところ、FilezillaはルートCAの証明書を保持しておらず、どのような証明書であっても、ユーザが「信用する」にチェックを入れなければ警告が出る仕様となっているようです。
how to install root CA certificate on Filezilla
OR6 blog 様のご指摘により、このような証明書の検証をきちんと行っていないソフトウェアをお客様に推奨すべきではないと判断いたしましたので、Windows/Mac版ともに存在し、証明書の検証をきちんと行っている Cyberduck を推奨するよう、マニュアルを変更させて頂くことになりました。
また、蛇足ですが、ロリポップの チカッパプラン では SSH サービスを提供していますので、FTPS の代わりに SCP/SFTP もご利用頂けます。
OR6 blog 様、この度はご指摘誠にありがとうございました。
]]>Maglica is a Python library and command-line tool for an internal cloud. (This tool is very primitive beta now.)
This is very simple and based on libvirt, virt-clone and zeromq (for RPC).
The name “Maglica” is derived from a Bosnian word that means “Nebula.”
I’m developing this tool because other internal cloud tools(CloudStack, OpenStack, Eucalyptus and so on) are so complicated for internal use.I need a simple tool.
Maglica has four components.
Maglica library is a main component of Maglica.Maglica CLI calls the library to do the jobs.The library talks to libvirtd on other hosts directly to get virtual machines information.
Maglica client worker is running on the same host on which CLI runs. Client worker binds zeromq PUB socket to tcp://:5555 and REP socket to tcp://:5556.
Client worker recieves requests from library through REP socket and throws request to host workers through PUB socket.Also REP socket recives job results from host workers.
Host workers are running on hosts which virtual machines are running on.
Host workers connect to the PUB socket of a client worker to receive job requests and the REP socket of a client worker to throw job results.
[[Image(http://mizzy.org/img/maglica_architecture.jpg)]]
You must setup libvirtd running on host machines and accessible through tcp port. (See http://libvirt.org/remote.html)
Clone Maglica on a host machine and run the host worker.
# git clone git://github.com/mizzy/maglica.git
# cd maglica
# cp etc/maglica.conf.example etc/maglica.conf
Edit etc/maglica.conf that points to the correct client worker host and port.
# ./scripts/maglica_host_worker
Clone Maglica on a client machine.
# git clone git://github.com/mizzy/maglica.git
# cd maglica
# cp etc/maglica.conf.example etc/maglica.conf
Edit etc/maglica.conf that points to host machines.
Run the client worker.
# ./scripts/maglica_client_worker
Run maglica command to list up “original images”(which name is end with the string “oroginal”).
# PYTHONPATH=. ./scripts/maglica image list
Name Host
---------------------------------------------------------
SL6.0-x86_64.original host0.example.jp
SL6.1-x86_64.original host0.example.jp
SL6.0-x86_64.original host1.example.jp
SL6.1-x86_64.original host1.example.jp
Run maclica command to clone a virtual machine image.
# ./scripts/maglica vm clone --image=SL6.1-x86_64.original --hostname=vm0.example.jp
This command clones the image on a host and rewrites network setting of the image with libguestfs.
]]>Carbon is a backend storage application for Graphite.
# wget http://launchpad.net/graphite/1.0/0.9.8/+download/carbon-0.9.8.tar.gz
# tar zxvf carbon-0.9.8.tar.gz
# pushd carbon-0.9.8
# python setup.py install
# popd
Whisper is an alternate to RRD.
# wget http://launchpad.net/graphite/1.0/0.9.8/+download/whisper-0.9.8.tar.gz
# tar zxvf whisper-0.9.8.tar.gz
# pushd whisper-0.9.8
# python setup.py install
# popd
# wget http://launchpad.net/graphite/1.0/0.9.8/+download/graphite-web-0.9.8.tar.gz
# tar zxvf graphite-web-0.9.8.tar.gz
# pushd graphite-web-0.9.8
Run check-dependencies.py.
# ./check-dependencies.py
[FATAL] Unable to import the 'cairo' module, do you have pycairo installed for python 2.6.5?
[FATAL] Unable to import the 'django' module, do you have Django installed for python 2.6.5?
[WARNING] Unable to import the 'mod_python' module, do you have mod_python installed for python 2.6.5?
This means you will only be able to run graphite in the development server mode, which is not
recommended for production use.
[WARNING]
Unable to import the 'memcache' module, do you have python-memcached installed for python 2.6.5?
This feature is not required but greatly improves performance.
[WARNING]
Unable to import the 'ldap' module, do you have python-ldap installed for python 2.6.5?
Without python-ldap, you will not be able to use LDAP authentication in the graphite webapp.
[WARNING]
Unable to import the 'twisted' package, do you have Twisted installed for python 2.6.5?
Without Twisted, you cannot run carbon on this server.
[WARNING]
Unable to import the 'txamqp' module, this is required if you want to use AMQP.
Note that txamqp requires python 2.5 or greater.
2 necessary dependencies not met. Graphite will not function until these dependencies are fulfilled.
5 optional dependencies not met. Please consider the warning messages before proceeding.
I use a development server included in Graphite, so mod_python is not needed.
Install packages other than mod_python.
# yum install pycairo
# rpm -ivh http://download.fedoraproject.org/pub/epel/6/i386/epel-release-6-5.noarch.rpm
# yum install Django python-twisted python-memcached python-ldap
# yum install python-setuptools gcc python-devel
# easy_install txamqp
You need bitmap fonts, so intall it.
# yum install bitmap-console-fonts
Install Graphite and setup it.
# python setup.py install
# python /opt/graphite/webapp/graphite/manage.py syncdb
# pushd /opt/graphite/conf
# cp carbon.conf.example carbon.conf
# cp storage-schemas.conf.example storage-schemas.conf
# cp dashboard.conf.example dashboard.conf
Edit dashborad.conf and uncomment these.
[ui]
default_graph_width = 400
default_graph_height = 250
automatic_variants = true
refresh_interval = 60
Start Carbon.
# /opt/graphite/bin/carbon-cache.py start
Start example-client included in Graphite source code to send load average data to Carbon.
# popd
# python ./examples/example-client.py
Start a develepment server of Graphite.
# /opt/graphite/bin/run-graphite-devel-server.py /opt/graphite
Access to port 8080 of this server and you’ll see the screen of Graphite.
]]>Scientific Linux 5 has aufs rpm on its base repo.So I tried aufs and lazycopy on SL5.CentOS and SL6 don’t have aufs rpm.
I created source directories and files in them first.
# mkdir /tmp/source0
# mkdir /tmp/source1
# mkdir /tmp/source2
# echo source0 > /tmp/source0/0
# echo source1 > /tmp/source1/1
# echo source2 > /tmp/source2/2
And copied these directories to /tmp/dest with lazycopy command.
# lazycopy /tmp/source0 /tmp/source1 /tmp/source2 /tmp/dest
['/tmp/source0', '/tmp/source1', '/tmp/source2'] -> /tmp/dest
Confirmed that three files wiere there and the content of one of the files.
# ls /tmp/dest/
0 1 2
# cat /tmp/dest/0
source0
Changed the content of /tmp/dest/0 and confirmed that /tmp/source0/0 was not changed.
# echo dest > /tmp/dest/0
# cat /tmp/dest/0
dest
# cat /tmp/source0/0
source0
Lazycopy implements copy-on-write by mounting directories with aufs like this.
# mount
...
none on /tmp/dest type aufs (rw,br:/tmp/dest/.aufs/0=rw:/tmp/source0=ro:/tmp/source1=ro:/tmp/source2=ro)
Lazycopy creates .aufs/0 directory in the destination directory if it doesn’t exist and mounts it with rw mode as one of the aufs branch.Other source directories are mounted with ro mode, so files in these directories will not be changed.
Changed files and newly created files are saved under /tmp/dest/.aufs/0 directory.So you can see the directory structures like this after unmounting /tmp/dest.
# touch /tmp/dest/3
# umount /tmp/dest
# tree -a /tmp/dest
/tmp/dest
`-- .aufs
`-- 0
|-- .wh..wh..tmp
|-- .wh..wh.aufs
|-- .wh..wh.plnk
|-- 0
`-- 3
So if you unmount /tmp/dest directory and run lazycopy with same options again, you can see the changed files and created files again.
]]>