Fedora20に、Python3.4によるvirtualenvwrapperでデータ分析環境を構築する。

Fedora20にPython3.4をインストールし、virtualenvwrapper環境を構築します。 その後、virtualenv環境に分析系ライブラリを入れてみます。 メモし忘れたので、覚えている範囲で。 あくまで自分が試したことであり、ベストプラクティスではないのであしからず。

Python3.4のインストール

cd /usr/local/src

# 必要なパッケージをインストール
sudo yum -y install zlib-devel openssl openssl-devel readline-devel \
ncurses-devel sqlite-devel expat-devel bzip2-devel \
tcl-devel tk-devel gdbm-devel

# 最新安定版をダウンロード・展開
wget https://www.python.org/ftp/python/3.4.2/Python-3.4.2.tgz
tar zxvf Python-3.4.2.tgz

# ビルド＆インストール。prefixはおこのみで。
# 既存のpythonと分けるため、make install ではなくaltinstall を行う
cd Python-3.4.1
./configure --prefix=/usr/local/python-3.4 --with-ssl
make
sudo make altinstall

—with-sslがないと、後々get pipするときにエラーが起きました。

Python3.4がインストールできたので、PATHを追加しましょう。 zshを使っているので、.zshrcに以下を記述。

export PATH=/usr/local/python-3.4/bin:$PATH

source .zshrc

Pythonがきちんと入っているか確認しましょう。

> python3.4 -V
Python 3.4.2 

OK.

pip のインストール

pipを入れる前に、一般ユーザのパスをroot ユーザのパスに引き継ぎ、 python3.4をrootで実行できるようにしましょう。

sudo visudo

で/etc/sudoersを編集し、

 - Defaults secure_path = /sbin:/bin:/usr/sbin:/usr/bin - See more at: http://3.1415.jp/pemvzrla#sthash.AbDgNo3l.dpuf
 + Defaults secure_path = /sbin:/bin:/usr/sbin:/usr/bin - See more at: http://3.1415.jp/pemvzrla#sthash.AbDgNo3l.dpuf
 + Defaults env_keep += "PATH"

とします。

python3.4をrootで実行できるか確認。

> sudo python3.4 -V
Python 3.4.2 

OKですね。pipをインストールしましょう。 実際はsetuptoolsをインストールしてしまったのですが、 事前に入れなくてもgetpip.pyが入れてくれるようです。

wget https://raw.github.com/pypa/pip/master/contrib/get-pip.py
sudo python3.4 get-pip.py

入ったか確認しましょう。

> which pip
/usr/local/python-3.4/bin/pip

入りました。

virtualenv & virtualenvwrapper

では、仮想環境用のライブラリをインストールしましょう。

pip install virtualenv virtualenvwrapper

virtualenvwrapperのために、.zshrcに下記設定を記述します。

if [ -f /usr/local/python-3.4/bin/virtualenvwrapper.sh ]; then
export WORKON_HOME=$HOME/.virtualenvs
export VIRTUALENVWRAPPER_PYTHON=/usr/local/python-3.4/bin/python3.4
export PROJECT_HOME=$HOME/Devel
source /usr/local/python-3.4/bin/virtualenvwrapper.sh
export PIP_RESPECT_VIRTUALENV=true
fi

ここ、あんまりpython-3.4って書きたくないのですが、 いい方法が思いつかず。

.zshrcを読み込み直せば、virtualenvwrapperが使えるようになっているはず。 データ分析用の仮想環境を構築します。名前は適当にstatで。

mkvirtualenv -p `which python3.4` stat
workon stat

仮想環境ができました！

データ分析用ライブラリをインストール

ipython notebook

pip install "ipython[notebook]"

こうすれば、notebookに必要なライブラリが一気にインストールできます。

numpy & pandas

pip install numpy pandas

あまり苦労せず入るはず。

matplotlib

曲者。まずは普通にインストールしようとします。

> pip install matplotlib
Collecting matplotlib
(略)
REQUIRED DEPENDENCIES AND EXTENSIONS
(略)
png: no [pkg-config information for ‘libpng’ could not be found]
(略)

REQUIEDのところに、libpngが無いと言われるので、

sudo yum install -y libpng libpng-devel

をインストール。

もう一度pipでインストールすると、

> pip install matplotlib

入りました。

scipy

すんなり入る気配の無いscipy...。いったいどんなエラーが出るんだ...

pip install scipy

...すんなり入りました。すごい！

他

スクレイピングはpyquery

sudo yum install -y libxslt-devel libxml2-devel
pip install pyquery

となるとrequestsも外せない

pip install requests

とりあえずここまで。

参考文献

• CentOS 7.0 - Python 3.4.1 インストール（ソースビルド）！
• sudo でユーザのPATHが引き継がれないとき - secure_path, env_keep

【改訂新版】Linuxエンジニア養成読本 [クラウド時代も、システムの基礎と基盤はLinux! ] (Software Design plus)

Pythonによるデータ分析入門 ―NumPy、pandasを使ったデータ処理

歌劇「フェドラ」／愛さずにはいられぬこの思い