linux – ページ 2 – IT研究所

githubの仕様変更に対応する

投稿者: utsubo 投稿日: 2018-02-23 in linux

昨日までちゃんとアクセスてきていたのですが，今日，git pushしようとするとエラーが発生。

fatal: unable to access 'http://github.com/xxxxx/yyyy.git/': error:1407742E:SSL routines:SSL23_GET_SERVER_HELLO:tlsv1 alert protocol version

1	fatal: unable to access 'http://github.com/xxxxx/yyyy.git/': error:1407742E:SSL routines:SSL23_GET_SERVER_HELLO:tlsv1 alert protocol version

ここに書いていました。SSLプロトコルはどうやら仕様から外れた模様。TLSにあげてくださいとのことです。

使っている大学のサーバのアプリケーションは古いモジュールが多く，OPENSSLもいまだに0.9.8のもの。相当古いです。。。

そこでインストールし直しますが，大学のサーバなので，ユーザ領域にインストールする必要があります。

環境

サーバ	cray スパコン
ユーザ領域	/work/$USER

OpenSSL

wget https://www.openssl.org/source/openssl-1.0.2n.tar.gz
tar zxvfp openssl-1.0.2n.tar.gz
cd openssl-1.0.2n

wget https://www.openssl.org/source/openssl-1.0.2n.tar.gz

tar zxvfp openssl-1.0.2n.tar.gz

cd openssl-1.0.2n

./config -fPIC --prefix=/work/$USER/local shared
make
make install

./config -fPIC --prefix=/work/$USER/local shared

make

make install

ここを参考に，32bitモードでコンパイルします，これはいらないかも？

setarch i386 ./config -m32 -fPIC --prefix=/work/$USER/local shared
make clean
make
make install

setarch i386 ./config -m32 -fPIC --prefix=/work/$USER/local shared

make clean

make

make install

curl

wget https://curl.haxx.se/download/curl-7.47.1.tar.gz
tar zxvfp curl-7.47.1.tar.gz
cd curl-7.47.1

wget https://curl.haxx.se/download/curl-7.47.1.tar.gz

tar zxvfp curl-7.47.1.tar.gz

cd curl-7.47.1

PKG_CONFIG_PATH=/work/$USER/local/lib/pkgconfig ./configure --prefix=/work/$USER/local --enable-libcurl-option --with-ssl=/work/$USER/local  --with-includes=/work/$USER/local/include/openssl

1	PKG_CONFIG_PATH=/work/$USER/local/lib/pkgconfig ./configure --prefix=/work/$USER/local --enable-libcurl-option --with-ssl=/work/$USER/local --with-includes=/work/$USER/local/include/openssl

make
make install

1 2	make make install

git

wget https://github.com/git/git/archive/v2.16.2.tar.gz
tar zxvfp v2.16.2.tar.gz
cd git-2.16.2
./configure CFLAGS='-I/work/$USER/local/include' LDFLAGS='-L/work/$USER/local/lib64' --prefix=/work/$USER/local --with-openssl=/work/$USER/local --without-tcltk
make 
make install

wget https://github.com/git/git/archive/v2.16.2.tar.gz

tar zxvfp v2.16.2.tar.gz

cd git-2.16.2

./configure CFLAGS='-I/work/$USER/local/include' LDFLAGS='-L/work/$USER/local/lib64' --prefix=/work/$USER/local --with-openssl=/work/$USER/local --without-tcltk

make

make install

vimでXML整形

投稿者: utsubo 投稿日: 2018-01-10 in linux

xmllintをインストール

sudo apt-get install libxml2-utils

1	sudo apt-get install libxml2-utils

.vimrcの設定

~/.vimrc

au FileType xml exe ":silent 1,$!xmllint --format --recover - 2>/dev/null"

1	au FileType xml exe ":silent 1,$!xmllint --format --recover - 2>/dev/null"

gcc6でRMecabのインストールはエラー

投稿者: utsubo 投稿日: 2017-06-14 in linux、R、自然言語処理

大学のサーバのGCCが6.2だったのでメモ。

RMeCabのインストール

> install.packages("RMeCab", repos = "http://rmecab.jp/R")

1	> install.packages("RMeCab", repos = "http://rmecab.jp/R")

エラーになる。

RMeCab.cpp:89:11: error: narrowing conversion of '229' from 'int' to 'char' inside { } [-Wnarrowing]
          0}; //形容詞

1 2	RMeCab.cpp:89:11: error: narrowing conversion of '229' from 'int' to 'char' inside { } [-Wnarrowing] 0}; //形容詞

GCC6だとエラーになるので、GCC5台にしないと駄目です。

因みにソースコードはinstall.packageのときにオプションを付けると消されないでローカルファイルに残ります。

> install.packages("RMeCab", repos = "http://rmecab.jp/R",keep_outputs=T)

1	> install.packages("RMeCab", repos = "http://rmecab.jp/R",keep_outputs=T)

ubuntu16.04で画面のlock解除

投稿者: utsubo 投稿日: 2017-06-14 in linux

Ubuntu16.04のGnomeデスクトップではデフォルトで画面のLockがOnになっています。
そのため、画面を操作しないとロックされてしまい、毎回パスワードを入力する必要があります。

この画面のlockをさせない方法は以下の通り

Application-SystemTools-Settingsを選択
Privacyを選択
ScreenLockを選択しAutomatic Screen LockをOff

CentOS5にbzip2-1.0.6をインストール

投稿者: utsubo 投稿日: 2016-07-21 in linux

未だCentOS5を使っているといろいろと不都合が生じてきます。まず、最新のアプリケーションを使おうとすると、デフォルトで入っているライブラリ群が古く全くインストールできません。

今回はCentOS5.11にbzip2-1.0.6をインストールしてみます

ダウンロード

$ cd /usr/local/src
$ wget http://www.bzip.org/1.0.6/bzip2-1.0.6.tar.gz
$ tar xzvfp  bzip2-1.0.6.tar.gz
$ cd bzip2-1.0.6

$ cd /usr/local/src

$ wget http://www.bzip.org/1.0.6/bzip2-1.0.6.tar.gz

$ tar xzvfp bzip2-1.0.6.tar.gz

$ cd bzip2-1.0.6

コンパイル

シェアードライブラリも同時にコンパイルします
まずは本体

$ make
# make install

1 2	$ make # make install

次にシェアードライブラリ

$ make -f Makefile-libbz2_so 
$ make
gcc -shared -Wl,-soname -Wl,libbz2.so.1.0 -o libbz2.so.1.0.6 blocksort.o huffman.o crctable.o randtable.o compress.o decompress.o bzlib.o
/usr/bin/ld: blocksort.o: relocation R_X86_64_32 against `a local symbol' can not be used when making a shared object; recompile with -fPIC
blocksort.o: could not read symbols: Bad value
collect2: ld はステータス 1 で終了しました
make: *** [all] エラー 1

$ make -f Makefile-libbz2_so

$ make

gcc -shared -Wl,-soname -Wl,libbz2.so.1.0 -o libbz2.so.1.0.6 blocksort.o huffman.o crctable.o randtable.o compress.o decompress.o bzlib.o

/usr/bin/ld: blocksort.o: relocation R_X86_64_32 against `a local symbol' can not be used when making a shared object; recompile with -fPIC

blocksort.o: could not read symbols: Bad value

collect2: ld はステータス 1 で終了しました

make: *** [all] エラー 1

ここでエラーが

解決方法

どうもｆPICをつけてコンパイルしないとダメなようです
本体側も修正、Makefileを修正します

CFLAGS=-Wall -Winline -O2 -g $(BIGFILES) -fPIC  # -fPICを追加
CXXFLAGS=-fPIC   # 行追加

1 2	CFLAGS=-Wall -Winline -O2 -g $(BIGFILES) -fPIC # -fPICを追加 CXXFLAGS=-fPIC # 行追加

コンパイル

$ make clean
$ make
# make install

$ make clean

$ make

# make install

次にシェアードライブラリ。Makefile-libbz2_soを修正

CXXFLAGS=-fPIC # 行追加

1	CXXFLAGS=-fPIC # 行追加

コンパイル

$ make -f Makefile-libbz2_so 
# mv libbz2.so.1.0* /usr/local/lib

1 2	$ make -f Makefile-libbz2_so # mv libbz2.so.1.0* /usr/local/lib

CentOS5.11へgcc-4.8.5をインストール

投稿者: utsubo 投稿日: 2016-07-05 in c、linux

たまたま余っていたCentOS5.11のサーバにｐｙｔｈｏｎ2.7.12をインストールし、pylabをインストールしようとするとエラー。

 error: ‘SOCK_CLOEXEC’ was not declared in this scope
    error: command 'gcc' failed with exit status 1

1 2	error: ‘SOCK_CLOEXEC’ was not declared in this scope error: command 'gcc' failed with exit status 1

どうもOSが古いと色々問題があります。

そこでこちらを参考にGCCをインストールします

ダウンロード

以下のサイトからダウンロードします。とりあえず最新版をダウンロードしました。

コンパイル

# mkdir /usr/local/gcc-4.8.5
# export LD_LIBRARY_PATH=/usr/local/gcc-4.8.5/lib:$LD_LIBRARY_PATH

1 2	# mkdir /usr/local/gcc-4.8.5 # export LD_LIBRARY_PATH=/usr/local/gcc-4.8.5/lib:$LD_LIBRARY_PATH

# bunzip2 gmp-6.1.1.tar.bz2 
# tar xvfp gmp-6.1.1.tar
# cd gmp-6.1.1
# ./configure --prefix=/usr/local/gcc-4.8.5
# make && make install

# bunzip2 gmp-6.1.1.tar.bz2

# tar xvfp gmp-6.1.1.tar

# cd gmp-6.1.1

# ./configure --prefix=/usr/local/gcc-4.8.5

# make && make install

# xz mpfr-3.1.4.tar.xz 
# cd mpfr-3.1.4
# ./configure --prefix=/usr/local/gcc-4.8.5 --with-gpm=/usr/local/gcc-4.8.5
# make && make install

# xz mpfr-3.1.4.tar.xz

# cd mpfr-3.1.4

# ./configure --prefix=/usr/local/gcc-4.8.5 --with-gpm=/usr/local/gcc-4.8.5

# make && make install

# tar zxvfp mpc-1.0.3.tar.gz 
# cd mpc-1.0.3
# ./configure --prefix=/usr/local/gcc-4.8.5 --with-gmp=/usr/local/gcc-4.8.5 --with-mpfr=/usr/local/gcc-4.8.5
# make && make install

# tar zxvfp mpc-1.0.3.tar.gz

# cd mpc-1.0.3

# ./configure --prefix=/usr/local/gcc-4.8.5 --with-gmp=/usr/local/gcc-4.8.5 --with-mpfr=/usr/local/gcc-4.8.5

# make && make install

# tar zxvfp gcc-4.8.5.tar.gz 
# cd gcc-4.8.5
# ./configure --prefix=/usr/local/gcc-4.8.5 --enable-checking=release --with-gpm=/usr/local/gcc-4.8.5 --with-mpfr=/usr/local/gcc-4.8.5 --with-mpc=/usr/local/gcc-4.8.5 --enable-languages=c,c++
# make && make install

# tar zxvfp gcc-4.8.5.tar.gz

# cd gcc-4.8.5

# ./configure --prefix=/usr/local/gcc-4.8.5 --enable-checking=release --with-gpm=/usr/local/gcc-4.8.5 --with-mpfr=/usr/local/gcc-4.8.5 --with-mpc=/usr/local/gcc-4.8.5 --enable-languages=c,c++

# make && make install

環境設定

使う際には、環境変数に入れて使い分けます

$ export LD_LIBRARY_PATH=/usr/local/gcc/lib:/usr/local/gcc/lib64:$LD_LIBRARY_PATH
$ export PATH=/usr/local/gcc/bin:$PATH
$ alias gcc="gcc-4.8.5"
$ alias g++="g++-4.8.5"

$ export LD_LIBRARY_PATH=/usr/local/gcc/lib:/usr/local/gcc/lib64:$LD_LIBRARY_PATH

$ export PATH=/usr/local/gcc/bin:$PATH

$ alias gcc="gcc-4.8.5"

$ alias g++="g++-4.8.5"

tcpdumpでパケット通信サイズを求める

投稿者: utsubo 投稿日: 2016-04-05 in linux

WebサーバとDB間の通信など、DBが他のサービスなどと共用だとそのDBへの通信量などが気になったりします。

WebサーバからDBへの通信パケットサイズをtcpdumpを使って測定してみます。

条件

DB Server: 192.168.10.100
DB Application: MySQL port 3306

測定

#	tcpdump -e -s0 host 192.168.10.100 &gt; db.txt
# ^C	 # ctrl+Cで中断
# a=0
# for i in `cat db.txt |awk '{print $13}'|sed -e 's/://'`;do let a=$a+$i;done ; echo $a
102799

# tcpdump -e -s0 host 192.168.10.100 > db.txt

# ^C # ctrl+Cで中断

# a=0

# for i in `cat db.txt |awk '{print $13}'|sed -e 's/://'`;do let a=$a+$i;done ; echo $a

102799

こんな感じでバイト数が求まります

raspberry piでWifiを固定IPで使う

投稿者: utsubo 投稿日: 2016-03-19 in linux、raspberrypi

ハードウエア

raspberry pi B+

wifiアダプタ　WNG150U

OS

RASPBIAN JESSIE

設定

ハードウエアの確認

$ lsusb
Bus 001 Device 004: ID 04bb:094c I-O Data Device, Inc.

1 2	$ lsusb Bus 001 Device 004: ID 04bb:094c I-O Data Device, Inc.

ESSIDの確認

$ sudo iwlist wlan0 scan | grep ESSID
										ESSID:"ESSID"

1 2	$ sudo iwlist wlan0 scan \| grep ESSID ESSID:"ESSID"

wpa_supplicant.conf

$ sudo su 
#	chmod 660 root% chmod 660 /etc/wpa_suoplicant/wpa_supplicant.comf
# wpa_passphrase "SSID" "KEY" >> /etc/wpa_supplicant/wpa_supplicant.conf
# cat /etc/wpa_supplicant/wpa_supplicant.conf
ctrl_interface=DIR=/var/run/wpa_supplicant GROUP=netdev
update_config=1
network={
	ssid="SSID"
	#psk="KEY"
	psk=ハッシュ化されたキー
}

$ sudo su

# chmod 660 root% chmod 660 /etc/wpa_suoplicant/wpa_supplicant.comf

# wpa_passphrase "SSID" "KEY" >> /etc/wpa_supplicant/wpa_supplicant.conf

# cat /etc/wpa_supplicant/wpa_supplicant.conf

ctrl_interface=DIR=/var/run/wpa_supplicant GROUP=netdev

update_config=1

network={

ssid="SSID"

#psk="KEY"

psk=ハッシュ化されたキー

}

wpa_supplicant.confの編集

ctrl_interface=DIR=/var/run/wpa_supplicant GROUP=netdev
update_config=1
network={
	ssid="SSID"
	proto=WPA2
	key_mgmt=WPA-PSK
	pairwise=TKIP CCMP
	group=TKIP CCMP
	#psk="KEY"
	psk=ハッシュ化されたキー
	scan_ssid=1
}
/etc/dhcpcd.conf
>||

interface wlan0
static ip_address=192.168.11.21/24
static routers=192.168.11.254
static domain_name_servers=192.168.10.1

ctrl_interface=DIR=/var/run/wpa_supplicant GROUP=netdev

update_config=1

network={

ssid="SSID"

proto=WPA2

key_mgmt=WPA-PSK

pairwise=TKIP CCMP

group=TKIP CCMP

#psk="KEY"

psk=ハッシュ化されたキー

scan_ssid=1

}

/etc/dhcpcd.conf

>||

interface wlan0

static ip_address=192.168.11.21/24

static routers=192.168.11.254

static domain_name_servers=192.168.10.1

こんな感じでリブート

 $ ifconfig
eth0			Link encap:イーサネット	ハードウェアアドレス b8:27:eb:9c:30:07 
					inetアドレス:192.168.11.20 ブロードキャスト:192.168.11.255	マスク:255.255.255.0
					inet6アドレス: 240f:79:a8f8:1:b289:a029:fc2e:6ac/64 範囲:グローバル
					inet6アドレス: fe80::7474:4b62:ad78:2a00/64 範囲:リンク
					UP BROADCAST RUNNING MULTICAST	MTU:1500	メトリック:1
					RXパケット:2704 エラー:0 損失:594 オーバラン:0 フレーム:0
					TXパケット:607 エラー:0 損失:0 オーバラン:0 キャリア:0
			衝突(Collisions):0 TXキュー長:1000 
					RXバイト:161138 (157.3 KiB)	TXバイト:88612 (86.5 KiB)

lo				Link encap:ローカルループバック	
					inetアドレス:127.0.0.1 マスク:255.0.0.0
					inet6アドレス: ::1/128 範囲:ホスト
					UP LOOPBACK RUNNING	MTU:65536	メトリック:1
					RXパケット:140 エラー:0 損失:0 オーバラン:0 フレーム:0
					TXパケット:140 エラー:0 損失:0 オーバラン:0 キャリア:0
			衝突(Collisions):0 TXキュー長:0 
					RXバイト:11756 (11.4 KiB)	TXバイト:11756 (11.4 KiB)

wlan0		 Link encap:イーサネット	ハードウェアアドレス 34:76:c5:5d:7e:6c 
					inetアドレス:192.168.11.21 ブロードキャスト:192.168.11.255	マスク:255.255.255.0
					inet6アドレス: fe80::d437:7e2c:6380:2ccc/64 範囲:リンク
					inet6アドレス: 240f:79:a8f8:1:98a1:f100:4d2b:b96b/64 範囲:グローバル
					UP BROADCAST RUNNING MULTICAST	MTU:1500	メトリック:1
					RXパケット:3501 エラー:0 損失:632 オーバラン:0 フレーム:0
					TXパケット:119 エラー:0 損失:3 オーバラン:0 キャリア:0
			衝突(Collisions):0 TXキュー長:1000 
					RXバイト:582397 (568.7 KiB)	TXバイト:20034 (19.5 KiB)

$ ifconfig

eth0 Link encap:イーサネットハードウェアアドレス b8:27:eb:9c:30:07

inetアドレス:192.168.11.20 ブロードキャスト:192.168.11.255 マスク:255.255.255.0

inet6アドレス: 240f:79:a8f8:1:b289:a029:fc2e:6ac/64 範囲:グローバル

inet6アドレス: fe80::7474:4b62:ad78:2a00/64 範囲:リンク

UP BROADCAST RUNNING MULTICAST MTU:1500 メトリック:1

RXパケット:2704 エラー:0 損失:594 オーバラン:0 フレーム:0

TXパケット:607 エラー:0 損失:0 オーバラン:0 キャリア:0

衝突(Collisions):0 TXキュー長:1000

RXバイト:161138 (157.3 KiB) TXバイト:88612 (86.5 KiB)

lo Link encap:ローカルループバック

inetアドレス:127.0.0.1 マスク:255.0.0.0

inet6アドレス: ::1/128 範囲:ホスト

UP LOOPBACK RUNNING MTU:65536 メトリック:1

RXパケット:140 エラー:0 損失:0 オーバラン:0 フレーム:0

TXパケット:140 エラー:0 損失:0 オーバラン:0 キャリア:0

衝突(Collisions):0 TXキュー長:0

RXバイト:11756 (11.4 KiB) TXバイト:11756 (11.4 KiB)

wlan0 Link encap:イーサネットハードウェアアドレス 34:76:c5:5d:7e:6c

inetアドレス:192.168.11.21 ブロードキャスト:192.168.11.255 マスク:255.255.255.0

inet6アドレス: fe80::d437:7e2c:6380:2ccc/64 範囲:リンク

inet6アドレス: 240f:79:a8f8:1:98a1:f100:4d2b:b96b/64 範囲:グローバル

UP BROADCAST RUNNING MULTICAST MTU:1500 メトリック:1

RXパケット:3501 エラー:0 損失:632 オーバラン:0 フレーム:0

TXパケット:119 エラー:0 損失:3 オーバラン:0 キャリア:0

衝突(Collisions):0 TXキュー長:1000

RXバイト:582397 (568.7 KiB) TXバイト:20034 (19.5 KiB)

認識されました

expectの書き方

投稿者: utsubo 投稿日: 2016-02-03 in linux

よく忘れるので備忘録

#!/bin/bash
my_ssh(){
/usr/bin/expect &lt;&lt; Eof
set timeout -1
spawn /usr/bin/ssh -o stricthostkeychecking=no root@hostname bash /path/to/script.sh
match_max 100000
expect -exact &quot;root@hostname&#039;s password: &quot;
send -- &quot;password\r&quot;
expect eof
Eof
}
my_ssh

#!/bin/bash

my_ssh(){

/usr/bin/expect << Eof

set timeout -1

spawn /usr/bin/ssh -o stricthostkeychecking=no root@hostname bash /path/to/script.sh

match_max 100000

expect -exact "root@hostname's password: "

send -- "password\r"

expect eof

Eof

}

my_ssh

docker buildのエラー

投稿者: utsubo 投稿日: 2016-01-12 in docker、linux

dockerで今までうまくいっていたBuildが突然落ちるようになったりすることがあります

$ docker build .
..
Err http://archive.ubuntu.com/ubuntu/ trusty-security/main libnss3-nssdb all 2:3.19.2.1-0ubuntu0.14.04.1
404	Not Found [IP: 91.189.88.149 80]
Err http://archive.ubuntu.com/ubuntu/ trusty-security/main libnss3 amd64 2:3.19.2.1-0ubuntu0.14.04.1
404	Not Found [IP: 91.189.88.149 80]
Fetched 108 MB in 3min 14s (555 kB/s)
Unable to correct missing packages.
[91mE: Failed to fetch http://archive.ubuntu.com/ubuntu/pool/main/n/nss/libnss3-nssdb_3.19.2.1-0ubuntu0.14.04.1_all.deb	404	Not Found [IP: 91.189.88.149 80]
E: Failed to fetch http://archive.ubuntu.com/ubuntu/pool/main/n/nss/libnss3_3.19.2.1-0ubuntu0.14.04.1_amd64.deb	404	Not Found [IP: 91.189.88.149 80]

$ docker build .

Err http://archive.ubuntu.com/ubuntu/ trusty-security/main libnss3-nssdb all 2:3.19.2.1-0ubuntu0.14.04.1

404 Not Found [IP: 91.189.88.149 80]

Err http://archive.ubuntu.com/ubuntu/ trusty-security/main libnss3 amd64 2:3.19.2.1-0ubuntu0.14.04.1

404 Not Found [IP: 91.189.88.149 80]

Fetched 108 MB in 3min 14s (555 kB/s)

Unable to correct missing packages.

[91mE: Failed to fetch http://archive.ubuntu.com/ubuntu/pool/main/n/nss/libnss3-nssdb_3.19.2.1-0ubuntu0.14.04.1_all.deb 404 Not Found [IP: 91.189.88.149 80]

E: Failed to fetch http://archive.ubuntu.com/ubuntu/pool/main/n/nss/libnss3_3.19.2.1-0ubuntu0.14.04.1_amd64.deb 404 Not Found [IP: 91.189.88.149 80]

こういう時には一度キャッシュをクリーンすれば治ります

$ docker --no-cache build .

1	$ docker --no-cache build .