2013-01-01から1年間の記事一覧

mysqlのコマンド

mysql周りの調査で使ったコマンドめも SHOW STATUS ステータス確認 SHOW VARIABLES 設定されている変数値確認 SHOW [FULL] PROCESSLIST 実行中のプロセスリストを表示 SET [GLOBAL/SESSION] (変数名)=(値) 変数値を設定する

RPM関連のコマンド

RPM関連のコマンド rpm -qa | grep hoge インストールされているRPM確認 grep キーワードで絞込み rpm -e hoge RPMアンインストール rpm -ivh hoge RPMインストール

Hiveでファイルの圧縮

ファイルの圧縮 Bzip2 set hive.exec.compress.output=true; set mapred.output.compression.type=BLOCK; set mapred.output.compression.codec=org.apache.hadoop.io.compress.BZip2Codec; Gzip set hive.exec.compress.output=true; set mapred.output.com…

HIVEのテーブル定義の確認

LanguageManual DDL - Apache Hive - Apache Software Foundation テーブル定義の確認方法 HIVEで作成したテーブルのファイルフォーマットや構成を確認したい場合 hive > desc [ extended / formatted ] テーブル名 extendedで詳細説明表示 formattedで見や…

BASHで二次元配列

BASHで二次元配列もどきの作り方 #!/bin/bash arrays=( "aaa 111" "bbb 222 333" "ccc" ) for array in "${arrays[@]}" do echo "${array}" for hoge in "${array}" do echo "${hoge}" done done 結果 aaa 111 aaa 111 bbb 222 333 bbb 222 333 ccc ccc テス…

リターンコードを取得

BASHでリターンコードを取得 $?で直前のコマンドのリターンコードを取得できる mkdir hoge echo "$?" リターンコード 成功 -> 0 失敗 -> 1 リターンコードの受け取り方 実行に失敗した場合に呼び出し元に返り値をそのまま返したい時 #!/bin/bash function …

Perlの変数宣言

our, my, local our. パッケージ変数 スコープの外からでもパッケージ名をつけて参照できる my. レキシカルスコープ スコープ内で参照可能な変数を宣言 local. ダイナミックスコープ グローバルな変数がいた場合一時スタックに退避 実行時のスコープ内で宣言…

Hiveいろいろ

hiveめも Hive SQL テーブル作成 CREATE TABLE [テーブル名] (名前 型,名前 型...) パーティション PARTITIONED BY (名前 型) ファイルフォーマット ROW FORMAT DELIMITED FIELDS TERMINATED BY '\t' LINES TERMINATED BY ' ' tsv形式 ファイル形式 STORED A…

概要

技術めも