ひよこ、通勤中。

通勤中の電車の中でひよこは何を思うのか。

dockerメモ

コンテナ起動 $ docker run -d -it ubuntu:16.04 bash ※ ubuntu:16.04はdockerイメージ名 コンテナのターミナルに接続 $ docker exec -it ${CONTAINER_ID} bash コンテナの状態をコミット $ docker commit ${CONTAINER_ID} タグ付け $ docker tag ${commit番…

誕生日から年齢を出す

import datetime now = datetime.datetime.now() df.loc[:, 'birthday_dt'] = pd.to_datetime (df['birthday']) df.loc[:, 'age'] = (now - df['birthday_dt']).astype('

n * mのグラフを書く

row, col = 10, 3 fig = plt.figure(figsize=(col * 5, row * 4)) for i, c in enumerate(df.columns): ax = fig.add_subplot(row, col, i + 1)

いつもの円グラフ

s.plot.pie(pctdistance=0.6, labeldistance=0.3, textprops={'color': "white", 'weight': "bold", 'fontsize': 12}, wedgeprops={'linewidth': 2,'edgecolor':"white"},)

自分流jupyter notebookの1セル目

import collections import pathlib # データ処理周り import numpy as np import pandas as pd from IPython.core.display import display # 可視化ライブラリ import matplotlib.pyplot as plt from matplotlib import cm # colormap import seaborn as sn…

いつものHML分析

d = access_features['count'].sort_values().reset_index() d.columns = ['base_index', 'count'] d = d.reset_index() from sklearn.cluster import KMeans from matplotlib import cm kmeans = KMeans(n_clusters=3) kmeans.fit(d[['count']]) d.loc[:, '…

pandasで日時周り

dfにtimeカラムがあることを想定 文字列 -> datetime型 timeが2017-01-01とかの文字列だったとき pd.to_datatime(df['time']) でだいたいよしなにparseしてくれる unixtime -> datetime型 timeがunixtimeだったとき pd.to_datatime(df['time'], unit='s') 一…

数百字のテキストを分類/クラスタリングしてみる with Keras

参考文献メモ。 分類 ベース: Sequence Classification with LSTM Recurrent Neural Networks in Python with Keras - Machine Learning Mastery python - Keras LSTM multiclass classification - Stack Overflow 短文ならLSTM, 長文ならRNNが良いという噂…

PyCharmでRoot以外にもPythonPathを追加したい時

PyCharm: 2017.1バージョンPreference > Project: Project Structure > パスを通したいフォルダを選択して「Sources」ボタンをクリック

postgresqlでcsvファイルから一括upsert

全部1行ずつupsertしてたら100万件で数時間かかったので、 他の解決策を考える。 1時テーブルを作成しupdate + insert PostgreSQL CSV 取り込み upsert | odekakeshimasyo.me copy from => tmp table tmp tableからUpdate tmp tableからUpdateした分を削除し…

pythonの型に関する話

関数アノテーション: https://www.python.org/dev/peps/pep-3107/ 変数アノテーション: https://www.python.org/dev/peps/pep-0526/ Type Hinting: https://www.python.org/dev/peps/pep-0484/

Pythonのdocstringの書き方について

3つの書き方 google style: Example Google Style Python Docstrings — napoleon 0.6.0 documentation numpy style: Example NumPy Style Python Docstrings — napoleon 0.6.0 documentation reST: Miscellaneous markup — Sphinx 1.6.5+ documentation reSt…

docker-composeよく使うコマンド

コマンド コマンド 意味 docker-compose build docker-compose.ymlの中身を変更したら実行する docker-compose up 起動 docker-compose run {サービス名} {command} コマンドを実行する docker-compose rm {サービス名} containerの削除。buildした内容を破…

NLP系調べごとのメモ

[筑波ウェブコーパス|教育サービス|日本語・日本事情遠隔教育拠点](http://www.intersc.tsukuba.ac.jp/~kyoten/twc.html#.WcSXEdNJYdV)

digdag使い方メモ

REST API のエンドポイント ドキュメントに情報がないので頑張ってコードから探した division: 5d235dc9d281d2d50f6a2193ad2a312ec51d18ca Path GET /api/admin/attempts/{id}/userinfo GET /api/attempts GET /api/attempts/{id} GET /api/attempts/{id}/re…

Tresure Data (presto) よく使うものリスト

直近n日間, n日前 TD_TIME_RANGE(time, TD_TIME_ADD(CAST(TO_UNIXTIME(NOW()) AS BIGINT), '-30d', 'JST'), NULL, 'JST') Presto 型一覧 7.1. Data Types — Presto 0.184 Documentation

DeepLearningに関するメモ

まずはこれ読む ゼロから作るDeep Learning ―Pythonで学ぶディープラーニングの理論と実装作者: 斎藤康毅出版社/メーカー: オライリージャパン発売日: 2016/09/24メディア: 単行本(ソフトカバー)この商品を含むブログ (17件) を見る https://system.jpaa.o…

文字認識関連の情報まとめ

友人に教えてもらったのでメモ 文字認識はCNNで終わるのか? from Seiichi Uchida www.slideshare.netTPAMIのサーベイ論文: http://www.ucassdl.cn/publication/ye-PAMI2015.pdfもっと新しい情報: GitHub - chongyangtao/Awesome-Scene-Text-Recognition: A …

「ちょっと、男子ちゃんと歌ってよ」現象

合唱練習中に不真面目な男子生徒に対して 「ちょっと、男子ちゃんと歌ってよ!」 って学級委員長の女の子が言う奴。 別に、歌じゃなくて、掃除でもなんでもいいけど、漫画とかでもたまにあるよね。 不真面目に見えてる人に対して高圧的に「◯◯しなさいよ!」…

PCの容量食ってるフォルダを探す

今いるディレクトリ以下で容量食ってるやつわかる。 よくやるのでメモ。 du -d 1 -m | sort -rn | head -10 こんな感じでかえってくる du -d 1 -m | sort -rn | head -10 16:26:47 133558 . 40122 ./Library 28658 ./Music 23982 ./Pictures ...

データ分析おしごとtips

進捗共有Meetingの極意 ゴールイメージの共有(OP) 前提条件(1話) 前回までの進捗(前回のラブライブ) 今回どこまで進んだのか(本編) 分析提案三大大事な質問 「◎◎って手法がすごいらしいからうちもそれでやりたい」 というような場合に対応するときの大切な認…

ゲーム用にSIMフリーのAndroid端末が欲しい

ゲームがしたいだけなので、それほどのスペックは求めてない、安いのがいい。 調べてみた感じasusのZenFoneのこの辺りがコスパよさそう。 ※2017/04/22現在 どっちにするか考え中。 エイスース ZenFone 3 Max ゴールド ZC520TL-GD16 出版社/メーカー: Asus メ…

フィンランド・ヘルシンキ旅行

ヘルシンキ旅行めも 4月のヘルシンキは寒い ヘルシンキは夏が観光シーズンらしい。 行ってみてわかったけど、4月は気温が最低-5°C 最高4°Cとかで、歩いて観光するにはきつい。 あったかいコートをもっていったけど全然足りなくて、この時期観光するならマフ…

エストニア日帰り旅行

フィンランド・ヘルシンキからエストニアに日帰り旅行。 VIKING LINEという会社の船で往復30ユーロ弱、片道1時間45分。安いし近い。 ※ただし出発30分以上前にターミナルについてチケットの発券・乗船する必要がある。 前日にインターネットで簡単に予約でき…

はてなブログ(markdown記法)でtexで数式を書く(基本編)

色々エスケープされてしまって困る。 へんなかきかたが必要あるやつ [tex:\sqrt\\[n\\]{x}] [] のエスケープには\が2つ。 下付き文字 [tex:N\_{ab} = M\_{ab}] markdownには_強調表現_としての機能があるため、 2つ以上ある場合は、 のエスケープが必要。 …

本を読むときの環境

本や電子書籍読みながら勉強するとき、 ノートPCスタンドを使うと角度ができて読みやすいしとても便利。

東京の冬は乾燥がやばい

とりあえず肌は痛いし、カラーで傷んだ髪の広がりがやばい 髪の毛のトリートメント系は有名所の これつかってるラサーナ 海藻ヘアエッセンス Mサイズ 75ml出版社/メーカー: ヤマサキ発売日: 2015/03/27メディア: ヘルスケア&ケア用品この商品を含むブログを…

漫画を1巻だけレンタルしまくった

最近、漫画をレンタルで色々読んでる。 とりあえず良さそうなのを1巻だけ借りまくって、 面白かった奴の続巻を借りて、たまらなく好きになったやつだけ最新刊を買う。これをしてるとほどほどのお値段で仕事後の生活が超充実する。大量に借りた中から良かった…

ブルーライト酔いと乗り物酔いするようになった

昔は飛行機にのったって酔ったことなかった。20代前半がけっぷちの今、東京メトロにさえ乗るのが辛い。酔う。さらに悪いことに携帯やパソコンをみてると気持ち悪くなるようになった。これは乗り物酔いとは違う気がするけど。電車でスマホでホットエントリや…

1始まりでも0始まりでもない時計

AM11:59の次の1分なぜPM12:00なのか。 日本ではAM11:59の1分後はPM0:00だと思う人が多いと思う。昨年アメリカ留学中友人に、 「16:00に行くね」ってメールしたら 「16:00って何時?6:00のこと?」みたいな反応をされた。「PM4:00のことだよ」って言ったらび…