http://coder.tw/tags/aws-lambda/Recent content in AWS Lambda on Lin's BlogHugozh-twThu, 08 Dec 2016 00:57:01 +0000http://coder.tw/posts/how-to-make-elasticsearch-py-fast-bulk-operate/Thu, 08 Dec 2016 00:57:01 +0000http://coder.tw/posts/how-to-make-elasticsearch-py-fast-bulk-operate/<p>用 Python 操作 Elasticsearch 時不免俗的肯定會安裝官方推出的 <a href="https://elasticsearch-py.readthedocs.io/en/master/">elasticsearch.py</a>，最近在用 Python 接收 Email Log 並寫入 Elasticsearch 時有蠻多心得可以分享的，大家都知道 AWS lambda 是用執行時間算錢的，所以在撰寫 AWS Lambda 時我可說是分秒必爭，看到執行超過 0.5 秒就各種吐血，所以從最開始的 .index 一筆一筆插入資料到 Elasticsearch，到後來用 streaming_bulk 處理，最後受不了用 parallel_bulk 混合 streaming_bulk 操作，以下就來聊聊這幾種方式的差異以及地雷吧！</p>