読者です 読者をやめる 読者になる 読者になる

astamuse Lab

astamuse Labとは、アスタミューゼのエンジニアとデザイナーのブログです。アスタミューゼの事業・サービスを支えている知識と舞台裏の今を発信しています。

Spark 2.0を使ってみた

山縣です。 新年あけましておめでとうございます。 本年もよろしくお願いいたします。 去年弊社の福田が CDH のアップグレードをしてくれてSpark が1.6系になるとともに、並行してSparkの2.0が使えるようになりました。(Spark2.0の導入については福田の記事…

Play Framework 2.5で入力チェックしてみる

アスタミューゼ 開発部のYanagitaです。 Play Frameworkの記事も3回目になります。 連載的な形で続けているので過去分のリンクを貼っておきます。 Play Frameworkが初めての人や前回の見直しはそちらへ lab.astamuse.co.jp lab.astamuse.co.jp 今回は前回予…

Play Framework 2.5でPostリクエストを処理してみる

アスタミューゼ 開発部のYanagitaです。 今回は前回執筆したPlay Frameworkの続きで、 Play Frameworkを使用してPost送信したデータを受け取るところを書きます。 事前準備 Play Frameworkの実行環境の設定がまだの方はこちらを参照 Postデータを受け取って…

1,100万文書×480万キーワード。コンパクト且つ高速な辞書マッチングのはなし

はじめまして。開発・インフラ部、福田です。 分散処理環境、ミドルウェアの整備と運用、ELT/ETL、R&D、雑用を担当しています。 舞台裏から眺めるAstamuse.com Astamuse.comは、イノベーションを起こすあなたの為のサイトです。そこでは国内約1,100万件の特…

Spark の driver で起きたエラーとその対応

はじめまして山縣です。 私のチームでは弊社のサービスやコンサルティングなどで必要となる特許やその他さまざまなデータを収集・解析しています。特許情報などのデータはデータサイズとして大規模であったり複雑だったりすることもあり Hadoop なども含めた…

Play Framework 2.5を使ってみる

アスタミューゼ 開発部のYanagita@Scala歴1年です。 弊社が運用する転職サイトのアプリケーション開発を担当しています。 ちなみに、弊社が運営している転職サイト数は300サイトを超えていて、 国内トップクラスになります。 現在は転職サイトのリプレースを…

Copyright © astamuse company, ltd. all rights reserved.