ビッグデータの取り扱いについて話せます

エキスパート

氏名:開示前


■ 具体的な経験の内容
・高度なSQL構築やHive・Redshift・Mysql等のデータベースについての深い知見
データ移行業務の実務設計や様々なクライアントのデータ取り込み業務を経験し、多種多様なフォーマットの生データをシステム仕様にあわせて変換するというデータサイエンティストとしての根幹の業務に従事。
変換・加工したレコード総数は、1000億以上になります。

■ 実績や成果
・1億件を超えるレベルのレコード変換・加工
・1テーブルあたり数十億レコードのシステム移行

■ 関連する論文やブログ等があればURL
https://note.com/rei_7010/n/n486a1f703cfe

■お役にたてそうと思うご相談分野
・1億件以上のデータの取り扱い
・SQLでのチューニング方法
・Hive・Redshift・Mysql等のデータベース別対処方法

■その他
地域: 福岡/ニアショア拠点 or 本社
役割: プロジェクトリーダー/技術サイド
規模: 拠点立ち上げ~従業員500名までを経験

プロフィール 詳細を見る


氏名:開示前

IT業界で20年以上業務に従事している現役エンジニアです。
大小問わず、多くのプロジェクト・システムの開発に携わり、様々な役割を経験しました。

今までの概要を以下に記載致しました。ご確認いただけますと幸いです。よろしくお願いします。
・2021年~現在 
日本最大のPV・UUを誇るメディアサイトやECサイトを運営する企業にて、国内最大級のAI・ビッグデータ基盤の構築・運用業務に従事するエンジニアです。
また、社内のビジネスアイデアコンテストで大賞を受賞し、特許を取得したりもしました。

・2021年~2021年
WEB系受託開発企業にて、クライアント様のコーポレートサイトやWEBシステム等の管理・開発を担当。

・2016年~2021年
データマーケティング&マーケティングオートメーション ツール(SaaS)の開発・販売を行っているスタートアップ企業にオープニングスタッフとして参画。
複数部門立ち上げに従事し、業務やマニュアルの作成・整備、メンバー教育等のマネジメントを担当。
なお、入社時は出来たばかりの会社であったため、場所も人も業務マニュアルも業務ルールもないような状態でした。
また、データマーケティングツールの導入業務として、Hive・Presto・Redshift・Mysql等のデータベースで数百万~数億のレコードを分析し、データの連携・取込・加工・統合を実施。

2011年~2016年:
小売業の社内SEとして、流通システムの企画・開発・保守運用やIT機器やサーバの管理業務を担当。
また、オフシェアチームのプロジェクト管理、メンバーマネジメント等も担当する。

2003年~2009年:
SES企業に所属し、金融・公共・流通等システムの開発・保守業務に従事。

2000年~2003年:
消費者金融企業に所属し、営業及び回収業務に従事


職歴

LINEヤフー株式会社

  • 一般 2023/10 - 現在

YAHOO

  • 一般 2021/12 - 2023/9

ウィングドア

  • PM 2021/4 - 2021/9

株式会社Techjin

  • PL 2019/4 - 2021/3
  • PL 2017/10 - 2019/3
  • PL 2016/11 - 2017/10

株式会社トライアルカンパニー

  • 2014/3 - 2016/9
  • PL 2011/1 - 2014/3

株式会社アドヴァンスト・インフォーメイション・デザイン

  • 2005/8 - 2009/12

トータルワークス株式会社

  • 2003/4 - 2005/7

アイフル株式会社

  • 2000/4 - 2002/6

このエキスパートのトピック

謝礼金額の目安

問い合わせ

取引の流れ