クラウドデータウェアハウス(Amazon Redshift)のコスト削減した話

グループデータマネジメント部の須藤です. 日々の業務はデータ基盤の開発や運用を行っています. 今回はAWSのクラウドデータウェアハウスAmazon Redshiftの費用削減に取り組んだのでそこで得た知見を共有したいと思います. クラウドデータウェアハウスはス…

2024年度新卒の非技術研修 ~研修終えてもまだビギナー~

はじめに こんにちは。本記事では、2024年に新卒エンジニアとして新たにKADOKAWA Connected(以下KDX)の一員となった6人が新卒研修の様子をお届けします。弊社の研修は3ヶ月にわたって実施されますが、最初の2週間は「非技術研修」と題して、KADOKAWAグルー…

SQL クエリ (on Treasure Workflow) の単体テストを少ない手間で実現している話

Integrated Data Service 部の中野 (takamoto) です。現在は主にデータプラットフォーム上のデータパイプラインの開発・運用をメインで担当しています。 私の所属しているチームでは Snowflake を中心に構築されたデータパイプラインを主に管理していますが…

足掛け2年半の ADR 活用事例紹介 〜 ADR から始める設計ドキュメント改善

Integrated Data Service 部の中野 (takamoto) です。2021~2022年頃は主に データプラットフォーム統合プロジェクトの紹介 - KADOKAWA Connected Engineering Blog で紹介されていたデータプラットフォーム開発の認証認可の開発に関わっていました。また、こ…

みんな見積もりってどうやってるの?「見積もりソン」をやってみた

はじめに こんにちは、Engineer Lab部所属の渡辺です。 この記事では、部内で行う独自の勉強会イベントについてご紹介させていただこうと思います。 私の部署ではKADOKAWAに関係するシステムの新規開発や改修、保守運用などを行っていて、プロジェクトやシス…

Web APIのログ保存先をCloudWatch LogsからS3に変更してコストカットした話

大量イベントを記録するWeb APIが必要になった背景 Web APIシステムのアーキテクチャ 発生した問題 問題への対応 保存先の変更 運用の変更 小噺 S3のオブジェクトサイズとFluentbitのトレードオフ Athena + QuickSight料金の話 まとめ img{ display: inline-…

Google 社の Japan Executive Summit に行ってみた

こんにちは、Chief Data Officer(CDO)の塚本です。 この記事では、2023-10-24〜2023-10-25にアメリカ合衆国カリフォルニア州マウンテンビューで行われたJapan Executive Summitに参加した経験をもとに KADOKAWA Connectedにおける海外出張について マウン…

1dayワークショップ「業務レベルのソースコード体験会」の紹介

こんにちは! Engineer Lab部の五味です。この記事は、2024年卒/2025年卒の学生・就活生を対象に、昨年12月から今年5月にかけて計3回開催した1dayワークショップ「業務レベルのソースコード体験会」の紹介です。 オンラインで行われるコーディング・講義・…

2023年新卒エンジニア研修 〜非技術編〜

はじめに はじめまして!KADOKAWA Connected(KDX)2023年新卒社員6名です! 入社してから2週間ほどでICTツールの使い方や事業紹介など非技術系の研修が終わりました。研修はレクリエーションを除き、オンラインで行われました。 そこで、2週間の非技術研修を…

Snowflakeのアクセス制御を活用したデータ基盤での権限管理の事例紹介

KADOKAWA Connected / ドワンゴの @saka1 と Integrated Data Service 部の中野 (takamoto) です。 私達の部署では主にSnowflakeを中心にしたデータ基盤(データプラットフォーム)の開発保守を行っています。この記事では、Snowflakeの機能を駆使してデータ…

大量イベントを記録するWeb APIの設計から実装まで

KADOKAWA Connected / ドワンゴの @saka1です。 私の部署ではデータ分析に関する様々なシステムを開発していますが、最近とあるデータ入力APIシステムの開発を行いました。記事執筆時点ではそのシステムへの移行が段階的に行われている最中です。 行ったこと…

KADOKAWA社内で、Python活用によるデータ分析が自然に普及していくデジタル講習会を実施した話

KADOKAWA Connected IDS部コンサルティングの木村です。 この記事では、IDS部が、KADOKAWA社内でデータリテラシー向上を目指す事業部に向けてデジタル講習会を実施したこと(2021年冬期、および2022年冬期の2回実施)についてのお話をします。 この記事を通…

Snowflake上のデータ利用状況を可視化するツールをStreamlitで試作した話

KADOKAWA Connected / ドワンゴの @saka1 です。最近はデータ基盤の保守等に携わっています。 今回はStreamlitというWebアプリケーションフレームワークを使い、Snowflake上のテーブルの利用状況を測定するダッシュボードを作ってみました。 データの需要は…

エンジニアも非エンジニアも。KADOKAWAグループ横断で初のAI勉強会開催までの裏側と学び

KADOKAWA Connected / ドワンゴの @saka1 です。 この記事では、しばらく前に開催した「AIによる画像生成勉強会」について紹介します……といっても勉強会のセッション内容にはあまり触れません。勉強会をどう開催したかや、開催した結果どうであったかなど、…

新卒採用試験にWebコードテストを導入した話

HR

はじめまして、HR課の後藤です。本日は、新卒採用関連のお話です。先日、2024年新卒採用の募集要項を公開しました。就職活動中の学生の方はぜひ求人情報もご覧ください。 最近の私の仕事は、新卒採用の説明会運営や、1dayワークショップの準備などです。また…

古くて大きなTableau ServerをモダンなTableau Serverに統合した話

Integrated Data Service部 の @Matsushiman です。 普段はIDS部のデータエンジニアとしてニコニコ動画の数値解析ツールの開発やKADOKAWAグループ向けデータウェアハウスの開発、Tableau Serverのオンプレミスでのホスティングやライセンス管理などを行って…

エンジニア向けに非技術研修プログラムを整備している話

こんにちは!KADOKAWA Connected(KDX)Integrated Data Service(IDS)部 塚本です。 この記事は何? 最近、テック企業のエンジニア研修内容の公開が盛んです。 blog.cybozu.io mixi-developers.mixi.co.jp KADOKAWAグループのDXを推進するテック企業である…

データ基盤の障害状況をTableauで可視化した話

こんにちは!Integrated Data Service部の塚本です。 普段「大した話でなくとも情報発信をしていこう」とメンバーに言っているのですが、自らがファーストペンギンにならないと続きづらいだろうということで投稿することにしました。 この記事を3行でまとめ…

Snowflakeで複数のSQLをまとめて実行するストアドプロシージャを作った話

KADOKAWA Connected / ドワンゴの @saka1 です。 最近は、ドワンゴ・KADOKAWA向けに提供しているデータプラットフォームの移行作業を行っています。 engineering.kdx.co.jp 記事執筆時点(2022年3月初旬)では、移行作業はそろそろ佳境あるいは完了というと…

機械学習モデルによる時系列予測システムの開発

はじめに Engineer Lab部所属の夏目です。普段はWebサイトのアクセス情報を含むビッグデータの分析を行なって、ビジネスに有効な知見を引き出すデータサイエンティストの業務と、自然言語処理モデル(BERT、他)やパブリッククラウドサービスの機械学習サー…

Engineer Lab部の新卒LT発表会と部内懇親会の紹介

はじめに はじめまして! KADOKAWA Connectedに2021年新卒として入社したEngineer Lab部の池田です。 Engineer Lab部は、KADOKAWA Connected内でシステム開発を担っている部署*1で、私を含めて5名の新卒が配属されました。 Engineer Lab部の業務は基本的にフ…

社内DBaaSで障害対応演習をやってみた

はじめに KCS部DSREチームのromです。 KCS部は、KADOKAWAグループ向けプライベートクラウド(KADOKAWA Cloud Service、以下KCS)を提供しており、主な利用者は株式会社ドワンゴがサービスを提供している「ニコニコ」です。 私の所属しているDSREチームでは、My…

データプラットフォーム統合プロジェクトの紹介

KADOKAWA Connected / ドワンゴの @saka1 です。 少し前までは株式会社ドワンゴのWebバックエンドエンジニア的な仕事をしていたのですが、最近は出向1してKADOKAWAグループのDXを推進する戦略子会社である株式会社KADOKAWA Connected(以下KDX)でデータ分析…

総合エンターテインメントから創造される日本の文化をエンジニアリングで支えるやりがい|KADOKAWA Connectedで働く意義って何だろう

現在、KADOKAWA Connectedでは「プロダクトマネージャー」「システムアーキテクト」「エンタープライズアーキテクト」「ICTコンサルタント」のポジション採用を進めています。働き方改革やデジタルトランスフォーメーション(DX)の推進、そしてバリューチェ…

事業会社におけるDXの秘訣 - ボトムアップのコミュニケーション設計の肝

はじめに KADOKAWA ConnectedにてCustomer Successチームをリードしています菊本です。私達のチームは、KADOKAWAグループおよびKDX道場のお客様に対して、生産性を高める働き方改革の支援を手掛けています。 以前、事業会社におけるDXの秘訣 - ツールをてこ…

KADOKAWAグループでのデータエンジニアリングを担うIntegrated Data Service部の仕事とは?

こんにちは。KADOKAWA Connected 社長室チームです! KADOKAWA Connectedの仕事の全体像をご紹介することを目的としたインタビュー企画の第5弾。今回は、KADOKAWAグループでのデータエンジニアリングを担うIntegrated Data Service部の部長の塚本さんにお話…

KADOKAWA Connected ではじめての新卒チーム開発研修をフルリモートでやってみた話

はじめに KADOKAWA Connected でソフトウェアエンジニアをしている福地です。 2021年4月に第1期新卒として入社頂いた新卒エンジニアのチーム開発研修を5月から6月までの約2ヶ月で実施しました。 チーム開発研修は、入社後の4月に行われた非技術研修と技術研…

KADOKAWA Connectedのシステム開発を担うEngineer Lab部の仕事とは?

こんにちは。KADOKAWA Connected 社長室チームです! KADOKAWA Connectedの仕事の全体像をご紹介することを目的としたインタビュー企画の第4弾。今回は、当社でのシステム開発を担うEngineer Lab部の小林さんにお話を伺いました! ー簡単に小林さんの普段の…

社内RDBMSコミュニティ活動で読書会をやってみた

はじめに KCS部DSREチームのromです。 KCS部は、KADOKAWAグループ向けプライベートクラウド(以下KCS)を提供しており、主な利用者は株式会社ドワンゴがサービスを提供している「ニコニコ」です。 私の所属しているDSREチームでは、MySQLやRedis,Elasticsearc…

サクラタウンの有線ネットワークのお話(認証編)

はじめに こんにちは!KADOKAWA Connected、ネットワークチームの 立松(Matsu) です。データセンターとキャンパスのネットワークサービスのデザイン、デリバリ、O&Mの業務を担当しています。「サクラタウンへの無線デプロイでヒヤッとしたお話」という記事が…

KubeCon + CloudNativeCon Europe 2021 参加レポート

はじめに KADOKAWA Connected KCS部の関森です。 2021年5月にオンラインで開催されたKubeCon + CloudNativeCon Europe 2021に参加してきたので、概要や個人的に気になったセッションについて紹介したいと思います。 KCS部からは私含め5人が参加してきました…

2021年新入社員研修のはなし

はじめに KADOKAWA Connected 人事の坪田です。2021年4月で3期目に入った当社に、12名の新入社員にご入社いただきました。当ブログでは新卒研修のことを少しご紹介いたします。 2021年新入社員研修 KADOKAWA Connectedとしての新卒採用活動は21新卒からスタ…

従業員数約7,000名の企業に「Zapier」を導入できるか考えてみた。

普段から考えていること KADOKAWA Connectedは「働く人々の生涯生産性を最高に高めるためのソリューションを提供する」ということに命を燃やしている。顧客の中心はKADOKAWAグループであり、利用者は約7,000名もいる。そんな彼らの生産性を爆上げしてやろう…

男性社員が育休を取ってみた

こんにちは!KADOKAWA Connected の福井です。2020年10月に第一子の女の子が生まれまして、半年ほど育休をとりました。その体験レポートを簡単にまとめてみようと思います。 自己紹介 平成元年生まれのwebエンジニアです。認証や課金システムのバックエンド…

サクラタウンへの無線デプロイでヒヤッとしたお話

はじめに こんにちは!KADOKAWA Connected、ネットワークチームの 立松(Matsu) です。データセンターとキャンパスのネットワークサービスのデザイン、デリバリ、O&Mの業務を担当しています。会社ブログへの投稿は初めてなので、読みづらいところもあるかもし…

プライベートクラウドのインターフェースを設計する

はじめに KADOKAWA Connected KCS 部の nokamoto です。 KCS 部では KADOKAWA グループ向けプライベートクラウドを提供していますが、 今回は KCS 全般の課題とそれを解決するために進めているプロジェクトについて投稿します。 課題:インターフェースの再…

KADOKAWA Connectedの事業推進を支えるPMO部の仕事とは?

こんにちは。KADOKAWA Connected 社長室チームです。 KADOKAWA Connectedの仕事の全体像・内容を紹介することを目的としたインタビュー企画の第3弾。今回は、当社の事業推進を支えるチームの1つであるPMO(*)部の赤井さんにお話を伺いました。 *PMOは、Projec…

インフラ構築/運用を支えるチームの1つ、クラウドサービスチームの仕事とは?

こんにちは。KADOKAWA Connected 社長室チームです。 KADOKAWA Connectedの仕事の全体像・内容をブログでご紹介することを目的としたインタビュー企画の第2弾。今回は、当社のインフラ基盤を支えるチームの1つである、クラウドサービスチームの倉田さんと勝…

シン・テレワークシステムへのバックボーン提供(その2!)

はじめに こんにちは。KADOKAWA Connectedでネットワーク設計構築を担当しているもつおです。今年5月に『NTT 東日本 - IPA シン・テレワークシステム へのバックボーン提供』についてご紹介しました。 NTT 東日本 - IPA シン・テレワークシステム (以下,シ…

コミュニケーション改革を進めるCustomer Successチーム、その仕事とは?

こんにちは。KADOKAWA Connected社長室チームです。今回、KADOKAWA Connected※の仕事の全体像・内容をブログを通じてご紹介することを目的に、インタビュー企画を開始しました。 第1回では、DX(デジタルトランスフォーメーション)コンサルのノウハウをもっ…

事業会社におけるDXの秘訣 - ツールをテコにコミュニケーション改革を実現する

はじめに はじめまして、KADOKAWA ConnectedにてCustomer Successチームをリードしています菊本です。 KADOKAWA Connectedでは、KADOKAWAグループの生産性を高める働き方改革の支援を手掛けています。KADOKAWAでは攻めのDXをトップライン向上、守りのDXを費…

DBaaS(MySQL)で構成ドリフト問題と戦っている話

はじめに はじめまして! KCS部DSREチームの rom です。 KCS部は,KADOKAWAグループ向けプライベートクラウド(以下KCS)を提供しており,主な利用者は株式会社ドワンゴがサービスを提供している「niconico」です。 私の所属しているDSREチームでは,MySQLやRe…

「誰が」「何を」したかを可視化するための Auditbeat の導入とつまづき

はじめに KCS 部の島崎です。 KCS部は、KADOKAWAグループ向けプライベートクラウド(以下KCS)を提供しており、主な利用者は株式会社ドワンゴがサービスを提供している『niconico』です。 今回は Auditbeat の導入とその時のつまづきおよび解決策について投稿…

ハイブリッドクラウドで実現する低コスト静的コンテンツ配信ネットワーク(CDN)サービス

はじめに はじめまして、2020年4月に株式会社ドワンゴに新卒入社した関森です。 現在は株式会社KADOKAWA ConnectedのKCS部にも所属しています。 KCS部は、KADOKAWAグループ向けプライベートクラウド(以下KCS)を提供しており、その中でも私は、Content Deli…

機械学習開発のための学習済モデル

はじめに 株式会社KADOKAWA ConnectedのKCS部Cloud Native課の夏目です。最近は産業におけるディープラーニング(ディープニューラルネットワーク、以下「DNN」)の適用が幅広く進んでいます。私(夏目)はSmartCity研究所にて画像認識を利用するプロジェク…

コロナ禍で急増したWeb面接の運用方法/人事の裏側の話

はじめに はじめまして。KADOKAWA Connected 人事担当の坪田と申します。弊社では新型コロナが日本で流行しはじめた2月以降も採用活動を続けており、3月から8月にかけて10名以上の方にご入社いただいております。 コロナ前は、来社して対面での面接を基本と…

初心者向けAI(人工知能)関連書籍紹介 2020年夏

はじめに はじめまして!株式会社KADOKAWA Connected KCS部Cloud Native課の夏目です。 近年、第3次AIブーム の中で、企業・組織でのAI(人工知能)の導入が進んでいます。弊社KADOKAWA ConnectedでもSmartCity研究所 などでAIを利用した取り組みを進めてお…

チーム開発での Github 貢献度を可視化する

はじめに KADOKAWA Connected KCS 部の nokamoto です。 KCS 部では KADOKAWA グループ向けプライベートクラウドを提供しており、プライベートクラウド上の各サービス開発は Github Enterprise を利用しています。 今回はチーム開発において Github 上での貢…

Kubernetes上へのElastic APMサーバの自動デプロイについて

はじめに KCS部の辻下(tjst-t)です。 KCS部は、KADOKAWAグループ向けプライベートクラウド(以下KCS)を提供しており、主な利用者は株式会社ドワンゴがサービスを提供している『niconico』です。 私の所属しているDSREチームでは、MySQLやRedis、Elasticsearch…

GitHub Authentication Plugin を使った Jenkins の二要素認証の実現

はじめに KCS 部の島崎です。 KCS部は、KADOKAWAグループ向けプライベートクラウド(以下KCS)を提供しており、主な利用者は株式会社ドワンゴがサービスを提供している『niconico』です。 今回は Jenkins の二要素認証を実現するための方法について投稿します…