こんにちは、技術本部 Sansan Engineering Unit Nayoseグループでエンジニアをしている冨田です。 私たちのグループでは、当社のほぼすべてのプロダクトが利用する共通基盤である「組織データの名寄せサービス」の開発に取り組んでいます。名寄せサービスにより、組織名の表記揺れなどで別々に存在するデータが名寄せ（グルーピング）され、組織データの活用価値が向上します。 名寄せサービスのバックエンドでは、WebフレームワークにRuby on Rails（以下「Rails」とする）、DBにAurora、検索基盤の1つにElasticsearchを利用しています。 本記事では、elast…

こんにちは！バックエンドエンジニアの藤本です。 今回は、オープンワークのエンジニア組織で日々の開発をもっとスムーズに、もっと楽しくするために活動している「EPチーム」についてお話ししたいと思います。 EPチームって何？ 「EP（Engineer Productivity）チーム」は、エンジニアの生産性向上を目的に活動しているチームで、オープンワークのエンジニアの開発体験をより良くすることをミッションとしています。 開発をしていると、施策・案件化するほどのインパクトは見込めないものの、保守性の観点から改善が必要と感じることや、より便利にできるという気づき、願望が日々生まれます。 EPチームは、そ…

こんにちは！今週はDXソリューション事業本部 Devグループ の藤野が担当します。 「1000万件を超える膨大なファイル群から、いかに低コストで、かつ高精度に必要な情報を取り出すか？」 RAGシステムを運用・開発する上で、データ数に伴うコストと精度がネックになります。 弊社では業界特化のRAGシステムを数多く構築しており、その肝になる箇所は、やはり「Retrieval（検索）」にあります。 本記事では、コストを抑えつつ業務で真に使える検索パフォーマンスを実現したRetrievalアーキテクチャについてご紹介します。 TL;DR Azure AI Searchとの比較 Elasticsearch…

こんにちは、 Drawer Growth グループの大木です。 キャディでは、膨大な図面データを効率的に検索・活用できるよう、Elasticsearchを活用した図面検索機能を提供しています。 このシステムにより、キーワード検索から類似図面の検索、図面に紐づく受発注情報での検索などを実現しています。 しかし、この図面と受発注情報の関係は多対多の関係にあり、大量のデータを効率的に処理することが課題でした。 この記事では、これに対してどのように対処しているのかについて紹介します。 課題の詳細 前提: Elasticsearchにおけるデータ更新の流れ Elasticsearchに保存されるデータは…

こんにちは、Elastic認定資格３種(※)を保持しているノムラです。 ※Elastic社の公式認定資格（Elastic Certified Engineer / Elastic Certified Analyst / Elastic Certified Observability Engineer）Elastic Stack (Elasticsearch) Advent Calendar 2024の13日目のブログ記事になります。 qiita.comElastic CloudはElastic社が提供しているSaaSサービスで、クラウドプロバイダはAWS、Azure、GCP等をサポートしていま…

この記事は Elastic Stack (Elasticsearch) - Qiita Advent Calendar 2024 - Qiitaの11日目の記事です。はじめまして。テクニカルコンサルタントの江見と申します。 普段はElasticsearchに関するコンサルティング業務に携わっております。業務の中で、RDB（MySQLやPostgreSQLなど）の検索機能に関する課題として、「LIKE検索の速度が遅い」という声を多くいただきます。 特に、大量のデータを扱うシステムでは、LIKE検索が原因でパフォーマンスが低下し、検索レスポンスの遅延が問題となることが少なくありません。その解決策と…

(2024/12/10 13:35) Elastic Stack (Elasticsearch) Advent Calendar 2024のリンクを追加 初めまして。ECシステムエンジニアリング部門 EC商品基盤グループ サーチチーム 松浦です。 今回は、全文検索エンジンElasticsearch のバージョンアップの具体的な取り組みについて取り上げます。 このブログ記事の内容はElasticsearch株式会社が主催するElasticsearch Community in Osaka - connpassで発表した内容を元に作成しました。 また、Elastic Stack (Elastics…