invoiceAgent:2022年7月27日から8月4日に発生したサービス障害について

製品ブランド:

invoiceAgent(クラウド版)

TransPrint

公開日時:

2022/08/09 13:00

更新日時:

2022/09/05 10:00

記事番号:

000023082

このたびは、2022年7月27日(水)から8月4日(木)の期間に発生したinvoiceAgentサービスの障害において 多大なご不便とご迷惑をおかけしましたこと、深くお詫び申し上げます。本障害は、想定を大幅に上回るアクセスが集中したことに起因するところが多く、現在はサーバーへの負荷軽減の対策を実施し復旧に至っております。本障害を踏まえ、弊社では、今後より多くのお客様に安心してサービスをご利用いただくために体制かつアーキテクチャの強化を実施する予定です。
発生した障害の内容および、弊社でのシステム改修に関する詳細は以下をご確認ください。
※2022/09/05に「今後のシステム改修について」の情報更新を行っています。

対象サービス

  • invoiceAgent 文書管理/AI OCR
  • invoiceAgent 電子取引
  • invoiceAgent 電子契約
  • invoiceAgent TransPrint

サービス障害内容

検索障害について

発生日時

2022年7月27日(水)14時16分~7月29日(金)05時25分

障害内容

  • 検索でエラー、またはタイムアウトが発生する場合がある
  • Distributorで文書プロパティを利用した振り分けをしていた場合、振り分けが実行されない、またはエラーになる場合がある
  • 検索データ作成遅延に関連し、TransPrint Web配信で設定した定時に配信されない場合がある

原因

検索サーバーで利用しているファイルシステムにおけるストレージノードに突発的な不整合が生じ、異常な状態になり本事象が発生しておりました。

対応

2022年7月28日(木) 20時00分より、問題のあるファイルシステムのストレージノードの切り離し作業を行い、2022年7月29日(金) 05時25分に復旧いたしました。

Distributorとタイムスタンプ障害について

発生日時

  • Distributor

2022年8月1日(月)10時24分~11時17分

  • タイムスタンプ

2022年8月1日(月)11時21分~13時32分
2022年8月2日(火)14時19分~15時23分
2022年8月4日(木)12時36分~13時38分

障害内容

  • Distributorを使用した文書の振り分けが実行されない
  • PDFファイルへタイムスタンプが付与されない場合がある

原因

本障害の期間にて、検索サーバーが高負荷状態となったため、Distributor機能およびタイムスタンプ機能の処理が停止状態となってしまっておりました。

対応

2022年8月4日(木)までは関連サーバー群の再起動を実施し復旧いたしました。 しかし、検索サーバーの高負荷状態により再度、同一障害の発生リスクがあることから、 2022年8月6日(土)の臨時メンテナンスにて以下の対策を実施いたしました。

  • 検索サーバーへの一部処理をデータベースシステムに移管し、検索サーバーへの負荷を低減すると共に、検索サーバーが高負荷時の状況においても Distributorとタイムスタンプ処理が停止しないよう対策いたしました。

今後のシステム改修について

※メンテナンス情報および新着情報の受信設定は、カスタマーサクセスサイトへログイン後、画面右上のご自身のユーザーアイコンより「マイアカウント」-「お知らせ受信メール設定」で、「invoiceAgent(クラウド版)」の「メンテナンス情報」と「新着情報」にチェックし「保存」します。

高負荷対策について ※2022/09/05更新

今後における利用量の増大も見据え、アーキテクチャを強化するシステム改修を実施いたします。システム改修に際しまして、契約ユーザー様の検索データの移行を伴うメンテナンスを2022年9月17日(土)に実施いたします詳細は、以下のメンテナンスページをご確認ください。

【メンテナンス】2022.09.17 invoiceAgent(クラウド版)


なお、アーキテクチャの強化をするまでの期間、invoiceAgent 文書管理での検索および、TransPrintの受信者画面ログイン後の文書一覧の表示にて、瞬時的なエラーが発生する場合があります。その場合は、再度操作や画面のリロードをお試しいただけますようお願いいたします。
 

invoiceAgent 文書管理 検索エラー
エラー1

TransPrint 受信者画面ログイン後のエラー
 iATP受信者画面_エラー
 

障害通知対策について

※メンテナンス実施日時につきましては、決定し次第、メンテナンス通知および本ページの更新(新着情報通知)にてご連絡いたします。

現状障害発生時には、弊社運用部門にて障害状況を見極めたうえで対象のお客様へ障害通知を実施しております。 ただし、障害通知の前にお客様環境にてすでに影響が生じているケースがあり、かつ、連絡が遅いとのご指摘をいただいております。
今後は、障害検知の精度を向上させ通知対応の効率化による時間短縮を行うと共に、対象のお客様に速やかに通知するためのシステム改修を2022年10月末日を目途に実施いたします。

お問い合わせ先

各種お問い合わせ]-[製品に関するお問い合わせ]から、お問い合わせください。
入力フォーム「お問い合わせ概要」に「(000023082)invoiceAgent:2022年7月27日から8月4日に発生したサービス障害について」と入力してください。

 

変更履歴

2022/08/09 公開
2022/09/05 高負荷対策のメンテナンス実施日を追加しました。