「openBD API(バージョン1)」の終了によるカーリルへの影響について

カーリルでは、書誌・書影情報の自由な流通を目指して、出版社団体である版元ドットコムと共同でopenBDプロジェクトを推進してきました。このプロジェクトでは、出版社団体である版元ドットコムの会員社が提供する書誌データだけではなく、版元ドットコムが受信している、出版情報登録センター(JPRO)のデータを含めることで、網羅率の高い書誌・書影情報の配信が実現しました。カーリルは、配信インフラの運用を担ってきました。

2023年6月5日から、JPROから版元ドットコムへのデータ配信が停止され、openBDのデータ更新に遅延が発生しておりました。その後、版元ドットコムにおいてJPROとの協議が継続しておりました。この間、版元ドットコムとカーリルでは緊密に連携して対応を検討してきましたが、最終的に、現状スキームによるオープンな書誌・書影情報の提供継続は困難と判断しました。2023年7月25日、openBDプロジェクトから、「openBD API(バージョン1)」の提供終了について とのお知らせが公表されました。

カーリルでは代替APIの設計など、バージョン1の提供終了がopenBDに依存しているプロジェクトにとって最小の影響となるよう努力します。カーリルでは、図書館および出版情報のパブリックインフラを担う覚悟をもって、引き続き書誌・書影情報の自由な流通を目指すとともに、版元ドットコムとの共同事業に取り組みます。

なお、openBDの提供するAPIは、カーリルの各種ウェブサービスでも幅広く活用されています。カーリルが提供する検索サービスには、多様な情報源を組み合わせているため、ただちに影響はありませんが、書影や詳細な書誌情報(内容紹介や目次など)の提供に影響が出る可能性があります。現在、この影響を最小限とするため、カーリルとしてもJPROとの協議を申し込んでいます。

影響が懸念されるサービス

  • カーリル
    ・書影の網羅率が低下します
    ・本の個別ページに掲載している、内容紹介や目次情報の提供ができなくなります
    ・近刊情報(未発売)の本が検索結果に表示されなくなります
  • カーリル学校図書館支援プログラム
    ・検索サービス内での書影の網羅率が低下します(従来からGoogle Booksとも連携しているため、Google Booksに書影がある場合は引き続き表示されます)
    ・内容紹介や目次情報の提供ができなくなります
    ・国立国会図書館が提供する書影APIとの連携を検討しています
  • カーリル ブックウォーク
    ・サービスを終了します
  • カーリル Unitrad API
    ・新刊リクエスト等で連携している近刊情報はNDLサーチのAPIと連携しており影響はありません
    ・なおAPIを活用したユーザーインターフェース上で表示している書影がopenBDの場合は網羅率が低下します

関連情報

「openBD API(バージョン1)」の提供終了について

Twitterログインによる連携の終了について(7月5日追記あり)

カーリルをご利用いただきありがとうございます。カーリルでは、読みたいリストなどをご利用いただくために、各種ソーシャルネットワークのアカウントなどでログインできるようになっています。

このうち、Twitterとの連携について、新規のログイン連携を終了しました。カーリルでは、すでにTwitterの提供する新しいAPIに切り替えているため、以前からカーリルをご利用いただいているユーザーについては、Twitterログインによるログインに引き続き対応しています。

しかし、今後もTwitterの方針変更により、ログイン連携が停止されるリスクがあります。安定的にカーリルをご利用いただくために、別のサービスでのログイン連携を必ず設定してください。

スマートフォンから正常にログインができない不具合について

Twitterの不具合の影響により、iOSおよびAndroidのスマートフォンで、Twitterアプリがインストールされている場合に正常にカーリルにログインできない問題に対応しました。これまでカーリルにTwitterでログインしていたユーザーは現在のところカーリルにログインできます。エラー等が発生する場合はお問い合わせください。(2023/5/15追記)

正常にログインができない不具合について

2023年6月24日頃からTwitterの仕様変更の影響により、Twitterアカウントによるカーリルへのログインできない状況でした。この問題は7月5日に解決されました。現在は、以前からTwitterアカウントを利用しているユーザーのみ引き続きTwitterによるログインが可能です。(2023/7/5追記)

Twitterログインの完全終了予定について

カーリルでは、2023年9月30日に既存ユーザーも含めてすべてのTwitterログインを終了する予定です。

ChatGPTによる蔵書検索サポーターの実装(協力図書館募集)

現在、ChatGPTなどのジェネレーティブAIを活用した新サービスが活発に提案されています。カーリルでは、ChatGPTと図書館が提供する一般的な蔵書検索サービスを連携させる方法について検討しました。

蔵書検索サポーターの実装

利用イメージを体験するために、カーリルでは学校図書館支援プログラムで提供している学校図書館向けの蔵書検索サービスにChatGPT(OpenAI API)を組み込み、「蔵書検索サポーター」を実装することにしました。例えば、ユーザーが検索キーワードにヒットする本がなかった場合に、別のキーワードを提案したり、自然文の質問から適切な検索キーワードを提案することを想定します。カーリルが提供する検索サービスもAPIでアクセスできるため、OpenAI APIと接続するプロセスは驚くほど簡単でした。


ChatGPTと直接チャットする場合との大きな違いは、個別の図書館の蔵書情報を回答のための情報源として扱ったり、AIの出力を蔵書データと掛け合わせてユーザーに提示できることです。言語モデルはGPT-4を採用しました。

チャットによる検索キーワードの提案(実画面)

この取り組みは初歩的なものであり、さまざまなシチュエーションに最適化されているわけではありません。また簡易的な実装であるため、応答時間も少し長くかかります。しかし、蔵書検索サービスとチャットAIが協調して検索行動をある程度サポートすることができるようになりました。学校図書館支援プログラムのデモデータを対象にした「蔵書検索サポーター」のデモページを公開しますので、実際の動作を体験することができます。

デモページ

実証実験について

OpenAIが提供するAPIは利用量に応じた従量課金です。そのため、大規模な投資が不要であり、各図書館が運用する小規模な検索サービスでもAIが活用可能です。もちろん、会話情報をOpenAIに送信する必要があるため、個人情報の保護については十分な配慮が必要ですし、AIの回答には誤りが含まれる場合があるため、それを前提としたユーザー体験が求められます。カーリルでは、今後、蔵書データを事前にベクトル化するなど、一般的なChatGPTとのインテグレーションを蔵書検索サービスに適用してみる予定です。

今後は図書館のウェブサービスにおいても、汎用AIの活用が活発化することが予想されます。それに先立って、課題や可能性、またプライバシーポリシーの定義などについての議論を深めるため、また運用にかかるコストを検証するため、カーリルでは、この簡易的な検索サポーター機能の実証実験(図書館の検索サービスへの組み込み実験)を実施することにしました。

実証実験にかかる費用はすべてカーリルが負担します。一般公開することもできますし、限定的な公開にとどめることもできます。カーリル学校図書館支援プログラムを導入している学校図書館や公民館図書室では、すぐにサービスの立ち上げが可能です。それ以外の図書館では、簡易的な書誌データをCSVなどで提供いただくことにより、サービスを立ち上げます。

蔵書数、図書館の種類、図書館の規模は問いません。

この実験に協力いただける図書館や、興味のある図書館の方は、カーリルにお問い合わせください。実施方法については個別に調整します。ご希望いただいたすべての図書館にはサービスが提供できない可能性もありますので、あらかじめご容赦ください。

フィードバックを集約した上で、レポートを公開する予定です。

想定を上回るお問い合わせをいただきましたので、実証実験に関する新規の受付を終了します。ご協力ありがとうございます。なお、お問い合わせいただいた図書館には順次ご案内いたします。 (2023年4月10日追記)

ChatGPT Pluginsによる連携について

多数ご要望いただいております、「ChatGPT Plugins」によるカーリル図書館APIとChatGPTとの統合については現在、技術的な可能性を検討中です。

Twitterログインの停止に備えてください

カーリルをご利用いただきありがとうございます。カーリルでは、読みたいリストなどをご利用いただくために、各種ソーシャルネットワークなどでログインできるようになっています。

このうち、Twitterとの連携について、APIの提供停止がTwitter社からアナウンスされています。カーリルがこのアナウンスの対象になるか現時点では不明です。また新しい利用条件での連携継続についても未定ですが、可能な限り連携を維持できるよう努力します。

いずれにしてもTwitterについてはサービスの存続性そのものについて重大な懸念がある状況となっています。このため、カーリルアカウントのデータを保護し、継続的にサービスをご利用いただくために、別サービスのアカウント(Googleなど)を追加で結びつけてください。どちらのサービスでログインしても同じデータにアクセスできるため、将来、Twitterログインが停止した場合でも、継続してサービスを利用できるようになります。

カーリルアカウントの設定はこちらから

所蔵状況の表示がエラーになるサービス障害が発生しました(復旧済)

2022年12月22日22時30分頃から12月23日8時15分までのおよそ10時間のあいだ、カーリルの検索結果(各図書館の所蔵情報)の表示がエラーとなるサービス障害が発生しました。この障害は、現在は復旧しています。影響のあった方々にはご迷惑をおかけしました。

なお、この障害は、カーリル図書館APIで発生したため、カーリル図書館APIを利用したアプリケーションなどにおいても同様の障害が発生しました。カーリルが提供する業務用の横断検索API「Unitrad API」や、学校図書館支援プログラムへの影響はありません。

障害期間中の所蔵確認の推移(カーリルAPIアクセス状況)

時系列

  • 22日16時ごろ タスクワーカー基盤のアップデートを実施
  • 22日20時ごろから処理能力が減少(タイムアウトの増加)
  • 22日22時30分に処理が停止
  • 23日8時5分 調査を開始
  • 23日8時15分 復旧を完了
  • 障害時間は9時間45分

障害の原因と対応

カーリルでは、23日にカーリル図書館APIの処理基盤(タスクワーカー)の大幅なアップデートを予定していました。この準備作業のため、22日の夕方から新しいバージョンへのアップデートの準備を実施しました。

このとき、誤って翌日に配信される予定のプログラムの一部が配信(デプロイ)されました。このプログラムは時間差をおいて順次複数あるタスクワーカーに適用されていきました。新しいプログラムは翌日以降の設定変更を前提としたものであったためエラーが発生しました。順次タスクワーカーの処理が停止したことにより処理能力が減少し、最終的にサービス障害が発生しました。

予定していた設定変更とプログラムを配信したことにより復旧しました。なお本障害は運用上で発生したものでありセキュリティ上の問題はありません。

アラートシステムの一部では障害を検知していたものの、適切に社内に通知されていなかったため、障害時間が長くなり、大変ご迷惑をおかけいたしました。カーリルでは、より安定的なサービス提供できるよう対策を進めてまいります。