プログラムの評価

注：このベストプラクティスではGood、Better、Best、Aspirationalの分類を使用しています。

シェアードプリントプログラムが普及し、ある程度長く続くようになると、プログラムが加盟館に価値を提供し続け、合意された将来像に向かって機能していることを確認する評価の仕組みを作ることが重要になります。

本項目では、Good、Better、Best、Aspirationalの各カテゴリーにおけるプログラムの評価のためのさまざまな基準を提唱します。各レベルは、それ以前のすべてのレベルを満たしていることを前提とします。

Good

Goodには以下が含まれます：

  • 加盟館からフィードバックを引き出すための会議やカンファレンスを開催すること
  • フォーカスグループによるフィードバックの機会を設けること
  • 首脳陣、小委員会、ワーキンググループなど、正式な意思決定プロセスを含むプログラム構造とガバナンスに関する文書を作成すること
  • 行動計画を報告し、さらなるフィードバックを得るためのウェビナー加盟館会議を時折開催すること
  • 以下の評価要素を考慮すること：
    • 将来像／使命とプログラムの整合性
    • 加盟館との継続的なコミュニケーション
    • 加盟館にとっての参加する価値

Better

Betterには以下が含まれます：

  • 行動計画を報告し、さらなるフィードバックを得るための年次ウェビナー加盟館会議
  • グッドプラクティスに記載されている評価要素に加え、以下を考慮すること：
    • 保存責任のデータ情報（加盟館にとっての利用しやすさと価値を判断するため）
    • 国内／国際プログラムとの加盟を含む、国内／国際プログラムとの連携の評価

Best

Bestには以下が含まれます：

  • 戦略計画の作成
  • 加盟館調査の配布と照合およびフィードバックループを終了させる年次行動計画の作成
  • グッドプラクティスとベタープラクティスに記載されている評価要素に加え、以下を考慮すること：
    • 加盟館にとっての参加コスト（人的および財政的）
  • 加盟館およびそのコレクションの多様性に関するプログラムの評価

付録：プログラム評価のベストプラクティス

概況

プログラムの評価のベストプラクティスについては、CI-CCI、HathiTrust、MCLS/MI-SPI、Colorado Alliance、ConnectNY（以前はシェアードプリントプログラムがあった）、WRLC、EAST、MSCC、COPPUL、WESTの代表者に話を聞いた。大半は公式評価と非公式評価の両方を実施していなかったが、実施しているところでは、公式評価は年次会議やリトリートの際に最も多く実施されていた。これらのイベントでは、前年度の目標が評価され、次年度の新たな目標が設定される。評価されたデータの種類には、図書館間貸出、蔵書構築データ、登録図書データが含まれる。さらに、ほとんどのシェアードプリントプログラムの首脳陣は、毎月または四半期に一度、電話会議で頻繁に会合を開き、EASTのようにオンラインでの加盟館会議やウェビナーを定期的に開催しているところもある。この会議では、要処理事項を再検討し、目標と照らし合わせて、計画通りに進んでいるかどうかを継続的に判断する。

シェアードプリントプログラムの首脳陣の中には、加盟館を対象とした調査や、フォーカスグループによる話し合い（多くの場合、年次総会のブレイクアウト・セッションで行われる）を利用している、あるいは利用を予定しているところもある。ConnectNYは、調査結果を利用して覚書を作成した。また、多くのシェアープリントプログラムでは、小委員会（常設と臨時の両方）および／またはワーキンググループも利用し、これらの小委員会は首脳陣（通常、執行委員会および／または運営委員会） に報告する（EASTには継続的なプログラムチームがあり、ConnectNYには理事会がある）。ConnectNYは、シェアードプリントトラストマネジメント委員会を設立し、シェアードプリントトラストプログラムの有効性を評価し、この分野の発展や新たな傾向を追跡し、ベストプラクティスに関する新しいアイデアを共有し、理事会に報告した。加えて、ConnectNYは戦略計画2015-2020を策定し、正式な細則を制定した。また、物理的な貸出、デジタル化、デジタルリポジトリを通じた特別コレクションやアーカイブの共有とマーケティングの戦略を明らかにする白書も作成した。2020年後半、EASTはプログラム評価プロセスにも着手し、その一部はWESTのプログラム評価から情報を得ている。

調査例

2021年1月のプリント・アーカイブ・ネットワーク（PAN）フォーラムで、WEST、HathiTrust、EASTがそれぞれのプログラム評価を発表した。このイベントに関する詳細はhttps://www.crl.edu/events/pan-ala-midwinter-2021-onlineを確認すること。

WEST

WESTは、プログラムの戦略的計画と将来の方向性に情報を与えるため、2019年に第3回プログラム評価を実施した。2019年の評価には、加盟館全体の調査、フォーカスグループ、アーカイブ決定のためのデータ・モニタリング、除却統計、WESTの費用負担モデルが含まれた。第3回調査は、主要分野における経年変化を評価するため、前回の調査を念頭に置いて設計された。最初の2回の調査からのフィードバックに基づき、WESTはその取り組みをさらに活用し、規模を拡大するために、全国の他のプログラムとの協力の機会を求めた。2019年の評価では、4つの主要テーマに焦点を当てた：

  • WESTの価値
  • 加盟館の満足度と変更すべき点
  • 新サービスの可能性
  • アーカイブ構築

報告書やプレゼンテーション、さらに最近の評価を含むWESTプログラム・アセスメントに関する詳細は、https://cdlib.org/west/about-west/documents-presentations/を確認すること。West Program Assessment Plan Templateも参照すること。

HathiTrust

HathiTrustシェアードプリントプログラムの評価に関する詳細はHathiTrust Shared Print Program Assessment文書、また概況についてはhttps://www.hathitrust.org/shared_print_programを確認すること。2024年からのHathiTrustの戦略的構想も確認すること。

EAST

EAST 2020 Program Assessment pageには使用された機器と結果が含まれている。

最終更新：2024年5月

原文：https://sharedprint.org/best-practices/program-assessment/