LIBRARY ASSESSMENT: MEASURING AND DOCUMENTING THE LIBRARY'S CONTRIBUTIONS TO ACADEMIC SUCCESS

Len D. Santos Orozco Junio 2008

Enfsis

Demostrar la contribucin de la Biblioteca

Mejorar los servicios a los usuarios

Definicin de Assessment

Assessment es el proceso de documentar a travs de medicin el conocimiento, destrezas, actitudes y creencias.

Ciclo de Assessment

Identificar objetivos Planificar y disear instrumentos para medir status actual en base a outcomes Analizar e interpretar datos Trazar un plan de accin en base a los resultados obtenidos

Jim Self (Univ. Of Virginia)y Steve Hiller (Univ. of Seattle)-Problemas comunes

Mucha estadstica pero hay poco de interpretacin y evaluacin. No se analizan tendencias Tenemos que preocuparnos por la percepciones (pasan a ser la realidad). Responder a las necesidades de los usuarios implica conocer a la comunidad para mejorar programas y servicios pensando en usuarios. Incertidumbre de cmo hacer assessment En research libraries, facultad se siente con la Biblioteca como se siente con la disponibilidad de journals Servicios que los estudiantes usan son los que mejor salen en el proceso de assessment.

Como se mide cuan buena es una Biblioteca:

Tradicional: Ms es mejor (tamao de la coleccin y el presupuesto) Hoy: cuan bien lo hacemos y como demostrarlo, el impacto y valor en los usuarios. Hay que justificar nuestra existencia (todo est en Google, formato digital).

http://connect.educause.edu/Library/EDUCAUSE+ Review/ChangingaCulturalIconTheA/40602?tim e=1214231910

Preguntarnos porque llevamos esta data:

Staff and salaries Revenues and expenditures ILL borrow and lending Instruction sessions and participants Computer use Ref. stats Building counts

[No es suficiente, no miden calidad en el servicio ni la perspectiva del usuario]

Customer centered library

-los servicios deben ser vistos por los ojos de los usuarios -los usuarios determinan la calidad -decisiones deben estar basadas en data

A nivel macro (institucional) tendencias:

-misin y visin Est haciendo la Universidad lo que dice? -Benchmark: comparacin con otras instituciones similares (sector provado) -Student learning outcomes

A nivel de Biblioteca (tendencias) new metrics ARL

que tenemos nico en cuanto a servicios, colecciones valor de consorcios contribucin de la Biblioteca a la productividad de la facultad student outcomes

Factores para poner en uso la data:

Que el Assessment sea responsabilidad de alguien (Assessment Librarian) cultura de cambio en la institucin apoyo del liderato de la institucin seguimiento a esfuerzos cultura de usar la data como evidencia para mantener servicios

Juicio de acuerdo a lo que piden los usuarios:

coffee shop en la Biblioteca video games traer comida bean bags lockers prestamos de laptops imprimir desde laptops

LibQual+:
Instrumento de Assessment: Questionario ELECTRONICO con 22 preguntas. Comentarios. Desarrollado por ARL LibQUAL+ trabaja temas de calidad en el servicio, uso de recursos electrnicos y outcomes assessment.

LibQual+

[SERVICIOS] Help libraries better understand user perceptions of library service quality [TENDENCIAS] Collect and interpret library user feedback systematically over time [BENCHMARK]Provide libraries with comparable assessment information from peer institutions [MEJORAMIENTO] Identify best practices in library service [INTERPRETACION] Enhance library staff members' analytical skills for interpreting and acting on data

Ms consideraciones generales de Assessment

---razn: mejorar el servicio --alineado con misin, visin, metas y plan estratgico --que metas y objetivos en especfico, que outcomes se buscan cumplir --tomar en consideracin cuando hacerlo (otros esfuerzos institucionales, no impactar el mismo grupo al mismo tiempo), que recursos (otras oficinas que nos puedan ayudar) --Personal, tiempo, colaboradores, presupuesto, recursos --como voy a usar los resultados --que mtodo --estamos assessing algo que es realmente importante desde el punto de vista de los usuarios

Ms consideraciones generales de Assessment

dejar saber los resultados: como voy a comunicar a la administracin y a la comunidad --involucrar a personas, que se sientan parte del proceso, no desde arriba --reglas de la institucin (edad minima, para mejoramiento profesional no para research, privacidad) --esfuerzos previos --que el usuario sienta que se aprecia su tiempo y que se toman en cuanta sus opiniones: statement : apreciamos su tiempo, en el 2007 contramos esto e hicimos esto --representatividad (por departamentos) --timetable --indicadores de xito

SMART

S specific (el outcome est claramente definido) M measurable (es medible) A attainable (alcanzable) R relevant (alineado con metas y planes institucionales) T timely (tenemos fecha lmite para completarlo)

Observational studies (NYU)

Mistery shopper (medir respuesta en Referencia) Donde se localizan Que actividades hacen los usuarios mientras estn en la biblioteca

Temas que interesaron a los presentes

Library as a place: ruidos, myspace, facebook, enchufes son comunes en community colleges Information Literacy: que se est haciendo algo, se analiza, se toman acciones y se vuelve a empezar.no varita mgica.

Resumen: instrumentos para medir el library success

Self report: focus groups, interviews, observacin (estas tres anlisis cualitativo) y surveys Tests: SAILS, ILT, Bay Area Community Colleges, ect Performance Assessment: paper citation analysis, portfolios, iSkills Rbricas

UPR
Plan Institucional Comit Sistmico Evaluar adquirir LibQual+ (pros probado, ARL y contras (electrnico, costo)

Fin

Preguntas?