to improve student outcomes that ma

to improve student outcomes that manipulate variables other than the design of the
instruction, and hope this study will encourage other researchers to search for these
variables.
Acknowledgments This research was funded by a Grant from the Bill and Melinda Gates Foundation
#OPP1063523. The Gates Foundation funded this independently conducted research without influence
over the design, data collection, analysis or interpretation of the results.
Compliance with ethical standards
Conflict of interest The authors have no conflict of interest in the execution or outcomes of this study.
References
Allen, G., Guzman-Alvarez, A., Molinaro, M., & Larsen, D. (2015). Assessing the impact and efficacy of
the Open-Access ChemWiki Textbook Project. Educause Learning Initiative Brief.
Allen, I. E., & Seaman, J. (2014). Opening the curriculum: Open educational resources in US higher
education, 2014. Pearson: Babson Survey Research Group.
Bliss, T. J., Hilton III, J., Wiley, D., & Thanos, K. (2013). The cost and quality of online open textbooks:
Perceptions of community college faculty and students. First Monday, 18(1), 1–7.
Bowen, W. G., Chingos, M. M., Lack, K. A., & Nygren, T. I. (2014). Interactive learning online at public
universities: Evidence from a six-campus randomized trial. Journal of Policy Analysis and
Management, 33(1), 94–111.
Buczynski, J. A. (2007). Faculty begin to replace textbooks with ‘‘freely’’ accessible online resources.
Internet Reference Services Quarterly, 11(4), 169–179.
Feldstein, A., Martin, M., Hudson, A., Warren, K., Hilton III, J., & Wiley, D. (2012). Open textbooks and
increased student access and outcomes. European Journal of Open, Distance and E-Learning.
Retrieved from http://www.eurodl.org/index.php?article=533
Florida Virtual Campus. (2012). 2012 Florida Student Textbook Survey. Tallahassee, FL. Retrieved from
http://www.openaccesstextbooks.org/%5Cpdf%5C2012_Florida_Student_Textbook_Survey.pdf
Goodwin, M. A. L. (2011). The Open Course Library: Using open educational resources to improve
community college access (Unpublished doctoral dissertation). Pullman, WA: Washington State
University.
Guo, S., & Fraser, M. W. (2014). Propensity score analysis: Statistical methods and applications (Vol.
11). Thousand Oaks: Sage Publications.
Hewlett (2013). Open educational resources. http://www.hewlett.org/programs/education-program/openeducational-
resources
Hilton III, J. L., Gaudet, D., Clark, P., Robinson, J., & Wiley, D. (2013). The adoption of open
educational resources by one community college math department. The International Review of
Research in Open and Distributed Learning, 14(4), 37–50.
Hilton III, J. L., Robinson, T. J., Wiley, D. A., & Ackerman, J. D. (2014). Cost-savings achieved in two
semesters through the adoption of open educational resources. The International Review of Research
in Open and Distributed Learning, 15(2), 1–18.
Hilton III, J. L., & Laman, C. (2012). One college’s use of an open psychology textbook. Open Learning:
The Journal of Open, Distance and e-Learning, 27(3), 265–272.
Hilton III, J. L., Wiley, D., Stein, J., & Johnson, A. (2010). The four ‘R’s of openness and ALMS
analysis: Frameworks for open educational resources. Open Learning, 25(1), 37–44.
Lovett, M., Meyer, O., & Thille, C. (2008). The open learning initiative: Measuring the effectiveness of
the OLI statistics course in accelerating student learning. Journal of Interactive Media in Education,
2008(1), Art-13.
Paulsen, M. B., & St John, E. P. (2002). Social class and college costs: Examining the financial nexus
between college choice and persistence. The Journal of Higher Education, 73(2), 189–236.
Pawlyshyn, N., Braddlee, D., Casper, L., & Miller, H. (2013). Adopting OER: A case study of crossinstitutional
collaboration and innovation. http://www.educause.edu/ero/article/adopting-oer-casestudy-
crossinstitutional-collaboration-and-innovation
A multi-institutional study of the impact of open… 171
123
Provasnik, S., & Planty, M. (2008). Community colleges: Special supplement to the condition of
education 2008. Statistical Analysis Report. NCES 2008-033. National Center for Education
Statistics.
Riegle-Crumb, C., & King, B. (2010). Questioning a white male advantage in STEM examining
disparities in college major by gender and race/ethnicity. Educational Researcher, 39(9), 656–664.
Robinson, T. J., Fischer, L., Wiley, D., & Hilton, J. (2014). The impact of open textbooks on secondary
science learning outcomes. Educational Researcher, 43(7), 341–351.
Rockinson-Szapkiw, A. J., Courduff, J., Carter, K., & Bennett, D. (2013). Electronic versus traditional
print textbooks: A comparison study on the influence of university students’ learning. Computers &
Education, 63, 259–266.
Rosenbaum, P. R., & Rubin, D. B. (1985). Constructing a control group using multivariate matched
sampling methods that incorporate the propensity score. The American Statistician, 39(1), 33–38.
Russell, T. L. (2015). No significant dif

Hasil (Bahasa Indonesia) 1:

untuk meningkatkan hasil siswa yang memanipulasi variabel selain desaininstruksi, dan berharap studi ini akan mendorong para peneliti lain untuk mencari inivariabel.Penelitian ini didanai oleh dana hibah dari Bill dan Melinda Gates Foundation ucapan terima kasih#OPP1063523. Gates Foundation didanai penelitian ini dilakukan secara mandiri tanpa pengaruhmelalui Desain, pengumpulan data, analisis atau interpretasi hasil.Kepatuhan terhadap standar etikaKonflik kepentingan para penulis memiliki tanpa konflik kepentingan dalam pelaksanaan atau hasil dari studi ini.ReferensiAllen, G., Guzman-Alvarez, A., Molinaro, M., & Larsen, D. (2015). Menilai dampak dan kemanjuranProyek akses terbuka ChemWiki buku. EDUCAUSE belajar inisiatif singkat.Allen, I. E., & pelaut, J. (2014). Membuka kurikulum: membuka pendidikan resources di AS yang lebih tinggipendidikan, 2014. Pearson: Babson Survey Research Group.Malcolm, T. J., Hilton III, J., Wiley, D., & Thanos, K. (2013). Biaya dan kualitas online buka buku:Persepsi perguruan tinggi fakultas dan siswa. Senin pertama, 18(1), 1-7.Bowen, W. G., Chingos, M. M., kekurangan, K. A., & Nygren, T. I. (2014). Interaktif belajar online di umumUniversitas: bukti dari uji acak enam-kampus. Jurnal analisis kebijakan danManajemen, 33(1), 94-111.Buczynski, J. A. (2007). Fakultas mulai mengganti buku teks dengan '' bebas '' diakses sumber online.Internet Layanan referensi kuartalan, 11(4), 169-179.Berkebangsaan Amerika Serikat, A., Martin, M., Hudson, A., Warren, K., Hilton III, J., & Wiley, D. (2012). Membuka buku pelajaran danmahasiswa peningkatan akses dan hasil. Eropa jurnal terbuka, jarak dan E-Learning.Diperoleh dari http://www.eurodl.org/index.php?article=533Florida Virtual kampus. (2012). survei buku 2012 Florida siswa. Tallahassee, FL. Diperoleh darihttp://www.openaccesstextbooks.org/%5Cpdf%5C2012_Florida_Student_Textbook_Survey.pdfGoodwin, M. A. L. (2011). Perpustakaan Lapangan terbuka: Menggunakan sumber daya pendidikan terbuka untuk meningkatkanperguruan tinggi akses (tidak dipublikasikan disertasi doktoral). Pullman, WA: Washington StateUniversitas.Guo, S., & Fraser, W. M. (2014). Kecenderungan Skor analisis: metode statistik dan aplikasi (Vol.11). Thousand Oaks: Sage publikasi.Hewlett (2013). Sumber pembelajaran terbuka. http://www.Hewlett.org/Programs/Education-Program/openeducational-sumber dayaHilton III, J. L., Gaudet, D., Clark, P., Robinson, J., & Wiley, D. (2013). Adopsi terbukasumber daya pendidikan oleh Departemen matematika perguruan tinggi satu. Kajian internasionalPenelitian dalam belajar terbuka dan didistribusikan, 14(4), 37-50.Hilton III, J. L., Robinson, T. J., Wiley, D. A., & Ackerman, J. D. (2014). Penghematan biaya yang tercapai dalam duasemester melalui penerapan sumber daya pendidikan terbuka. Kajian internasional penelitiandalam belajar terbuka dan didistribusikan, 15(2), 1-18.Hilton III, J. L., & Laman, C. (2012). Satu college penggunaan teks psikologi terbuka. Pembelajaran terbuka:Journal of Open, jarak dan e-Learning, 27(3), 265-272.Hilton III, J. L., Wiley, D., Stein, J., & Johnson, A. (2010). Empat ' R keterbukaan dan sedekahanalisis: kerangka kerja untuk sumber daya pendidikan terbuka. Buka belajar, 25(1), 37-44.Lovett, M., Meyer, O., & Thille, C. (2008). Inisiatif pembelajaran terbuka: mengukur efektivitasStatistik OLI kursus dalam mempercepat belajar siswa. Journal of Interactive Media dalam pendidikan,2008(1), seni-13.Paulsen, M. B., & St John, E. P. (2002). Biaya sosial kelas dan college: memeriksa nexus keuanganantara college pilihan dan ketekunan. Jurnal pendidikan tinggi, 73(2), 189-236.Pawlyshyn, N., Braddlee, D., Casper, L., & Miller, H. (2013). Mengadopsi OER: Studi kasus crossinstitutionalKerjasama dan inovasi. http://www.EDUCAUSE.edu/Ero/article/adopting-OER-casestudy-crossinstitutional-kolaborasi-dan-inovasiSebuah studi multi kelembagaan dampak terbuka... 171123Provasnik, S., & Planty, M. (2008). Community College: suplemen khusus dengan kondisiPendidikan 2008. Laporan analisis statistik. NCES 2008-033. Pusat Nasional untuk pendidikanStatistik.Riegle-remah, C., & raja, B. (2010). Mempertanyakan keuntungan laki-laki yang putih di batang memeriksakesenjangan dalam kuliah utama oleh gender dan ras/etnis. Peneliti pendidikan, 39(9), 656-664.Robinson, T. J., Fischer, L., Wiley, D., & Hilton, J. (2014). Dampak dari buka buku SMPhasil pembelajaran sains. Peneliti pendidikan, 43(7), 341-351.Rockinson-Szapkiw, A. J., Courduff, J., Carter, K., & Bennett, D. (2013). Elektronik versus tradisionalmencetak buku: sebuah studi perbandingan tentang pengaruh mahasiswa belajar. Komputer &Pendidikan, 63, 259-266.Rosenbaum, P. R., & Rubin, D. B. (1985). Membangun kelompok kontrol yang menggunakan multivarian cocokmetode sampling yang menggabungkan Skor kecenderungan. Statistik Amerika, 39(1), 33-38.Russell, T. L. (2015). Tersebut kini tidak signifikan

Hasil (Bahasa Indonesia) 2:

untuk meningkatkan hasil siswa yang memanipulasi variabel-variabel selain desain
instruksi, dan berharap penelitian ini akan mendorong peneliti lain untuk mencari ini
variabel.
Ucapan Terima Kasih Penelitian ini didanai oleh Hibah dari Bill dan Melinda Gates Foundation
# OPP1063523. Gates Foundation mendanai penelitian ini dilakukan secara independen tanpa pengaruh
atas desain, pengumpulan data, analisis atau interpretasi hasil.
Sesuai standar etika
Konflik kepentingan Para penulis tidak memiliki konflik kepentingan dalam pelaksanaan atau hasil penelitian ini.
Referensi
Allen, G., Guzman-Alvarez, A., Molinaro, M., & Larsen, D. (2015). Menilai dampak dan efektivitas
Open-Access ChemWiki Textbook Project. Educause Learning Initiative Brief.
Allen, IE, & Seaman, J. (2014). Membuka kurikulum: Buka sumber daya pendidikan yang lebih tinggi US
pendidikan, 2014. Pearson. Babson Survey Research Group
Bliss, TJ, Hilton III, J., Wiley, D., & Thanos, K. (2013). Biaya dan kualitas buku teks terbuka secara online:
Persepsi fakultas perguruan tinggi dan mahasiswa. Pertama Senin, 18 (1), 1-7.
Bowen, WG, Chingos, MM, Kurangnya, KA, & Nygren, TI (2014). Pembelajaran interaktif online di publik
universitas: Bukti dari uji coba secara acak enam kampus. Jurnal Analisis Kebijakan dan
Manajemen, 33 (1), 94-111.
Buczynski, JA (2007). Fakultas mulai mengganti buku teks dengan '' bebas '' sumber daya diakses secara online.
Internet Layanan Referensi Quarterly, 11 (4), 169-179.
Feldstein, A., Martin, M., Hudson, A., Warren, K., Hilton III, J., & Wiley, D. (2012). Terbuka buku pelajaran dan
peningkatan akses dan hasil siswa. European Journal of Terbuka, Jarak dan E-Learning.
Diperoleh dari http://www.eurodl.org/index.php?article=533
Florida Virtual Campus. (2012). Survey Textbook Florida Mahasiswa 2012. Tallahassee, FL. Diperoleh dari
http://www.openaccesstextbooks.org/%5Cpdf%5C2012_Florida_Student_Textbook_Survey.pdf
Goodwin, MAL (2011). Open Course Library: Menggunakan sumber terbuka pendidikan untuk meningkatkan
akses masyarakat kampus (tidak dipublikasikan disertasi doktor). Pullman, WA: Washington State
. Universitas
Guo, S., & Fraser, MW (2014). Kecenderungan analisis skor: metode statistik dan aplikasi (Vol.
11). Thousand Oaks:. Sage Publications
Hewlett (2013). Membuka sumber daya pendidikan. http://www.hewlett.org/programs/education-program/openeducational-
sumber
Hilton III, JL, Gaudet, D., Clark, P., Robinson, J., & Wiley, D. (2013). Adopsi terbuka
sumber daya pendidikan oleh Departemen kuliah matematika satu komunitas. The International Ulasan
Research in Terbuka dan Distributed Learning, 14 (4), 37-50.
Hilton III, JL, Robinson, TJ, Wiley, DA, & Ackerman, JD (2014). Penghematan biaya yang dicapai dalam dua
semester melalui adopsi sumber pembelajaran terbuka. The International Ulasan Penelitian
di Terbuka dan Distributed Learning, 15 (2), 1-18.
Hilton III, JL, & Laman, C. (2012). Penggunaan salah satu perguruan tinggi untuk sebuah buku psikologi terbuka. Open Learning:
The Journal of terbuka, Jarak dan e-Learning, 27 (3), 265-272.
Hilton III, JL, Wiley, D., Stein, J., & Johnson, A. (2010). Empat 'R keterbukaan dan sedekah
analisis: Kerangka untuk sumber pembelajaran terbuka. Open Learning, 25 (1), 37-44.
Lovett, M., Meyer, O., & Thille, C. (2008). Inisiatif pembelajaran terbuka: Mengukur efektivitas
statistik saja OLI dalam mempercepat belajar siswa. Journal of Interactive Media dalam Pendidikan,
2008 (1), Art-13.
Paulsen, MB, & St John, EP (2002). Kelas sosial dan perguruan tinggi biaya: Meneliti nexus keuangan
antara pilihan perguruan tinggi dan ketekunan. The Journal of Pendidikan Tinggi, 73 (2), 189-236.
Pawlyshyn, N., Braddlee, D., Casper, L., & Miller, H. (2013). Mengadopsi OER: Sebuah studi kasus crossinstitutional
kolaborasi dan inovasi. studi multi-kelembagaan dampak terbuka ... 171 123 Provasnik, S., & Planty, M. (2008). Perguruan tinggi: suplemen khusus untuk kondisi pendidikan 2008. Analisis Statistik Laporan. NCES 2008-033. Pusat Nasional untuk Pendidikan Statistik. Riegle-Crumb, C., & King, B. (2010). Mempertanyakan keuntungan pria kulit putih di STEM memeriksa kesenjangan di perguruan tinggi besar dengan jenis kelamin dan ras / etnis. Pendidikan Peneliti, 39 (9), 656-664. Robinson, TJ, Fischer, L., Wiley, D., & Hilton, J. (2014). Dampak dari buku teks terbuka pada sekunder hasil belajar ilmu pengetahuan. Pendidikan Peneliti, 43 (7), 341-351. Rockinson-Szapkiw, AJ, Courduff, J., Carter, K., & Bennett, D. (2013). Elektronik dibandingkan tradisional buku cetak: Sebuah studi perbandingan tentang pengaruh belajar mahasiswa '. Komputer & Pendidikan, 63, 259-266. Rosenbaum, PR, & Rubin, DB (1985). Membangun kelompok kontrol menggunakan multivariat cocok metode pengambilan sampel yang menggabungkan skor kecenderungan. Amerika Statistician, 39 (1), 33-38. Russell, TL (2015). Tidak ada dif signifikan