إعادة ابتکار الحکومة: دراسة تحليلية لتجـربة المملکة العربية السعودية في ضوء رؤية (2030) Reinventing Government: An Analytical Study of Saudi Arabia's Experience in the Light of Vision 2030

المؤلف

قسم الإدارة العامة، کلية إدارة الأعمال، جامعة الملک سعود، وجامعة إب اليمنية، الجمهورية اليمنية

المستخلص

هدفت هذه الدراسة إلى التعرف على مدى توافق ما تقوم به الحکومة السعودية وفقًا لرؤيتها الوطنية (2030) مع مفهوم إعادة ابتکار الحکومة بأبعاده وخصائصه المختلفة. وقد تم استخدام المنهج الوصفي التحليلي لجمع ودراسة الوثائق والبيانات الرسمية الخاصة بعملية الإصلاح الإداري في المملکة کالسياسات والبـرامج والمبادرات والممارسات الصادرة عن الحکومة. ومن خلال عملية التحليل والمقارنة تم التوصل إلى عدة استنتاجات، منها أن الحکومة السعودية تقوم بجهود ضـخمة لإنجاز أوسع حـرکة إصلاح حکومي، وأن مما تقوم به يتوافق إلى حدٍ کبيـر مع معاييـر وخصائص مفهوم إعادة ابتکار الحکومة والحکومة الريادية، ويبدو تجسيدًا واقعيًا لها، مع بعض التفاوت في تطبيق تلک المعاييـر؛ حيث يأتـي في المقدمة أنها حکومة ذات رسالة محددة بوضوح في رؤية (2030)، وأنها حکومة تحفيـز من خلال دعمها وتحفيـزها للقطاع الخاص، والتوجه نحو الخصـخصة والشراکة معه، وتهيئة البيئة الاستثمارية، وأن تصبح حکومة نتائج، وذلک من خلال تبنيها نظام إدارة الأداء الوظيفي، قياس الأداء المؤسسي للأجهزة الحکومية، وأن تکون حکومة إيـراد من خلال تعظيم وتنويع الإيـرادات العامة، وفرض ضرائب ورسوم جديدة على الخدمات في قطاعات التعليم والصـحة والکهرباء والعمالة الوافدة، وأن تصبح حکومة مدارة بأسلوب القطاع الخاص من خلال استقطاب الکفاءات الناجحة في القطاع الخاص للعمل لدى القطاع العام، وأن تتحول إلى حکومة مشروعات، وذلک من خلال إنشاء وتمويل عدد من المشروعات الاستـراتيجية، وأن تصبح حکومة لامرکزية من خلال تفويض صلاحياتها للأجهزة والمستويات الإدارية الأدنى کلما أمکن، وأن تغدو حکومة ذات منظور استـراتيجـي في التعامل مع المشکلات والأزمات قبل وقوعها، من خلال تأسيس عدد من المراکز المتخصصة، کما تسعى لأن تکون حکومة موجهة بالعملاء من المواطنيـن والمقيميـن طالبـي الخدمات العامة عبـر عدة قنوات وتطبيقات تبنتها الأجهزة الحکومية، وأن تکون حکومة تنافسية تتنافس مؤسساتها بعضها مع بعض، ومع القطاع الخاص على تقديم الخدمات العامة. کذلک توصلت الدراسة إلى وجود نقاط تشابه بيـن التجـربة السعودية والتجـربة الأمريکية في مجال إعادة ابتکار الحکومة من حيث المنطلقات والأهداف والأدوات.
This study aims to identify the compatibility of the Saudi government's efforts, according to its national vision (2030) with the concept of Re-inventing government in its different dimensions and characteristics. The analytical, descriptive approach has been used to collect documents and data about the administrative reform such as the policies, programs, initiatives and practices issued by the government. The study reached several conclusions: The Saudi government is making great effort to achieve the widest movement of government reform that is largely in line with the standards and characteristics of the concept of Re-inventing government and the entrepreneurial government. That in terms of the following: mission driven government because it has a clear mission embedded in Vision (2030). In addition, it is the catalytic government by supporting and motivating the private sector, privatization, partnership and creating the investment environment. And to become result oriented government through adopting systems for the performance management and the institutional performance of government agencies. Moreover, to be a revenue government by maximizing and diversifying public revenues, and impose new taxes and fees on services in the sectors of education, health, electricity and expatriate labor. In addition, to become a government managed by adopting the methods of private sector in the public sector. And to become an enterprising government through establishing and financing a number of strategic projects. Furthermore, it seeks to become a decentralized government via delegating administrative levels. As well as being an anticipatory government in dealing with problems and crises through establishing a number of specialized centers. And to be a customer driven government in order to provide a good service to citizens and residents through several means and applications adopted by government agencies. In addition, to be a competitive government to compete itself and the private sector to provide public services. The study also found some similarities between the Saudi experience and the American experience in re-inventing government in terms of Foundations, objectives and tools.

الكلمات الرئيسية

الموضوعات الرئيسية


رشید، أحمد. (1996). إعادة اختـراع وظائف وإدارة الحکومة. (ط1). القاهرة: دار النهضة المصریة.
ساعاتی، أمیـن. (1999). إعادة اختـراع الحکومة. (ط1). القاهرة: دار الفکر العربی.
الشیحة، عدنان؛ والدیب سمیـر. (2019). مدى الحاجة لتطویـر أنظمة وهیاکل الإدارة المحلیة لتواکب رؤیة المملکة 2030. ورقة مقدمة لمؤتمر التنمیة الإداریة فی ضوء رؤیة الممــلکة 2030، والمنعقد خــلال الـفـتـرة (18-20 /3/2019)، الریاض: معهد الإدارة العامة. ص ص (43-72) نسخة إلکتـرونیة متاحة عبـر الرابط (الدخول 1/6/2019): (https://www.ipa.edu.sa/ar -sa/events/Conferences/adsv2030/Pages/papers.aspx)
یوسف، حلمی شحادة. (2006). حـرکة إعادة ابتکار الحکومة: النظریة والممارسة فی التجـربة الأمریکیة. مرکز بحوث کلیة العلوم الإداریة بجامعة الملک سعود.
عبد الکریم، عاشور. (2010). دور الإدارة الإلکتـرونیة فی تـرشید الخدمة العمومیة فی الولایات المتحدة الأمریکیة والجـزائر. رسالة ماجستیـر غیـر منشورة. جامعة قسنطینة بالجـزائر. متاح عبـر الرابط (الدخول 1/6/2019): (https://bu.umc.edu.dz/theses/sc-politiques/AACH3147.pdf).
المکرمی، هاشم؛ إسماعیل، محمد؛ عبد الله، مروان؛ التمام، تـرکی. (2019). التحدیات التـی تواجه الأجهزة الحکومیة فی تنفیذ بـرامج رؤیة المملکة 2030. ورقة مقدمة إلى: مؤتمر التنمیة الإداریة فی ضوء رؤیة الممــلکة 2030، والمنعقد خــلال الـفـتـرة (18-20 /3/2019)، الریاض: معهد الإدارة العامة. ص ص (571-611)، نسخة إلکتـرونیة متاحة عبـر الرابط (الدخول1/6/2019):www.ipa.edu.sa/ar-sa/events/Conferences/adsv2030/Pages/papers.aspx
المطلق، نایف سلیمان. (2018). التحول الاستـراتیجـی لممارسات إدارة الموارد البشریة وفق بـرنامج الملک سلمان لتنمیة الموارد البشریة. رسالة دکتوراه غیـر منشورة. کلیة إدارة الأعمال بجامعة الملک سعود.
المعشوق، منصور؛ الضلعان، علی؛ البدر، محمد؛ المشعان، محمد. (2019). التطور التنظیمی فی ضوء رؤیة المملکة 2030. ورقة مقدمة إلى: مؤتمر التنمیة الإداریة فی ضوء رؤیة الممــلکة 2030، (18-20 /3/2019)، الریاض: معهد الإدارة العامة. ص ص (685-708) نسخة إلکتـرونیة متاحة عبـر الرابط (الدخول 1/6/2019): (https://www.ipa.edu.sa/ar-sa/events/Conferences/adsv2030/Pages/papers.aspx)
القحطانی، سالم سعید. (2019). واقع التخطیط الاستـراتیجـی فی الأجهزة الحکومیة ودوره فی تحقیق رؤیة المملکة 2030. ورقة مقدمة لمؤتمر التنمیة الإداریة فی ضوء رؤیة الممــلکة 2030، (18-20 /3/2019)، الریاض: معهد الإدارة العامة. ص ص (5-39) نسخة إلکتـرونیة متاحة عبـر الرابط (الدخول 1/6/2019) (https://www.ipa.edu.sa/ar-sa/events/Conferences/adsv2030/Pages/papers.aspx):
مقابلة الأمیـر محمد بن سلمان ولی العهد السعودی مع قناة العربیة بتاریخ (25/4/2016)، متاحة عبـر الرابط (الدخول 1/6/2019): (https://www.youtube.com/watch2v=uhWfUK0aizw).
موقع الشراکة الوطنیة لإعادة ابتکار الحکومة الأمریکیة (https://govinfo.library.unt.edu/npr/whoweare/appendixf.html). الدخول بتاریخ (2/6/2019).
موقع رؤیة المملکة العربیة السعودیة 2030 (https://vision2030.gov.sa). الدخول بتاریخ (2/6/2019).
موقع بـرامج تحقیق رؤیة المملکة العربیة السعودیة (https://vision2030.gov.sa/ar/programs). الدخول بتاریخ (2/6/2019).
موقع بـرنامج التحول الوطنی فی السعودیة (https://vision2030.gov.sa/ar/programs/NTP%202.0#). الدخول بتاریخ (1/6/2019).
موقع المرکز الوطنی لأداء الأجهزة الحکومیة فی السعودیة (www.adaa.gov.sa/About%20Adaa). الدخول بتاریخ (2/6/2019).
موقع الهیئة العامة للزکاة والدخل السعودیة (www.vat.gov.sa/ar). الدخول بتاریخ (3/6/2019).
موقع الهیئة العامة للتـرفیه فی السعودیة (www.gea.gov.sa). الدخول بتاریخ (3/6/2019).
موقع وزارة المالیة السعودیة - بیان المیـزانیة العامة لعام (2019) (www.mof.gov.sa/Pages/default.aspx). تم الدخول بتاریخ (3/6/2019).
موقع وزارة العمل والتنمیة الاجتماعیة السعودیة (https://mlsd.gov.sa). الدخول بتاریخ (4/6/2019).
موقع مرکز محمد بن راشد آل مکتوم للابتکار الحکومی (www.mbrcgi.gov.ae/ar/home-ar). الدخول بتاریخ (4/6/2019).
موقع القمة العالمیة للحکومات (https://www.worldgovernmentsummit.org). الدخول بتاریخ (4/6/2019).
موقع وزارة الخدمة المدنیة السعودیة (www.mcs.gov.sa/Pages/Default.aspx). الدخول بتاریخ (4/6/2019).
موقع وزارة الاقتصاد والتخطیط السعودیة (www.mep.gov.sa/ar/Delivery-Unit). الدخول بتاریخ (1/6/2019).
موقع وکالة الأنباء السعودیة (www.spa.gov). الدخول بتاریخ (5/6/2019).
موقع جـریدة الریاض (www.alriyadh.com/1503583). الدخول بتاریخ (5/6/2019).
موقع الجـریدة الرسمیة السعودیة (أم القرى) (www.uqn.gov.sa/articles/1558223495733012200/). الدخول بتاریخ (1/6/2019).
موقع جـریدة الشرق الأوسط (https://aawsat.com/). الدخول بتاریخ (5/6/2019).
موقع صـحیفة الوطن السعودیة (https://www.alwatan.com.sa). الدخول بتاریخ (5/6/2019).
موقع The Business of Federal Technology (https://fcw.com/articles/2017/12/06/kelman-25-years-of-acquisition-reform.aspx). الدخول بتاریخ (5/6/2019).
موقع ویکیبیدیا – السیـرة الذاتیة لأعضاء مجلس الوزراء (http://cutt.us/wmffJ). الدخول بتاریخ (5/6/2019).
موقع منصة اعتماد للمناقصات والمشتـریات العامة السعودیة (https://etimad.sa/LandingPage).
موقع المرکز الوطنی للدراسات الاستـراتیجیة بالسعودیة (https://csd.gov.sa/ar/n-almrkz/tasys-almrkz2current=/node). الدخول بتاریخ (5/6/2019).
Abrandt, J. (1999). “The Reinventing Government Movement: A Cultural Perspective”, Master's Degree. Department of Political Science, LUND UNIVERSITY. Retrieved (1-5-2019) from https://lup.lub.lu.se/student-papers/ search/publication /1708063. file:///C:/Users/sama/Downloads/PDF3925%20(7).pdf.
Brudney, J. L. and Wright, D. S. (2002). “Revisiting Administrative Reform in the American States: The Status of Reinventing Government During the 1990s”, Public Administration Review, 62 (3), 353-361. Retrieved (1-5-2019) from https://www.jstor.org /stable/31102192seq=1#page_scan_tab_contents.
Byong-Seob, K. (1999). “Government Reforms in Korea. Entrepreneurial Government or Democratic Government”, Korea Journal (Seoul), 39 (2), 48-71. Retrieved (1-5-2019) from file:///C:/Users/sama/Downloads/PDF3925%20(9).pdf.
Chang, Y. (2008). The Importance of the False Claimsact in the Middle Age of NPM and Reinvinting Government Stream.(Unpublished Ph.D). Retrieved (1-5-2019) from: https://www.law.kuleuven.be/integriteit/egpa/previous-egpa-conferences/madrid-2007/yongjin.pdf.
Chigudu, D. (2014). “Implementing New Public Management in Zimbabwe: Challenges and Obstacles”, Journal of Governance and Regulation, 3 (2), 43-9.‏ Retrieved (9-5-2019) from https://virtusinterpress.org/IMG/pdf/10-22495_jgr_v3_i2_c1_p4.pdf.
Collins, P. and Byrne, L. (2004). Reinventing Government Again. The Social Market Foundation, London. Retrieved (1-5-2019) from http://www.smf.co.uk/wp-content/uploads/2007/12/Publication-Reinventing-Government-Again.pdf.
DeLeon, L., and Denhardt, R. B. (2000). “The Political Theory of Reinvention”, Public Administration Review, 60(2), 89-97. Retrieved (1-5-2019) from: https:// doi. org/10.1111/0033-3352.00068.
Ford, M. R. and Andersson, F. O. (2017). “Determinants of Organizational Performance in a Reinventing Government Setting: Evidence From the Milwaukee School Voucher Programme”, Public Management Review, 19 (10), 1519-1537. Retrieved (1-5-2019) from:doi.org/10.1080/14719037.2017.1296487.
Fox, C. J. (1996). “Reinventing Government as Postmodern Symbolic Politics”, Public Administration Review, 56(3), 256. Retrieved (1-5-2019) from: https://search. proquest. com/ openview/9e73a4b60ee621033d95d9be27c98af9/12pq-origsite=gscholar&cbl=42034.
Frederickson, H. G. (1996). “Comparing the Reinventing Government Movement with the New Public Administration”, Public Administration Review, 263-270. Retrieved (1-5-2019) from: https://search.proquest.com/openview/aa5e4104a34250758ebd8c4cd0305000/12pq-origsite=gscholar&cbl=42034.
Gargan, J. J. (1997). “Reinventing Government and Reformulating Public Administration”, International Journal of Public Administration, 20 (1), 221-247. Retrieved (2-5-2019)from:https://doi.org/10.1080/01900699708525193.
Gore, A. (1993). From Red Tape to Results: Creating a Government That Works Better and Costs less: Report of the National Performance Review. Retrieved (1-5-2019) from: https://files.eric.ed.gov/fulltext/ED384294.pdf.
Gore, A. (1994). Government That Works Better and Cost L:ess. Retrieved (2-5-2019) from: https://govinfo.library.unt.edu/npr/library/nprrpt /annrpt/ pdf/com01.pdf.
Gore, A. (1995). Common Sense Government. Works Better and Costs Less. Third Report of the National Performance Review. Retrieved (2-5-2019) from https://govinfo.library.unt.edu/npr/library/nprrpt/annrpt/pdf/com01.pdf.
Kamensky, J. M. (1996). “Role of the Reinventing Government: Movement in Federal Management Reform”, Public Administration Review, 56 (3), 247. Retrieved (2-5-2019) https://search.proquest.com/openview/39d0a628920ecadbafe7af57bb2dc2bd/12pq-origsite=gscholar&cbl=42034.
Kim, P. S.; Halligan, J.; Cho, N.; Oh, C. H. and Eikenberry, A. M. (2005). Toward Participatory and Transparent Governance: Report on the Sixth Global Forum on Reinventing Government. Public Administration Review, 65 (6), 646-654. Retrieved (2-5-2019) from https://onlinelibrary. wiley.com/doi/abs/10.1111/j.1540-6210.2005.00494.x.
Kellough, J. E. (1998). “The Reinventing Government Movement: A Review and Critique”, Public Administration Quarterly, 6-20. Retrieved (1-5-2019) from: https://www. jstor.org/stable/408617322seq=1#page_scan_tab_contents.
Kettl, D. F. (1997). “The Global Revolution in Public Management: Driving Themes, Missing Links”, Journal of Policy Analysis and Management, 16(3), 446-462. John Wiley & Sons, Inc.
Kwon, S. and Tang, S. Y. (1998). “Reinventing Government: A Critique From An Institutional Perspective (1)”, International Journal of Public Administration, 21(10), 1449-1471. Retrieved (5-5-2019) from: https://doi.org/10.1080/01900699808525356.
Lenkowsky, L. and Perry, J. W. (2000). Reinventing Government: The Case of National Service. Retrieved, (1-5-2019) from DOI:10.1111/0033-3352.00092.
Mansour, A. M. (2017). “Has the United Arab Emirates Federal Government Succeeded to Transform its Federal Bureaucracy Into a New Public Management System”, International Public Management Review, 18(1). Retrieved (9-5-2019) from file:///C:/Users/sama/ Downloads/ MyIPMRPaper2017.pdf.
Murphy, C.; Thai, K. V. and Carter, R. Y. (2002). “Reinventing Government: Theory and Practice”, A Symposium. Public Administration Quarterly, 26 (1/2), 3. ProQuest Central pg. 3. Retrieved (5-5-2019) from: https://search.proquest.com/openview /368bcb2b40a4f2e4ac00d77dad14918d/12pq-origsite=gscholar&cbl=37867.
Nathan, R. P. (1995). “Reinventing Government: What Does It Mean”, Public Administration Review .Vol. 55, No. 2, pp. 213-215. Retrieved (5-5-2019) from DOI: 10.2307/977192.
Onder, M. (2012). Reinventing Government: Historical Foundations, Philosophy, Critique, and Future Implications. Uluslararası Hakemli Sosyal Bilimler E-Dergisi, 28, 1-20. Retrieved (5-5-2019) from: http://www.acarindex.com/ dosyalar/ makale/ acarindex-1423868047.pdf.
Osborne, D. E. and Gaebler, T. (1993). Reinventing Government: How the Entrepreneurial Spirit is Transforming the Public Sector. New York: Penguin. Retrieved (5-5-2019) from https://doi.org/10.1002/pam.4050130113.
Osborne, D. and Plastrik, P. (1997). Banishing Bureaucracy: The Five Strategies for Reinventing Government. Addison-Wesley Publishing Company. Retrieved (5-5-2019) from https://books.google. com.sa/books/about/Banishing_ Bureaucracy.html2id =IjrtAAAACAAJ&redir_esc=y.
Osborne, D. (1993). “Reinventing Government”, Public Productivity & Management Review, 349-356. Retrieved (5-5-2019) from DOI: 10.2307/3381012.
Pesch-Cronin, K. (2004). “Customer-driven Government to Improve the Performance in a Police Agency”, (Ohio). (Unpublished Doctoral Dissertation). Retrieved (5-5-2019) from: https://search.proquest.com/openview /394eaa 403449563d4ab0bc6e95088ae4/12pq-origsite=gscholar&cbl= 18750&diss=y.
Qiao, Y. and Thai, K. V. (2002). “Reinventing Government at the Federal Level: The Implementations and the Prospects”, Public Administration Quarterly, 89-11. Retrieved (5-5-2019) from https://www.jstor. org/stable/ 412881642seq=1#page_scan _tab_contents.
Rivera, M. D.; Streib, G. and Willoughby, K. G. (2000). “Reinventing Government in Council Manager Cities”, Public Performance & Management Review, 24 (2), 121-32.‏ Retrieved (9-5-2019) from: DOI: 10.2307/3381263.
Rogers, G. (2000). “National Performance Review Government Reinvention, 1993— 1999: A Total Quality Management Perspective”, (Unpublished Master Thesis). College of Social Sciences California State University. Fresno. Retrieved (5-5-2019) from https://search-proquest-com.sdl.idm.oclc.org/2accountid=142908.
Saint-Martin, D. (2001). “How the Reinventing Government Movement in Public Administration was Exported From the US to Other Countries”, International Journal of Public Administration, 24 (6), 573-604. Retrieved (7-5-2019) from doi.org/ 10.1081/PAD-100104397.
Santiso, C. (2015). “Governing to Deliver: Three Keys for Reinventing Government in L atin A merica and the Caribbean”, Governance, 28 (2), 123-126.Retrieved (7-5-2019) from: https://onlinelibrary.wiley.com/doi/full/10.1111/gove.12138.
Scott, G. L. (1999). “A Treatise on the Emergence of an Entrepreneurial Government: A Study on Reinventing Government: Environmental Security Issues Associated with the North American Free Trade Agreement (NAFTA)”, (Unpublished Doctoral Dissertation). Idaho State University. Retrieved (7-5-2019) from https://search-proquest-com.sdl.idm.oclc. org/docview/3045427972accountid=142908.
Shojaei, S.; Shirvani, A. and Etebarian, A. (2016). “Examining Reinventing Government from Opponents’ Point of View”, International Business Management, 10 (5), 633-637. Retrieved (7-5-2019) from: http://docsdrive.com/pdfs/medwelljournals/ibm/2016/633-637.pdf.
Spicer, M. (2004). “Public Administration: The History of Ideas, and the Reinventing Government Movement”, Public Administration Review, 64 (3), 353-362. Retrieved (7-5-2019) from doi.org/10.1111/j.1540-6210.2004.00379.x.
Suvaryan, Yuri; Mirzoyan, Valeri; Hayrapetyan, Ruben. (2014). Public Administration: Theory and History. books.google. Retrieved (7-5-2019) from http://cutt.us/hLVY9.
Sylvester, K. and Umpierre, M. (2001). Red Tape, Silver Hammers, & Shattered Ashtrays: What States and Communities Can Learn from Eight Years of Federal Reinvention. Retrieved (7-5-2019) from https://files.eric.ed.gov/fulltext/ED458346.pdf.
The Library of Congress. (2019). The National Performance Review and Other Government Reform Initiatives: An Overview, 1993-2001. The Library of Congress, Retrieved (7-5-2019) from: https://www. everycrsreport.com/files/20010604_RL30596_8f4af66aba0937 c6bd45c4b8933f43353749ec02.pdf.
Thompson, F. J. and Riccucci, N. M. (1998). Reinventing Government: Annual Review of Political Science, 1(1), 231-257. Retrieved (9-5-2019) from DOI: 10.1146 /annurev. polisci.1.1.231. https://www.researchgate.net /publication /234836142_Reinventing_Government.
Van Wart, Montgomery. (1995). “The First Step in the Reinvention Process: Assessment”, Public Administration Review. Vol. 55 (1995): 429-437. Retrieved (9-5-2019) from https://www.jstor.org/stable/9767672seq= 1# page_scan_tab_contents.
Van Gramberg, B., Teicher, J., & Rusailh, J. (2005). Reinventing government in Australia: Whole of government in a federation.‏ Working Paper. Victoria University, Melbourne, Australia. Retrieved (9-5-2019) from http://vuir.vu.edu.au/id/eprint/445.
Vito, G. F. and Kunselman, J. (2000). “Reinventing Government: The Views of Police Middle Managers”, Police Quarterly, 3 (3), 315-330.‏ Retrieved (9-5-2019) from https://doi.org/10.1177/1098611100003003005.
Williams, D. W. (2000). “Reinventing the Proverbs of Government”, Public Administration Review, 60 (6), 522-534. Retrieved (9-5-2019) from: https://onlinelibrary. wiley.com/doi/abs/10.1111/0033-3352.00115.
Worthley, J. A. and Tsao, K. K. (1999). “Reinventing Government in China: A Comparative Analysis”, Administration & Society, 31 (5), 571-587.‏ Retrieved (9-5-2019) from https://doi. org/10.1177/00953999922019247.
Yang, H. S. (2009). “Reinventing Government: Institutional Analysis on Administrative Reform in China”, In: 2009 International Conference on Management Science and Engineering, (pp. 2032-2038). Retrieved (9-5-2019) from:DOI: 10.1109/ICMSE.2009.5318876.