סיפור מינוי הרב אורנשטיין ודחייתו את הרבנות מופיע בהקדמת אברהם דב בער פלאם לספר המידות על פי המגיד מדובנא (באתר הספר העברי). תחילה הציעו את המינוי לדודו הזקן. לשמחתם זה סירב, והעבירו את המינוי לאורנשטיין. אלא שאשת הדוד ששמעה על מינוי הצעיר התקוממה על כך שבעלה יהיה פחות מאחיינו. זו שכנעה את הדוד הזקן לחזור בו מסירובו. הרב אורנשטיין שמע זאת ומיד ויתר על מעמדו. ועד העיר החליט בכל זאת לבוא ולפייסו על אבדן הרבנות בירוסלב. במקרה נקלע למקום המגיד מדובנא אשר הצליח למצוא הסבר יפה בכתובים, והרב אורנשטיין זכר זאת לטובה גם בערוב ימיו. (בספר הרב מוזכר מספר פעמים כ'רב א"ש' - ראשי תיבות אורן-שטיין, מתוך כוונה לשמר את זכויות היוצרים של המספר "פלאם" שמשמעות שמו ביידיש הוא 'אש'.)
