UltraDateTimeEditorで和暦表示するには、JapaneseCalendarを設定したCultureInfoをUltraDateTimeEditorのFormatProviderプロパティに割り当ててください。フォーマットはMaskInputより指定してください。
CultureInfo ci = new CultureInfo("ja");
ci.DateTimeFormat.Calendar = new JapaneseCalendar();
ultraDateTimeEditor1.FormatProvider = ci;
ultraDateTimeEditor1.MaskInput = "gg yy年mm月dd日";