История харьковского училища для слепых детей уходит в 1881 г., когда офтальмологом А. Скребицким и общественным деятелем К. Гротом было создано Попечительство императрицы Марии о слепых.
Харьковское отделение было создано в 1886-м, а в 1887-м было открыто училище на ул. Немецкой (сейчас ул. Григория Сковороды), 41 в частном доме Бенедиктовой. Училище было рассчитано на 15 детей, в то время как реальное количество слепых детей было больше на порядок. Первым главой Харьковского отделения совета попечительства стал известный офтальмолог Л. Гиршман.
Финансирование училища осуществлялось за счет благотворительных взносов попечителей и обычных граждан, а также на «кружечный сбор», который осуществлялся в церквях в «воскресенье для слепых» (пятое воскресенье после Пасхи).
В 1890 г. училище переехало в более просторный дом Квитки на Основе, но попечительство понимало, что лучше всего для обучения слепых детей организовывать в специально построенном здании, изначально приспособленном для детей с особыми потребностями.
Оно было построено на перекрёстке Сумской и нынешней улице Данилевского в 1891-1892 гг. по проекту арх. С. Загоскина (при участии Ф. Шустера, по другим сведениям он и был автором проекта). Здание является памятником архитектуры.
В 1902-1903 гг. к зданию по проекту архитектора В. Немкина была пристроена домовая церковь Христа Спасителя, а в 1909-1913 гг. училище было значительно расширено — был построен корпус со стороны ул. Данилевского (проект В. Величко).
В училище была обширная брайлевская библиотека. Дети учились не только общим дисциплинам — тут существовал ремесленный класс с мастерскими, где дети, подростки и взрослые слепые могли овладеть рабочими навыками, которые бы помогли им во взрослой жизни.
В 1941 г. детей эвакуировать не успели (а дети еврейского происхождения были убиты). В одном из крыльев здания располагалась немецкая комендатура.
Харьковский специальный учебно-воспитательный комплекс имени В. Г. Короленко пострадал от российского ракетного удара 2 марта 2022 г.