Але доктор Гемлін не зупинився у своєму намірі, і у вересні 1863 року з трьома професорами та студентами-фуї він почав працювати в кімнаті великого будинку, тепер резиденції містера Гейзера, американського генерального віце-консула, який тоді використовувався для християнського богослужіння членами англійської та американської колоній, а також місіонерами Американської ради для теологічної семінарії. Коледж залишався там вісім років, поки доктор Гемлін вимагав від уряду дозволу на будівництво на власній території. Він став такою неприємністю, що одного разу Алі-паша вигукнув:
«Чи помре цей чоловік, Гемлін, і перестане турбувати його про свій вічний коледж?»
Приблизно в той час покійний Едвін Д. Морган з Нью-Йорка відвідав Константинополь і зацікавився ембріональним закладом. Повернувшись до Вашингтона, він розповів містеру Сьюарду, тодішньому держсекретарю, про ситуацію. Останній послав за турецьким міністром і дав йому кілька дуже серйозних розмов. Міністр, який був вражений серйозністю містера Сьюарда, телеграфував у Велику Порту, щоб негайно надати дозвіл на будівництво американського коледжу, щоб це не виявилося складним питанням.
Терн, який він передбачив, зовсім не усвідомлюючи власного впливу чи побоювань, які він викликав у свідомості султана, з’явився в Босфорі через кілька тижнів у вигляді того величного старого Гартфорда під командуванням адмірала Фаррагута. Адмірал здійснював навколосвітню подорож без найменшої політичної чи дипломатичної відповідальності, але нечиста совість султана не потребувала обвинувачувачів.
Син доктора Хемліна Альфред, тепер професор Колумбійського університету в Нью-Йорку, так прагнув побачити американський флагман, що переконав свого батька дуже неохоче втрачати час, як він тоді вважав, щоб піднятися на борт; і, віддавши шану адміралу, він пояснив, хто він і що він намагається зробити в Константинополі, і його труднощі з отриманням дозволу на будівництво від турецького уряду. Доктор Серопайн, вірменський лікар, який розумів ситуацію, був присутній на бесіді, і, знаючи, що адмірал того вечора мав обідати з великим візирем, запропонував йому поставити своєму господареві просте запитання:
«Чому ви відмовляєте американському коледжу в дозволі на будівництво своїх будівель?»
«Будь ласка, нічого більше не кажіть, — сказав доктор Серопайн, — і не коментуйте відповідь, яку ви отримаєте».
Через кілька днів було отримано імператорський ірад, який дозволяв звести необхідні будівлі для коледжу. Доктор Гемлін був майже паралізований, але невдовзі він дізнався, що турецький уряд, складаючи одне й інше, уявив, ніби Хартфорд був надісланий для виконання вимог нашого уряду від імені