Деякі випадки, пов'язані з заснуванням і ранньою історією Роберт-коледжу, досить романтичні. Під час Кримської війни нью-йоркський купець Крістофер Роберт відвідав Константинополь і одного разу перепливаючи Босфор на човні до Скутарі, головного передмістя на азіатському боці наткнувся на човен із хлібом, який дуже нагадував той, до якого він звик удома. Після запиту він дізнався, що хліби походять із печей американської місіонерської школи, якою керує чоловік на ім’я Хемлін у Бебеку, на протилежному боці протоки, і що вони прямують до лікарень, заснованих Флоренс Найтінгейл для догляду за хворими та пораненими британськими солдатами. Містер Роберт, який був затятим шотландцем, був вражений мудрістю місіонера, який уклав би таку домовленість, і скористався нагодою відвідати школу. Доктор Гемлін пояснив, що отримав контракт на постачання британських лікарень хлібом: по-перше, тому що йому потрібні були гроші; по-друге, тому що їм був потрібен хліб, і, по-третє, тому що він мав промислове відділення при своїй школі і намагався навчити своїх учнів, як заробляти собі на життя.
Пекар-місіонер і шотландський купець незабаром стали близькими друзями, і доктор Гемлін не втратив можливості переконати його в можливостях американського коледжу в столиці Османської імперії. Як наслідок, пан Роберт дав доктору Хемліну 30 000 доларів на придбання ділянки та будівництво будівлі.
Доктор Хамлін вибрав землю, на якій зараз стоїть коледж, але власник, Ахмед Вефік-паша, турецький посол у Парижі та відома людина свого часу, відмовився продати. Тож доктору Гемліну довелося піти в інше місце та оглянути двадцять два місця. Як найкращий, він вибрав один над селом Курушесмех і купив його, але турецькі знатні особи в околицях протестували проти зведення християнського коледжу в їхніх околицях, і землю залишався незайнятим до моменту продажу кілька років тому. Тим часом Ахмед-Вефік-паша потребував грошей через неспроможність уряду забезпечити його значні витрати в Парижі, і він прийняв пропозицію, від якої раніше відмовився. Дозвіл на будівництво було отримано без особливих труднощів, але щойно роботи почалися, поліція припинила їх, як не дивно, за скаргою Франції та Росії, посли яких заперечували проти впливу американського коледжу на береги Босфору.