А как это связано с погруженностью языка в текст вообще не понятно
Напрямую.
Символ # достаточно широко используется в тексте и данных, и усложнять его ввод ради удобства комментирования не самое лучшее решение. Думаю, что обработка комментария с начала строки значительно упрощает анализ и компиляцию кода.