Como não tem nenhum capítulo no livro que conta a história do ponto de vista do Loras ou Renly, fica difícil sacar mesmo.
Mas tem algumas insinuações sim... como o Loras ficando bem inquieto numa conversa com a Sansa assim que ela toca na morte do Renly.
Uma das partes que fica mais claro é um dos capítulos do Jaime em A Storm Of Swords, quando ele finalmente chega em King's Landing.
Loras desafia a Brienne porque ele acha que ela matou Renly, Jaime tentando acalmá-lo diz “Now sheathe your bloody sword, or I’ll take it from you and shove it up some place even Renly never found.”
Edit: achei um texto que fala mais sobre o assunto:
http://www.angelfire.com/ma4/mlarchives/faq/lorasrenly.html