Так как любое выражение javascript в React можно рендерить в фигурных скобках {}, то комментарии можно использовать в таком виде:

{/* Многострочный комментарий */}

Или однострочный комментарий, но обязательно(!) должно быть несколько строк:

{// Несколько строк 
 // с однострочным комментарием
 // ...
}