¿Peligroso? No, probablemente no.
De hecho, la mayoría de nosotros comemos demasiada azúcar como es. Recortar es casi seguro un buen movimiento.
Y cortar todo el pan probablemente tampoco te lastime. Los panes refinados deben cortarse, como el azúcar. Los granos enteros probablemente estén bien como parte de una dieta balanceada. Y algunas culturas, algunas de las cuales son parte de las Zonas Azules con bajas tasas de diabetes y altas tasas de centenarios, casi no comen pan (los habitantes de Okinawa tienden a comer la mayor parte de sus carbohidratos del arroz, aunque otras regiones sí comer granos enteros y también hacerlo bien!).
En cuanto al resto de tu dieta.
Los alimentos que mencionaste no son malos, pero es mejor agregar algunas frutas y verduras. Los alimentos que mencionaste son casi todos blancos. Un buen truco es tirar todos los colores que puedas (de vegetales). Ese es un truco rápido para obtener un mejor equilibrio de vitaminas y minerales.
PS: La persona que le dijo que tiene diabetes por no comer azúcar y pan es engañada. No he encontrado investigaciones que sugieran que ese sea el caso.