Galera já falou sobre luz artificial, que é realmente a solução mais prática. Mas antes de sair gastando com painel LED, tenta um negócio que ninguém mencionou: plantio escalonado. Você faz um lote pequeno de alface e cebolinha agora, deixa crescendo enquanto começa outro lote em um pote separado. Quando a primeira muda tá vencida e você colhe, a segunda já tá pegando força. Dessa forma você não fica esperando semanas vendo a planta crescer de forma lenta e desanimadora.
Outra dica que funciona: se você tá mesmo achando caro o painel LED, usa aqueles spots de LED branco frio que vendem pra iluminação de casa mesmo (aquele com 6500K de temperatura de cor, que parece mais luz solar). Coloca a umas 15-20 cm das plantas e liga umas 12-14 horas por dia. Sai muito mais em conta que um painel específico pra plantas e faz basicamente o mesmo trabalho no seu caso. Cebolinha, alface e temperos tipo salsinha aguantam bem isso.
O último detalhe é validar a umidade da terra. Com pouca luz natural, a água demora mais pra evaporar e as plantas precisam menos dela, mas terra encharcada vai apodrecer a raiz. Coloca o dedo na terra antes de regar - só molha quando tá seca mesmo. Vaso com furo no fundo ajuda muito pra não criar poça.