Можно ли работать в Белгороде, если РВП в Воронежской области, и если нет, то как быть в таком случае?

Нет, нельзя.

Для работы в Белгороде необходимо получить РВП в Белгородской области

Временно проживающий в Российской Федерации иностранный гражданин не вправе осуществлять трудовую деятельность вне пределов субъекта Российской Федерации, на территории которого ему разрешено временное проживание (п.5. ст.13 Федерального закона №115-ФЗ»).

Некоторые профессии и должности снимают это ограничение. Приказ Минздравсоцразвития России от 28.07.2010 N 564н определяет случаи, когда иностранный гражданин, временно пребывающий или проживающий в РФ, может осуществлять трудовую деятельность вне пределов субъекта РФ, на территории которого имеет разрешение на работу или разрешение на временное проживание. В частности:

- при направлении его в служебную командировку, общая продолжительность трудовой деятельности иностранного гражданина вне пределов указанного субъекта РФ в этом случае не может превышать 40 календарных дней в течение 12 календарных месяцев;

- если постоянная работа выполняется работником в пути или носит разъездной характер и это определено его трудовым договором, общая продолжительность трудовой деятельности иностранного гражданина вне пределов указанного субъекта РФ в этом случае не может превышать 90 календарных дней в течение 12 календарных месяцев.