Я кажется догадался почему так происходит у меня. Так получается если я сам начинаю масштабировать его. Например так
Код:
ScrollBox1.ScrollInView(_Panel);
ScrollBox1.VertScrollBar.Position:=100;
Это я хочу вниз прокрутить его и показать последний созданный элемент