Колесный пароход Гагара с различным коммерческим грузом вышел из Томска вниз по Томи в конце ноября 1879 года. Торопиться ему было некуда, быстро надвигался ледостав, и задача перед командой стояла следующая – дойти до предполагаемого места зимовки судна.

Интересен такой факт, что многие путешественники по Томи часто путают местоположения этих двух уникальных геологических объектов - Рябого (Поляковского) и Бабьего камня. Наверное, все дело расположенной выше в шести километров Бабьей протоки одноименной по своему названию с Бабьей горой, склоны которой как раз и образуют правый берег этой протоки. И верно - Бабья протока, Бабий камень, Бабья гора - все в одном месте и все логично. Однако турист проходящий Бабью протоку ни одного из вышеперечисленных камней не увидит. Есть правда там один скальный выступ, который легко можно спутать с Бабьим камнем. Возможно, это и происходит. Раз так часто встречается эта путаница на различных рыболовных форумах.