0: Всем привет, меня зовут Костя. И добро пожаловать на большой тест китайских нейросетей. Вайп кодинге для теста я подобрал 5 нейросетей, 5 китайских нейросетей, квен 3 точка 6, джилем 5 точка.

1: 1 не смотрите на то, что gm здесь 5, просто его нет на open роутере минимакс 2 точка 7 cut кодер про в 2 e chimica 2 с половиной тестировать все эти нейросети я буду при помощи open кода.

2: На какие-то у меня есть подписка, на какие-то нет, я буду подключать опен роутер. Для этого всего какие-то просто бесплатно доступны, например, queen 3 и 6. И вот так вот у меня все это выглядит прежде чем я все

3: Тесты запущу. Я сначала предлагаю обсудить проекты, то есть запускать мы все это будем в изолированной среде. То есть на этом устройстве, на макбуке нет абсолютно никаких других проектов, кроме как на данный момент, пус

4: Полностью папок с описанием проектов мы можем зайти, допустим, в джилем. То есть у всех все одинаково внутри. Здесь мы зайдём в джилем, допустим, и у нас здесь есть mz файлы, то есть это файлы с описанием

5: Проектов, что у нас внутри этих файлов мы можем зайти в visual studio code и посмотреть. То есть у нас здесь описание проектов, то есть это инструкции так называемые тоже самое по дашборду на

6: Je и игра, да, и про сами тесты у нас будет 3 д объект. Далее у нас будет дашборд, написанный при помощи некст джиэса, то есть у нас есть такое требование и игра.

7: Везде у нас написаны промты таким образом, чтобы не указывать явно, что нужно сделать именно по стилистике, по каким-то моментам логическим. То есть нейросети должны до этого додумываться сами, а мы переходим к 1 тесту везде. Мы сначала начнём с плана, то есть

8: Я везде указываю, что это plan mode и мы будем все это запускать. Затем, как будет план готов у каждой нейросети я запущу билд и мы уже будем оценивать эти проекты. То есть

9: Я сейчас это все запускаю.

10: И в конце мы пробежимся по каждому проекту и уже будем сравнивать лоб в лоб, что каждая из нейросетей нам сделает. Итак, наши нейросети отработали квн 3 6 работал 5 минут, джим 5, 1 4 минуты 52 секунд.

11: То есть вы можете здесь видеть, кто за сколько справился вот, допустим, cat кодер за 2 минуты 44 секунды, минимакс за 1 минуту 57 секунд и кимика 2 с половиной за 3 минуты 42 секунды здесь также указано, кто сколько.

12: Токенов потратил, то есть 27000, например, здесь 21028, 20 и так далее. Теперь по результатам мы также будем идти по порядку. Это у нас джил.

13: Не справился. То есть у нас здесь какие-то ошибки, мы их сейчас скинем.

14: Где у нас тут джим джим? Вот он мы сейчас скинем ошибки, пусть он исправляет эти ошибки. Далее. Далее у нас кэт кодер, здесь у нас тоже ничего не работает. То есть здесь у нас тоже есть какие-то

15: Ошибки то есть он у нас тоже не справился с такой задачей, достаточно простой где у нас здесь cat кодер, также отправляем ему ошибки, даём 2 шанс нейронкам кими кими у нас справился то есть.

16: Вот она у нас солнечная система. То есть у нас здесь есть планетки на каждую. Можно пожамкать, узнать, что это за планетка.

17: То есть вот так вот у нас солнечная система выглядит, то есть можно, ну то есть все здесь работает, то, что-то, что-то, что написано в промте, у нас все и работает. То есть можно увеличить, можно отдалить. Вот у нас луна крутится вокруг земли.

18: В общем, кимика 2 с половиной справился. Отлично. Смотрим далее. То есть у нас с минимаксом та же самая проблема. То есть ничего у нас здесь не работает.

19: И примерно все те же ошибки. Сейчас мы кимика 2, вернее, минимакс, это все кинем, чтоб он исправил эти ошибки.

20: Так, тоже самое у нас с квеном, то есть у нас тоже ничего не работает, у нас также есть ошибки, хотя было написано, что-то есть у них примерно 1 и та же ошибка, ошибка, корс, хотя было написано

21: Что запуск будет локальный, позаботьтесь об этом. Ну ничего страшного, мы отправим сейчас эти ошибки. Пусть у нас все это исправится. Как только они все исправят, мы посмотрим ещё раз и поставим галочку кимика 2 с половиной.

22: Что он справился с 1 раза. Он, в отличие от остальных, понял, что требуется, что запуск будет локальный, что нужно это учесть. Итак, нейросети все внесли правки в свои проекты, за исключением химика 2 с половиной. У него с 1 раза все это получилось и

23: Сейчас мы 1 за другим проекты будем просматривать. Итак, данный объект у нас сделал джил вот такой вот. То есть у нас здесь есть планеты, у нас здесь есть солнце вокруг солнца, у нас все это движется

24: Можем убирать орбиту, название и передвигать камеру, увеличивать, уменьшать и так далее. Это сделал у нас кэт кодер. Вы можете всегда видеть в браузере, то есть по пути какая

25: Сеть это делала, это у нас сделал cat кодер, очень тёмное все получилось мало что видно, видно солнце, видно чуть чуть планеты, что они вертятся ну то есть качество, видите, что оно похуже, чем у

26: Мы также можем здесь показывать орбиту. Кстати, название он не показывает. Я смотрю, можем остановить движение планет. Можем возобновлять, ну, такое себе по качеству.

27: Уже видно похуже. Ещё раз хочу показать то, что сделано скимми. То есть у нас здесь все работает. Орбиты лейблы показываются, планеты движутся.

28: У нас даже

29: Видно, что солнце как-то уходит у нас даже sweet меняется я смотрю на юпитере, когда вращение происходит.

30: Так.

31: Вот такое вот получилось у kimi, то есть планеты вращаются, луна тоже вращается вокруг земли, вот такое качество получилось у kimi no. Сделано это с 1 раза, без дополнительных правок это сделал минимакс, то есть мы видим, что уже сразу

32: Качество похуже планеты все тёмные, их толком не видно. Вот эти вот объекты не движутся. Нет, они на месте стоят, движутся только планеты, и они тёмные, их практически не видно. Сразу видно качество гораздо хуже, чем у

33: Остальных.

34: Даже наверное похуже, чем у cat кодера, хотя, казалось бы, и это сделал наш queen вот такой результат у него солнце наиболее интересно выглядит, чем у остальных и.

35: Нету. Он проработал гораздо лучше. Допустим, ту же землю, она прям ещё и вокруг себя движется. Что интересно, это заметно.

36: Вот эти объекты тоже, кстати, перемещаются. Юпитер передвигается, марса луна наворачивает вокруг земли. В целом это выглядит ну прям достойно.

37: Не хуже точно, чем у других, а возможно, даже местами лучше также можем скрыть орбиту, название приблизить, отдалить. В общем, вот такой результат. Итак, переходим к следующему.

38: Тесту. Я уже им выдал новый Эмди файл, который они должны прочитать и по нему создать сначала план, а потом и проект. То есть я сейчас все это запускаю. Дело.

39: Пускай они начнут разрабатывать, а в конце я все также покажу вам то, что у них получилось если в случае 3 d объекта они сделали примерно все тоже самое, то здесь, я думаю, будет более более понятно кто как дела.

40: Хотя даже и по 3 д объекту было видно, что кто хуже, кто лучше справляется. Итак, все нейросети справились, за исключением у нас. Минимакс почему-то завис на моменте, на моменте, когда

41: Он пытался протестировать, запустить локально свой проект, почему-то ему долго не удавалось, но я проверил, он запускается, все с ним нормально. Почему-то вот здесь он в какую-то петлю попал, может быть из за того, что другие были запущены поэтому

42: Адресу уже нейросети, в общем, не знаю, но примерно он дольше это делал. Вот примерно вот это его время тоже самое про химика 2 с половиной. Этот в моменте почему-то с ошибкой упал.

43: В общем, что-то вылетело в целом он примерно тоже за такое же время сделал. То есть вот этих вот 3 примерно по 15 минут. Здесь 12, здесь 12:30. А сейчас мы будем запускать каждый проект по очереди и проверять, насколько хорошо.

44: Они справились с задачей. Начну тестировать я с gym. То есть я новый открою, терминал, напишу, сиди, выберу здесь джил его проект, перейду и наберу npm.

45: Def каждый раз это буду проделывать, покажу всего лишь раз. Итак, вот сервер я запускаю, чтобы посмотреть что у нас сделал джил, я вижу, что уже здесь косяк с кнопкой эксплор зе мэп.

46: Также у нас какая какое-то есть предупреждение окей, смотрим что получилось. Да, получилось что-то не очень. Здесь что-то с css, скорее всего с отступами.

47: Ну, что-то, что-то, в общем, не удалось у Джима.

48: Так, я вижу, что все работает, как бы дашборд работает, все цены есть.

49: Но просматривать это неудобно.

50: Возможно, нам стоит попросить, чтобы он пофиксил вот это вот все.

51: Тут вот есть даже какие-то ошибки, я смотрю.

52: Попробуем вот это ему все скинуть и написать.

53: Fixeye эсэс.

54: Fixeye ес. И вот это все отправим, а я тем тем временем открою какой-то другой проект.

55: Посмотрим, что сделал у нас kat кодер, он сделал это отдельным проектом. Окей.

56: Запустим сервер, посмотрим.

57: Так, cat кодер у нас сделал все неплохо, то есть у нас даже никаких предупреждений нет, приятная страница ну, здесь то в целом тоже была приятная ну давайте смотреть дальше здесь у нас тоже, да.

58: По странам.

59: Так, смысл приложения смысл приложения в том, что нам показывает, где какая стоимость жизни в Юго-Восточной Азии есть фильтры по табам, по сколько стоит жилье, еда, поход в кафе, ресторан.

60: Интернет транспорт от дороже, то есть от Дешёвых к дорогим, от дорогих к дешёвым. Итак, вот такое вот он нам показывает. То есть все у нас работает, все выглядит неплохо.

61: Можно даже сказать хорошо, все прекрасно у нас с этим, а здесь мы можем переключить в каком именно городе, то есть в маленьком, большом либо среднем также по ценам отфильтровать.

62: Что достаточно удобно. Ну то есть это полностью рабочее приложение выглядит оно очень даже неплохо. Можем запинить какие-то 2, например, допустим, Таиланд и Индонезию, сравнить по ценам на еду, на кафе, на интернет.

63: На транспорт.

64: Получился кат кодера очень даже отлично, то есть и по дизайну, и по функциональности к нему вообще вопросов никаких нет, теперь я хочу посмотреть что у нас по кими я уже зашёл в папку с kimi, это вид.

65: Здесь, и я сейчас запущу проект с кими. Посмотрим, что у нас сделал кими.

66: А кими у нас сделал такое, кстати, анимация. Прикольное появление. Ну, кимми вообще славится тем, как он с дизайном работает. У него получилась достаточно приятная страница. Можем, кстати, сразу сравнивать. Здесь тоже была

67: Анимация. Ну, кстати, очень даже похоже, разве что цвета разные, подобные шрифты разные. Итак, смотрим, что получилось.

68: Так, здесь вот косяк, конечно, есть с табами то, что здесь прокрутка появилась, но это ничего страшного, главное, чтоб все работало. Итак, здесь мы также можем выбрать размер города маленький, средний, большой.

69: Да, здесь тоже все работает, пины также работают.

70: Это тоже получилось очень даже неплохо. То есть здесь все также работает, есть какое-то 1 предупреждение.

71: Но оно не мешает работе приложения. Как я вижу, дизайн тоже очень даже неплохой, очень приятный. То есть мы можем сравнить здесь, он более простой, здесь чуть более такой, более, я не знаю, как объяснить.

72: В общем, более приятный.

73: В целом кимми, конечно, тоже справился на ура. Итак, мы перейдём к следующему проекту от минимакса. Посмотрим, что у нас сделал минимакс.

74: Мини Макс, у нас уже вообще другой дизайн. Абсолютно.

75: Так, смотрим, так, мини Макс у нас также все сделал, как и требовалось. То есть город можно выбрать, какой по размеру можно отфильтровать по дешевизне.

76: По стоимости насколько дёшево дома, еда, кафе, интернет, транспорт.

77: Ну, выглядит это тоже достаточно неплохо. Единственное, что я могу подметить, что у нас здесь ещё указаны местные цены, то есть ммк, лак кхр это местные валюты, допустим.

78: П. Это не язык программирования, это пьеса, насколько я понимаю.

79: То есть здесь он ещё и местные цены указывает снизу, в остальных так не указывается.

80: Здесь также было указано, здесь тоже местные цены были указаны, в общем, различия есть, но в целом все они справляются очень даже неплохо. Разный дизайн абсолютно тут уже на любителя кому что больше нравится.

81: Итак, давайте посмотрим, что там у нас, у квена.

82: Я уже вбил сюда квен, и нам осталось его запустить. Так, видимо, что-то я неправильно здесь сделал, да?

83: Энем Ранде посмотрим, что получилось у квена.

84: Queen сделал вот в таком стиле, то есть в каком-то чуть чуть другом, они все в принципе по стилям отличаются.

85: Если здесь дашборд убрать.

86: По стилям они прям сильно отличаются.

87: Какие-то чуть чуть похожи, какие-то отличаются.

88: Итак, смотрим, что у нас внутри. Здесь у нас квн также сделал переключение по еде, по интернету.

89: Да, все работает, также сделал валюты двойные.

90: Ну в целом, в целом это все выглядит неплохо, очень даже неплохо в каких-то вот тут вот почему-то залагало.

91: Сейчас уже все окей.

92: Так, окей, иконки у него отличаются от остальных.

93: Здесь вот, допустим, вообще иконок не было. Здесь вот такие иконки были, так и все. У нас есть только 4 проекта.

94: Можем посмотреть, что у нас было здесь по иконкам, здесь иконки были такие, ну то есть все проекты выглядят неплохо. Все проекты рабочие тут уже только в мелких каких-то деталях их обсуждать, где что лучше.

95: Dylan но в целом это везде выглядит достойно единственный, кто у нас плохо справился со своей задачей, это у нас джилем, даже после правок он все равно выдал какую-то ерунду, то есть мы, я сказал ему исправить все.

96: Он все равно это все не исправил. То есть у нас запущен сервер, все должно работать нормально, но почему-то вот у нас стили, че то со стилями, какой-то баг, это вообще не зачёт джилу абсолютно.

97: То есть у нас все справились нейросети, кроме 1 джилма джилем, может быть, он и справился с точки зрения логики Пинов и так далее. Но вот по стилям он, конечно, вообще это выглядит прям не очень, а у всех остальных

98: Все выглядит неплохо. Выделить я могу из тех, кто мне понравился с точки зрения дизайна. Это вот этот проект.

99: Так, сейчас я уберу. Д, вот этот проект получился очень клёвым. И и 1, по моему.

100: Да, и вот этот проект мне они больше всех понравились, это у нас сделал получается минимакс, а вот это вот у нас сделал cat кодер итак, веб проекты мы посмотрели с дашбордами на next.

101: Давайте теперь посмотрим на игры, как у нас нейросети сделают игры.

102: Итак, начнём также с plan. Запускаем все нейросети они сначала нам сделают план, а потом уже саму игру а мы посмотрим на результаты получившиеся. Итак только 4 нейросети завершили.

103: Свою задачу и свою работу над проектами по играм единственный, кто не смог, это cat кодер, потому что я его пробовал перезапускать несколько раз записать, чтобы он продолжал он все равно впадает вот в какую-то петлю.

104: Не может завершить свою задачу, а остальные 4 нейросети. Мы посмотрим, что они нам сделали, и уже наглядно посмотрим. Итак, начну я с джилл, запускаю сервер. Будем смотреть и

105: Игру Войт страйкер, он её назвал нажимаем, кликаем. Так вот, такая у нас игра получилась.

106: То есть это у нас космо игра.

107: А почему корабль только так медленно передвигается?

108: Так, это у нас, я так понимаю, лечилка это улучшалка оружия?

109: Но она почему-то не работает ну в целом играбельно, в целом даже графика более менее ок. Враги разнообразные.

110: Даже у них поведение какое-то разное.

111: Ну, в целом да, игра получилась играбельная, неплохая.

112: Будем смотреть остальные.

113: Итак, эту игру я оставляю.

114: Где-нибудь вот так вот сбоку открываю новый терминал и сейчас мы посмотрим кат кодер может быть он все-таки что то завершил. Посмотрим может быть все-таки что то у него там и работает в чем я сомневаюсь конечно же, но

115: На всякий случай проверим.

116: Нет, у него здесь куча ошибок, не, ничего здесь не работает, ладно, посмотрим, что сделал тогда kimi.

117: Так, посмотрим, что сделал кими. Запускаем сервер.

118: Так, a kimi сделал нам вот такое, то есть тоже это игра тоже у нас космическая, только почему-то не на весь экран.

119: Хотя, должно быть, на весь экран.

120: Так улучшения работают.

121: У нас, я так понимаю, здесь волнами в этом случае, не знаю, как в случае jim, ну то есть, да, враги здесь разнообразные, как минимум, они выглядят по разному.

122: Угу. Да, улучшения работают.

123: Теперь у меня стреляет огромным лучом.

124: Окей, общую концепцию мы поняли, выглядит игра неплохо. Враги меняются, враги разные. Это мы все поняли. Давайте смотреть следующую.

125: По Ким мы поняли сейчас минимакс у нас следующий на тесте также запускаю сервер.

126: Space shooter загрузка.

127: И, и что? И что?

128: Ошибок нет.

129: Да, минимакс у нас создал нерабочую игру какую-то после того, как мы после того, как мы запускаем, он не запускается почему-то.

130: После, после экрана лодинг игра не запускается. Это я считаю большой косяк на самом деле.

131: Так, давайте тогда посмотрим, что у нас queen сделал queen кстати, меня очень даже радует тем, что он делает. Пока что во всех задачах он неплохо справлялся.

132: Так, квн.

133: Ну, queen тоже сделал игру достаточно неплохую, так я вижу, что в целом все у нас работает, только улучшение оружия я пока что не увидал.

134: И где у нас волна следующая или какие-то ещё враги?

135: Угу. А он сделал всего лишь 1 волну, а это плохо. Волн должен быть, должно было быть, не 1, а несколько, как минимум. Ну, это недоработка, я считаю, потому что, допустим, здесь вот у нас, у остальных

136: Играх, ну более лучшие, более лучше проработка игры была с волнами и так далее по итогу, самые лучшие игры у нас получились у джил и у kimi, у queen недоработка.

137: Minimax вообще не запустился можно попробовать посмотреть, исправил ли он свою ошибку, да, он исправил.

138: Но никаких врагов я по прежнему здесь не вижу. Можно сказать, что минимакс не справился с этой игрой совершенно. Итак, какие у нас, собственно говоря?

139: Выводы, а выводы у нас простые, на 5 место я ставлю кэт кодер за то, что он сделал так себе посредственное 3 д. Он сделал хороший дизайн, он справился полностью с next проектом, то есть сделал и

140: Логику и дизайн неплохой, но абсолютно не справился с игрой. Предпоследнее место, то есть 4 я отдаю минимаксу. Он косячил, он так себе 3 д сделал, он

141: Сделал только хороший дизайн и не справился с игрой. 3 место это у нас джилем. То есть он у нас сделал хорошее 3 д, прям очень даже неплохое не справился с

142: Дизайном абсолютно. То есть он накосячил сисс и в целом сделал так себе игру. Он сделал лучше всех. Ну, на мой взгляд, она наиболее приятно играется. Я сейчас вот в неё по сути, играю и

143: И 2 место у нас, конечно же, отдано квену за отличное 3 д. Он лучше всех 3 д. На мой взгляд, сделал, он сделал хороший дизайн, и с игрой он справился, за исключением там-то, что он не разбил.

144: По волнам все. То есть игра у него тоже вполне себе играбельная, там дополнить промтами будет вообще превосходная. Ну и 1 место я отдаю кеми за то, что он наиболее стабильно работает, за то, что

145: Он сделал неплохую неплохое 3 д. Он сделал это все с 1 раза, без дополнительных Промтов. Он сделал хороший дизайн, и он сделал тоже.

146: Удовлетворительную игру тоже с волнами тоже здесь все работает. То есть он все 3 задачи пусть сделал не идеально, но он их сделал, и они все работают. И нигде он не накосячил. Прям серьёзно.

147: Поэтому я считаю его как самую стабильную нейросеть, как самую 1 из лучших нейросетей может быть, он не идеален во всем, но именно по стабильности выполнения задач, по стабильности его работы он

148: Как бы не вызывает каких-либо проблем, единственный раз, когда он у меня залагал именно в open code, это было не по его вине, а по моей, потому что у меня там закончились деньги на open road.

149: Как только я пополнил, он продолжил работать, в общем то, и никаких с ним проблем не возникло. Итак, я предлагаю вам оставить своё мнение по поводу этого сравнения по поводу нейросетей. Возможно, вы не согласны?

150: С моим мнением, возможно у вас нейросети ведут себя как-то по другому. Оставляйте своё мнение в комментариях, пишите что думаете, ставьте лайки, подписывайте.