Jarvis az · WideMade Vibe

Борис Харитонов 1 month ago

ну наконец-то. Такое же делал, но становится скучно. Я добавил личность под векторную базу данных и дал ей пошлую личность игривую. И реагирование на скилы не через слова тригеры а через контекст тго что просишь. и добавил скиллы на кодинг и QA и она начинает кодить. Еще сложно но прикольно будет добавить чтобы у него было проактивность и переодически от контекста он сам начинал разговаривать. А так визуал топ, я просто добавил аниме девочку

vitya_x 1 month ago

@Gad57, пошлая личность для QA это конечно сильно)) юзерам заходит или пока только сам тыкаешь?
Борис Харитонов 1 month ago

@vitya_x , для себя, там есть проблемы, которые не могу решить, долгий ответ из-за транскрибации + чтения промптов по скиллам + голосовой. А так прикольно, я ему говорю, давай напишем автотесты на этот сайт для вкладки авторизация и делает

Борис Харитонов 1 month ago

и вопрос, где ты взял голос? и транскрибацию тоже где взял?

Az 1 month ago

Оу, у тебя проект лучше чем мой, ну я тоже хотел добавить аниме(Мику) но ее нужно бы было анимировать поэтому я оставил так, а голос я не использовал апи или локально это все дорого и требовательно поэтому я скачал несколько голосов из интернета например: да сэр а голос для открытия тф2,браузера, и Ютуба я сгенерировать в фишаудио
Az 1 month ago

И мне тоже уже надоело делать этого голосового ассистента, я в последней версии добавил команду: напиши. И он пишет то что ты сказал после этого слова и добавил много других команд и из мерил настройки но пока что я ещё не доделал и не хочу больше делать, надоело уже😩
Борис Харитонов 1 month ago

@aza туда надо короче подключить ИИ как мозг, можно брать дешевые модельки, а ТТС можно загрузить, как и транскрибацию. Самое главное дать ей мозг от ИИ
Az 1 month ago

@Gad57 я сам бомж и на ИИ деняг Ниту, но если добавлять ИИ то от опенроутер, хаггинг фейс, клоудфраер и когда у одного закончится токены то другой будет работать вместо него, я бы мог добавить например что бы Джарвис говорил время и погоду но все время я искал бесплатный и качественный TTS и не нашел поэтому Джарвис сильно урезан
Борис Харитонов 1 month ago

@aza Можешь бессплатными АПИ пользоваться с Agnes они бессплатные раздают
Az 1 month ago

@Gad57 спасибо, попробую

Okg 1 month ago

Круто, работает

Okg 1 month ago

Хорошо сделано, но можно было бы и добавить других команд

Катя Яковлева 1 month ago

блин крутота вообщеее!! 😍🚀 А где вы его захостили это vds или serverless?? дорого выходит такое поддерживать в месяц??

Жора 1 month ago

ТАК ДЕЛАТЬ НЕЛЬЗЯ!!! Зачем выкладывать если дизайн еще НЕ ГОТОВ??? Рекрутеры сразу скипнут такое резюме имхо!! Я вот месяц пилил свой проект до идеала перед тем как залить, а тут сырое... Переделывайте срочно!!

Az 1 month ago

Я сделал интерфейс понятным и красивым, потом хотел ещё раз переделать но времени не хватило поэтому написал что интерфейс не готов а так все работает не лагает и даже полноэкранный режим есть
Олег Киселёв 1 month ago

чел кринж какой дизайн главное сервак не лежит)) кст на каком vps держишь почем вышло спс))
Az 4 weeks ago

@oleg1997 серваков нету
Az 4 weeks ago

@oleg1997 оно работает с google_speech

Кирилл Сергеев 1 month ago

Визуализация выглядит многообещающе, хотя текущий лейаут пока требует доработки. Подскажите, вы планируете добавить кастомные анимации для аудиоволны?

Az 1 month ago

Я хотел полностью изменить интерфейс в следующем обновлении но сейчас разработка остановлено на неопределённое время

Ваня Комаров 1 month ago

как на фото но скоро сделаю» — запятую перед «но» потеряли. Да и задержка ответа секунды три, о каком ассистенте речь

Az 1 month ago

3 секунды? У меня в течении 1 секунды, может это из за того что вы используете команду "поиск"
Кристина Комарова 4 weeks ago

@vanya_komarov, зато он думает прямо как человек!! 🤖✨ это не баг а кулдаун на ответ, типа фича такая ахах))) очень крутой проект получается, жду апдейт!! 🔥???
Az 4 weeks ago

@kris_k73 спасибо, но я думаю апдейта не будет
Az 4 weeks ago

@kris_k73 ну апдейт может выйти если мне закинят 10р

Ваня Тарасов 1 month ago

Добрый день. Какую модель вы используете для распознавания речи и генерации ответов? Подключен API OpenAI или развернули локальную Whisper?

Az 1 month ago

Здравствуйте,ИИ я не использую а для распознавания использую google_speech, я бы в будущих обновлениях хотел бы использовать vosk для команд по типу "браузер" и использовать гугл для команд "поиск ~~~"
vanya_gg 1 month ago

да сто пудов обычный опенай по апи, но сделано прикольно я уже полчаса с ним болтаю
Az 1 month ago

@vanya_gg спасибо)
sovalol 1 month ago

если локалка то на каком железе крутится и какой средний ttfb на стриме аудио? замеряли косты на инфру против апи
Az 1 month ago

@sovalol мой iq не больше чем у авокадо, пожалуйста не пугайте меня такими терминами😳

alina_ru 1 month ago

прикольно а хостишь где? на верселе или впс взял по бабкам сколько выходит в месяц)

Az 1 month ago

Хах, я делал проект для себя и захостит на пк, мне надо было только на 1-2 дня)
Катя 3 weeks ago

да пофиг на бабки ты бэкапы настроил хоть? а то на верселе упадет база и привет ну и порты проверь чтоб наружу не светили
Az 3 weeks ago

@katya33 хз

Денис 1 month ago

Опять эти новомодные 3D шары светящиеся тошнит уже!!! Зачем изобретать велосипед??? Сделали бы нормальный пиксельный UI под Game Boy или DOS, это хотя бы ДУШЕВНО было бы!! Имхо безвкусица полная

Az 1 month ago

Я и сам хотел бы изменить весь дизайн, шар и правда слишком перегружен, цвет настроек и самого окна тоже разные ну и бывают. разные баги

Влад Семёнов 1 month ago

норм, а ключи от апишки в открытом виде на фронте лежат или спрятал? а то сольют быстро

Az 1 month ago

В этом проекте я не использовал апи

Кристина Комарова 4 weeks ago

Вау, это очень круто выглядит!! 🔥🚀 А то что звук иногда заикается — считай это фича, типа думает как человек!! 😍 как такое повторить??

Az 4 weeks ago

Незнаю, у меня звук не заикался
Дима Королёв 3 weeks ago

КАКАЯ ЕЩЕ ФИЧА??? Это джиттер аудиопотока и потеря пакетов под 15% нормальный человек так не тормозит!!! гуглите Web Audio API буферизацию и не позорьтесь имхо

Артём Зайцев 4 weeks ago

где хостинг крутится и почем в месяц выходит? под капотом вебсокеты или обычный polling

Az 4 weeks ago

Все кроме распознания Локально
Батон 4 weeks ago

да сто пудов бесплатный версель и обычный лонг поллинг!! упадет от десяти человек сразу о чем тут вообще спорить!!
Саша 2 weeks ago

присоединяюсь к вопросу. было бы очень интересно разобрать архитектуру вашего проекта со студентами на семинаре по сетевым технологиям

Ночной_Дожор 4 weeks ago

Интересная задумка. Подскажите, пожалуйста, какой API вы использовали для распознавания речи? И планируете ли вы добавить сохранение контекста между репликами?

Az 3 weeks ago

Я не использую апи для распознавания, за меня делает гугл спич(бесплатно)

Серёга 3 weeks ago

визуализатор на three.js или чистый canvas с шейдерами? на дискретке фпс стабильный держит?

Шарик 3 weeks ago

@seryoga, хз чел но выглядит как имба для резюме мне бы такое на сайт запилить)))
Соня 3 weeks ago

@seryoga, тоже интересно, если там шейдеры через курсор написаны то чистая годнота для поста, маякни если ответит

Аня 3 weeks ago

Вау крутотенюшка какая!!! 🔥🚀 А на каком сервере это крутится?? Это дорого выходит в месяц держать такую нейронку онлайн? 😍 Очень хочу так же задеплоить!!

Az 3 weeks ago

Все бесплатно и на своем пк

Елена Соколова 3 weeks ago

ну как обычно, на превью красиво а по факту шар дергается и микрофон через раз ловит) хотя думал вообще не взлетит

visual_ninja 3 weeks ago

В мобильном Safari ситуация ещё сложнее: доступ к микрофону постоянно сбрасывается, а анимация сферы заметно нагревает устройство и быстро сажает батарею
Чебурек 3 weeks ago

@elena_sokolova, хз у меня все гладко работает и микрофон сразу услышал, очень милый шарик получился)) для пет проекта вообще пушка
Az 3 weeks ago

@cheburek незнаю, мне самому шарик не нарваться и я бы хотел его переделать на более минималистичный

Стас Сорокин 3 weeks ago

а озвучка чья тут? если чисто локально крутится без апих то заберу к себе в канал на разбо?

Az 3 weeks ago

Тут озвучка в папке лежит, можно свой голос поставить😁 и весь проект бесплатный без апи

mango1998 3 weeks ago

web audio api или three.js для визуала?! у меня на three.js fps до 20 падает на мобилках! как задержку распознавания мерял?!

Az 3 weeks ago

За визуал отвечает pygame а задержка у Гугла примерно 400~милисекунд

Олег Киселёв 3 weeks ago

чел нажал микрофон три раза вкладка упала в кринж))) пофикси пж)

Az 3 weeks ago

Я думаю скоро сделаю последнее обновление визуала и думаю что закончу. Кстати у меня так же было , я долго рылся в коде и думал что исправил(после этого у меня такого не было) мне помогал перезапуск программы
Чебурек 2 weeks ago

там audio context не закрывается и падает по лимиту инстансов, в консоли out of memory
Az 2 weeks ago

@cheburek окак😳

Зайка 3 weeks ago

ЗАЧЕМ выкладывать если дизайн не готов??? Где CustDev целевой аудитории ВООБЩЕ??? имхо надо сначала фичи пилить а потом донаты просить на сбер!!! какой промпт юзали??

Az 3 weeks ago

Дизайн я переделаю(надеюсь), а от донатов я бы не отказался 😚
Ну если все работает, значит исправлять не надо

Рита Кузнецова 3 weeks ago

здравствуйте, очень милая задумка, перевела вам хвостик на сбер, удачи в доработке, не бросайте

Az 3 weeks ago

Незнаю, деньги не пришли🤷

Полина Новикова 2 weeks ago

раньше такое три недели на сокетах собирали сейчас за вечер на коленке. только упадет при первой же сотне юзеров скрипты небось на соплях держатся

Az 2 weeks ago

Да я даже не знаю, что бы собрать сотню юзеров и что бы бот не упал нужно будет подключать другие апи

Юля Романова 2 weeks ago

номер карты прямо в текст это мощная конверсия конечно) сделал бы хоть кнопку красивую а то так никто не скинет

Az 2 weeks ago

Ну тит эт крч... Мне лень

kirill_ 2 weeks ago

зашел потыкать ну как обычно ничего не работает) нейросетка просто шаблон нагенерила а голос через веб спич прикручен косо

Az 2 weeks ago

ಠ_ಠ
Петя Васильев 2 weeks ago

да ладно тебе душнить норм прототип) автор если поправишь баги черкани в лс могу в канал закинуть если идея свежая
Az 2 weeks ago

@petya_vasilev спасибо❤️ но я сейчас делаю другой проект

Женя 2 weeks ago

с мобилы ваще кринж все съехало кружочек не по центру чел пофикси пж)))

Az 2 weeks ago

Так я не для мобильных телефонов делал:/

Чебурек 2 weeks ago

визуализация дергается забавно, чисто рэгдолл в godot когда коллизии забыл отключить ахах. считай не баг а эффект погружения

Az 2 weeks ago

)
Артём Ковалёв 1 week ago

вот кстати да, такой аналоговый глитч получился, я бы даже трогать не стала
retro_yozhik 1 week ago

какой еще рэгдолл??? Это же элементарный ШУМ в координатах и кривая интерполяция кадров!!! Сглаживание надо делать нормальное а не баги оправдывать имхо)))

Женя Кузнецова 2 weeks ago

номер карты светить на открытом сайте смело конечно. микрофон куда данные льет, бэкапы и шифрование вообще настроены?

Az 2 weeks ago

Микрофон отправляет данные в гугл

Владос 2 weeks ago

покажу студентам как пример бизнес-плана. Инвестиции в 10 рублей это сильно. А сам ассистент хоть на что-то кроме «привет» отвечает?

Az 2 weeks ago

Да, у Него даже имеется система кастомные команд, ну и да 10р я поставил только для того что бы появилась мотивация делать если кто то закинет их. ну и я не отказался бы от бесплатной рекламы)

cyber13 2 weeks ago

Вау какая визуализация крутая!! 🔥🚀 Прям железный человек в браузере 😍 А какая там архитектура горутины под каждый поток крутятся?? Очень здорово получилось!!

Az 2 weeks ago

По-моему интерфейс говно полное
sova_ 1 week ago

В свое время мы на Delphi неделями вымучивали подобную графику через прямые вызовы API. Удивительно, как сейчас всё это поднимается в обычном браузере буквально за вечер
Az 1 week ago

@sova )

Алексей Морозов 2 weeks ago

ЗАЧЕМ черная тема везде??? Глаза болят!!! Нормальный свет выставить не судьба была??? Цветокор вообще мимо имхо лучше бы галерею сделал нормальную!!!

Az 2 weeks ago

Черный хорошо цвет красиво приятно класс удобно

Лиза 2 weeks ago

а где хостишь бро чисто на верселе или впс за 10р взял рофл))

Az 2 weeks ago

Локально
x_k0tletka_x 2 weeks ago

какой версель чел впс за сотку с рег ру база!!!! чисто на коленке все поднял имба же!!!
Az 2 weeks ago

@x_k0tletka_x да
Оля 1 week ago

на верселе же изи вообще в два клика деплоится я так все свои сайтики заливаю кайф)))
yozhik2001 1 week ago

@liza, для студенческих прототипов Vercel подходит идеально но если здесь есть полноценный бэкенд с базой данных то надежнее развернуть на обычном виртуальном сервере

Серёга Григорьев 2 weeks ago

Интересный проект для демонстрации студентам на практических занятиях по веб-разработке. Скажите, открыт ли исходный код на GitHub? Хотелось бы разобрать архитектуру на паре.

Az 1 week ago

Здравствуйте, все открыто, пользуйтесь на здоровье
Стас 1 week ago

@seryoga_grigorev, присоединяюсь к вопросу. Также было бы интересно узнать технические подробности: какая именно языковая модель используется под капотом и применялся ли файн-тюнинг для ассистента?
Az 1 week ago

@stas_v73 здравствуйте, я уже писал модель

Батон 1 week ago

чел номер карты текстом это кринж конверсия в донат нулевая будет сделай кнопку нормальную пж)))

Az 1 week ago

Спасибо, хорошо

Соня Богданова 1 week ago

ОНО ЗАВИСАЕТ НАГЛУХО ПРИ СТАРТЕ!!! Хотя это не баг а фича пауза для размышлений))) Гуглить оптимизацию не пробовали???

Az 1 week ago

Зависает при запуске кода или при произношении слова

neraduga_dev 1 week ago

дефолтный web speech api поверх готового шейдера из three.js, инференс лагает на три секунды

Az 1 week ago

Хз, у меня ни разу не лагало

Катя 1 week ago

прикольный визуал а какая сетка под капотом отвечает? собираю подборку пет-проектов для тг канала может черкану про тебя

Az 1 week ago

Все происходит локально, нужно скачать и разархивировать Vosk во второй папке, либо использовать с интернетом через Гугл спич. Кстати можешь дать тгк, посмотреть на проекты хочется, может что то зацепит

Артём Воробьёв 1 week ago

запретила сайту микрофон и страница наглухо повисла) если потом быстро тыкать на круг звук заикается

Az 1 week ago

Здравствуйте, это не сайт

Андрей Семёнов 1 week ago

В описании пропущена запятая перед союзом «то». Кроме того, анимация сферы заметно дергается при масштабе страницы 125%.

Az 1 week ago

Здравствуйте,исправлю

Батон 6 days ago

протестировал проект на мобильном устройстве. При быстром нажатии на микрофон страница зависает. Тем не менее анимация выполнена приятно успехов вам в разработке.

x_k0tletka_x 5 days ago

ЗАЧЕМ ТАК ЧАСТО КЛИКАТЬ??? Вы задержку API вообще мерили там пинг 600мс минимум какой дурак так тестирует??? учите матчасть имхо!!!
Az 5 days ago

Не думал что он на телефоне запустится вообще, но спасибо)
Кристина 1 day ago

В интерфейсе еще и выравнивание иконки микрофона съехало относительно центра круга, очень бросается в глаза)
Az 23 hours ago

@kris_ponomarev исправлю

puzatik_it 5 days ago

скрипт из пятидесяти строк скопирован из чужого репо своего бэка нет чисто обертка над бесплатным апи))

Az 5 days ago

Нет

Алина Яковлева 3 days ago

Любопытная задумка. Попробовал запустить в браузере, визуализация работает достаточно плавно, хотя распознавание речи срабатывает с небольшой задержкой. Удачи вам с проектом.

Лена 3 days ago

очередной «Джарвис» на стандартном Web Speech API. И сбор на десять рублей. Мои студенты на первой неделе семестра оригинальнее придумывают.

Az 2 days ago

Идите н@хуй, з@ебали такие как вы, гандорасы
Az 2 days ago

Ненравится-непишите, и мне насрать какие инвалиды у вас, что напишут .
Пошли в тг, там поговорим: @Durov_0ffical

cyber1997 2 days ago

web audio api для визуализации используешь или сторонний канвас? жрет 30% цпу на ровном месте

Аня Комарова 22 hours ago

кружочек крутится красиво а логика где, чисто в браузере все висит или на нормальный бэк запросы уходят?

Миша 8 hours ago

цель в 10 рублей это мощно конечно) затестил, вроде откликается бодро, напиши если выкатишь крупную обнову

Comments 129