Используем ChatGPT API бесплатно с Python
Вставка
- Опубліковано 5 чер 2024
- Сегодня я представлю вам, как абсолютно бесплатно использовать ChatGPT API, включая его самую последнюю версию - четвёртую. Мы будем работать с Python, как обычно.
Как дополнительный бонус, я поделюсь несколькими увлекательными идеями о том, как можно применить этот инструмент в своих собственных проектах. Я буду очень рад услышать ваши комментарии и новые идеи. Возможно, самая увлекательная идея будет выбрана мной для реализации и публикации в открытом доступе.
Давайте начнем этот захватывающий путь в мире ChatGPT API!
00:00 Вступление
00:50 Официальный API и сколько это стоит
01:57 Начало
03:11 Пример сайтов-провайдеров
05:04 Запуск
09:22 Зачем это всё нужно и где использовать? 3 идеи
13:03 Идеи от Вас
Ссылка на используемую библиотеку:
github.com/xtekky/gpt4free
Поддержать канал:
yoomoney.ru/to/410014382689862
или
2204 1201 0103 5539
Приватные прокси от 33 руб: proxy6.net/?r=54545
Купон на скидку: SdSq8wCwJA
Приватные прокси (много стран и можно на короткий срок)
proxyline.net/?ref=212089
Купон для скидки: EYvdLcmgSy4tUcBP5uk
Контакт для связи: sergeichopolovich1989@gmail.com
#chatgpt #api #free #бесплатно #python #parsing #идея
А как делать запросы с контекстом? И как его сохранять?
Данная библиотека не для этого
@@the_parse_hub Разобрался. Нужно в передаваемый массив messages писать предыдущие запросы и ответы.
@@GennPen работает хорошо?
@@the_parse_hub Да, как и должно. Свои ответы указываешь как "user", ответы бота как "assistant". Весь контекст идет сверху вниз. Можно промпт в самом начале указать как "system", но его нужно указывать на английском языке, иначе по ходу не работает.
@@GennPen я добавлю в закрепленный коммент и наверное позже выпущу апдейт данного видео. Спасибо
Хороший канал. Спасибо тебе за идеи!
Царский лайк и подписка тебе брат. Я несколько проектов придумал, с чатом гпт, очень много читал на счет интеграции его с каким то проектом, было очень трудно понимать, с твоим видосом все встало на свои месте. Пойду пробовать. Еще раз спасибо.
Спасибо!
Спасибо земеля! Давно искал такое.. Уже думал самому написать но опередили.))
Лайк!
Думал настраивать гигачат, чтоб баловаться и наткнулся на такой подгон!
На яндекс маркете в отзывах иногда можно увидеть, как их нейросеть такую общую выборку составляет. Прикольный аналог получился. Я бы автоматизировал продвижение товара таким образом. Кормишь нейросетке товары конкурентов, смотришь по отзывам что у них хорошо, а что плохо. На основе этого генеришь описание к своим товарам)
Да, вот отличное применение нейросети
Замечательное видео! Ещё бы побольше объяснений для самых маленьких... :)) начинающих, новичков...
Годный контент на вашем канале - Подписка. Хотелось бы больше практических примеров. Продолжение на Playwright хотелось бы также увидеть.
Великолепный контент! Поклон. Предлагаемая задача: мэчинг товаров с разными названиями под единую золотую запись
Спасибо!
Насчет мэчинга товаров: эта тема интересная и очень востребована, я в любом случае попробую её, наверное даже вне конкурса
Маленькая подсказка. Можно попробовать в message добавить роль assistance и туда уже запить промт. А в роль user задать вопрос
Промпт добавляется в system, причем самым первым и на английском языке. В закрепе я об этом писал.
Мужик, офигенное видео!! Я сейчас сам реализую проект, где нужна нейросеть и я тупо открывал конкретный сайт через драйвер хрома и писал запрос в нем. Это все долго, неудобно и всегда думал: а если сайт отвалится, то и моя программа перестанет работать?? А тут на тебе, целая библиотека, которая все упрощает и автоматизирует)) Спасибо!
Рад помочь, донаты приветствуются))
SemyonAct, вы житель сельской местности?
Эта библиотека делает по сути тоже самое 🤦♂️
@@user--------- , да, но без использования целого хром драйвера!
А просто на запросах и ответах, что очень круто.
Я уже как-то делал проект, в котором использовал одну нейронку через хром драйвер, ох и на**ался же я с ней. А потом просто сайт поменяли, всё там поменяли и я взгруснул)))
А тут вот, гпт, и материалы по ней интересные нашёл... так что сейчас буду пытаться с ней что-то делать... в плане материалов, а сама по себе она уже завелась.
@@EmptyUser Мне эта библиотека показалась сырой, многие провайдеры не работают, многие только с куками и тд, не понимаю природу восторга по ней..... Неужели нет нормальной альтернативы? Парсинг гпт через оф. сайт не работает? Сам ещё не пповерял, но вот собираюсь. Есть тг-боты которые имеют бесплатный доступ в чату и которые бесплатно же раздают его, с контекстом и динамическим отображением, все отлично работает, и кажется именно через офф. доступ (не апи!). Правда тут я точно не могу сказать, но есть причины так думать.
прям подарок , спасибо за видос)
Отличный и очень полезный материал! Спасибо!
Спасибо!
Я в том году на React сделал фронт, Flask бекендом. Сделал похожий интерфейс на чат гпт, ограничил контекст 4 сообщениями чтобы не таскало туда сюда полотно и все запросы и ответы записывались в postgres, а оттуда сразу автоматом выводились на блог.
Идеально. Уже сделал бота-игрока для майника. Добавлю к нему нейронку и будет очень здорово.
Супер. Как раз то что нужно. Топ контент
Круть, благодарю.
Благодарю!!! подписался. Лайкос.
Стоило в самом начале только оговорится, что 4-я версия работает не стабильно и в целом есть некоторые ограничения...В общем, не всё так радужно как изначально преподносится)
Спасибо за труд / видео (Лайк - подписка)
А какие проблемы есть?
Я о проблемах которые освещались в ролике далее, после его начала. Они, довольно серьезные.
Но сам ролик в целом очень хороший.@@sacksoris6829
@@sacksoris6829 Invalid request body
Астрологи предрекают повышение уровня мамкин хацкер проектов XD))
Астрологи говорят, что звезды благоприятны для всех мамкиных хацкеров! 😂
ахах
❤😂так смейся, Паяц, над разбитой любовью🎉
Спасибо. Крутое видео. Хотелось пописать код для тренировок используя ии. Это лучшее решение. Лучшем применением думаю будет чат боты.
Спасибо за обзор😊
Спасибо большое за эту информацию, а то всё перерыл, многие не работали, ибо брали бабки за это, хотя раньше бесплатными были.
Ну по сути, если мы хотим просто пользоваться GPT, то это можно делать сразу на сайтах провайдерах, другое дело если хотим подключить API GPT к своему ресурсу, то да стоит развернуть проект
Респект вам за видео!
Большое спасибо за видео, интересным применением было бы установка этого помощника на свой сайт, как этом можно реализовать?
Хорошее видео, можно еще научить нейронку сопоставлять товары с похожими названиями у разных магазинов и по ней сравнивать отзывы и цены на товары
Идея хорошая, но на практике очень трудно её реализовать, чтобы всё работало как задумано
Спасибо за идею :)
Да пожалуйста) Взамен можете предложить какую-то свою
Красава! 🦾🦾 Интересный канал, жаль ран6ьше не выплывал мне
Лучший, спасибо
Привет. Спасибо за видос. Если хотел идею как можно применить бота, то я бы вот что предложил... Напиши расширение для браузера, для тупых и не очень пользовательских запросов. К расширению иконку, ввод - просто пустое поле. При готовом ответе иконка соответствующая, т.к. ответ может быть обширный. Жмякнул - прочитал.
Идею с парсером для товаров на маркетплейсе можно развить. К примеру, в конце месяца скрипт выкидывает продавцу усреднённые значения достоинств и недостатков его товаров в виде списка.
Отличное видео спасибо!!!
можно вопрос.
можно ли как то выбрать список провайдеров и использовать только их. а то некоторые на на аглийском только отвечают другие (Извините, но я могу помочь только с вопросами, связанными с Chatbase. Если у вас есть вопросы о Chatbase, я буду рад помочь вам)...
написал список как в примере он серым почему то стал... типа не используется пайчармом....
если бы понять как использовать только нужных провайдеров было бы отлично )
Спасибо!
Указать конкретный провайдер можно, вот пример:
import g4f
from g4f.Provider import (
AItianhu,
Aichat,
Bard,
Bing,
ChatBase,
ChatgptAi,
OpenaiChat,
Vercel,
You,
Yqcloud,
)
response = g4f.ChatCompletion.create(
model=g4f.models.gpt_4,
provider=g4f.Provider.Bing,
messages=[{"role": "user", "content": "Какая длина Дуная"}],
)
print(response)
Крутяк!
Блин как же я смеялся с этой кружки без дна. Хороший мем вспомнил
спасибо за интересное видео
Крутой репозиторий, спасибо за видео)
Эту библиотеку можно натянуть как-то на телеграм бота? Что бы задавать вопросы в нем и получать ответы там же
Спасибо! Насчёт телеграм бота - можно, где-то в комментариях уже кто-то делился
Легко, надо только знать как это делать. Но на это уйдёт не больше часа
Спасибо! Полезно.))
Это так, к слову может кому пригодиться:
ну к обработке данных как в примере, то что выпарсили тип. лучше применить pandas и свою ИИ для анализа. оно реально работает в сто раз быстрее и может обработать огромный срез. ну и пишется там все доволитаки просто, обучить модель не сложно.))) я писал такие штуки, они просты на деле. и точность будет лучше, и скорость в сотни раз выше чем халявный GPT.))
насчёт скорости работы даже спорить не буду, а вот про точность - сильно сомневаюсь. Ну и обучение в любом случае требует каких-то размеченных файлов, доп. знаний, времени и т.д, а с чатом всё просто: задал вопрос - получил ответ, наверное поэтому он так популярен
@@the_parse_hub можно Lama развернуть у себя и не мучать гопоту.)) но тут опять же - "все зависит от задач!". точность там хорошая, даже на не больших данных дает 80% и больше что прям очень много для ИИ. а сложность там не большая, разделить просто данные надо, вот тут да, иногда сложно уловить грань как делить.)) а так да, если бесплатная справляется хорошо то огонь. гопота переводит шикарно с русского на инглиш и обратно. вот это мне зашло прям очень. даже Deepl отдыхает в сторонке по качеству.🤣делаю просто портал один, и чтоб руками все не переводить ибо долго, попробовал гопоту. вот это реально круто получилось.)) можно спокойно парсить гопоте отдавать оно переведет и залить потом.
а количество символов запроса ограниченно как в chatgpt или можно туда скармливать текстовые файлы большого объема для их анализа?
Конечно ограничено используемой моделью. По умолчанию gpt-3.5-turbo максимум 4к токенов контекст+запрос. Максимум у gpt-4-32k - 32к токенов.
Привет! У меня тут вопрос возник: раз ты использовал промт для кормежки отзывов с вб гптшке, то можно ли промтом вбить всю нужную мне базу информации, которая на момент наращивания gpt3.5 устарела?
Утром бывает сам не понимаю что пишу, так что вот пояснение:
База в гпт3.5 "допустим" была сделана до 19 года, и на конуне 21 была сделана новая версия N библиотеки, в которой сильно изменилась документация с неймингами функций. Получается, что гпт не знает об этом и будет постоянно фейлить запросы, выдавя не те функции, которые нужны. Хотелось бы промтом "вбить ему в голову" всю документацию, спарсив нужные функции, измененные в 21 году. Как думаешь, как сильно изменится скорость его работы и вообще будет ли он воспринимать контекст моего промта с документацией?
Видел идешку, курсор называется, и там в него встроены гпт3.5 с 4.0. Так же есть функции "контекст кода" и "дополнение базы". Так вот, последняя функция скармливает по ссылке любую базу, документацию и т.п. гптшке, и вот эта шняга меня очень сильно заинтересовала. Но вот падла, api openai платное(хотя там 14 долларова бесплатно дают на api, но меня все равно посылают куда подальше) и сама подписка на курсор дорогая. Я студент, а мне еще за подписку по 20 долларов отдавать - хер вам.
Как думаешь, сработает ли моя идея? Думаю похамачить на недельке и проверить. Вроде сложного ничего нет ему скормить всю мою прихоть
"Самая большая проблема ChatGPT в контексте разработки и отладки кода - это ограниченный размер контекста. Для GPT 3.5 это 4000 токенов, а для GPT 4 - 8000 токенов. Это соответствует примерно 8000 и 16000 знаков текста соответственно.". Вот ещё видео на тему обхода размера контекста: ua-cam.com/video/uXnwRjepPQk/v-deo.html (векторные БД)
Так наверное, не получится с gpt. Но попробуй посмотреть в сторону LLaMA (гуглится отлично)
@@the_parse_hub LLaMA костыльная пока
@@ura4mal142 Ну если задача есть и вариантов других не видно - значит костыли не помеха)
варианты как грибы уже и гугл с постгрес подтянулся, правда на впн и пока без денюжки @@the_parse_hub
можешь соеденить это комбинациями когда благодаря API пишут промты не только для написания текста но и дейсвтий на пк, например OpenDevin, self-operating-computer и так уже есть опредленное кол-во. они оупэнсорс но за апи надо башлять, а тут ты говоришь апи на шару, попробуй соеденить, тогда можно зацыклить промтп и пк будет атвономно выполнять задачи неограниченное количество времени, пусать тебе код или сайт, тестировать само, и тд.
я поставил Llama 34b, медленный на моем буке, но работает топово.))
никак до него не дойду
Спасибо. Полезно. Но подскажите, пожалуйста, каким образом вы скормили отзывы GPT? Просто в промте? На гитхабе в openai-cookbook есть код под названием "Question answering using embeddings-based search" (ссылку не дает вставить). Поиск на основе встраиваний. То есть, некое "дообучение" GPT. Она может проглотить практически безграничное количество информации и на основе этих данных выдавать ответы. Если это реализовать на бесплатном api (пусть построение векторных файлов останется платным), то можно было бы очень крутые вещи реализовывать
Скормил отзывы просто в промте, причём использовал chatgpt 3.5 turbo.
Промт выглядит примерно так: кратко напиши все минусы товара, вот отзывы о нем: 1) отзыв 1 2) отзыв 2....
@@the_parse_hub через поиск на основе встраиваний можно скормить CSV за раз - для кадого товара неограниченое количество отзывов. А потом для каждого товара в цикле задать вопрос: напиши плюсы и минусы по товару N.
Я нечто схожее реализавал по гайду из первого комментария, но с бесплатным API не запустился... Надеюсь, выберите мое предложение лучшим и запилите рабочий код)
Посмотрим, рано ещё выбирать
Отлично, а то я замучался через одну штуку дрюку делать))) буду тестИТЬ
Видос полезный, спасибо. Единственное, я только не понял насчет поддержки контекста. Я полагаю не получится ее реализовать, если эта либа постоянно использует разные сайты ?
Ну я как обычно, сначала написал коммент, потом увидел что на него есть ответ в другом комменте ))
Ничего, бывает)
Спасибо за интересное видео. Интересно было бы узнать и увидеть. каким образом ChatGPT можно подключить к любому сайту?
Не очень понимаю, что значит подключить к любому сайту?
При установке на сервере ругается когда ставится tiktoken, суть ошибки в rust компиляторе, хотя rust до этого поставил. Если ставить локально, с визуал студио подтягивает какой то файл и ставится. Как поставить на сервере?
спасибо
Отличная идея с отзывами, я думаю многим было бы интересно посмотреть как это реализовано у вас. Не поделитесь кодом для ознакомления.
Спасибо, данный код - это больше наброски, поделюсь наверное когда он будет готов
Спасибо, буду очень ждать@@the_parse_hub
товарищ белорус, спасибо тебе большое.
спасибо за информацию по делу, только бы разобраться, как всё это дело заставить работать автоматически с контекстом. придётся где-то хранить кэш, но это не кажется проблемой, по крайней мере до начала реализации.. подписка
Вот как подключить контекст: ua-cam.com/video/1GQou7xF6H8/v-deo.html
Чат джипити можно использовать в работе: из технического задания на проектирование выделить необходимые данные: протяженность и класс напряжения воздушной линии, а также марку и сечение. Эти данные затем использовать для автоматического составления сметы и финансово-экономического расчета.
Согласен, отличный пример практического применения
Спасибо
IT Беларуси одобряем!
Идея: перерабатывать статьи из википедии про топонимы в короткие связанные информационные карточки. Карточки озвучиваем и у нас готовыйгид для алисы
Сама идея хорошая, но наверное не для меня
Контакты с сайтов собирать. Вот представь, надо обзвонить конкурентов. Для этого нужно сделать удобную таблицу. Но в ручную, с каждого отдельного сайта контрл ц контрл п делать ну капец как впадлу. А так прям пушка, потом боту звонилке отдать что б сам всех обзвонил и договаривался
Контакты с сайта можно обычной регуляркой вытащить, раньше как-то без ИИ это делали)
Поиск товара по заданным характеристикам, характеристики конечно же должны быть заранее спарсены. То есть у примеру подбери мне наиболее подходящий процессор под данные требования (частота, кэш, кол-во ядер и т.д)
Реализуемо, но какой в этом практический смысл, если все данные у нас уже есть? Или я чего-то не понимаю?
@@the_parse_hub практический смысл есть для людей которые подбирают товар для гоз закупок, когда приходится по техническому заданию искать конкретный товар подходящий под требования, вручную это надо использовать разные интернет магазины, Яндекс Маркет и искать там
С учётом отзывов скорее всего.
@@TemrG я так понимаю автор имел ввиду что-то другое
Прикольнее всего использовать чат гпг в играх, в движках для них или в программах для 3д моделирования. Но блин информация старая у гптишки и код получается фиговый. Но в принципе если знать апи например Godot, то внедренный чат в этот дижок все равно может хорошо так ускорить работу
Согласен. Да и вообще инструмент на самом деле отличный, если понимать как это всё примерно работает и знать, что у чата богатая фантазия)
вообще никак не ускорит работу ни на каком Годо.
сделал себе в продакшновую систему такую болтушку на этой бибилиотеке за пять минут (за что большой спасиб) - вся компания сидят ржут как больные. Даже индусы.
@@art-creator Можно код программы который получился? Чтобы с контекстом?
@@rozareoagrozuev3265 не, дружище, оно непубликуемое
Там лицензия у проекта звучит странно. Но я подпишусь, автору респект
Спасибо!
Насчет лицензии не очень понял, что там странного?
Как же круто тем кто умеет в программирование на таком уровне! Я только учусь питону, но уже в предвкушении, что скоро овладею этой сверхсилой)))
Спасибо! Но мне еще далеко до хорошего уровня
Я не видел другие видео автора по этому ни в коем разе не сужу об уровне знаний автора. Но в данном примере уровень так себе. Поставить библиотеку, вызвать из неё функцию и получить строку с ответом.
(ИМХО, я и сам не профи)
При работе с питоном, библиотеки это первый инструмент которым нужно научиться пользоваться, ибо их в нём на практически любой случай.
В других высокоуровневых языках тоже через библиотеки приходишь к фреймворкам, но там до этого надо хорошо познать дзен программирования, так как библиотеки всёже не всегда самое оптимальное решение задачи, но питону можно, он в принципе не про оптимизацию. А библиотеки питона ещё чэбывает на c++ делаются, что часто лучше чем ты сам будешь пыхтеть над кодом который всёравно окажется медленее.
@@Arlate_ Я далеко не профи, это 100%.
Но давайте посмотрим на это видео с другой стороны:
- его посмотрели уже 81 735 раз, соответственно столько же людей узнало о библиотеке, 98,9% лайков
- как минимум несколько человек на основе данной библиотеки уже написали свои боты, например t.me/ChatGptTigrikotBot
- мы вместе придумали кучу идей, которые интересно было бы реализовать.
В общем, я считаю, что это всё не зря.
У меня есть и другие видео на канале, посмотрите это, надеюсь Вам понравится: ua-cam.com/video/B8nxNK9QU0c/v-deo.html
@@the_parse_hub да я ничего не говорю, что зря или что никому не нужно. Просто немного сдвигаю границы понимания возможностей.
Я к примеру вообще плохо разбираюсь в библиотеках. В ручную если посидеть то и на c++ писать начну, особенно учитывая что я с него с программированием и познакомился. А вот библиотеки, да блин я уже пробовал нейронку писать, и даже чтото получалось, а вот Keras или TensorFLow всё никак не возьмусь поставить. А без них распарралеливать питон это то ещё извращение.
ЕЕЕЕЕЕ написала телеграм ЖПТ бота своего наконецто, СПАСИБААААА боли было и головных травм и мозгового штурма канешнаааа уууууу, но он помогал себя писать)
Пили историю
Не хочу ругать людей, ну короче устанавливать надо через python3 типо pip3 install
а обратно в телегу бот не хочет отправлять сообщения по тому, что забывает с кем общался
собственно два нюанса на котором было потрачено большинство нервов@@VyacheslavMitin
Автор, здравствуйте, подскажите пожалуйста, а плагины таким образом уже не подключить? Которые в веб версии с gpt 4 работают.
Я ними не работал, поэтому подсказать не смогу
Здравствуй! Подскажите, а есть ли инструмент для вывода информации из сайта в программу Таблицы( эксэл/ спрэдщитс) и даже вывод инфо в график? 😊😊😊
Добрый день! Для рисования графиков есть много инструментов, наверное самый популярный Pandas
@@the_parse_hubpandas скорее обработка и анализ. Но в файлы таблиц может из коробки. А графики лучше уже там. Ну если надо big data - тут лучше js библиотеки
Можете подсказать как в запросе прикрепить файл например txt или таблицу?
А нет варианта использования в качестве прокси для мимикрии под API Open AI? У различного софта есть фичи с поддержкой AI, где просят указать ключи и урл для доступа к нейронке.
Это прям сильно зависит от этого различного софта. Одно дело когда программ установлена и работает на своём компьютере и совсем другое когда это просто сайт-сервис в интернете
красавчик!!!!!
Есть ли возможность реализовать чат с контекстом? На ум приходит сохранять промпт и ответ и передавать со следующим промптом каждый раз, но может быть есть более удобный подход?
Тут не пробовал но в api openai это в списке(list) организуется(может и тут так надо пробовать)
нужно накапливать в списке ответы c ролью assistant
(пример с их документации)
messages=[
{"role": "system", "content": "You are a helpful assistant."},
{"role": "user", "content": "Knock knock."},
{"role": "assistant", "content": "Who's there?"},
{"role": "user", "content": "Orange."},
],
Здесь наверное нет, но вообще такая возможность есть, где-то на гитхабе видел проект, суть такая: используя Ваши куки в undetected_chromedriver получается токен с офиц. сайта чата, а далее уже вся работа идет через запросы с этим токеном. Естественно в данном случае будет доступен только чат версии 3.5 (если у Вас бесплатный аккаунт)
можно сохранять историю чата и вызывать ее в промпте, но это уже немного костыли
@@joper8 насколько я помню в офиц. версии так всё и работает
@@joper8оно так и работает официально и ограничение в 4кб и есть еще 16кб, упор только в это, но и разумеется кушать денег больше будет, чем если без контекста пользоваться)
Привет. Надеюсь прочитаешь этот коммент)
Спасибо за видео.
Подскажи что ты используешь чтобы на python писать строго типизировано?
Привет! Спасибо)
У питона динамическая типизация, все эти указания типов служат больше для ide, т.е мой PyCharm будет знать какой тип на входе и выходе и правильно подсказывать доступные методы и пр. мелочи.
Самому питону это всё до лампочки)
А к примеру автоматизация. Есть сайт на котором есть определенные данные , чтобы gpt выбирал эти данные по определенным критериям и автоматически сам давал на них ответ . Как такое реализовать, чтобы он постоянно проверял сайт и мог сразу предложить вариант ответа для данных , и сам же го писал на этом же сайте ?
Я так понимаю это для сайтов типа ответы мэйлру, so и пр.?
В чём проекты создал? Было бы полезно нам знать в чём работаешь, спасибо
Если имеется ввиду ide, то это Pycharm Pro какой-то старой версии. Или вопрос о другом?
Нет, вопрос именно в этом, благодарю! @@the_parse_hub
Было бы интересно спарсить Авито и посмотреть кол-во продаж того или иного товара или услуги (и вывести ТОП); поскольку одна и та же услуга или товар могут быть у разных продавцов - здесь ChatGPT мог бы выступать в качестве классификатора. Вручную почти нереально объединить и суммировать статистику.
Согласен, было бы интересно. Но парсинг Авито в промышленных масштабах очень ресурсоемкая штука, а статистику Авито, насколько я знаю, так просто не дает
> Авито в промышленных масштабах очень ресурсоемкая штука
Именно поэтому это и интересно!) очень много туториалов по "простому" парсингу. А вот действительно что-то сложное - почти нет. А то, что есть - обычно совсем не для новичков. Как я понимаю, здесь бы подошел Scrapy, т.к. у него многое для масштабирования есть прям из коробки - работа с прокси, многопоточность, троттлинг, каптча и т.д. ChatGPT4 умеет генерировать базовый код для Scrapy.
Добавлю то, что по настоящему полезные и интересные проекты - как правило, всегда сложные. И этому туториалы обычно не учат( Даже узнав базовые вещи, порой получается сделать такие же точно базовые проекты/скрипты, но не сложнее. И много начинающих программистов так и остается на базовом уровне просто потому, что толковых туториалов для более продвинутых и сложных задач - нет. Я сужу и по себе и по многим знакомым. Свободная ниша.
@@the_parse_hub
- Chat, к какой категории отнести "автомобиль ВАЗ"?
А к какой "автомобиль УАЗ"?
А к какой "автомобиль ГАЗ"?
И так по миллиону товаров...
Сhat: - Да ты задолбал уже! На Авито есть каталог по категориям. Если его не хватает, выделяй ключевые слова и сопоставляй товары по ним.
@@the_parse_hubавито дофига кто парсит в промышленных масштабах. В том числе втупую селениумом. Редко кому требуется прям все-все забрать, обычно категория конкретная. 10-20 инстансов вебдрайвера вполне вывозят сбор категории. Главное ротацию грамотно организовать. У авиты довольно параноидальная защита, но вполне побеждаемая.
Привет! Спасибо за труды! Вопрос! Как с сайта закидывать в питон на сервере готовый массив с контекстом и получать - передавать массив ответа обратно. Например в пхп или ajax? Или например открыть питон на ВПС и туда как кидать с того же пхп или ajax?
Если я правильно понял, тебе не подходит сам python. В репозитории есть ссылки на подобные библиотеки на других языках
@@the_parse_hub можешь ссылку скинуть на подобные библиотеки на других языках?
github.com/xtekky/gpt4free#-powered-by-gpt4free
Нормально ли то, что ответы возвращаются порой минут через пять? Каким должно быть примерное время обработки запросов и можно ли его каким-то образом уменьшить?
Провайдеров много, поэтому такое возможно. Попробуйте сначала выбрать одного, который работает прямо сейчас хорошо и дальше используйте его
12:51 аххаах как же я выпал с ответов
можно ли загружать в неё датасеты?
подскажите версия chatgpt 4 через api и версия через подписку plus чем то отличается?
Да, с подпиской будет всё легально и стабильно
Есть таблица содержащая десятки тысяч отзывов, текстов на ту или иную тему с авто. Нужно их индексировать по тэгам. Но для того чтобы индексировать, нужно обработать все отзывы и понять, нужна ли здесь индексация. То есть спросить у чата ГПТ, говорится ли в этом тексте *сам текст*, про допустим замену рулевой рейки.
Да, отличное применение
буду пробовать. Тоже думал о такой автоматизации и случайно увидел в рекомендации ваше видео@@the_parse_hub
Добрый день, я правильно понимаю, что можно найти чат который будет отвечать учитывая прошлые ответы?
Посмотрите закрепленный комментарий, там расписано
Я так понимаю библиотека использует под копотом какой-то прокси, ну по крайней мере мне так показалось из исходников, я не пишу на python поэтому возможно ошибаюсь. А нет ли какой-то бесплатной rest api для получения доступа к gpt или какой нибудь другой языковой модели? А то пишу небольшой пет проект на flutter и хотелось бы прикрутить возможности ии к нему.
Сомневаюсь, что такое можно найти.
Но что мешает использовать данную библиотеку?
@@the_parse_hub Думаю прийдеться создавать свой бекенд с этой библиотекой. Я не особо бекендщик, больше по мобилкам)
Можно ли использовать особые пайтоновские инструменты для написания статей в этой библиотеке что использует openai?
Что за особые пайтоновские инструменты?
@@the_parse_hub не то написал. Имелось ввиду инструменты openai для пайтона, для написания статей например.
@@user-kk9tj9dq9k Да кто же Вам запретит?)
Возможно ли загружать фото в чат и получить инфу о ней?
Я не нашёл.
Осталось без внимания передача контекста. Что мне очень не нравится в платной версии, что цена сильно зависит от переданного контекста, так ещё он и ограничен по объему. Как дела с этим обстоят в g4f?
А также интересен вопрос возможно ли его обучать своими данным и как происходит этот процесс?
ua-cam.com/video/1GQou7xF6H8/v-deo.html
Есть ли лимит на длину промпта и количество сообщений в одной беседе?
конечно есть
Если есть много текстов статей, по которым надо получить саммари, краткое содержание. Думаю, с помощью этой штуки будет удобно.
Согласен
назначение платежки банка, парсит почти на ура. иногда пояснения все же добавляет, иногда тупит ))
поставил задачу:
('выведи дату, ндс и номер без знака №, No'
f'если встречается слово из значений словаря {change_to}, тогда подставляй ключ словаря.'
'вывести в формате словаря: {Тип (формат текст), дата(формат дата), номер(формат текст), ндс(формат число)}. '
'ответ должен содержать только словарь, без пояснений. '
'Если надо создай несколько словарей. объединять в список ненадо. '
f'номер идет после слов, похожих на значения из словаря {change_to}'
)
ответ:
{'счет': '56', 'дата': '21.11.2023', 'ндс': 4144.0}
{'дог': '225/61АЕ', 'дата': '21.09.2023', 'ндс': 4144.0}
Вот отличное применение чата на реальных задачах
идея- соединить ии с телефоном чтобы камера онлайн считывала все предметы которые видит и озвучивала.
Идея прикольная, но это будет ооочень медленно работать
Здравствуйте. Не знаете почему нет ответа на сложные состоящие из нескольких предложений вопросы?
На простые, типа как дела отвечает, а чуть сложнее уже проблемы
Наверное chatgpt тупеет
@@the_parse_hub выбрал модель gpt_35_long и стал отвечать, а turbo выдаёт ошибки при сложных запросах
слушай там щас все поменялось, я попробовал, у меня пару раз сработало и потом ошибки стали выдаваться. Не знаешь он работает еще?
Вообще работает, но нестабильно
сделать анализ текста юзера - негатив позитив нейтральность. по процентажу, если высокая негативная то 70%+ и тогда тегать админа телеграма или бан самому давать
Звучит довольно интересно
@@the_parse_hub я подключал барда нейросеть, но мне дали бан что-ли) бардапи юзай
мой бот @ed_multi_bot
Можно автоматом банить, но не забыть оставить для пользовател возможность оспорить бан/мут
Или давать предупреждение. А на второй раз уже банить
Здравствуйте! Подскажите, как написать такого бота, который бы собирал информацию из других чатов твоего города информацию по каким-то ключевым словам?
Если чаты в телеграме, то начните с этой статьи:
skillbox.ru/media/code/parsim-dannye-v-telegram-na-python-chast-1/
@@the_parse_hub Спасибо!
А есть ли что то похожее для работы с изображениями?
мидджарни самый топ
Подходит ли эта библиотека для писательской деятельности? Для подбора предложений, слов под мой запрос?
Да, вполне. Это же обычный ChatGPT
Спасибо@@the_parse_hub
Кайф, спасибо
It was incredibly interesting! Like and subscribe to the channel! Many thanks to the author of this video!
Thanks)
Автор,подскажите пожалуйста, в чем может быть причина данных ошибок, при попытке использовать gpt 4? С gpt-3.5-turbo проблем нет, отрабатывает.
Python стоит 3.12
Версия aiohttp==3.8.6.
Traceback (most recent call last):
File "E:\SKLAD\pythonProject\main.py", line 8, in
response = g4f.ChatCompletion.create(
File "E:\SKLAD\pythonProject\Gpt_Bot\lib\site-packages\g4f\__init__.py", line 75, in create
return result if stream else ''.join(result)
File "E:\SKLAD\pythonProject\Gpt_Bot\lib\site-packages\g4f\Provider
etry_provider.py", line 56, in create_completion
self.raise_exceptions()
File "E:\SKLAD\pythonProject\Gpt_Bot\lib\site-packages\g4f\Provider
etry_provider.py", line 81, in raise_exceptions
raise RuntimeError("
".join(["All providers failed:"] + [
RuntimeError: All providers failed:
Bing: ContentTypeError: 0, message='Attempt to decode JSON with unexpected mimetype: ', url=URL('sydney.bing.com/sydney/DeleteSingleConversation')
Все провайдеры Gpt4 не отвечают сейчас, пока пользуйтесь 3.5
@@the_parse_hub спасибо большое
првиет, возникла проблема с установкой pip g4f , есть варик что что-то недоустановил?
т.к нет подробной информации, то у меня слишком много вариантов. Предположу, что не хочет устанавливаться aiohttp, если так - попробуй использовать другую версию питона
кто-нибудь может подсказать, как использовать тех провайдеров, которые запрашивают куки? как правильно их указать...
Вот здесь есть пример кода: github.com/xtekky/gpt4free#cookies-required
Сегодня появилась идея заполнить свой сайт данными, сгенерированными нейросетью, а через час наткнулся на ваше видео в рекомендациях ютуба! 😄
А можно ли используя этот айпи сделать всоего бота для телеграм, загрузив в него свои данные? Просто я хочу сделать бота, который будет работать с моими данными. Но использовать платный айпи не вариант, т.к. слишком долго париться с впн и регистрацией зарубежным номером. Да и подписку платить не хотелось бы... Мне же для личных целей, ну и для моих друзей...
Да пожалуйста, я не против)
Спасибо большое, ещё вопрос есть. Я хочу писать запросы в консоле, при этом зациклить эту функцию, чтобы мне каждый раз после ответа модели предлагали снова вводить запрос. Я уже попробовал всяко, работает не правильно, он просто не даёт ответа и снова мне предлагает ввести запрос
ua-cam.com/video/1GQou7xF6H8/v-deo.html