Data Science: идея для старт-апа

User avatar
kyk
Уже с Приветом
Posts: 31438
Joined: 21 Nov 2004 05:12
Location: камбуз на кампусе

Data Science: идея для старт-апа

Post by kyk »

Есть ли какие-либо библиотеки или фреймворки для замены слов и словосочесатний на синонимы , чтобы из одного текста сгенирировать другой, который по сути и содержанию будет совпадать с первым, но скажем, формально отличаться на 40-50% по словам?

Ну пусть не идеально, и требовать дальнейшей ручной правки, чтобы человек смог быстро вручную подправить получившийся текст и сделать его human friendly.

Ну типа загоняешь на вход сочинение (ака essay) отличника Сидорова, а выход даёшь лентяю Петрову из паралельного класса, он его за 10 минут правит по смыслу (а грамматические ашипки спеллер-чекер убирает) и получает 4ку по 5ти-бальной шкале.

Хрюндель, чем не идея для старт-апа? Всяко веселее твоего бота Муделя :mrgreen:
Лучше переесть, чем недоспать! © Обратное тоже верно :umnik1:
xrundel
Уже с Приветом
Posts: 1459
Joined: 01 Mar 2019 17:02

Re: Data Science: идея для старт-апа

Post by xrundel »

kyk wrote: 02 Nov 2021 03:58
Хрюндель, чем не идея для старт-апа? Всяко веселее твоего бота Муделя :mrgreen:
Стартап это про деньги а не про идиотские фантазии. Сделай лендинг, померяй CAC
User avatar
kyk
Уже с Приветом
Posts: 31438
Joined: 21 Nov 2004 05:12
Location: камбуз на кампусе

Re: Data Science: идея для старт-апа

Post by kyk »

xrundel wrote: 02 Nov 2021 04:08Сделай лендинг, померяй CAC
расшифруй, имеешь ввиду есть ли спрос?

Так ведь необзательно это только двоечнику продавать, можно и для твоего бота применить, чтобы он один тот же текст мог на разные лады выдавать.

К примеру, взять чужой пост на одном форуме, его таким образом переработать и запостить на другом форуме.

"Smart Mirroring". Profit :umnik1:

Мне от твоего лярда 100K в год отщипни, я к Otherside-y в крымНаш перееду, будем тебе посильно помогать.
Лучше переесть, чем недоспать! © Обратное тоже верно :umnik1:
User avatar
kyk
Уже с Приветом
Posts: 31438
Joined: 21 Nov 2004 05:12
Location: камбуз на кампусе

Re: Data Science: идея для старт-апа

Post by kyk »

xrundel wrote: 02 Nov 2021 04:08Стартап это про деньги а не про идиотские фантазии.
какая разница о чём фантазировать: о деньгах или Data Science ?
Лучше переесть, чем недоспать! © Обратное тоже верно :umnik1:
User avatar
kyk
Уже с Приветом
Posts: 31438
Joined: 21 Nov 2004 05:12
Location: камбуз на кампусе

Re: Data Science: идея для старт-апа

Post by kyk »

Конкретизирую:
Есть ли в библиотеках NLP/ML функция заменить слово, фразу или предложение на синоним?
Лучше переесть, чем недоспать! © Обратное тоже верно :umnik1:
alex_127
Уже с Приветом
Posts: 7723
Joined: 29 Mar 2000 10:01
Location: Kirkland,WA

Re: Data Science: идея для старт-апа

Post by alex_127 »

kyk wrote: 02 Nov 2021 04:47 Конкретизирую:
Есть ли в библиотеках NLP/ML функция заменить слово, фразу или предложение на синоним?
а цифры - на похожие! Почитайте об обратной задаче, возможно она подскажет пути...
https://www.dissernet.org/
User avatar
Komissar
Уже с Приветом
Posts: 64661
Joined: 12 Jul 2002 16:38
Location: г.Москва, ул. Б. Лубянка, д.2

Re: Data Science: идея для старт-апа

Post by Komissar »

kyk wrote: 02 Nov 2021 04:47 Конкретизирую:
Есть ли в библиотеках NLP/ML функция заменить слово, фразу или предложение на синоним?
была статья об использовании NLP for sarcasm detection - погугли и спишись с авторами.
User avatar
kyk
Уже с Приветом
Posts: 31438
Joined: 21 Nov 2004 05:12
Location: камбуз на кампусе

Re: Data Science: идея для старт-апа

Post by kyk »

alex_127 wrote: 02 Nov 2021 05:16 Почитайте об обратной задаче, возможно она подскажет пути...https://www.dissernet.org/
а чем же она обратна?
Имеешь ввиду plagiarism detection?

Так в моей задаче нет цели выдать чужую идею за свою. А есть цель изменить лишь форму, сохранив содержание (т.е. идею)
Лучше переесть, чем недоспать! © Обратное тоже верно :umnik1:
alex_127
Уже с Приветом
Posts: 7723
Joined: 29 Mar 2000 10:01
Location: Kirkland,WA

Re: Data Science: идея для старт-апа

Post by alex_127 »

kyk wrote: 02 Nov 2021 05:21
alex_127 wrote: 02 Nov 2021 05:16 Почитайте об обратной задаче, возможно она подскажет пути...https://www.dissernet.org/
а чем же она обратна?
Имеешь ввиду plagiarism detection?

Так в моей задаче нет цели выдать чужую идею за свою. А есть цель изменить лишь форму, сохранив содержание (т.е. идею)
угадайте для чего эта система была бы использована...
>>> И как кричал ты у дона Рэбы в кабинете, как в ногах у него ползал, молил: "Отдай, не надо!" Поздно было. Завертелась твоя мясокрутка...
User avatar
kyk
Уже с Приветом
Posts: 31438
Joined: 21 Nov 2004 05:12
Location: камбуз на кампусе

Re: Data Science: идея для старт-апа

Post by kyk »

alex_127 wrote: 02 Nov 2021 05:28угадайте для чего эта система была бы использована...
а теперь, пожалуйста, для танкистов и прапорщиков, доступно, по-сталински :fr:
Лучше переесть, чем недоспать! © Обратное тоже верно :umnik1:
alex_127
Уже с Приветом
Posts: 7723
Joined: 29 Mar 2000 10:01
Location: Kirkland,WA

Re: Data Science: идея для старт-апа

Post by alex_127 »

kyk wrote: 02 Nov 2021 05:33
alex_127 wrote: 02 Nov 2021 05:28угадайте для чего эта система была бы использована...
а теперь, пожалуйста, для танкистов и прапорщиков, доступно, по-сталински :fr:
1. Все школьники мечтают о том чтобы было место откуда можно было "скачать реферат".
2. Большая часть учителей уже давно знает о гугле, www.antiplagiat.ru и так далее.

И тут СИСТЕМА - на вход даешь реферат, на выходе - тоже реферат но никаким антиплагиатом не ловится!

https://zaochnik.ru/blog/13-dejstvennyx ... -ne-delat/
User avatar
kyk
Уже с Приветом
Posts: 31438
Joined: 21 Nov 2004 05:12
Location: камбуз на кампусе

Re: Data Science: идея для старт-апа

Post by kyk »

Глубокий рерайт
Добавление синонимов и эпитетов
Синонимайзеры
Источник: https://zaochnik.ru/blog/13-dejstvennyx ... -ne-delat/

Ну в приципе я говорю об этом же, но objective немного другой. Типа написал одно сообщение на форум или в ленте новостей, а затем его обработал и выложил в другом месте даже если от своего же имени. Т.е. скорее это content generation.
Ну или как для бота-Муделя,"Smart Mirroring" чтобы заживого человека сойти :good:

Или типа если СNN крутит одну и ту же шарманку весь день, то будем для разнообразия менять форму словесов, цЫфры не менять :nono#:

Нет задачи интеллектуального фрода как таковой, тем более, что в омерике за это бьют больно.
Last edited by kyk on 02 Nov 2021 11:23, edited 1 time in total.
Лучше переесть, чем недоспать! © Обратное тоже верно :umnik1:
alex_127
Уже с Приветом
Posts: 7723
Joined: 29 Mar 2000 10:01
Location: Kirkland,WA

Re: Data Science: идея для старт-апа

Post by alex_127 »

kyk wrote: 02 Nov 2021 05:47 Нет задачи интеллектуального фрода как таковой, тем более, что в омерике за это бьют больно.

может эти тогда как пример?

https://automatedinsights.com/
quillbot
wordtune
grammarly.com
User avatar
kyk
Уже с Приветом
Posts: 31438
Joined: 21 Nov 2004 05:12
Location: камбуз на кампусе

Re: Data Science: идея для старт-апа

Post by kyk »

alex_127 wrote: 02 Nov 2021 06:03может эти тогда как пример?

https://automatedinsights.com/
quillbot
wordtune
grammarly.com
Может, но мне нужна готовая библиотека для Питона или доступ по API. Сам я такое писать не смогу и не захочу, а делать прототип могу только я , подручных нет
Лучше переесть, чем недоспать! © Обратное тоже верно :umnik1:
alex_127
Уже с Приветом
Posts: 7723
Joined: 29 Mar 2000 10:01
Location: Kirkland,WA

Re: Data Science: идея для старт-апа

Post by alex_127 »

kyk wrote: 02 Nov 2021 06:18 Может, но мне нужна готовая библиотека для Питона или доступ по API. Сам я такое писать не смогу и не захочу, а делать прототип могу только я , подручных нет
камон, все у чего торчит морда это API.
другое дело что пользоватся любым сервисом который имеет серверную часть на работе - чревато...
xrundel
Уже с Приветом
Posts: 1459
Joined: 01 Mar 2019 17:02

Re: Data Science: идея для старт-апа

Post by xrundel »

kyk wrote: 02 Nov 2021 04:11 Мне от твоего лярда 100K в год отщипни, я к Otherside-y в крымНаш перееду, будем тебе посильно помогать.
Програмисты в Крыму должны хотеть $3К/м. Это не те которые на старости лет открыли для себя основы алгоритмов а которые кодили эппы хотя бы лет 5.
xrundel
Уже с Приветом
Posts: 1459
Joined: 01 Mar 2019 17:02

Re: Data Science: идея для старт-апа

Post by xrundel »

kyk wrote: 02 Nov 2021 04:11 расшифруй, имеешь ввиду есть ли спрос?
меряй не "спрос" а CAC. Вот сделал ты свой эпп завтра и что?
Andrey Strelnikov
Уже с Приветом
Posts: 607
Joined: 17 Dec 2009 11:27

Re: Data Science: идея для старт-апа

Post by Andrey Strelnikov »

kyk wrote: 02 Nov 2021 06:18
alex_127 wrote: 02 Nov 2021 06:03может эти тогда как пример?

https://automatedinsights.com/
quillbot
wordtune
grammarly.com
Может, но мне нужна готовая библиотека для Питона или доступ по API. Сам я такое писать не смогу и не захочу, а делать прототип могу только я , подручных нет
Я думаю что хайп на DS прошел. Игроки все есть толстые но активные. И эта фича написана давно.
User avatar
katit
Уже с Приветом
Posts: 23749
Joined: 05 Jul 2003 22:34
Location: Брест -> St. Louis, MO

Re: Data Science: идея для старт-апа

Post by katit »

xrundel wrote: 02 Nov 2021 14:23
kyk wrote: 02 Nov 2021 04:11 Мне от твоего лярда 100K в год отщипни, я к Otherside-y в крымНаш перееду, будем тебе посильно помогать.
Програмисты в Крыму должны хотеть $3К/м. Это не те которые на старости лет открыли для себя основы алгоритмов а которые кодили эппы хотя бы лет 5.
Недавно проходил мимо - слышал что хотят 4к+ сейчас. И не так чтоб слишком крутые.
Лучше водки — хуже нет! ©
Oleg Co
Уже с Приветом
Posts: 7909
Joined: 19 May 2008 22:10
Location: BY->DEU->SFBA

Re: Data Science: идея для старт-апа

Post by Oleg Co »

kyk wrote: 02 Nov 2021 03:58 Есть ли какие-либо библиотеки или фреймворки для замены слов и словосочесатний на синонимы , чтобы из одного текста сгенирировать другой, который по сути и содержанию будет совпадать с первым, но скажем, формально отличаться на 40-50% по словам?
Неужели все так туго? Что хочется плагиатить чужие работы?
Mmodel
Уже с Приветом
Posts: 8192
Joined: 27 Mar 2016 23:56

Re: Data Science: идея для старт-апа

Post by Mmodel »

зачем своими руками что-то делать, главное чтобы вписывалось и продавалось.
Пригодное с легальной стороны дела.
User avatar
kyk
Уже с Приветом
Posts: 31438
Joined: 21 Nov 2004 05:12
Location: камбуз на кампусе

Re: Data Science: идея для старт-апа

Post by kyk »

Oleg Co wrote: 03 Nov 2021 21:10Неужели все так туго?
ищу интересный проект для изучания Data Science / NLP на Питоне
Лучше переесть, чем недоспать! © Обратное тоже верно :umnik1:
Andrey Strelnikov
Уже с Приветом
Posts: 607
Joined: 17 Dec 2009 11:27

Re: Data Science: идея для старт-апа

Post by Andrey Strelnikov »

kyk wrote: 03 Nov 2021 22:23
Oleg Co wrote: 03 Nov 2021 21:10Неужели все так туго?
ищу интересный проект для изучания Data Science / NLP на Питоне
была тема про DS. Там кто-то стихи писал роботом. А вообще сделайте робота. Чтобы перезванивал студентам и вопросы им задавал. Зразу еще и CV прокачаете.
User avatar
kyk
Уже с Приветом
Posts: 31438
Joined: 21 Nov 2004 05:12
Location: камбуз на кампусе

Re: Data Science: идея для старт-апа

Post by kyk »

Andrey Strelnikov wrote: 04 Nov 2021 07:35 А вообще сделайте робота. Чтобы перезванивал студентам и вопросы им задавал.
Хорошая идея. С чего начать? В какие библиотеки глядеть?
Лучше переесть, чем недоспать! © Обратное тоже верно :umnik1:
OtherSide
Уже с Приветом
Posts: 15759
Joined: 01 Mar 2008 15:14

Re: Data Science: идея для старт-апа

Post by OtherSide »

katit wrote: 03 Nov 2021 17:41
xrundel wrote: 02 Nov 2021 14:23
kyk wrote: 02 Nov 2021 04:11 Мне от твоего лярда 100K в год отщипни, я к Otherside-y в крымНаш перееду, будем тебе посильно помогать.
Програмисты в Крыму должны хотеть $3К/м. Это не те которые на старости лет открыли для себя основы алгоритмов а которые кодили эппы хотя бы лет 5.
Недавно проходил мимо - слышал что хотят 4к+ сейчас. И не так чтоб слишком крутые.
Please define "крутые"?

Алгоритмиты и какие нибуть специалисты по докеру и тимсити - это разные программисты во всем - навык, мышление, психотип
Скорее всего ковырятся в фреймворках нейросетей будет стоить сильно дешевле, чем по Angular 17

Return to “Работа и Карьера в IT”