Привет Мейлач, угадай что это у меня.
>>176724862 (OP)Бамболейло
Ну же.
>>176724862 (OP)Прыщи на ебале и на мониторе.
>>176724862 (OP)Какая-то нейронка.
>>176724862 (OP)>RStudio — свободная среда разработки программного обеспечения с открытым исходным кодом для языка программирования R, который предназначен для статистической обработки данных и работы с графикойкороче какая-то хуита без задач
>>176724982На лице нет. :3
>>176725018Так, а для чего она? Как считаешь?
Трейдербот
Бэээмпс.
>>176725144Почти, очень близко.
>>176725181Предсказывает ежедневную статистику на бирже?
>>176724862 (OP)Комп
>>176725250Так точно, предсказывает курс крипты. Тред можно закрывать господа, у нас победитель.
керас сосет, тф рулит
>>176725312Братан, а ты в нейронках и машобе вообще хорошо сечёшь? Нужна некоторая помощь в одном проекте.
>>176725413Ну я занимаюсь машин-лёнингом. А что такое машабой?
>>176725368Дружище Керас это просто обертка вокруг Тензора, надстройка над ним. И еще над двумя либами.
>>176725312И что там напредсказала твоя программа?КОГДА БЛЯТЬ БУДЕТ БЫЧЬЕ Я ЗАЕБАЛСЯ УЖЕ СУКА
>>176725413Ааа, матлаб. Ну смотря что за проект.
Биток + нейронка?
>>176725495Машинное обучение. Кароче, нужно сделать проект, который будет анализировать программный код на предмет закладоквредоносного программного кода, либо просто аномалии в программном коде какого-либо проекта А так как я java-макака, то пока хуёво секу в нейронках. Может подскажешь, куда копать, какие алгоритмы, сложно ли в принципе реализовать такую йобу?
>>176725560Я ток дописал ее, там видно слева реальные данные, справа прогноз. Я засуну туда еще торговые индикаторы и всякие свистелки-перделки для брокеров на неделе и буду тестить.
>>176725652Проект буду делать на питоне, если что.
>>176724862 (OP)> kerasВоннаби-мамкин-нейросетевик, очевидно.
>>176724862 (OP)Программа с цветовой гаммой из 90-х?
>>176725368>>176725553И кекекерас говно, и тф говно.Пайторч рулит.
>>176725553Так да, и она сосет. Я хотел запилить подобие ГАНа на керасе и не шмог, а на голом тф вышло.>>176725413Я по естественным языкам (sentiment analysis) в основном, а это весьма специфическая хрень. Сомневаюсь, что помогу, если там прогнозные какие-то вещи
>>176725731Уёбывай
>>176725674Пошёл нахуй, дебил. Ещё бы анализ стоков попросил, я ебу.
>>176725652 Ну это не хуй собачий, не помню что-то подобное уже есть, не помню точно что. Но слышал. Такой проект не для одного человека. Использовать нужно скорее всего сети с долгой памятью- RNN, LSTM и вместе с ними еще комбинации всяких алгоритмов помимо сетей, деревья решений например. Но это на вскидку. Нужно будет как то векторизовать код перед подачей его в сеть, ну тоесть нормализовать значения чтобы они были в одном диапазоне. Например между 0 и 1. Это заебашно будет конвертировать код в 0.14532, 0.12323 и т.д. Ща скину с чего учить начать лучше, поищу в закладках. Ты вообще нулевой в маш.обуч или есть опыт?
>>176725755хотя, у меня был один результатец - накидали на матлабе/симулинк нейросетку по классике с онлайн-обучением. Но мой там вклад мизерный был - я тупо метод оптимизации предложил, где гессиан сам не считается, а только его знак берется. Полуторного порядка как бы, но вроде все быстро сходится
>>176725761Баттхерт ТФ-макаки. Каково это, пересобирать свежий ТФ из исходников под нужную версию КУДЫ часик этак, или полтора?
>>176725936Нахуй мне это нужно? Нейронки - говно без задач, если у тебя нет домашнего кластера.
>>176725674Я выбрал для нейронок R, потому что он полностью векторизирован. Выучил его за месяц. До него писал на сях и скрипты от нехуй делать на пайтоне.
>>176724862 (OP)Рита?!?
>>176725312>предсказывает курс криптыСейчас бы нелинейные процессы предстказывать.У меня для тебя плохие новости. Ещё R блять прикрутил, на питоне не осилил написать?
>>176725988>векторизированМатлаба не желаете отведать? хдд
>>176725878В машоб нулевой.А если сделать что-то лайтовое? Прога нужна в течении месяца. Дипломный проект, лул Сама тема "Анализ данных и машинное обучение в поисках программных закладок".
>>176725968Да не гони, стэйт оф зе арт результаты в некоторых практических областях до сих пор получают иногда на единственном GTX 1080 Ti или там Титане.
>>176725652Начни с этого курса, тут 9 шагов и на питоне и более-менее охватывает. ОПhttps://habr.com/company/ods/blog/322626/
>>176726085Маловато времени, рекомендую тогда спиздить что то из сети и переписать слегка.
>>176726102Профиты какие-нибудь есть, или только дорисовывают собак к картинкам?
Всмысле? Я не тян.
>>176725935>где гессиан сам не считается, а только его знак берется.хуй соси быдло
>>176726154В инете не нашёл чего-то подобного. Я ещё думаю, как лучше делать, искать программные закладки в самом коде, или анализировать выходные данные на предмет аномалий и говорить "вот тут у тебя хуйня, братан, возможно вредоносный код".
>>176726066У этой сети нелинейная активационная функция и она Long Short Term Memory, если о чем то говорит. А питон не векторизован, мне не нравится. Это будет большой проект и рано или поздно на питоне сосну. Хотя модули будут и на нем и на сях.
>>176726233Если найдешь кучу примеров нормальных и с закладками, то лучше на выходе ловить аномалии.
>>176726233Давай начнём с того, кто этим будет пользоваться.Кто пользуется проприетарным говном? Правильно, говноеды. Ты хочешь делать продукты для говноедов? Тогда твои продукты будут обычным высером. Займись чем-нибудь полезным.
>>176726277>нелинейная активационная функцияЗвучит как танец с бубном. Ты точно уверен что это должно работать? Трейдеры на десках не просто так сидят, рынок это тебе не задачка по математике.
>>176726401>дипломная работа>что-то полезное>не говноБратан, я как бы увяз в этом и надо уже реализовывать.
>>176726085Короче, сигнатуры тебя спасут. Можно даже без нейронок, если честно. У тебя есть сигнатуры в статике - тупо операторы, то есть слова. Прикручиваешь антиспам с эвристикой и вуаля. А есть сигнатуры в динамике - типа если ты сидишь с привилегиями и видишь, что анализируемая прога вызывает. Системные вызовы там в определенной последовательности. Можно построить сигнатуру в динамике как автоматную модель и чекать, соответствуют ли таблицы переходов (опять с эвристикой, +-). Если уж прямо хочется нейронку - сиди в динамике и анализируй проц, память, частоту системных вызовов и смотри, соответствует ли оно ПРОФИЛЮ. Но это говно, имхо лучше по сигнатурамСорян за неровный почерк, спрашивайте свои ответы, могу пояснить
>>176726427Дебил не слышал про пороговую передаточную функцию, а уже лезет что-то обсуждать.
>>176726454Предлагаю сделать свою виртуальную машину, для которой потом писать анализатор.
>>176726485Да тут не хочется, тут просто нужно использовать машоб, чтобы в тему диплома попасть. Заложник ситуации, так сказать.>>176726526Смысл?
>>176726427Я знаю бро, я сам торговал. Искал что-то подобное, в итоге плюнул и решил сам писать. Вроде работает, скоро тестировать буду. Все что связано с предсказаниями курса это временные ряды. Вот в общем модель если интересно. Там ответы на твой вопрос. https://ru.wikipedia.org/wiki/%D0%94%D0%BE%D0%BB%D0%B3%D0%B0%D1%8F_%D0%BA%D1%80%D0%B0%D1%82%D0%BA%D0%BE%D1%81%D1%80%D0%BE%D1%87%D0%BD%D0%B0%D1%8F_%D0%BF%D0%B0%D0%BC%D1%8F%D1%82%D1%8C#LSTM_%D1%81_%C2%AB%D0%B3%D0%BB%D0%B0%D0%B7%D0%BA%D0%B0%D0%BC%D0%B8%C2%BB
>>176726600Обосрался с сыылкой, извиняйте.
>>176726579> Смысл? Реализуй ограниченное количество операций, которые будет легче анализировать, чем полноценный машинный код.
>>176726600> Вроде работает, скоро тестировать будуНо как же ты узнал, что работает, если ещё не протестировал?
>>176726600Благодарю, бро.
>>176726672Там в Оп посте прогноз который она дала на май, слева реальные значения, справа прогноз же. Точность вполне, но я ее еще доработаю. И в проге будет не только нейронка но и другие помошники анализа рынка. Типа швейцарского ножа кек.
>>176726085Это могила а не проект. Потому что закладки это гораздо сложнее чем анализ сантиментов (где можно далеко отъехать даже на н-граммах и логистической регрессии для начала).У тебя так же есть проблема с данными для тренировки. У тебя есть база "плохих" программ? В качестве альтернативы ты можешь взять исходный код каких-нибудь известных закладок, докумекать как встроить это в тело рабочей программы (не знаю, тут зависит от самой закладки и не моя компетенция), и потом тренировать алгоритм на поиск этих известных закладок.Это на самом теле говно и трэш, но дипломы обычно тоже говно и трэш так что должно прокатить.
>>176726752:3
>>176726579>Да тут не хочется, тут просто нужно использовать машоб, чтобы в тему диплома попасть. Заложник ситуации, так сказать.Тогда пили anomaly detection. Я так понял, объект просто с потолка взят, а научрук хочет больше машоба богу машоба.
>>176726759Лол, вангую что обосрёшься прямо на старте.
Почему ебанутые так обильно дрочат на нейронки? Это же пустая технология, из которой выжимают последние соки серьёзные конторы вроде гугла.
>>176726978>Почему ебанутые так обильно дрочат на нейронки? Это же пустая технология, из которой выжимают последние соки серьёзные конторы вроде гугла.Сказала нейронка
>>176726759>и другие помошники анализа рынка.Блять, лох
>>176726867На старте я обсирался раз 20 наверное, пока начал адекватный прогноз получать. Я пилю это дело долго и упорно.
>>176727049НЕ ИЗУЧАЙ МЕНЯЛЮДЕЙ ИЗУЧИВШИХ СОЙДУТ С УМАБЕЗМОЗГNМ
>>176727163И сколько депозита спустил в унитаз за все эти попытки?
>>176727091Обосрался маненько с щ.
>>176727196Нисколько, я торгую ей с демо счетов биржи. А так у меня 2 фермы стоят, будет торговать тем что намайнили когда буду готов. Ну и другим людям буду добро делать.
>>176726978Эта технология охуенно заменяет человека в тех задачах где человек хорошо себя показывает (зрение, аудио, анализ сентиментов).Не всегда работает там, где плохо справляется человек (очень шумные данные, где хрен разберешься). Отсюда и популярность иксджибуста и случайных лесов. Только и всего.
>>176724862 (OP)Финкпад, блядь. И что дальше? Мне обосраться?
>>176727350>>176727350Чем тебя смущает то мой няшный Синкпад?
>>176727516Повторяешься. Или это фича твоего нейронного мозга?
>>176726766Двачую. Статические анализаторы существуют и позволяют выявить большую часть случайных ошибок. Закладки же делаются так, чтобы специалист не смог их обнаружить при ревью. Сделать такой проект можно при условии, что во всех видах закладок есть общий паттерн, останется только научить нейросеть понимать смысл кода (лол).
>>176727596>>176727596Ты так и не ответил
>>176724862 (OP)О, что за модель?у тебя тоже в полной тишине можно услышать как дроссели чутка с ума сходят при нагрузке резкой?
>>176727596Случайно получилось. Кстати минутка знаний. В реальном мозгу нет активационных функций и сигналы передаются импульсами. Ну то есть нейрон получает сколько то ипульсов, напрягается и сам испускает испульс. Потом расслабляется и по новой. Сейчас на пороге 4 поколение так называемых импульсных сетей. IBM даже нейрочипы с такой архитектурой пилит. Но пока дорохо. Вот как будет для простых смертных- заживём!https://ru.wikipedia.org/wiki/Импульсная_нейронная_сеть
>>176724862 (OP)Линукс
>>176727770как вкатиться во все это? с чего начать?
>>176727694T540p, дроселей не слышно. Стал куллер гудеть, менял и пасту и чистил, уже думал пизда трубке теплоотводной. А оказалось надо было масла в кулер капнуть лол. на 540 отвратительный тачпад. Ну он ща доходит свое скоро уже, даже не знаю что брать. Хотелось бы какой нибудь воркстейшн.
>>176727830Начать с простеших перцептронов, потом линейные сети, потом нелинейные, потом сверточные, рекурентные, LSTM. Но лучше не в конкретно нейронки вкатываться а в маш. обучение в целом я ссылку выше кидал на курс, но там питон, хотя для начала самое то.>>176726106
>>176727676Допустим, если мы декомпилируем программный код клавиатуры и вставим туда программную закладку. Как можно будет её найти?
>>176724862 (OP)Рекуррентная нейронка для регрессии по временному ряду, скорее всего lstm какой-нибудьНо чот я не уверен, что график MSE показателен, т.к. у тебя сами значения мелкие
>>176728063Какой у клавиатуры программный код? Ну максимум драйвера реверсить. Но в основном кейллогеры на мастдае во вскяком случае, вешаются через хуки, на win apiлютая поебень. То есть это такая програмка которая ждет от клавиатуры отклика. Ваш Оп.
>>176728110Все угадал, график я для себя делал сугубо для тестов.
>>176728218Будто на линуксе нельзя через модули такое же сделать.
>>176724862 (OP)Это че, kde или xfce-параша? Сажи треду и опу-школьнику.
>>176728306Можно все что угодно, при достаточной компетенции. Просто винда чаще встречается у юзеров.
>>176728405А на ксяоми нет вирусов, потому что у владельцев ксяоми нечего воровать!
>>176728342Это Debian и Gnome. Школу я 2008 закончил братулёк. ;)
>>176728455Пиздец, ну ты и говноед. Лучше на винду перекатывайся.
>>176728501Ну я не играю в игры, импотенция игровая. А в остальном у меня и на прыщах все есть, да еще с прицепом!
>>176728612Дебиан - это не прыщи. Тем более с гномом.
>>176728666Ну тебе виднее Сотона.
Хочу извиниться что тролил в этом треде) Вы все хорошие умные продолжайте делать)
>>176724862 (OP)Оп, видать ты хороший парень, оставишь фейко-мыльце?
>>176729011Давай ты свою телегу, у меня нет фейкомыл. Добавлю.
>>176729290у меня телеги нет(может заведешь мыло? Там скайп кинуинтересен результат
>>176726066>предстказыватьты долго думал чтобы так слово исковеркать?
>>176724862 (OP)Опчик, ты в алготрейдинге опытный чувак? Просто есть несколько знакомых, пилящих криптофонды, там работают всякие крутые чуваки в плане математики/программирования/машоба и местами даже трейдинга (акции), и консенсус такой, что хуй пойми с этими стратегиями, хороший результат в симуляции обычно очень мало что значит.Ты вообще что дальше с этим делать собираешься? На свои бабки торговать? Или может ты тоже в какой-то команде и у вас все схвачено (типа инфраструктура для трейдинга пилится и инвесторы найдены)?
>>176729485Ща, 5 минут.
>>176724862 (OP)ПЯТЬ ЛЕТ СПУСТЯ, НА БИРЖЕ ОДНИ НЕЙРОНОЧКИ@КУРС НЕ ДВИГАЕТСЯ И НА ЦЕНТ ОТ 3,000$@У ВСЕХ НЕЙРОНКИ ЛИБО НИЧЕГО НЕ ДЕЛАЮТ, ЛИБО ПОКУПАЮТ И ПРОДАЮТ ПО 0,00000001BTC КАЖДЫЙ ЧАС@ПРИВЕТ РАВНОВЕСИЕ НЭША
>>176729776У меня есть инвестор жирный, и математик хороший. На прогнозах не уедешь далеко, согласен. Это будет комплексный софт, там помимо нейронки куча инструментов для трейдинга будет.
>>176729485[email protected]
>>176729998еее, на неделе напишузаходи туда
>>176729875ДВОЩЕР СОЗДАЕТ СВОЮ НЕЙРОСЕТЬ@НЕ ОБУЧИВ ЕЕ,ЗАКИДЫВАЕТ НА БИРЖУ,ДУМАЯ ЧТО И ТАК СОЙДЕТ@КУРС ЧУТКА СДВИНУЛСЯ@КАК И АНУС ДВОЩЕРА
>>176730063Добро, только заведи пожалуйста телегу. Я ни скайпом ни соц сетями не пользуюсь.
>>176729882Так все-таки ты руками торговать собрался или роботов пилить (т.е. полностью автоматизировать)?>>176729875Почему-то на рынке акций (где все спокойнее и стабильнее чем в крипте по внешним причинам) мы туда за несколько десятков лет не пришли.
>>176725968> мы туда за несколько десятков лет не пришлиПотому что люди ебанутые. И на биржах почти все вещи чем-то подкреплены. Реальными компаниями. Биток же почти полностью на вере в него и на обмене держит цену.
>>176730136Нет, я против полной автоматизации. Пока не на таком уровне нейроночки, да и у рынка крипты высокая волатильность и плюс всякие факторы геополитические, которые нельзя угадать сетью. Но на это у меня есть пару идей. Ну в целом кнопку автоматической торговли мб и добавлю для эксперимента.
Ладно ребята, здорово подискутировали. Пойду спать. доброй ночи. ОП
>>176730291Че-то мне кажется с ручным управлением очень сложно не соснуть, да и нагрузка это ебическая (в том числе на психику), все время руками трейды хуячить.Просто все вокруг пытаются запилить йоба-машину, в которую иногда можно докидывать новые стратегии (будь то настоящие МЛ-модели или какие угодно другие алгоритмизированные способы предсказания), а все остальное она делает сама (типа оценивает кач-во стратегий, подбирает их комбинацию, делает оптимальный экзекьюшен).
>>176728218Ну бля, если взять любой другой программный код. Например настроить TCP/IP передачу данных или UDP. Вставить программную закладку. Как реализовать нейронкой поиск этой закладки.
Это спид
>>176724862 (OP)keras? на чем запустил? разворачиваю нейроночку, Френсис говорит надо юникс и титан. впринципе можно, но интересны альтернативы.тенденция обучения ничего идёт. только аномалии видимо щаебут
>>176724862 (OP)Воруешь биткоины у приятеля с флешки?
Бамп