День русского языка

Музыка, кино, литература, наши чувства, мысли и эмоции — все то, что делает нашу жизнь столь прекрасной и неповторимой

Модератор: модераторы раздела "О прекрасном"

Сообщение
Автор
Аватара пользователя
Дядюшка Шу
Сообщения: 2725
Зарегистрирован: 30 ноя 2008, 11:34

Re: День русского языка

#276 Сообщение Дядюшка Шу » 18 май 2014, 21:18

Staropramen писал(а):Сдаётся мне , что тест туфта и отсебятина.
Вот фиг знает. Я знаю, что такое лядащий амбидекстр, но слов этих, кажися, не употреблял лет ...дцать. Т.е. эти слова у меня в пассивном словаре, а не в активном.
Дык тут и оценивается мощность пассивного словаря, а вы про активный завели речь.
Никто ничего не читает; ежели читает – ничего не понимает; ежели понимает – тут же забывает. С. Лем

Аватара пользователя
Дядюшка Шу
Сообщения: 2725
Зарегистрирован: 30 ноя 2008, 11:34

Re: День русского языка

#277 Сообщение Дядюшка Шу » 18 май 2014, 21:22

LuckyOne [away] писал(а):Ради интереса перемерил - разброс посмотреть. И он таки значительный, от второго списка зависит очень сильно.
У меня за пять испытаний все результаты легли в диапазон от 88 до 97 тысяч. 10-15% - я бы не назвал такой разброс значительным для простенького теста. Всё сходится.
Никто ничего не читает; ежели читает – ничего не понимает; ежели понимает – тут же забывает. С. Лем

Аватара пользователя
мура
Сообщения: 102459
Зарегистрирован: 01 фев 2009, 14:56
Откуда: Дубна

Re: День русского языка

#278 Сообщение мура » 18 май 2014, 21:23

Вот я и хотел сравнить активный словарь разных форумчан, и Ега сказал, что тема его интересует и он напишет программку. Но зажал.

Аватара пользователя
Staropramen
Сообщения: 6345
Зарегистрирован: 17 апр 2010, 21:12

Re: День русского языка

#279 Сообщение Staropramen » 19 май 2014, 01:01

Дядюшка Шу писал(а): Дык тут и оценивается мощность пассивного словаря, а вы про активный завели речь.
А я как Шерлок Холмс. Зачем мне пассивный :D

Аватара пользователя
LuckyOne [away]
Сообщения: 4466
Зарегистрирован: 14 сен 2012, 16:52

Re: День русского языка

#280 Сообщение LuckyOne [away] » 19 май 2014, 08:16

мура писал(а):Вот я и хотел сравнить активный словарь разных форумчан, и Ега сказал, что тема его интересует и он напишет программку. Но зажал.
В свете последнего теста - очень даже интересная мысль. Я в программировании не Ега, конечно, но тоже кое-где программировать могу, иногда.

Делается то всё в принципе несложно.. Я скачал свои посты текущего логина - 1952 штук, прогнал через DOM-фильтр для очистки от тэгов, цитат и прочих линков, засунул в морфологический анализатор, который привёл все слова к канонической форме-лемме, и посчитал сумму + уникальные, а также топ-10 используемых. Нормуль, многовато мусора в речи, но запас есть.

I. Мои посты:
Всего слов: 129850
Уникальных слов: 16106
Топ-10 после очистки от предлогов и мусора:
1. ЧТО 1432
2. ЭТО 1235
3. БЫТЬ 949
4. ВЕСЬ 902
5. КАК 820
6. ЕСТЬ 660
7. ЕСЛИ 622
8. Я 587
9. КОТОРЫЙ 533
10. ОНИ 489

II. сравнил себя с переводом Магелланова облака Лема, который прогнал через тот же скрипт:

Всего слов: 223048
Уникальных слов: 14592
Топ-10:
1. Я 5133
2. ЧТО 3057
3. ОН 2744
4. МЫ 2297
5. ЭТО 2189
6. КАК 1862
7. БЫТЬ 1679
8. ВСЕ 1248
9. ЕГО 1199
10. КОТОРЫЙ 1137

ЗЫ: ну и чем я не Лем, за исключением заниженной самооценки :D
Вот только почищу активную лексику от жаргона и нехорошестей, так сразу издам трехтомник.
Если жалко пармезан, ты хохляцкий партизан!

Аватара пользователя
LuckyOne [away]
Сообщения: 4466
Зарегистрирован: 14 сен 2012, 16:52

Re: День русского языка

#281 Сообщение LuckyOne [away] » 19 май 2014, 08:46

Не, пожалуй не буду публиковать трехтомник. Сравнился с losharik (референсная точка), и понял широту своей проблемы:

losharik (последние 5000 форумных постов):
Всего слов: 222759
Уникальных слов: 20730 <-- активный, незамусоренный лексикон
1. ЧТО 2491
2. ЭТО 1709
3. Я 1491
4. БЫТЬ 1476
5. КАК 1394
6. МЫ 905
7. ГОД 827
8. КОТОРЫЙ 817
9. ЕСЛИ 791
10. ОН 790
Если жалко пармезан, ты хохляцкий партизан!

Аватара пользователя
мура
Сообщения: 102459
Зарегистрирован: 01 фев 2009, 14:56
Откуда: Дубна

Re: День русского языка

#282 Сообщение мура » 19 май 2014, 08:49

О как! А мои можете прогнать? Заранее благодарен. И еще дейлкупер интересует.

Аватара пользователя
losharik
Сообщения: 12945
Зарегистрирован: 28 апр 2009, 21:22
Контактная информация:

Re: День русского языка

#283 Сообщение losharik » 19 май 2014, 08:50

Копипасты считались? Тогда у Муры ваще много-много уникальных, не догнать.
dubna-inform.ru

Аватара пользователя
мура
Сообщения: 102459
Зарегистрирован: 01 фев 2009, 14:56
Откуда: Дубна

Re: День русского языка

#284 Сообщение мура » 19 май 2014, 08:50

Единственная проблема - надо минусить комипасты.

Аватара пользователя
losharik
Сообщения: 12945
Зарегистрирован: 28 апр 2009, 21:22
Контактная информация:

Re: День русского языка

#285 Сообщение losharik » 19 май 2014, 08:51

мура писал(а):Единственная проблема - надо минусить комипасты.
:lol:
Все равно у тебя больше активный словарь, потому что какие-то слова можно знать, но не употреблять))
Последний раз редактировалось losharik 19 май 2014, 09:05, всего редактировалось 1 раз.
dubna-inform.ru

Аватара пользователя
LuckyOne [away]
Сообщения: 4466
Зарегистрирован: 14 сен 2012, 16:52

Re: День русского языка

#286 Сообщение LuckyOne [away] » 19 май 2014, 08:52

Цитаты, размеченные как цитирование или еще какими-нить тегами, не считались. Весь остальной текст считался личным.

ЗЫ: остальных - завтра посчитаю.. сейчас спать хочется.
Если жалко пармезан, ты хохляцкий партизан!

Аватара пользователя
мура
Сообщения: 102459
Зарегистрирован: 01 фев 2009, 14:56
Откуда: Дубна

Re: День русского языка

#287 Сообщение мура » 19 май 2014, 08:53

Минус олбанские слова.

Аватара пользователя
Staropramen
Сообщения: 6345
Зарегистрирован: 17 апр 2010, 21:12

Re: День русского языка

#288 Сообщение Staropramen » 19 май 2014, 08:57

Если у меня минусовать копипасты останется Я и ЧТО :(

Аватара пользователя
LuckyOne [away]
Сообщения: 4466
Зарегистрирован: 14 сен 2012, 16:52

Re: День русского языка

#289 Сообщение LuckyOne [away] » 19 май 2014, 08:58

мура писал(а):Минус олбанские слова.
Анализатор относительно умный. Он приводил к базовой форме даже незнакомые словарю олбанские слова, но, естественно, не знает сходства между "падонак" и "подонок" - т.е. подобное даёт два слова-уника. Но если кто-то возьмётся расширить использованный словарь за счёт новояза, то можно и этому научить.
Если жалко пармезан, ты хохляцкий партизан!

Аватара пользователя
мура
Сообщения: 102459
Зарегистрирован: 01 фев 2009, 14:56
Откуда: Дубна

Re: День русского языка

#290 Сообщение мура » 19 май 2014, 10:08

Интересно очень. Заинтересован.

Еге - минус к карме. Лаки - плюс.

Аватара пользователя
Дядюшка Шу
Сообщения: 2725
Зарегистрирован: 30 ноя 2008, 11:34

Re: День русского языка

#291 Сообщение Дядюшка Шу » 19 май 2014, 13:22

И я! И мне! И меня посчитайте!
Катарсис дышло амфибрахий инвариант! :smile:
Никто ничего не читает; ежели читает – ничего не понимает; ежели понимает – тут же забывает. С. Лем

Аватара пользователя
losharik
Сообщения: 12945
Зарегистрирован: 28 апр 2009, 21:22
Контактная информация:

Re: День русского языка

#292 Сообщение losharik » 19 май 2014, 13:32

Дядюшка Шу писал(а):И я! И мне! И меня посчитайте!
Катарсис дышло амфибрахий инвариант! :smile:
Сразу +4 - нагоняете, батенька. А мы - за чАстоту эксперимента)) Сегодня - 400, а завтра - 402.
dubna-inform.ru

Аватара пользователя
LuckyOne [away]
Сообщения: 4466
Зарегистрирован: 14 сен 2012, 16:52

Re: День русского языка

#293 Сообщение LuckyOne [away] » 19 май 2014, 16:50

Мура явно добрал на копипастах, так нечестно. Вечером подправлю чтобы отрезало закавыченные фразы, и попробую откинуть редкоиспользуемые слова. А также добавлю счётчик средней длины на пост. Кстати, интересное наблюдение: чем старше посты (у всех), тем больше разнообразие слов.

мура, последние 5000 постов:
Всего слов: 182093
Уникальных слов: 20056
1. Я 3339
2. ЧТО 2664
3. ЭТО 2590
4. БЫТЬ 1407
5. МЫ 1116
6. КАК 1068
7. ВЕСЬ 1027
8. ТЫ 957
9. ОН 892
10. ВЫ 890

И вот почему у меня "я" на восьмом месте, а у остальных в первой тройке-пятерке?
Если жалко пармезан, ты хохляцкий партизан!

Аватара пользователя
LuckyOne [away]
Сообщения: 4466
Зарегистрирован: 14 сен 2012, 16:52

Re: День русского языка

#294 Сообщение LuckyOne [away] » 19 май 2014, 16:52

dale cooper
Всего сообщений: 0
Если жалко пармезан, ты хохляцкий партизан!

Аватара пользователя
LuckyOne [away]
Сообщения: 4466
Зарегистрирован: 14 сен 2012, 16:52

Re: День русского языка

#295 Сообщение LuckyOne [away] » 19 май 2014, 17:02

Шура, а у тебя постов маловато. Надо написать раза в четыре больше слов для статистически-верного сравнения с остальными.

Либо тут надо уже какое-то отношение всего/уники вводить для оценки, но непонятно как погрешность считать, потому как получается, что "фактор обратного разнообразия" (чем меньше, тем лучше) у тебя = 5, у меня и муры = 8, а у лошарика = 11.

Дядюшка Шу:
Всего слов: 48952
Уникальных: 9604
1. Я 676
2. ЧТО 574
3. ЭТО 529
4. БЫТЬ 417
5. КАК 333
6. ОН 329
7. ВЕСЬ 313
8. МЫ 287
9. ТАКОЙ 204
10. БЫЛО 190
Если жалко пармезан, ты хохляцкий партизан!

Аватара пользователя
Дядюшка Шу
Сообщения: 2725
Зарегистрирован: 30 ноя 2008, 11:34

Re: День русского языка

#296 Сообщение Дядюшка Шу » 19 май 2014, 17:14

Типичный мой пост:
"Я что? Это все он, как его... Весь такой как... А мы такие - как это? Как бы что, так и было что ли? Ну, так и быть..."

Равняться с Лемом по "Магелланову облаку"? Фе. Это, кмк, одно из слабейших произведений, и язык в нём исключительно деревянный.
А вот взять Булгакова, Стругацких, Алексея Толстого, Алексея Иванова - кто победит?
Никто ничего не читает; ежели читает – ничего не понимает; ежели понимает – тут же забывает. С. Лем

Аватара пользователя
losharik
Сообщения: 12945
Зарегистрирован: 28 апр 2009, 21:22
Контактная информация:

Re: День русского языка

#297 Сообщение losharik » 19 май 2014, 17:15

Дядюшка Шу писал(а):Типичный мой пост:
"Я что? Это все он, как его... Весь такой как... А мы такие - как это? Как бы что, так и было что ли? Ну, так и быть..."

Равняться с Лемом по "Магелланову облаку"? Фе. Это, кмк, одно из слабейших произведений, и язык в нём исключительно деревянный.
А вот взять Булгакова, Стругацких, Алексея Толстого, Алексея Иванова - кто победит?
Лем - он же не по-нашему писал. Конечно, теоретически победить может и переводчик, но ставлю на носителя языка))
dubna-inform.ru

Аватара пользователя
Дядюшка Шу
Сообщения: 2725
Зарегистрирован: 30 ноя 2008, 11:34

Re: День русского языка

#298 Сообщение Дядюшка Шу » 19 май 2014, 17:19

Не-не, перечисленные четверо авторов (четверо, ибо братья - это один автор) пусть соревнуются с собой, а не с Лемом...
Может, замутим ставки? :crazy: Литературный тотализатор! :Yahoo!:
Никто ничего не читает; ежели читает – ничего не понимает; ежели понимает – тут же забывает. С. Лем

Аватара пользователя
LuckyOne [away]
Сообщения: 4466
Зарегистрирован: 14 сен 2012, 16:52

Re: День русского языка

#299 Сообщение LuckyOne [away] » 19 май 2014, 17:55

Этих твоих мастеров пера вечером потестирую. Пока есть вот что, из флибусты надёрганное:

//--------------------------------------------------------

Достоевский. Идиот:

Всего слов: 209550
Уникальных: 11217
1. ЧТО 4721
2. Я 4326
3. ОН 3939
4. ВЫ 2743
5. ЭТО 2378
6. КНЯЗЬ 2179
7. БЫТЬ 2120
8. КАК 1940
9. ВЕСЬ 1787
10. ОНА 1517

//--------------------------------------------------------

Айзек Азимов. Дэвид Старр, космический рейнджер

Всего слов: 170410
Уникальных: 13480
1. ОН 2881
2. ЧТО 2800
3. Я 2309
4. ЛАКК 1940
5. ЭТО 1899
6. ВЫ 1464
7. ТЫ 1352
8. БЫТЬ 1328
9. ЕГО 1306
10. МЫ 1227

//--------------------------------------------------------

Толстой. Детство, отрочество, юность

Всего слов: 118202
Уникальных: 9199
1. Я 3935
2. ЧТО 2481
3. ОН 1714
4. БЫТЬ 1196
5. КОТОРЫЙ 1175
6. КАК 1090
7. ЭТО 992
8. ОНА 937
9. МЕНЬ 911
10. СКАЗАТЬ 726
Если жалко пармезан, ты хохляцкий партизан!

Аватара пользователя
мура
Сообщения: 102459
Зарегистрирован: 01 фев 2009, 14:56
Откуда: Дубна

Re: День русского языка

#300 Сообщение мура » 19 май 2014, 18:04

[quote="LuckyOne [away]"
9. МЕНЬ 911
[/quote]
Что за МЕНЬ?

Ответить

Вернуться в «О прекрасном»