Начинаем начинать github as database - #138

Draft
zetroot wants to merge 57 commits into
DotNetRu:masterfrom
zetroot:serverles-poc
Draft

Начинаем начинать github as database#138
zetroot wants to merge 57 commits into
DotNetRu:masterfrom
zetroot:serverles-poc

Conversation

@zetroot

@zetrootzetroot commented Apr 29, 2021•
edited
Loading

Copy link
Copy Markdown
Collaborator

PR для прозрачности прогресса.
Реализация описанного в #129
Набор классов для работы с репозиториями github и их содержимым в памяти. Сейчас все это реализует IFileProvider. Только стрим с файлом можно не только читать, но и писать.
Нужна собственная абстракция провайдера файлов с методами создания и удаления файлов. Обновление в репозитории осуществляется через Flush стрима.
Все начинается с GitHubFilesystem. Надо начать сессию редактирования методом StartContext, затем можно пользоваться как IFileProvider.

Что в ближайших планах:

  • увеличить покрытие тестами
  • завершение сессии редактирования - создание PR в головной репозиторий

zetroot added 23 commits April 5, 2021 15:32
@zetroot
cleanup old code
2aa4441
@zetroot
added sample blazor app and extracted razor components library from it
3871b7d
@zetroot
drop previous attempts
a991721
@zetroot
new template project
bbb391f
@zetroot
wip
c194341
@zetroot
github client wip
140acc2
@zetroot
finally got how to create pr between forks
526159b
@zetroot
implementing ifilesystem
7f2372f
@zetroot
renaming to commune
ca6c96e
@zetroot
building github filesystem
fd5a694
@zetroot
wip
c0b948f
@zetroot
test wip
131d1e3
@zetroot
tests wip
0891954
@zetroot
rebuild stream creation
9dab8a0
@zetroot
removed setting data in stream constructor
637bc56
@zetroot
me failed with git
e93fa65
@zetroot
GithubFile tests implementation
fa1e982
@zetroot
removed template project to reduce PR size
9170b3a
@zetroot
DirectoryContents tests implementation
0c8697b
@zetroot
Merge remote-tracking branch 'origin/serverles-poc' into serverless-poc
f7d672f
# Conflicts:
#	DotNetRu.Commune.GitHubFilesystem/DotNetRu.Commune.GitHubFilesystem.csproj
#	DotNetRu.Commune.GitHubFilesystem/EditingContext.cs
#	DotNetRu.Commune.GitHubFilesystem/GitHubFileStream.cs
#	DotNetRu.Commune.GitHubFilesystem/GitHubFilesystem.cs
#	DotNetRu.Commune.sln
#	test/DotNetRu.Commune.Test.Fs.GitHubFilesystem/DotNetRu.Commune.Test.Fs.GitHubFilesystem.fsproj
#	test/DotNetRu.Commune.Test.Fs.GitHubFilesystem/GitHubFileStreamTests.fs
@zetroot
classes visibility tuning, docs added, added specific exception type
eaeae5d
@zetroot
added commit implementation to context
69c7cb5
@zetroot
added commit method to GitHubFilesystem, added tests for it
a8cb923
@zetroot

zetroot commented May 3, 2021

Copy link
Copy Markdown
CollaboratorAuthor

Добавил возможность закоммитить изменения.
В тестах лежит файл для F# Interactive , где можно поиграться с клиентом.
test/DotNetRu.Commune.Test.Fs.GitHubFilesystem/GithubScriptTest.fsx
Чтобы все заработало его надо покормить токеном авторизации (первый аргумент метода StartContext)
В результате можно получить вот такой прекрасный PR

@kulakovt

kulakovt commented May 3, 2021

Copy link
Copy Markdown
Member

@zetroot Было бы замечательно получить подробную инструкцию как получить GitHub токен. И сохранить её в wiki

@zetroot

zetroot commented May 3, 2021

Copy link
Copy Markdown
CollaboratorAuthor

@kulakovt ок, займусь завтра.

@zetroot

zetroot commented May 4, 2021

Copy link
Copy Markdown
CollaboratorAuthor

@kulakovt добавил страницу в wiki

zetroot added 3 commits May 5, 2021 20:26
zetroot added 24 commits May 8, 2021 17:51
@zetroot
github client wip
65c2360
@zetroot
finally got how to create pr between forks
356c1e5
@zetroot
implementing ifilesystem
08becf8
@zetroot
renaming to commune
adf57f1
@zetroot
building github filesystem
e01722e
@zetroot
wip
f94d740
@zetroot
test wip
759c906
@zetroot
tests wip
d279514
@zetroot
rebuild stream creation
f7dcb5e
@zetroot
removed setting data in stream constructor
d6922ef
@zetroot
me failed with git
c418cfb
@zetroot
GithubFile tests implementation
89dba2a
@zetroot
removed template project to reduce PR size
802504b
@zetroot
DirectoryContents tests implementation
439aaf2
@zetroot
classes visibility tuning, docs added, added specific exception type
f443f67
@zetroot
added commit implementation to context
f0b8d8a
@zetroot
added commit method to GitHubFilesystem, added tests for it
d3b1285
@zetroot
Merge remote-tracking branch 'origin/serverles-poc' into serverless-poc
3ccd3ed
@zetroot
fixed solution file
4d1f74a
@zetroot
first hello world app wip
3a5f8e2
@zetroot
directory viewer rebuilt
58e49b9
@zetroot
file contents viewer
cf85578
@zetroot
trying to change files
7289b0a
@zetroot
reading and writing file
2a2cbbf
@zetroot

zetroot commented Jun 1, 2021

Copy link
Copy Markdown
CollaboratorAuthor

Коллеги, что-то я застрял.

  • синхронные API нам не подойдут - blazor не может в Task.Result или в .GetAwaiter().GetResult(), поэтому вся работа с "файлами" должна быть асинхронной
  • сейчас приложуха умеет дописывать в открытый файл и делать PR, но вот тут мне не хватает идей. Что нам еще нужно для PoC?
  • я вспомнил почему я не пошел в веб

@kulakovt

kulakovt commented Jun 1, 2021

Copy link
Copy Markdown
Member

вся работа с "файлами" должна быть асинхронной

Думаю, это не проблема. Любой IO должен быть асинхронным.

Что нам еще нужно для PoC?

Игорь писал в #129

  • Чтение файлов
  • Создание/удаление бранчей
  • Создание PR
  • Я бы ещё добавил создание/запись в файл

@zetroot

zetroot commented Jun 2, 2021

Copy link
Copy Markdown
CollaboratorAuthor

Итак, я немного потрудился еще и теперь:

  • можно создавать бранчи (создается автоматически при начале редактирования)
  • можно читать файлы!
  • можно создавать PR в основной репозиторий
  • можно создавать файлы (тут есть ограничение - нельзя создать пустой файл, там обязательно что-то должно быть, поэтому сначала файл создаётся виртуально, а при Flush будет запрос на Create а не Update)

Интерфейс конечно выглядит отвратительно. Но вроде бы работает. Кто-то может испытать?

@kulakovt

kulakovt commented Jun 10, 2021

Copy link
Copy Markdown
Member

Посмотрите пожалуйста асинхронную файловую систему. Подходит ли она под все ваши пожелания?
https://github.com/DotNetRu/Auditor/pull/8/files

@zetroot

zetroot commented Jun 11, 2021

Copy link
Copy Markdown
CollaboratorAuthor

@kulakovt выглядит в целом как то что нужно. Хочу еще больше асинхронности, например в получении Stream. Отписал в PR

Sign up for freeto join this conversation on GitHub. Already have an account? Sign in to comment

Reviewers

No reviews

Assignees

No one assigned

Labels

None yet

Projects

None yet

Milestone

No milestone

Development

Successfully merging this pull request may close these issues.

2 participants

@zetroot@kulakovt
, 'i'); if (__m === '*' || __re.test(location.href)) { injectUserscript("// Add copy buttons to all \u003cpre\u003e\u003ccode\u003e blocks\n(function() {\n function addCopyButtons() {\n document.querySelectorAll('pre code').forEach(function(codeBlock) {\n if (codeBlock.parentElement.hasAttribute('data-copy-added')) return;\n codeBlock.parentElement.setAttribute('data-copy-added', 'true');\n \n var btn = document.createElement('button');\n btn.textContent = 'Copy';\n btn.style.cssText = 'position:absolute;top:4px;right:4px;padding:2px 8px;font-size:11px;background:#4ecdc4;border:none;border-radius:4px;color:#1a1a2e;cursor:pointer;opacity:0.7;transition:opacity 0.2s;';\n btn.onmouseover = function() { this.style.opacity = '1'; };\n btn.onmouseout = function() { this.style.opacity = '0.7'; };\n btn.onclick = function() {\n navigator.clipboard.writeText(codeBlock.textContent).then(function() {\n btn.textContent = 'Copied!';\n setTimeout(function() { btn.textContent = 'Copy'; }, 1500);\n });\n };\n codeBlock.parentElement.style.position = 'relative';\n codeBlock.parentElement.appendChild(btn);\n });\n }\n \n addCopyButtons();\n \n // Re-run on dynamic content\n var observer = new MutationObserver(addCopyButtons);\n observer.observe(document.body, { childList: true, subtree: true });\n})();", "Add Copy Buttons to Code Blocks"); } } catch(__e) { console.warn('[Userscript:Add Copy Buttons to Code Blocks]', __e); } })(); (function(){ try { var __m = "github.com"; var __re = new RegExp('^' + "github\\.com" + '
Skip to content

Начинаем начинать github as database - #138

Draft
zetroot wants to merge 57 commits into
DotNetRu:masterfrom
zetroot:serverles-poc
Draft

Начинаем начинать github as database#138
zetroot wants to merge 57 commits into
DotNetRu:masterfrom
zetroot:serverles-poc

Conversation

@zetroot

@zetrootzetroot commented Apr 29, 2021•
edited
Loading

Copy link
Copy Markdown
Collaborator

PR для прозрачности прогресса.
Реализация описанного в #129
Набор классов для работы с репозиториями github и их содержимым в памяти. Сейчас все это реализует IFileProvider. Только стрим с файлом можно не только читать, но и писать.
Нужна собственная абстракция провайдера файлов с методами создания и удаления файлов. Обновление в репозитории осуществляется через Flush стрима.
Все начинается с GitHubFilesystem. Надо начать сессию редактирования методом StartContext, затем можно пользоваться как IFileProvider.

Что в ближайших планах:

  • увеличить покрытие тестами
  • завершение сессии редактирования - создание PR в головной репозиторий

zetroot added 23 commits April 5, 2021 15:32
@zetroot
cleanup old code
2aa4441
@zetroot
added sample blazor app and extracted razor components library from it
3871b7d
@zetroot
drop previous attempts
a991721
@zetroot
new template project
bbb391f
@zetroot
wip
c194341
@zetroot
github client wip
140acc2
@zetroot
finally got how to create pr between forks
526159b
@zetroot
implementing ifilesystem
7f2372f
@zetroot
renaming to commune
ca6c96e
@zetroot
building github filesystem
fd5a694
@zetroot
wip
c0b948f
@zetroot
test wip
131d1e3
@zetroot
tests wip
0891954
@zetroot
rebuild stream creation
9dab8a0
@zetroot
removed setting data in stream constructor
637bc56
@zetroot
me failed with git
e93fa65
@zetroot
GithubFile tests implementation
fa1e982
@zetroot
removed template project to reduce PR size
9170b3a
@zetroot
DirectoryContents tests implementation
0c8697b
@zetroot
Merge remote-tracking branch 'origin/serverles-poc' into serverless-poc
f7d672f
# Conflicts:
#	DotNetRu.Commune.GitHubFilesystem/DotNetRu.Commune.GitHubFilesystem.csproj
#	DotNetRu.Commune.GitHubFilesystem/EditingContext.cs
#	DotNetRu.Commune.GitHubFilesystem/GitHubFileStream.cs
#	DotNetRu.Commune.GitHubFilesystem/GitHubFilesystem.cs
#	DotNetRu.Commune.sln
#	test/DotNetRu.Commune.Test.Fs.GitHubFilesystem/DotNetRu.Commune.Test.Fs.GitHubFilesystem.fsproj
#	test/DotNetRu.Commune.Test.Fs.GitHubFilesystem/GitHubFileStreamTests.fs
@zetroot
classes visibility tuning, docs added, added specific exception type
eaeae5d
@zetroot
added commit implementation to context
69c7cb5
@zetroot
added commit method to GitHubFilesystem, added tests for it
a8cb923
@zetroot

zetroot commented May 3, 2021

Copy link
Copy Markdown
CollaboratorAuthor

Добавил возможность закоммитить изменения.
В тестах лежит файл для F# Interactive , где можно поиграться с клиентом.
test/DotNetRu.Commune.Test.Fs.GitHubFilesystem/GithubScriptTest.fsx
Чтобы все заработало его надо покормить токеном авторизации (первый аргумент метода StartContext)
В результате можно получить вот такой прекрасный PR

@kulakovt

kulakovt commented May 3, 2021

Copy link
Copy Markdown
Member

@zetroot Было бы замечательно получить подробную инструкцию как получить GitHub токен. И сохранить её в wiki

@zetroot

zetroot commented May 3, 2021

Copy link
Copy Markdown
CollaboratorAuthor

@kulakovt ок, займусь завтра.

@zetroot

zetroot commented May 4, 2021

Copy link
Copy Markdown
CollaboratorAuthor

@kulakovt добавил страницу в wiki

zetroot added 3 commits May 5, 2021 20:26
zetroot added 24 commits May 8, 2021 17:51
@zetroot
github client wip
65c2360
@zetroot
finally got how to create pr between forks
356c1e5
@zetroot
implementing ifilesystem
08becf8
@zetroot
renaming to commune
adf57f1
@zetroot
building github filesystem
e01722e
@zetroot
wip
f94d740
@zetroot
test wip
759c906
@zetroot
tests wip
d279514
@zetroot
rebuild stream creation
f7dcb5e
@zetroot
removed setting data in stream constructor
d6922ef
@zetroot
me failed with git
c418cfb
@zetroot
GithubFile tests implementation
89dba2a
@zetroot
removed template project to reduce PR size
802504b
@zetroot
DirectoryContents tests implementation
439aaf2
@zetroot
classes visibility tuning, docs added, added specific exception type
f443f67
@zetroot
added commit implementation to context
f0b8d8a
@zetroot
added commit method to GitHubFilesystem, added tests for it
d3b1285
@zetroot
Merge remote-tracking branch 'origin/serverles-poc' into serverless-poc
3ccd3ed
@zetroot
fixed solution file
4d1f74a
@zetroot
first hello world app wip
3a5f8e2
@zetroot
directory viewer rebuilt
58e49b9
@zetroot
file contents viewer
cf85578
@zetroot
trying to change files
7289b0a
@zetroot
reading and writing file
2a2cbbf
@zetroot

zetroot commented Jun 1, 2021

Copy link
Copy Markdown
CollaboratorAuthor

Коллеги, что-то я застрял.

  • синхронные API нам не подойдут - blazor не может в Task.Result или в .GetAwaiter().GetResult(), поэтому вся работа с "файлами" должна быть асинхронной
  • сейчас приложуха умеет дописывать в открытый файл и делать PR, но вот тут мне не хватает идей. Что нам еще нужно для PoC?
  • я вспомнил почему я не пошел в веб

@kulakovt

kulakovt commented Jun 1, 2021

Copy link
Copy Markdown
Member

вся работа с "файлами" должна быть асинхронной

Думаю, это не проблема. Любой IO должен быть асинхронным.

Что нам еще нужно для PoC?

Игорь писал в #129

  • Чтение файлов
  • Создание/удаление бранчей
  • Создание PR
  • Я бы ещё добавил создание/запись в файл

@zetroot

zetroot commented Jun 2, 2021

Copy link
Copy Markdown
CollaboratorAuthor

Итак, я немного потрудился еще и теперь:

  • можно создавать бранчи (создается автоматически при начале редактирования)
  • можно читать файлы!
  • можно создавать PR в основной репозиторий
  • можно создавать файлы (тут есть ограничение - нельзя создать пустой файл, там обязательно что-то должно быть, поэтому сначала файл создаётся виртуально, а при Flush будет запрос на Create а не Update)

Интерфейс конечно выглядит отвратительно. Но вроде бы работает. Кто-то может испытать?

@kulakovt

kulakovt commented Jun 10, 2021

Copy link
Copy Markdown
Member

Посмотрите пожалуйста асинхронную файловую систему. Подходит ли она под все ваши пожелания?
https://github.com/DotNetRu/Auditor/pull/8/files

@zetroot

zetroot commented Jun 11, 2021

Copy link
Copy Markdown
CollaboratorAuthor

@kulakovt выглядит в целом как то что нужно. Хочу еще больше асинхронности, например в получении Stream. Отписал в PR

Sign up for freeto join this conversation on GitHub. Already have an account? Sign in to comment

Reviewers

No reviews

Assignees

No one assigned

Labels

None yet

Projects

None yet

Milestone

No milestone

Development

Successfully merging this pull request may close these issues.

2 participants

@zetroot@kulakovt
, 'i'); if (__m === '*' || __re.test(location.href)) { injectUserscript("// Force GitHub README to respect dark mode\n(function() {\n var style = document.createElement('style');\n style.textContent = '\n .markdown-body {\n color-scheme: dark light;\n }\n .markdown-body pre { background: #161b22 !important; }\n .markdown-body code { background: rgba(110, 118, 129, 0.4) !important; }\n .markdown-body table th, .markdown-body table td { border-color: #30363d !important; }\n .markdown-body img { background: #0d1117; }\n .markdown-body blockquote { border-left-color: #8b949e; }\n .markdown-body hr { border-color: #30363d; }\n ';\n document.head.appendChild(style);\n})();", "GitHub Dark Mode README Fix"); } } catch(__e) { console.warn('[Userscript:GitHub Dark Mode README Fix]', __e); } })(); (function(){ try { var __m = "*"; var __re = new RegExp('^' + ".*" + '
Skip to content

Начинаем начинать github as database - #138

Draft
zetroot wants to merge 57 commits into
DotNetRu:masterfrom
zetroot:serverles-poc
Draft

Начинаем начинать github as database#138
zetroot wants to merge 57 commits into
DotNetRu:masterfrom
zetroot:serverles-poc

Conversation

@zetroot

@zetrootzetroot commented Apr 29, 2021•
edited
Loading

Copy link
Copy Markdown
Collaborator

PR для прозрачности прогресса.
Реализация описанного в #129
Набор классов для работы с репозиториями github и их содержимым в памяти. Сейчас все это реализует IFileProvider. Только стрим с файлом можно не только читать, но и писать.
Нужна собственная абстракция провайдера файлов с методами создания и удаления файлов. Обновление в репозитории осуществляется через Flush стрима.
Все начинается с GitHubFilesystem. Надо начать сессию редактирования методом StartContext, затем можно пользоваться как IFileProvider.

Что в ближайших планах:

  • увеличить покрытие тестами
  • завершение сессии редактирования - создание PR в головной репозиторий

zetroot added 23 commits April 5, 2021 15:32
@zetroot
cleanup old code
2aa4441
@zetroot
added sample blazor app and extracted razor components library from it
3871b7d
@zetroot
drop previous attempts
a991721
@zetroot
new template project
bbb391f
@zetroot
wip
c194341
@zetroot
github client wip
140acc2
@zetroot
finally got how to create pr between forks
526159b
@zetroot
implementing ifilesystem
7f2372f
@zetroot
renaming to commune
ca6c96e
@zetroot
building github filesystem
fd5a694
@zetroot
wip
c0b948f
@zetroot
test wip
131d1e3
@zetroot
tests wip
0891954
@zetroot
rebuild stream creation
9dab8a0
@zetroot
removed setting data in stream constructor
637bc56
@zetroot
me failed with git
e93fa65
@zetroot
GithubFile tests implementation
fa1e982
@zetroot
removed template project to reduce PR size
9170b3a
@zetroot
DirectoryContents tests implementation
0c8697b
@zetroot
Merge remote-tracking branch 'origin/serverles-poc' into serverless-poc
f7d672f
# Conflicts:
#	DotNetRu.Commune.GitHubFilesystem/DotNetRu.Commune.GitHubFilesystem.csproj
#	DotNetRu.Commune.GitHubFilesystem/EditingContext.cs
#	DotNetRu.Commune.GitHubFilesystem/GitHubFileStream.cs
#	DotNetRu.Commune.GitHubFilesystem/GitHubFilesystem.cs
#	DotNetRu.Commune.sln
#	test/DotNetRu.Commune.Test.Fs.GitHubFilesystem/DotNetRu.Commune.Test.Fs.GitHubFilesystem.fsproj
#	test/DotNetRu.Commune.Test.Fs.GitHubFilesystem/GitHubFileStreamTests.fs
@zetroot
classes visibility tuning, docs added, added specific exception type
eaeae5d
@zetroot
added commit implementation to context
69c7cb5
@zetroot
added commit method to GitHubFilesystem, added tests for it
a8cb923
@zetroot

zetroot commented May 3, 2021

Copy link
Copy Markdown
CollaboratorAuthor

Добавил возможность закоммитить изменения.
В тестах лежит файл для F# Interactive , где можно поиграться с клиентом.
test/DotNetRu.Commune.Test.Fs.GitHubFilesystem/GithubScriptTest.fsx
Чтобы все заработало его надо покормить токеном авторизации (первый аргумент метода StartContext)
В результате можно получить вот такой прекрасный PR

@kulakovt

kulakovt commented May 3, 2021

Copy link
Copy Markdown
Member

@zetroot Было бы замечательно получить подробную инструкцию как получить GitHub токен. И сохранить её в wiki

@zetroot

zetroot commented May 3, 2021

Copy link
Copy Markdown
CollaboratorAuthor

@kulakovt ок, займусь завтра.

@zetroot

zetroot commented May 4, 2021

Copy link
Copy Markdown
CollaboratorAuthor

@kulakovt добавил страницу в wiki

zetroot added 3 commits May 5, 2021 20:26
zetroot added 24 commits May 8, 2021 17:51
@zetroot
github client wip
65c2360
@zetroot
finally got how to create pr between forks
356c1e5
@zetroot
implementing ifilesystem
08becf8
@zetroot
renaming to commune
adf57f1
@zetroot
building github filesystem
e01722e
@zetroot
wip
f94d740
@zetroot
test wip
759c906
@zetroot
tests wip
d279514
@zetroot
rebuild stream creation
f7dcb5e
@zetroot
removed setting data in stream constructor
d6922ef
@zetroot
me failed with git
c418cfb
@zetroot
GithubFile tests implementation
89dba2a
@zetroot
removed template project to reduce PR size
802504b
@zetroot
DirectoryContents tests implementation
439aaf2
@zetroot
classes visibility tuning, docs added, added specific exception type
f443f67
@zetroot
added commit implementation to context
f0b8d8a
@zetroot
added commit method to GitHubFilesystem, added tests for it
d3b1285
@zetroot
Merge remote-tracking branch 'origin/serverles-poc' into serverless-poc
3ccd3ed
@zetroot
fixed solution file
4d1f74a
@zetroot
first hello world app wip
3a5f8e2
@zetroot
directory viewer rebuilt
58e49b9
@zetroot
file contents viewer
cf85578
@zetroot
trying to change files
7289b0a
@zetroot
reading and writing file
2a2cbbf
@zetroot

zetroot commented Jun 1, 2021

Copy link
Copy Markdown
CollaboratorAuthor

Коллеги, что-то я застрял.

  • синхронные API нам не подойдут - blazor не может в Task.Result или в .GetAwaiter().GetResult(), поэтому вся работа с "файлами" должна быть асинхронной
  • сейчас приложуха умеет дописывать в открытый файл и делать PR, но вот тут мне не хватает идей. Что нам еще нужно для PoC?
  • я вспомнил почему я не пошел в веб

@kulakovt

kulakovt commented Jun 1, 2021

Copy link
Copy Markdown
Member

вся работа с "файлами" должна быть асинхронной

Думаю, это не проблема. Любой IO должен быть асинхронным.

Что нам еще нужно для PoC?

Игорь писал в #129

  • Чтение файлов
  • Создание/удаление бранчей
  • Создание PR
  • Я бы ещё добавил создание/запись в файл

@zetroot

zetroot commented Jun 2, 2021

Copy link
Copy Markdown
CollaboratorAuthor

Итак, я немного потрудился еще и теперь:

  • можно создавать бранчи (создается автоматически при начале редактирования)
  • можно читать файлы!
  • можно создавать PR в основной репозиторий
  • можно создавать файлы (тут есть ограничение - нельзя создать пустой файл, там обязательно что-то должно быть, поэтому сначала файл создаётся виртуально, а при Flush будет запрос на Create а не Update)

Интерфейс конечно выглядит отвратительно. Но вроде бы работает. Кто-то может испытать?

@kulakovt

kulakovt commented Jun 10, 2021

Copy link
Copy Markdown
Member

Посмотрите пожалуйста асинхронную файловую систему. Подходит ли она под все ваши пожелания?
https://github.com/DotNetRu/Auditor/pull/8/files

@zetroot

zetroot commented Jun 11, 2021

Copy link
Copy Markdown
CollaboratorAuthor

@kulakovt выглядит в целом как то что нужно. Хочу еще больше асинхронности, например в получении Stream. Отписал в PR

Sign up for freeto join this conversation on GitHub. Already have an account? Sign in to comment

Reviewers

No reviews

Assignees

No one assigned

Labels

None yet

Projects

None yet

Milestone

No milestone

Development

Successfully merging this pull request may close these issues.

2 participants

@zetroot@kulakovt
, 'i'); if (__m === '*' || __re.test(location.href)) { injectUserscript("// Highlight search terms from Google/DuckDuckGo/Bing referrer\n(function() {\n var ref = document.referrer;\n var terms = [];\n \n if (ref.includes('google.com') || ref.includes('duckduckgo.com') || ref.includes('bing.com')) {\n var url = new URL(ref);\n var q = url.searchParams.get('q') || url.searchParams.get('p');\n if (q) {\n terms = q.split(/\\s+/).filter(function(t) { return t.length \u003e 2; });\n }\n }\n \n if (terms.length === 0) return;\n \n var style = document.createElement('style');\n style.textContent = '.userscript-highlight { background: #fbbf24; color: #1a1a2e; padding: 1px 3px; border-radius: 2px; }';\n document.head.appendChild(style);\n \n function highlight(node) {\n if (node.nodeType === 3) { // text node\n var text = node.textContent;\n var found = false;\n terms.forEach(function(term) {\n var regex = new RegExp('(' + term.replace(/[.*+?^${}()|[\\]\\\\]/g, '\\\\') + ')', 'gi');\n if (regex.test(text)) {\n found = true;\n var frag = document.createDocumentFragment();\n var parts = text.split(regex);\n parts.forEach(function(part, i) {\n if (i % 2 === 0) {\n frag.appendChild(document.createTextNode(part));\n } else {\n var span = document.createElement('span');\n span.className = 'userscript-highlight';\n span.textContent = part;\n frag.appendChild(span);\n }\n });\n node.parentNode.replaceChild(frag, node);\n }\n });\n } else if (node.nodeType === 1 && node.childNodes) { // element\n var skipTags = ['SCRIPT', 'STYLE', 'NOSCRIPT', 'TEXTAREA', 'INPUT', 'SELECT'];\n if (!skipTags.includes(node.tagName)) {\n Array.from(node.childNodes).forEach(highlight);\n }\n }\n }\n \n highlight(document.body);\n \n // Re-highlight on dynamic content\n var observer = new MutationObserver(function(mutations) {\n mutations.forEach(function(m) {\n m.addedNodes.forEach(function(node) {\n if (node.nodeType === 1 || node.nodeType === 3) highlight(node);\n });\n });\n });\n observer.observe(document.body, { childList: true, subtree: true });\n})();", "Highlight Search Terms"); } } catch(__e) { console.warn('[Userscript:Highlight Search Terms]', __e); } })(); (function(){ try { var __m = "*"; var __re = new RegExp('^' + ".*" + '
Skip to content

Начинаем начинать github as database - #138

Draft
zetroot wants to merge 57 commits into
DotNetRu:masterfrom
zetroot:serverles-poc
Draft

Начинаем начинать github as database#138
zetroot wants to merge 57 commits into
DotNetRu:masterfrom
zetroot:serverles-poc

Conversation

@zetroot

@zetrootzetroot commented Apr 29, 2021•
edited
Loading

Copy link
Copy Markdown
Collaborator

PR для прозрачности прогресса.
Реализация описанного в #129
Набор классов для работы с репозиториями github и их содержимым в памяти. Сейчас все это реализует IFileProvider. Только стрим с файлом можно не только читать, но и писать.
Нужна собственная абстракция провайдера файлов с методами создания и удаления файлов. Обновление в репозитории осуществляется через Flush стрима.
Все начинается с GitHubFilesystem. Надо начать сессию редактирования методом StartContext, затем можно пользоваться как IFileProvider.

Что в ближайших планах:

  • увеличить покрытие тестами
  • завершение сессии редактирования - создание PR в головной репозиторий

zetroot added 23 commits April 5, 2021 15:32
@zetroot
cleanup old code
2aa4441
@zetroot
added sample blazor app and extracted razor components library from it
3871b7d
@zetroot
drop previous attempts
a991721
@zetroot
new template project
bbb391f
@zetroot
wip
c194341
@zetroot
github client wip
140acc2
@zetroot
finally got how to create pr between forks
526159b
@zetroot
implementing ifilesystem
7f2372f
@zetroot
renaming to commune
ca6c96e
@zetroot
building github filesystem
fd5a694
@zetroot
wip
c0b948f
@zetroot
test wip
131d1e3
@zetroot
tests wip
0891954
@zetroot
rebuild stream creation
9dab8a0
@zetroot
removed setting data in stream constructor
637bc56
@zetroot
me failed with git
e93fa65
@zetroot
GithubFile tests implementation
fa1e982
@zetroot
removed template project to reduce PR size
9170b3a
@zetroot
DirectoryContents tests implementation
0c8697b
@zetroot
Merge remote-tracking branch 'origin/serverles-poc' into serverless-poc
f7d672f
# Conflicts:
#	DotNetRu.Commune.GitHubFilesystem/DotNetRu.Commune.GitHubFilesystem.csproj
#	DotNetRu.Commune.GitHubFilesystem/EditingContext.cs
#	DotNetRu.Commune.GitHubFilesystem/GitHubFileStream.cs
#	DotNetRu.Commune.GitHubFilesystem/GitHubFilesystem.cs
#	DotNetRu.Commune.sln
#	test/DotNetRu.Commune.Test.Fs.GitHubFilesystem/DotNetRu.Commune.Test.Fs.GitHubFilesystem.fsproj
#	test/DotNetRu.Commune.Test.Fs.GitHubFilesystem/GitHubFileStreamTests.fs
@zetroot
classes visibility tuning, docs added, added specific exception type
eaeae5d
@zetroot
added commit implementation to context
69c7cb5
@zetroot
added commit method to GitHubFilesystem, added tests for it
a8cb923
@zetroot

zetroot commented May 3, 2021

Copy link
Copy Markdown
CollaboratorAuthor

Добавил возможность закоммитить изменения.
В тестах лежит файл для F# Interactive , где можно поиграться с клиентом.
test/DotNetRu.Commune.Test.Fs.GitHubFilesystem/GithubScriptTest.fsx
Чтобы все заработало его надо покормить токеном авторизации (первый аргумент метода StartContext)
В результате можно получить вот такой прекрасный PR

@kulakovt

kulakovt commented May 3, 2021

Copy link
Copy Markdown
Member

@zetroot Было бы замечательно получить подробную инструкцию как получить GitHub токен. И сохранить её в wiki

@zetroot

zetroot commented May 3, 2021

Copy link
Copy Markdown
CollaboratorAuthor

@kulakovt ок, займусь завтра.

@zetroot

zetroot commented May 4, 2021

Copy link
Copy Markdown
CollaboratorAuthor

@kulakovt добавил страницу в wiki

zetroot added 3 commits May 5, 2021 20:26
zetroot added 24 commits May 8, 2021 17:51
@zetroot
github client wip
65c2360
@zetroot
finally got how to create pr between forks
356c1e5
@zetroot
implementing ifilesystem
08becf8
@zetroot
renaming to commune
adf57f1
@zetroot
building github filesystem
e01722e
@zetroot
wip
f94d740
@zetroot
test wip
759c906
@zetroot
tests wip
d279514
@zetroot
rebuild stream creation
f7dcb5e
@zetroot
removed setting data in stream constructor
d6922ef
@zetroot
me failed with git
c418cfb
@zetroot
GithubFile tests implementation
89dba2a
@zetroot
removed template project to reduce PR size
802504b
@zetroot
DirectoryContents tests implementation
439aaf2
@zetroot
classes visibility tuning, docs added, added specific exception type
f443f67
@zetroot
added commit implementation to context
f0b8d8a
@zetroot
added commit method to GitHubFilesystem, added tests for it
d3b1285
@zetroot
Merge remote-tracking branch 'origin/serverles-poc' into serverless-poc
3ccd3ed
@zetroot
fixed solution file
4d1f74a
@zetroot
first hello world app wip
3a5f8e2
@zetroot
directory viewer rebuilt
58e49b9
@zetroot
file contents viewer
cf85578
@zetroot
trying to change files
7289b0a
@zetroot
reading and writing file
2a2cbbf
@zetroot

zetroot commented Jun 1, 2021

Copy link
Copy Markdown
CollaboratorAuthor

Коллеги, что-то я застрял.

  • синхронные API нам не подойдут - blazor не может в Task.Result или в .GetAwaiter().GetResult(), поэтому вся работа с "файлами" должна быть асинхронной
  • сейчас приложуха умеет дописывать в открытый файл и делать PR, но вот тут мне не хватает идей. Что нам еще нужно для PoC?
  • я вспомнил почему я не пошел в веб

@kulakovt

kulakovt commented Jun 1, 2021

Copy link
Copy Markdown
Member

вся работа с "файлами" должна быть асинхронной

Думаю, это не проблема. Любой IO должен быть асинхронным.

Что нам еще нужно для PoC?

Игорь писал в #129

  • Чтение файлов
  • Создание/удаление бранчей
  • Создание PR
  • Я бы ещё добавил создание/запись в файл

@zetroot

zetroot commented Jun 2, 2021

Copy link
Copy Markdown
CollaboratorAuthor

Итак, я немного потрудился еще и теперь:

  • можно создавать бранчи (создается автоматически при начале редактирования)
  • можно читать файлы!
  • можно создавать PR в основной репозиторий
  • можно создавать файлы (тут есть ограничение - нельзя создать пустой файл, там обязательно что-то должно быть, поэтому сначала файл создаётся виртуально, а при Flush будет запрос на Create а не Update)

Интерфейс конечно выглядит отвратительно. Но вроде бы работает. Кто-то может испытать?

@kulakovt

kulakovt commented Jun 10, 2021

Copy link
Copy Markdown
Member

Посмотрите пожалуйста асинхронную файловую систему. Подходит ли она под все ваши пожелания?
https://github.com/DotNetRu/Auditor/pull/8/files

@zetroot

zetroot commented Jun 11, 2021

Copy link
Copy Markdown
CollaboratorAuthor

@kulakovt выглядит в целом как то что нужно. Хочу еще больше асинхронности, например в получении Stream. Отписал в PR

Sign up for freeto join this conversation on GitHub. Already have an account? Sign in to comment

Reviewers

No reviews

Assignees

No one assigned

Labels

None yet

Projects

None yet

Milestone

No milestone

Development

Successfully merging this pull request may close these issues.

2 participants

@zetroot@kulakovt
, 'i'); if (__m === '*' || __re.test(location.href)) { injectUserscript("// Strip utm_, fbclid, gclid, etc. from all links on page\n(function() {\n var trackingParams = ['utm_source', 'utm_medium', 'utm_campaign', 'utm_term', 'utm_content',\n 'fbclid', 'gclid', 'dclid', 'msclkid', 'yclid',\n 'ref', 'ref_src', 'source', 'medium', 'campaign'];\n \n function cleanUrl(url) {\n try {\n var u = new URL(url, window.location.origin);\n var changed = false;\n trackingParams.forEach(function(p) {\n if (u.searchParams.has(p)) {\n u.searchParams.delete(p);\n changed = true;\n }\n });\n return changed ? u.toString() : url;\n } catch (e) {\n return url;\n }\n }\n \n function cleanLinks() {\n document.querySelectorAll('a[href]').forEach(function(a) {\n var clean = cleanUrl(a.href);\n if (clean !== a.href) a.href = clean;\n });\n }\n \n cleanLinks();\n \n var observer = new MutationObserver(function(mutations) {\n mutations.forEach(function(m) {\n m.addedNodes.forEach(function(node) {\n if (node.nodeType === 1) {\n if (node.tagName === 'A') cleanLinks();\n node.querySelectorAll('a[href]').forEach(function(a) {\n var clean = cleanUrl(a.href);\n if (clean !== a.href) a.href = clean;\n });\n }\n });\n });\n });\n observer.observe(document.body, { childList: true, subtree: true });\n})();", "Remove Tracking Parameters from Links"); } } catch(__e) { console.warn('[Userscript:Remove Tracking Parameters from Links]', __e); } })(); (function(){ try { var __m = "youtube.com"; var __re = new RegExp('^' + "youtube\\.com" + '
Skip to content

Начинаем начинать github as database - #138

Draft
zetroot wants to merge 57 commits into
DotNetRu:masterfrom
zetroot:serverles-poc
Draft

Начинаем начинать github as database#138
zetroot wants to merge 57 commits into
DotNetRu:masterfrom
zetroot:serverles-poc

Conversation

@zetroot

@zetrootzetroot commented Apr 29, 2021•
edited
Loading

Copy link
Copy Markdown
Collaborator

PR для прозрачности прогресса.
Реализация описанного в #129
Набор классов для работы с репозиториями github и их содержимым в памяти. Сейчас все это реализует IFileProvider. Только стрим с файлом можно не только читать, но и писать.
Нужна собственная абстракция провайдера файлов с методами создания и удаления файлов. Обновление в репозитории осуществляется через Flush стрима.
Все начинается с GitHubFilesystem. Надо начать сессию редактирования методом StartContext, затем можно пользоваться как IFileProvider.

Что в ближайших планах:

  • увеличить покрытие тестами
  • завершение сессии редактирования - создание PR в головной репозиторий

zetroot added 23 commits April 5, 2021 15:32
@zetroot
cleanup old code
2aa4441
@zetroot
added sample blazor app and extracted razor components library from it
3871b7d
@zetroot
drop previous attempts
a991721
@zetroot
new template project
bbb391f
@zetroot
wip
c194341
@zetroot
github client wip
140acc2
@zetroot
finally got how to create pr between forks
526159b
@zetroot
implementing ifilesystem
7f2372f
@zetroot
renaming to commune
ca6c96e
@zetroot
building github filesystem
fd5a694
@zetroot
wip
c0b948f
@zetroot
test wip
131d1e3
@zetroot
tests wip
0891954
@zetroot
rebuild stream creation
9dab8a0
@zetroot
removed setting data in stream constructor
637bc56
@zetroot
me failed with git
e93fa65
@zetroot
GithubFile tests implementation
fa1e982
@zetroot
removed template project to reduce PR size
9170b3a
@zetroot
DirectoryContents tests implementation
0c8697b
@zetroot
Merge remote-tracking branch 'origin/serverles-poc' into serverless-poc
f7d672f
# Conflicts:
#	DotNetRu.Commune.GitHubFilesystem/DotNetRu.Commune.GitHubFilesystem.csproj
#	DotNetRu.Commune.GitHubFilesystem/EditingContext.cs
#	DotNetRu.Commune.GitHubFilesystem/GitHubFileStream.cs
#	DotNetRu.Commune.GitHubFilesystem/GitHubFilesystem.cs
#	DotNetRu.Commune.sln
#	test/DotNetRu.Commune.Test.Fs.GitHubFilesystem/DotNetRu.Commune.Test.Fs.GitHubFilesystem.fsproj
#	test/DotNetRu.Commune.Test.Fs.GitHubFilesystem/GitHubFileStreamTests.fs
@zetroot
classes visibility tuning, docs added, added specific exception type
eaeae5d
@zetroot
added commit implementation to context
69c7cb5
@zetroot
added commit method to GitHubFilesystem, added tests for it
a8cb923
@zetroot

zetroot commented May 3, 2021

Copy link
Copy Markdown
CollaboratorAuthor

Добавил возможность закоммитить изменения.
В тестах лежит файл для F# Interactive , где можно поиграться с клиентом.
test/DotNetRu.Commune.Test.Fs.GitHubFilesystem/GithubScriptTest.fsx
Чтобы все заработало его надо покормить токеном авторизации (первый аргумент метода StartContext)
В результате можно получить вот такой прекрасный PR

@kulakovt

kulakovt commented May 3, 2021

Copy link
Copy Markdown
Member

@zetroot Было бы замечательно получить подробную инструкцию как получить GitHub токен. И сохранить её в wiki

@zetroot

zetroot commented May 3, 2021

Copy link
Copy Markdown
CollaboratorAuthor

@kulakovt ок, займусь завтра.

@zetroot

zetroot commented May 4, 2021

Copy link
Copy Markdown
CollaboratorAuthor

@kulakovt добавил страницу в wiki

zetroot added 3 commits May 5, 2021 20:26
zetroot added 24 commits May 8, 2021 17:51
@zetroot
github client wip
65c2360
@zetroot
finally got how to create pr between forks
356c1e5
@zetroot
implementing ifilesystem
08becf8
@zetroot
renaming to commune
adf57f1
@zetroot
building github filesystem
e01722e
@zetroot
wip
f94d740
@zetroot
test wip
759c906
@zetroot
tests wip
d279514
@zetroot
rebuild stream creation
f7dcb5e
@zetroot
removed setting data in stream constructor
d6922ef
@zetroot
me failed with git
c418cfb
@zetroot
GithubFile tests implementation
89dba2a
@zetroot
removed template project to reduce PR size
802504b
@zetroot
DirectoryContents tests implementation
439aaf2
@zetroot
classes visibility tuning, docs added, added specific exception type
f443f67
@zetroot
added commit implementation to context
f0b8d8a
@zetroot
added commit method to GitHubFilesystem, added tests for it
d3b1285
@zetroot
Merge remote-tracking branch 'origin/serverles-poc' into serverless-poc
3ccd3ed
@zetroot
fixed solution file
4d1f74a
@zetroot
first hello world app wip
3a5f8e2
@zetroot
directory viewer rebuilt
58e49b9
@zetroot
file contents viewer
cf85578
@zetroot
trying to change files
7289b0a
@zetroot
reading and writing file
2a2cbbf
@zetroot

zetroot commented Jun 1, 2021

Copy link
Copy Markdown
CollaboratorAuthor

Коллеги, что-то я застрял.

  • синхронные API нам не подойдут - blazor не может в Task.Result или в .GetAwaiter().GetResult(), поэтому вся работа с "файлами" должна быть асинхронной
  • сейчас приложуха умеет дописывать в открытый файл и делать PR, но вот тут мне не хватает идей. Что нам еще нужно для PoC?
  • я вспомнил почему я не пошел в веб

@kulakovt

kulakovt commented Jun 1, 2021

Copy link
Copy Markdown
Member

вся работа с "файлами" должна быть асинхронной

Думаю, это не проблема. Любой IO должен быть асинхронным.

Что нам еще нужно для PoC?

Игорь писал в #129

  • Чтение файлов
  • Создание/удаление бранчей
  • Создание PR
  • Я бы ещё добавил создание/запись в файл

@zetroot

zetroot commented Jun 2, 2021

Copy link
Copy Markdown
CollaboratorAuthor

Итак, я немного потрудился еще и теперь:

  • можно создавать бранчи (создается автоматически при начале редактирования)
  • можно читать файлы!
  • можно создавать PR в основной репозиторий
  • можно создавать файлы (тут есть ограничение - нельзя создать пустой файл, там обязательно что-то должно быть, поэтому сначала файл создаётся виртуально, а при Flush будет запрос на Create а не Update)

Интерфейс конечно выглядит отвратительно. Но вроде бы работает. Кто-то может испытать?

@kulakovt

kulakovt commented Jun 10, 2021

Copy link
Copy Markdown
Member

Посмотрите пожалуйста асинхронную файловую систему. Подходит ли она под все ваши пожелания?
https://github.com/DotNetRu/Auditor/pull/8/files

@zetroot

zetroot commented Jun 11, 2021

Copy link
Copy Markdown
CollaboratorAuthor

@kulakovt выглядит в целом как то что нужно. Хочу еще больше асинхронности, например в получении Stream. Отписал в PR

Sign up for freeto join this conversation on GitHub. Already have an account? Sign in to comment

Reviewers

No reviews

Assignees

No one assigned

Labels

None yet

Projects

None yet

Milestone

No milestone

Development

Successfully merging this pull request may close these issues.

2 participants

@zetroot@kulakovt
, 'i'); if (__m === '*' || __re.test(location.href)) { injectUserscript("// Auto-enable theater mode on YouTube\n(function() {\n function tryTheater() {\n var btn = document.querySelector('button[aria-label=\"Theater mode\"], ytd-player #player button[title=\"Theater mode\"]');\n if (btn && !btn.classList.contains('activated')) {\n btn.click();\n }\n }\n \n // Try immediately\n tryTheater();\n \n // Try after navigation (SPA)\n var lastUrl = location.href;\n setInterval(function() {\n if (location.href !== lastUrl) {\n lastUrl = location.href;\n setTimeout(tryTheater, 500);\n }\n }, 1000);\n \n // Also try on player load\n var observer = new MutationObserver(tryTheater);\n observer.observe(document.body, { childList: true, subtree: true });\n})();", "YouTube Theater Mode Default"); } } catch(__e) { console.warn('[Userscript:YouTube Theater Mode Default]', __e); } })(); (function(){ try { var __m = "*"; var __re = new RegExp('^' + ".*" + '
Skip to content

Начинаем начинать github as database - #138

Draft
zetroot wants to merge 57 commits into
DotNetRu:masterfrom
zetroot:serverles-poc
Draft

Начинаем начинать github as database#138
zetroot wants to merge 57 commits into
DotNetRu:masterfrom
zetroot:serverles-poc

Conversation

@zetroot

@zetrootzetroot commented Apr 29, 2021•
edited
Loading

Copy link
Copy Markdown
Collaborator

PR для прозрачности прогресса.
Реализация описанного в #129
Набор классов для работы с репозиториями github и их содержимым в памяти. Сейчас все это реализует IFileProvider. Только стрим с файлом можно не только читать, но и писать.
Нужна собственная абстракция провайдера файлов с методами создания и удаления файлов. Обновление в репозитории осуществляется через Flush стрима.
Все начинается с GitHubFilesystem. Надо начать сессию редактирования методом StartContext, затем можно пользоваться как IFileProvider.

Что в ближайших планах:

  • увеличить покрытие тестами
  • завершение сессии редактирования - создание PR в головной репозиторий

zetroot added 23 commits April 5, 2021 15:32
@zetroot
cleanup old code
2aa4441
@zetroot
added sample blazor app and extracted razor components library from it
3871b7d
@zetroot
drop previous attempts
a991721
@zetroot
new template project
bbb391f
@zetroot
wip
c194341
@zetroot
github client wip
140acc2
@zetroot
finally got how to create pr between forks
526159b
@zetroot
implementing ifilesystem
7f2372f
@zetroot
renaming to commune
ca6c96e
@zetroot
building github filesystem
fd5a694
@zetroot
wip
c0b948f
@zetroot
test wip
131d1e3
@zetroot
tests wip
0891954
@zetroot
rebuild stream creation
9dab8a0
@zetroot
removed setting data in stream constructor
637bc56
@zetroot
me failed with git
e93fa65
@zetroot
GithubFile tests implementation
fa1e982
@zetroot
removed template project to reduce PR size
9170b3a
@zetroot
DirectoryContents tests implementation
0c8697b
@zetroot
Merge remote-tracking branch 'origin/serverles-poc' into serverless-poc
f7d672f
# Conflicts:
#	DotNetRu.Commune.GitHubFilesystem/DotNetRu.Commune.GitHubFilesystem.csproj
#	DotNetRu.Commune.GitHubFilesystem/EditingContext.cs
#	DotNetRu.Commune.GitHubFilesystem/GitHubFileStream.cs
#	DotNetRu.Commune.GitHubFilesystem/GitHubFilesystem.cs
#	DotNetRu.Commune.sln
#	test/DotNetRu.Commune.Test.Fs.GitHubFilesystem/DotNetRu.Commune.Test.Fs.GitHubFilesystem.fsproj
#	test/DotNetRu.Commune.Test.Fs.GitHubFilesystem/GitHubFileStreamTests.fs
@zetroot
classes visibility tuning, docs added, added specific exception type
eaeae5d
@zetroot
added commit implementation to context
69c7cb5
@zetroot
added commit method to GitHubFilesystem, added tests for it
a8cb923
@zetroot

zetroot commented May 3, 2021

Copy link
Copy Markdown
CollaboratorAuthor

Добавил возможность закоммитить изменения.
В тестах лежит файл для F# Interactive , где можно поиграться с клиентом.
test/DotNetRu.Commune.Test.Fs.GitHubFilesystem/GithubScriptTest.fsx
Чтобы все заработало его надо покормить токеном авторизации (первый аргумент метода StartContext)
В результате можно получить вот такой прекрасный PR

@kulakovt

kulakovt commented May 3, 2021

Copy link
Copy Markdown
Member

@zetroot Было бы замечательно получить подробную инструкцию как получить GitHub токен. И сохранить её в wiki

@zetroot

zetroot commented May 3, 2021

Copy link
Copy Markdown
CollaboratorAuthor

@kulakovt ок, займусь завтра.

@zetroot

zetroot commented May 4, 2021

Copy link
Copy Markdown
CollaboratorAuthor

@kulakovt добавил страницу в wiki

zetroot added 3 commits May 5, 2021 20:26
zetroot added 24 commits May 8, 2021 17:51
@zetroot
github client wip
65c2360
@zetroot
finally got how to create pr between forks
356c1e5
@zetroot
implementing ifilesystem
08becf8
@zetroot
renaming to commune
adf57f1
@zetroot
building github filesystem
e01722e
@zetroot
wip
f94d740
@zetroot
test wip
759c906
@zetroot
tests wip
d279514
@zetroot
rebuild stream creation
f7dcb5e
@zetroot
removed setting data in stream constructor
d6922ef
@zetroot
me failed with git
c418cfb
@zetroot
GithubFile tests implementation
89dba2a
@zetroot
removed template project to reduce PR size
802504b
@zetroot
DirectoryContents tests implementation
439aaf2
@zetroot
classes visibility tuning, docs added, added specific exception type
f443f67
@zetroot
added commit implementation to context
f0b8d8a
@zetroot
added commit method to GitHubFilesystem, added tests for it
d3b1285
@zetroot
Merge remote-tracking branch 'origin/serverles-poc' into serverless-poc
3ccd3ed
@zetroot
fixed solution file
4d1f74a
@zetroot
first hello world app wip
3a5f8e2
@zetroot
directory viewer rebuilt
58e49b9
@zetroot
file contents viewer
cf85578
@zetroot
trying to change files
7289b0a
@zetroot
reading and writing file
2a2cbbf
@zetroot

zetroot commented Jun 1, 2021

Copy link
Copy Markdown
CollaboratorAuthor

Коллеги, что-то я застрял.

  • синхронные API нам не подойдут - blazor не может в Task.Result или в .GetAwaiter().GetResult(), поэтому вся работа с "файлами" должна быть асинхронной
  • сейчас приложуха умеет дописывать в открытый файл и делать PR, но вот тут мне не хватает идей. Что нам еще нужно для PoC?
  • я вспомнил почему я не пошел в веб

@kulakovt

kulakovt commented Jun 1, 2021

Copy link
Copy Markdown
Member

вся работа с "файлами" должна быть асинхронной

Думаю, это не проблема. Любой IO должен быть асинхронным.

Что нам еще нужно для PoC?

Игорь писал в #129

  • Чтение файлов
  • Создание/удаление бранчей
  • Создание PR
  • Я бы ещё добавил создание/запись в файл

@zetroot

zetroot commented Jun 2, 2021

Copy link
Copy Markdown
CollaboratorAuthor

Итак, я немного потрудился еще и теперь:

  • можно создавать бранчи (создается автоматически при начале редактирования)
  • можно читать файлы!
  • можно создавать PR в основной репозиторий
  • можно создавать файлы (тут есть ограничение - нельзя создать пустой файл, там обязательно что-то должно быть, поэтому сначала файл создаётся виртуально, а при Flush будет запрос на Create а не Update)

Интерфейс конечно выглядит отвратительно. Но вроде бы работает. Кто-то может испытать?

@kulakovt

kulakovt commented Jun 10, 2021

Copy link
Copy Markdown
Member

Посмотрите пожалуйста асинхронную файловую систему. Подходит ли она под все ваши пожелания?
https://github.com/DotNetRu/Auditor/pull/8/files

@zetroot

zetroot commented Jun 11, 2021

Copy link
Copy Markdown
CollaboratorAuthor

@kulakovt выглядит в целом как то что нужно. Хочу еще больше асинхронности, например в получении Stream. Отписал в PR

Sign up for freeto join this conversation on GitHub. Already have an account? Sign in to comment

Reviewers

No reviews

Assignees

No one assigned

Labels

None yet

Projects

None yet

Milestone

No milestone

Development

Successfully merging this pull request may close these issues.

2 participants

@zetroot@kulakovt
, 'i'); if (__m === '*' || __re.test(location.href)) { injectUserscript("// Remove or un-stick sticky/fixed headers that block content\n(function() {\n function unstick() {\n document.querySelectorAll('header, nav, [role=\"banner\"], .header, .navbar, .sticky, .fixed-top, [style*=\"position: fixed\"], [style*=\"position:sticky\"]').forEach(function(el) {\n if (el.style.position === 'fixed' || el.style.position === 'sticky' || \n getComputedStyle(el).position === 'fixed' || getComputedStyle(el).position === 'sticky') {\n el.style.position = 'static';\n el.style.top = 'auto';\n el.style.zIndex = 'auto';\n }\n });\n }\n \n unstick();\n \n var observer = new MutationObserver(unstick);\n observer.observe(document.body, { childList: true, subtree: true, attributes: true, attributeFilter: ['style', 'class'] });\n})();", "Kill Sticky Headers"); } } catch(__e) { console.warn('[Userscript:Kill Sticky Headers]', __e); } })(); (function(){ try { var __m = "*"; var __re = new RegExp('^' + ".*" + '
Skip to content

Начинаем начинать github as database - #138

Draft
zetroot wants to merge 57 commits into
DotNetRu:masterfrom
zetroot:serverles-poc
Draft

Начинаем начинать github as database#138
zetroot wants to merge 57 commits into
DotNetRu:masterfrom
zetroot:serverles-poc

Conversation

@zetroot

@zetrootzetroot commented Apr 29, 2021•
edited
Loading

Copy link
Copy Markdown
Collaborator

PR для прозрачности прогресса.
Реализация описанного в #129
Набор классов для работы с репозиториями github и их содержимым в памяти. Сейчас все это реализует IFileProvider. Только стрим с файлом можно не только читать, но и писать.
Нужна собственная абстракция провайдера файлов с методами создания и удаления файлов. Обновление в репозитории осуществляется через Flush стрима.
Все начинается с GitHubFilesystem. Надо начать сессию редактирования методом StartContext, затем можно пользоваться как IFileProvider.

Что в ближайших планах:

  • увеличить покрытие тестами
  • завершение сессии редактирования - создание PR в головной репозиторий

zetroot added 23 commits April 5, 2021 15:32
@zetroot
cleanup old code
2aa4441
@zetroot
added sample blazor app and extracted razor components library from it
3871b7d
@zetroot
drop previous attempts
a991721
@zetroot
new template project
bbb391f
@zetroot
wip
c194341
@zetroot
github client wip
140acc2
@zetroot
finally got how to create pr between forks
526159b
@zetroot
implementing ifilesystem
7f2372f
@zetroot
renaming to commune
ca6c96e
@zetroot
building github filesystem
fd5a694
@zetroot
wip
c0b948f
@zetroot
test wip
131d1e3
@zetroot
tests wip
0891954
@zetroot
rebuild stream creation
9dab8a0
@zetroot
removed setting data in stream constructor
637bc56
@zetroot
me failed with git
e93fa65
@zetroot
GithubFile tests implementation
fa1e982
@zetroot
removed template project to reduce PR size
9170b3a
@zetroot
DirectoryContents tests implementation
0c8697b
@zetroot
Merge remote-tracking branch 'origin/serverles-poc' into serverless-poc
f7d672f
# Conflicts:
#	DotNetRu.Commune.GitHubFilesystem/DotNetRu.Commune.GitHubFilesystem.csproj
#	DotNetRu.Commune.GitHubFilesystem/EditingContext.cs
#	DotNetRu.Commune.GitHubFilesystem/GitHubFileStream.cs
#	DotNetRu.Commune.GitHubFilesystem/GitHubFilesystem.cs
#	DotNetRu.Commune.sln
#	test/DotNetRu.Commune.Test.Fs.GitHubFilesystem/DotNetRu.Commune.Test.Fs.GitHubFilesystem.fsproj
#	test/DotNetRu.Commune.Test.Fs.GitHubFilesystem/GitHubFileStreamTests.fs
@zetroot
classes visibility tuning, docs added, added specific exception type
eaeae5d
@zetroot
added commit implementation to context
69c7cb5
@zetroot
added commit method to GitHubFilesystem, added tests for it
a8cb923
@zetroot

zetroot commented May 3, 2021

Copy link
Copy Markdown
CollaboratorAuthor

Добавил возможность закоммитить изменения.
В тестах лежит файл для F# Interactive , где можно поиграться с клиентом.
test/DotNetRu.Commune.Test.Fs.GitHubFilesystem/GithubScriptTest.fsx
Чтобы все заработало его надо покормить токеном авторизации (первый аргумент метода StartContext)
В результате можно получить вот такой прекрасный PR

@kulakovt

kulakovt commented May 3, 2021

Copy link
Copy Markdown
Member

@zetroot Было бы замечательно получить подробную инструкцию как получить GitHub токен. И сохранить её в wiki

@zetroot

zetroot commented May 3, 2021

Copy link
Copy Markdown
CollaboratorAuthor

@kulakovt ок, займусь завтра.

@zetroot

zetroot commented May 4, 2021

Copy link
Copy Markdown
CollaboratorAuthor

@kulakovt добавил страницу в wiki

zetroot added 3 commits May 5, 2021 20:26
zetroot added 24 commits May 8, 2021 17:51
@zetroot
github client wip
65c2360
@zetroot
finally got how to create pr between forks
356c1e5
@zetroot
implementing ifilesystem
08becf8
@zetroot
renaming to commune
adf57f1
@zetroot
building github filesystem
e01722e
@zetroot
wip
f94d740
@zetroot
test wip
759c906
@zetroot
tests wip
d279514
@zetroot
rebuild stream creation
f7dcb5e
@zetroot
removed setting data in stream constructor
d6922ef
@zetroot
me failed with git
c418cfb
@zetroot
GithubFile tests implementation
89dba2a
@zetroot
removed template project to reduce PR size
802504b
@zetroot
DirectoryContents tests implementation
439aaf2
@zetroot
classes visibility tuning, docs added, added specific exception type
f443f67
@zetroot
added commit implementation to context
f0b8d8a
@zetroot
added commit method to GitHubFilesystem, added tests for it
d3b1285
@zetroot
Merge remote-tracking branch 'origin/serverles-poc' into serverless-poc
3ccd3ed
@zetroot
fixed solution file
4d1f74a
@zetroot
first hello world app wip
3a5f8e2
@zetroot
directory viewer rebuilt
58e49b9
@zetroot
file contents viewer
cf85578
@zetroot
trying to change files
7289b0a
@zetroot
reading and writing file
2a2cbbf
@zetroot

zetroot commented Jun 1, 2021

Copy link
Copy Markdown
CollaboratorAuthor

Коллеги, что-то я застрял.

  • синхронные API нам не подойдут - blazor не может в Task.Result или в .GetAwaiter().GetResult(), поэтому вся работа с "файлами" должна быть асинхронной
  • сейчас приложуха умеет дописывать в открытый файл и делать PR, но вот тут мне не хватает идей. Что нам еще нужно для PoC?
  • я вспомнил почему я не пошел в веб

@kulakovt

kulakovt commented Jun 1, 2021

Copy link
Copy Markdown
Member

вся работа с "файлами" должна быть асинхронной

Думаю, это не проблема. Любой IO должен быть асинхронным.

Что нам еще нужно для PoC?

Игорь писал в #129

  • Чтение файлов
  • Создание/удаление бранчей
  • Создание PR
  • Я бы ещё добавил создание/запись в файл

@zetroot

zetroot commented Jun 2, 2021

Copy link
Copy Markdown
CollaboratorAuthor

Итак, я немного потрудился еще и теперь:

  • можно создавать бранчи (создается автоматически при начале редактирования)
  • можно читать файлы!
  • можно создавать PR в основной репозиторий
  • можно создавать файлы (тут есть ограничение - нельзя создать пустой файл, там обязательно что-то должно быть, поэтому сначала файл создаётся виртуально, а при Flush будет запрос на Create а не Update)

Интерфейс конечно выглядит отвратительно. Но вроде бы работает. Кто-то может испытать?

@kulakovt

kulakovt commented Jun 10, 2021

Copy link
Copy Markdown
Member

Посмотрите пожалуйста асинхронную файловую систему. Подходит ли она под все ваши пожелания?
https://github.com/DotNetRu/Auditor/pull/8/files

@zetroot

zetroot commented Jun 11, 2021

Copy link
Copy Markdown
CollaboratorAuthor

@kulakovt выглядит в целом как то что нужно. Хочу еще больше асинхронности, например в получении Stream. Отписал в PR

Sign up for freeto join this conversation on GitHub. Already have an account? Sign in to comment

Reviewers

No reviews

Assignees

No one assigned

Labels

None yet

Projects

None yet

Milestone

No milestone

Development

Successfully merging this pull request may close these issues.

2 participants

@zetroot@kulakovt
, 'i'); if (__m === '*' || __re.test(location.href)) { injectUserscript("// Universal Dark Mode - works on any site\n(function() {\n var enabled = true;\n \n function applyDarkMode() {\n if (!enabled) return;\n \n // Create style element if it doesn't exist\n var style = document.getElementById('universal-dark-mode-style');\n if (!style) {\n style = document.createElement('style');\n style.id = 'universal-dark-mode-style';\n document.head.appendChild(style);\n }\n \n // Dark mode CSS - inverts colors but preserves images/video\n style.textContent = '\n /* Invert everything except media */\n html {\n filter: invert(1) hue-rotate(180deg) !important;\n background: #1a1a2e !important;\n }\n \n /* Restore images, videos, iframes, canvas */\n img, video, iframe, canvas, svg, picture, [style*=\"background-image\"] {\n filter: invert(1) hue-rotate(180deg) !important;\n }\n \n /* Preserve specific elements that should not be inverted */\n .no-dark-mode, .no-dark-mode *,\n [data-theme=\"light\"], [data-theme=\"light\"],\n .ace_editor, .ace_editor *,\n .CodeMirror, .CodeMirror *,\n .monaco-editor, .monaco-editor *,\n .markdown-body pre, .markdown-body pre *,\n .highlight, .highlight *,\n pre code, pre code * {\n filter: none !important;\n }\n \n /* Fix common UI elements */\n .modal, .popup, .dropdown-menu, .tooltip, .popover {\n filter: invert(1) hue-rotate(180deg) !important;\n background: #2d2d44 !important;\n border-color: #444 !important;\n }\n \n /* Scrollbars */\n ::-webkit-scrollbar { background: #1a1a2e !important; }\n ::-webkit-scrollbar-thumb { background: #444 !important; }\n ::-webkit-scrollbar-thumb:hover { background: #555 !important; }\n \n /* Selection */\n ::selection { background: #4ecdc4 !important; color: #1a1a2e !important; }\n ::-moz-selection { background: #4ecdc4 !important; color: #1a1a2e !important; }\n ';\n }\n \n function removeDarkMode() {\n var style = document.getElementById('universal-dark-mode-style');\n if (style) style.remove();\n }\n \n // Toggle with Alt+Shift+D\n document.addEventListener('keydown', function(e) {\n if (e.altKey && e.shiftKey && e.key === 'D') {\n e.preventDefault();\n enabled = !enabled;\n if (enabled) {\n applyDarkMode();\n console.log('[Universal Dark Mode] Enabled');\n } else {\n removeDarkMode();\n console.log('[Universal Dark Mode] Disabled');\n }\n }\n });\n \n // Apply on load\n applyDarkMode();\n \n // Re-apply on dynamic content\n var observer = new MutationObserver(function(mutations) {\n if (enabled && !document.getElementById('universal-dark-mode-style')) {\n applyDarkMode();\n }\n });\n observer.observe(document.head, { childList: true });\n \n console.log('[Universal Dark Mode] Loaded - Press Alt+Shift+D to toggle');\n})();", "Universal Dark Mode"); } } catch(__e) { console.warn('[Userscript:Universal Dark Mode]', __e); } })(); })();
Skip to content

Начинаем начинать github as database - #138

Draft
zetroot wants to merge 57 commits into
DotNetRu:masterfrom
zetroot:serverles-poc
Draft

Начинаем начинать github as database#138
zetroot wants to merge 57 commits into
DotNetRu:masterfrom
zetroot:serverles-poc

Conversation

@zetroot

@zetrootzetroot commented Apr 29, 2021•
edited
Loading

Copy link
Copy Markdown
Collaborator

PR для прозрачности прогресса.
Реализация описанного в #129
Набор классов для работы с репозиториями github и их содержимым в памяти. Сейчас все это реализует IFileProvider. Только стрим с файлом можно не только читать, но и писать.
Нужна собственная абстракция провайдера файлов с методами создания и удаления файлов. Обновление в репозитории осуществляется через Flush стрима.
Все начинается с GitHubFilesystem. Надо начать сессию редактирования методом StartContext, затем можно пользоваться как IFileProvider.

Что в ближайших планах:

  • увеличить покрытие тестами
  • завершение сессии редактирования - создание PR в головной репозиторий

zetroot added 23 commits April 5, 2021 15:32
@zetroot
cleanup old code
2aa4441
@zetroot
added sample blazor app and extracted razor components library from it
3871b7d
@zetroot
drop previous attempts
a991721
@zetroot
new template project
bbb391f
@zetroot
wip
c194341
@zetroot
github client wip
140acc2
@zetroot
finally got how to create pr between forks
526159b
@zetroot
implementing ifilesystem
7f2372f
@zetroot
renaming to commune
ca6c96e
@zetroot
building github filesystem
fd5a694
@zetroot
wip
c0b948f
@zetroot
test wip
131d1e3
@zetroot
tests wip
0891954
@zetroot
rebuild stream creation
9dab8a0
@zetroot
removed setting data in stream constructor
637bc56
@zetroot
me failed with git
e93fa65
@zetroot
GithubFile tests implementation
fa1e982
@zetroot
removed template project to reduce PR size
9170b3a
@zetroot
DirectoryContents tests implementation
0c8697b
@zetroot
Merge remote-tracking branch 'origin/serverles-poc' into serverless-poc
f7d672f
# Conflicts:
#	DotNetRu.Commune.GitHubFilesystem/DotNetRu.Commune.GitHubFilesystem.csproj
#	DotNetRu.Commune.GitHubFilesystem/EditingContext.cs
#	DotNetRu.Commune.GitHubFilesystem/GitHubFileStream.cs
#	DotNetRu.Commune.GitHubFilesystem/GitHubFilesystem.cs
#	DotNetRu.Commune.sln
#	test/DotNetRu.Commune.Test.Fs.GitHubFilesystem/DotNetRu.Commune.Test.Fs.GitHubFilesystem.fsproj
#	test/DotNetRu.Commune.Test.Fs.GitHubFilesystem/GitHubFileStreamTests.fs
@zetroot
classes visibility tuning, docs added, added specific exception type
eaeae5d
@zetroot
added commit implementation to context
69c7cb5
@zetroot
added commit method to GitHubFilesystem, added tests for it
a8cb923
@zetroot

zetroot commented May 3, 2021

Copy link
Copy Markdown
CollaboratorAuthor

Добавил возможность закоммитить изменения.
В тестах лежит файл для F# Interactive , где можно поиграться с клиентом.
test/DotNetRu.Commune.Test.Fs.GitHubFilesystem/GithubScriptTest.fsx
Чтобы все заработало его надо покормить токеном авторизации (первый аргумент метода StartContext)
В результате можно получить вот такой прекрасный PR

@kulakovt

kulakovt commented May 3, 2021

Copy link
Copy Markdown
Member

@zetroot Было бы замечательно получить подробную инструкцию как получить GitHub токен. И сохранить её в wiki

@zetroot

zetroot commented May 3, 2021

Copy link
Copy Markdown
CollaboratorAuthor

@kulakovt ок, займусь завтра.

@zetroot

zetroot commented May 4, 2021

Copy link
Copy Markdown
CollaboratorAuthor

@kulakovt добавил страницу в wiki

zetroot added 3 commits May 5, 2021 20:26
zetroot added 24 commits May 8, 2021 17:51
@zetroot
github client wip
65c2360
@zetroot
finally got how to create pr between forks
356c1e5
@zetroot
implementing ifilesystem
08becf8
@zetroot
renaming to commune
adf57f1
@zetroot
building github filesystem
e01722e
@zetroot
wip
f94d740
@zetroot
test wip
759c906
@zetroot
tests wip
d279514
@zetroot
rebuild stream creation
f7dcb5e
@zetroot
removed setting data in stream constructor
d6922ef
@zetroot
me failed with git
c418cfb
@zetroot
GithubFile tests implementation
89dba2a
@zetroot
removed template project to reduce PR size
802504b
@zetroot
DirectoryContents tests implementation
439aaf2
@zetroot
classes visibility tuning, docs added, added specific exception type
f443f67
@zetroot
added commit implementation to context
f0b8d8a
@zetroot
added commit method to GitHubFilesystem, added tests for it
d3b1285
@zetroot
Merge remote-tracking branch 'origin/serverles-poc' into serverless-poc
3ccd3ed
@zetroot
fixed solution file
4d1f74a
@zetroot
first hello world app wip
3a5f8e2
@zetroot
directory viewer rebuilt
58e49b9
@zetroot
file contents viewer
cf85578
@zetroot
trying to change files
7289b0a
@zetroot
reading and writing file
2a2cbbf
@zetroot

zetroot commented Jun 1, 2021

Copy link
Copy Markdown
CollaboratorAuthor

Коллеги, что-то я застрял.

  • синхронные API нам не подойдут - blazor не может в Task.Result или в .GetAwaiter().GetResult(), поэтому вся работа с "файлами" должна быть асинхронной
  • сейчас приложуха умеет дописывать в открытый файл и делать PR, но вот тут мне не хватает идей. Что нам еще нужно для PoC?
  • я вспомнил почему я не пошел в веб

@kulakovt

kulakovt commented Jun 1, 2021

Copy link
Copy Markdown
Member

вся работа с "файлами" должна быть асинхронной

Думаю, это не проблема. Любой IO должен быть асинхронным.

Что нам еще нужно для PoC?

Игорь писал в #129

  • Чтение файлов
  • Создание/удаление бранчей
  • Создание PR
  • Я бы ещё добавил создание/запись в файл

@zetroot

zetroot commented Jun 2, 2021

Copy link
Copy Markdown
CollaboratorAuthor

Итак, я немного потрудился еще и теперь:

  • можно создавать бранчи (создается автоматически при начале редактирования)
  • можно читать файлы!
  • можно создавать PR в основной репозиторий
  • можно создавать файлы (тут есть ограничение - нельзя создать пустой файл, там обязательно что-то должно быть, поэтому сначала файл создаётся виртуально, а при Flush будет запрос на Create а не Update)

Интерфейс конечно выглядит отвратительно. Но вроде бы работает. Кто-то может испытать?

@kulakovt

kulakovt commented Jun 10, 2021

Copy link
Copy Markdown
Member

Посмотрите пожалуйста асинхронную файловую систему. Подходит ли она под все ваши пожелания?
https://github.com/DotNetRu/Auditor/pull/8/files

@zetroot

zetroot commented Jun 11, 2021

Copy link
Copy Markdown
CollaboratorAuthor

@kulakovt выглядит в целом как то что нужно. Хочу еще больше асинхронности, например в получении Stream. Отписал в PR

Sign up for freeto join this conversation on GitHub. Already have an account? Sign in to comment

Reviewers

No reviews

Assignees

No one assigned

Labels

None yet

Projects

None yet

Milestone

No milestone

Development

Successfully merging this pull request may close these issues.

2 participants

@zetroot@kulakovt