Voltar ao blog

10-shot ainda não executado: pode escrever-se o artigo primeiro? O método de placeholders para lacunas de dados do MuchS

Introdução | O projeto final só concluiu 1-shot e 5-shot; o 10-shot ainda não foi treinado. Este artigo explica como, sem inventar quaisquer números, terminar primeiro os capítulos que é possível escrever e deixar placeholders para os que não é possível. 1. O que está bloqueado não é a capacidade de

Agente assistente de escritório com IAAgente de investigação científica com IAAgente de IA

Introdução | No projeto final, apenas foram executados 1-shot e 5-shot; o 10-shot ainda não foi treinado. Este artigo explica como, sem inventar quaisquer números, terminar primeiro os capítulos que já é possível escrever e deixar marcadores de posição nos que ainda não é possível.

1. O que está bloqueado não é a capacidade de escrita, é «não saber onde se pode escrever»

Num projeto final de classificação de imagens com poucos exemplos, o progresso habitual é: os resultados de 1-shot e 5-shot já saíram, e o 10-shot ainda está na fila de treino.

Neste momento, o estado típico em frente ao computador é: querer escrever, mas não ter coragem para o fazer — recear escrever a taxa de precisão Top-1 do 10-shot, o que seria inventar.

A questão pode, na verdade, ser decomposta: que capítulos do artigo não precisam de quaisquer dados experimentais? Que capítulos têm apenas dados temporariamente em falta? Depois de fazer esta distinção, é possível começar imediatamente.

2. Primeiro passo: carregar os dados experimentais existentes

Carregue os resultados existentes de 1-shot e 5-shot (CSV / JSON) para o MuchSci Paper Sailor. Este começa por fazer um perfil dos dados: tipos de campos, situação de valores em falta e distribuição.

Primeiro é preciso ver com clareza «o que tenho realmente em mãos»; este passo determina se a marcação de lacunas posterior será precisa ou não.

3. Segundo passo: marcação capítulo—lacuna de dados, ✅ e ❌ num relance

Depois de carregar os dados, é gerado o esboço do artigo e, em seguida, é executado o mapeamento de lacunas; cada capítulo recebe uma marcação:

MarcaçãoSignificadoAção atual
✅Dados suficientesJá é possível escrever
⚠️Suficiente com reservasRestringir as conclusões antes de escrever
❌Dados em faltaDeixar marcador de posição e aguardar o experimento

Para o exemplo 1/5/10-shot, a coluna do 10-shot no capítulo de resultados é claramente ❌ — não finge que consegue escrever.

4. Terceiro passo: colocar marcadores de posição onde faltam dados, em vez de inventar números

O MuchSci Paper Sailor mantém marcadores de posição nos locais onde faltam dados:

{{TBD_AFTER_EXPERIMENT}}

Ou seja: na célula da taxa de precisão Top-1 do 10-shot, deixa-se em branco, deixa-se a marcação, e nunca se preenche com um número «que parece razoável».

Esta regra pode parecer conservadora, mas é na verdade a abordagem mais inteligente — pode perfeitamente terminar primeiro o capítulo inteiro, deixando apenas alguns espaços por preencher, e preenchê-los assim que o experimento terminar.

5. Quarto passo: obter uma lista de experimentos a realizar

Além das marcações, também produz uma lista de experimentos a realizar: indica claramente «faltam ainda os resultados Top-1 / 5-way do 10-shot / intervalos de confiança», etc.

Esta lista é o seu plano de treino para os próximos dias, e não uma frase vaga como «os experimentos ainda não são suficientes».

6. Então, que parte pode ser escrita primeiro

Dividindo por natureza dos capítulos, na verdade é bastante claro:

• Pode escrever-se imediatamente: resumo (deixar marcadores nos valores), introdução, trabalho relacionado, método, configuração experimental.

• Pode escrever-se a maior parte: estrutura do capítulo de resultados, esqueleto de figuras e tabelas, frases de descrição — deixar marcadores de posição nos locais dos valores.

• Tem de se esperar pelos dados: a parte da conclusão e discussão que envolve o 10-shot.

Terminando primeiro os dois primeiros tipos, o manuscrito que tem em mãos fica concluído em cerca de setenta a oitenta por cento.

7. Uma revisão completa

1. Carregar os resultados experimentais de 1-shot / 5-shot.

2. Fazer o perfil, confirmar a estrutura dos dados.

3. Gerar o esboço, obter o esqueleto dos capítulos.

4. Executar o mapeamento de lacunas: marcar com ❌ os capítulos relacionados com o 10-shot.

5. Marcador de posição: escrever {{TBD_AFTER_EXPERIMENT}} nos locais onde faltam dados.

6. Escrever os capítulos que é possível escrever, produzir a lista de experimentos a realizar.

7. Experimento concluído → preencher os números → reverificar → versão final.

8. Armadilhas comuns

• «Primeiro invento os números e altero depois». Este é o autoengano mais perigoso — se se esquecer de alterar, esses passam a ser dados falsos na versão de submissão.

• Deixar o capítulo inteiro em branco, sem escrever. A abordagem correta é escrever tudo e deixar apenas espaços por preencher, em vez de parar de escrever.

• Formato dos marcadores de posição inconsistente. Usar sempre {{TBD_AFTER_EXPERIMENT}}, fazer uma pesquisa global antes da versão final e confirmar que já não resta nenhum.

• Tratar ⚠️ como ✅. «Apenas suficiente» significa que as conclusões devem ser redigidas com um tom mais restrito, não como «amplamente validado».

9. Conclusão

O facto de o 10-shot ainda não estar concluído não deve ser motivo para parar de escrever. O MuchSci Paper Sailor marca com toda a clareza «o que se pode escrever e o que não se pode escrever» e, depois, usa marcadores de posição para lhe reservar o lugar — não inventou nenhum número, mas já escreveu mais de metade do artigo.

Verificação antes da entrega:

• Os capítulos marcados com ❌ já têm os experimentos acrescentados?

• Pesquisar {{TBD_AFTER_EXPERIMENT}} em todo o texto: ainda há algum vestígio?

• Há algum número que eu tenha «estimado»?


Voltar aos artigos